e18fa389b012b31c5d47f98df993144d65e736d0
[libguestfs.git] / src / generator.ml
1 #!/usr/bin/env ocaml
2 (* libguestfs
3  * Copyright (C) 2009-2010 Red Hat Inc.
4  *
5  * This program is free software; you can redistribute it and/or modify
6  * it under the terms of the GNU General Public License as published by
7  * the Free Software Foundation; either version 2 of the License, or
8  * (at your option) any later version.
9  *
10  * This program is distributed in the hope that it will be useful,
11  * but WITHOUT ANY WARRANTY; without even the implied warranty of
12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
13  * GNU General Public License for more details.
14  *
15  * You should have received a copy of the GNU General Public License
16  * along with this program; if not, write to the Free Software
17  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
18  *)
19
20 (* This script generates a large amount of code and documentation for
21  * all the daemon actions.
22  *
23  * To add a new action there are only two files you need to change,
24  * this one to describe the interface (see the big table of
25  * 'daemon_functions' below), and daemon/<somefile>.c to write the
26  * implementation.
27  *
28  * After editing this file, run it (./src/generator.ml) to regenerate
29  * all the output files.  'make' will rerun this automatically when
30  * necessary.  Note that if you are using a separate build directory
31  * you must run generator.ml from the _source_ directory.
32  *
33  * IMPORTANT: This script should NOT print any warnings.  If it prints
34  * warnings, you should treat them as errors.
35  *
36  * OCaml tips:
37  * (1) In emacs, install tuareg-mode to display and format OCaml code
38  * correctly.  'vim' comes with a good OCaml editing mode by default.
39  * (2) Read the resources at http://ocaml-tutorial.org/
40  *)
41
42 #load "unix.cma";;
43 #load "str.cma";;
44 #directory "+xml-light";;
45 #directory "+../pkg-lib/xml-light";; (* for GODI users *)
46 #load "xml-light.cma";;
47
48 open Unix
49 open Printf
50
51 type style = ret * args
52 and ret =
53     (* "RErr" as a return value means an int used as a simple error
54      * indication, ie. 0 or -1.
55      *)
56   | RErr
57
58     (* "RInt" as a return value means an int which is -1 for error
59      * or any value >= 0 on success.  Only use this for smallish
60      * positive ints (0 <= i < 2^30).
61      *)
62   | RInt of string
63
64     (* "RInt64" is the same as RInt, but is guaranteed to be able
65      * to return a full 64 bit value, _except_ that -1 means error
66      * (so -1 cannot be a valid, non-error return value).
67      *)
68   | RInt64 of string
69
70     (* "RBool" is a bool return value which can be true/false or
71      * -1 for error.
72      *)
73   | RBool of string
74
75     (* "RConstString" is a string that refers to a constant value.
76      * The return value must NOT be NULL (since NULL indicates
77      * an error).
78      *
79      * Try to avoid using this.  In particular you cannot use this
80      * for values returned from the daemon, because there is no
81      * thread-safe way to return them in the C API.
82      *)
83   | RConstString of string
84
85     (* "RConstOptString" is an even more broken version of
86      * "RConstString".  The returned string may be NULL and there
87      * is no way to return an error indication.  Avoid using this!
88      *)
89   | RConstOptString of string
90
91     (* "RString" is a returned string.  It must NOT be NULL, since
92      * a NULL return indicates an error.  The caller frees this.
93      *)
94   | RString of string
95
96     (* "RStringList" is a list of strings.  No string in the list
97      * can be NULL.  The caller frees the strings and the array.
98      *)
99   | RStringList of string
100
101     (* "RStruct" is a function which returns a single named structure
102      * or an error indication (in C, a struct, and in other languages
103      * with varying representations, but usually very efficient).  See
104      * after the function list below for the structures.
105      *)
106   | RStruct of string * string          (* name of retval, name of struct *)
107
108     (* "RStructList" is a function which returns either a list/array
109      * of structures (could be zero-length), or an error indication.
110      *)
111   | RStructList of string * string      (* name of retval, name of struct *)
112
113     (* Key-value pairs of untyped strings.  Turns into a hashtable or
114      * dictionary in languages which support it.  DON'T use this as a
115      * general "bucket" for results.  Prefer a stronger typed return
116      * value if one is available, or write a custom struct.  Don't use
117      * this if the list could potentially be very long, since it is
118      * inefficient.  Keys should be unique.  NULLs are not permitted.
119      *)
120   | RHashtable of string
121
122     (* "RBufferOut" is handled almost exactly like RString, but
123      * it allows the string to contain arbitrary 8 bit data including
124      * ASCII NUL.  In the C API this causes an implicit extra parameter
125      * to be added of type <size_t *size_r>.  The extra parameter
126      * returns the actual size of the return buffer in bytes.
127      *
128      * Other programming languages support strings with arbitrary 8 bit
129      * data.
130      *
131      * At the RPC layer we have to use the opaque<> type instead of
132      * string<>.  Returned data is still limited to the max message
133      * size (ie. ~ 2 MB).
134      *)
135   | RBufferOut of string
136
137 and args = argt list    (* Function parameters, guestfs handle is implicit. *)
138
139     (* Note in future we should allow a "variable args" parameter as
140      * the final parameter, to allow commands like
141      *   chmod mode file [file(s)...]
142      * This is not implemented yet, but many commands (such as chmod)
143      * are currently defined with the argument order keeping this future
144      * possibility in mind.
145      *)
146 and argt =
147   | String of string    (* const char *name, cannot be NULL *)
148   | Device of string    (* /dev device name, cannot be NULL *)
149   | Pathname of string  (* file name, cannot be NULL *)
150   | Dev_or_Path of string (* /dev device name or Pathname, cannot be NULL *)
151   | OptString of string (* const char *name, may be NULL *)
152   | StringList of string(* list of strings (each string cannot be NULL) *)
153   | DeviceList of string(* list of Device names (each cannot be NULL) *)
154   | Bool of string      (* boolean *)
155   | Int of string       (* int (smallish ints, signed, <= 31 bits) *)
156   | Int64 of string     (* any 64 bit int *)
157     (* These are treated as filenames (simple string parameters) in
158      * the C API and bindings.  But in the RPC protocol, we transfer
159      * the actual file content up to or down from the daemon.
160      * FileIn: local machine -> daemon (in request)
161      * FileOut: daemon -> local machine (in reply)
162      * In guestfish (only), the special name "-" means read from
163      * stdin or write to stdout.
164      *)
165   | FileIn of string
166   | FileOut of string
167     (* Opaque buffer which can contain arbitrary 8 bit data.
168      * In the C API, this is expressed as <const char *, size_t> pair.
169      * Most other languages have a string type which can contain
170      * ASCII NUL.  We use whatever type is appropriate for each
171      * language.
172      * Buffers are limited by the total message size.  To transfer
173      * large blocks of data, use FileIn/FileOut parameters instead.
174      * To return an arbitrary buffer, use RBufferOut.
175      *)
176   | BufferIn of string
177     (* Key material / passphrase.  Eventually we should treat this
178      * as sensitive and mlock it into physical RAM.  However this
179      * is highly complex because of all the places that XDR-encoded
180      * strings can end up.  So currently the only difference from
181      * 'String' is the way that guestfish requests these parameters
182      * from the user.
183      *)
184   | Key of string
185
186 type flags =
187   | ProtocolLimitWarning  (* display warning about protocol size limits *)
188   | DangerWillRobinson    (* flags particularly dangerous commands *)
189   | FishAlias of string   (* provide an alias for this cmd in guestfish *)
190   | FishOutput of fish_output_t (* how to display output in guestfish *)
191   | NotInFish             (* do not export via guestfish *)
192   | NotInDocs             (* do not add this function to documentation *)
193   | DeprecatedBy of string (* function is deprecated, use .. instead *)
194   | Optional of string    (* function is part of an optional group *)
195
196 and fish_output_t =
197   | FishOutputOctal       (* for int return, print in octal *)
198   | FishOutputHexadecimal (* for int return, print in hex *)
199
200 (* You can supply zero or as many tests as you want per API call.
201  *
202  * Note that the test environment has 3 block devices, of size 500MB,
203  * 50MB and 10MB (respectively /dev/sda, /dev/sdb, /dev/sdc), and
204  * a fourth ISO block device with some known files on it (/dev/sdd).
205  *
206  * Note for partitioning purposes, the 500MB device has 1015 cylinders.
207  * Number of cylinders was 63 for IDE emulated disks with precisely
208  * the same size.  How exactly this is calculated is a mystery.
209  *
210  * The ISO block device (/dev/sdd) comes from images/test.iso.
211  *
212  * To be able to run the tests in a reasonable amount of time,
213  * the virtual machine and block devices are reused between tests.
214  * So don't try testing kill_subprocess :-x
215  *
216  * Between each test we blockdev-setrw, umount-all, lvm-remove-all.
217  *
218  * Don't assume anything about the previous contents of the block
219  * devices.  Use 'Init*' to create some initial scenarios.
220  *
221  * You can add a prerequisite clause to any individual test.  This
222  * is a run-time check, which, if it fails, causes the test to be
223  * skipped.  Useful if testing a command which might not work on
224  * all variations of libguestfs builds.  A test that has prerequisite
225  * of 'Always' is run unconditionally.
226  *
227  * In addition, packagers can skip individual tests by setting the
228  * environment variables:     eg:
229  *   SKIP_TEST_<CMD>_<NUM>=1  SKIP_TEST_COMMAND_3=1  (skips test #3 of command)
230  *   SKIP_TEST_<CMD>=1        SKIP_TEST_ZEROFREE=1   (skips all zerofree tests)
231  *)
232 type tests = (test_init * test_prereq * test) list
233 and test =
234     (* Run the command sequence and just expect nothing to fail. *)
235   | TestRun of seq
236
237     (* Run the command sequence and expect the output of the final
238      * command to be the string.
239      *)
240   | TestOutput of seq * string
241
242     (* Run the command sequence and expect the output of the final
243      * command to be the list of strings.
244      *)
245   | TestOutputList of seq * string list
246
247     (* Run the command sequence and expect the output of the final
248      * command to be the list of block devices (could be either
249      * "/dev/sd.." or "/dev/hd.." form - we don't check the 5th
250      * character of each string).
251      *)
252   | TestOutputListOfDevices of seq * string list
253
254     (* Run the command sequence and expect the output of the final
255      * command to be the integer.
256      *)
257   | TestOutputInt of seq * int
258
259     (* Run the command sequence and expect the output of the final
260      * command to be <op> <int>, eg. ">=", "1".
261      *)
262   | TestOutputIntOp of seq * string * int
263
264     (* Run the command sequence and expect the output of the final
265      * command to be a true value (!= 0 or != NULL).
266      *)
267   | TestOutputTrue of seq
268
269     (* Run the command sequence and expect the output of the final
270      * command to be a false value (== 0 or == NULL, but not an error).
271      *)
272   | TestOutputFalse of seq
273
274     (* Run the command sequence and expect the output of the final
275      * command to be a list of the given length (but don't care about
276      * content).
277      *)
278   | TestOutputLength of seq * int
279
280     (* Run the command sequence and expect the output of the final
281      * command to be a buffer (RBufferOut), ie. string + size.
282      *)
283   | TestOutputBuffer of seq * string
284
285     (* Run the command sequence and expect the output of the final
286      * command to be a structure.
287      *)
288   | TestOutputStruct of seq * test_field_compare list
289
290     (* Run the command sequence and expect the final command (only)
291      * to fail.
292      *)
293   | TestLastFail of seq
294
295 and test_field_compare =
296   | CompareWithInt of string * int
297   | CompareWithIntOp of string * string * int
298   | CompareWithString of string * string
299   | CompareFieldsIntEq of string * string
300   | CompareFieldsStrEq of string * string
301
302 (* Test prerequisites. *)
303 and test_prereq =
304     (* Test always runs. *)
305   | Always
306
307     (* Test is currently disabled - eg. it fails, or it tests some
308      * unimplemented feature.
309      *)
310   | Disabled
311
312     (* 'string' is some C code (a function body) that should return
313      * true or false.  The test will run if the code returns true.
314      *)
315   | If of string
316
317     (* As for 'If' but the test runs _unless_ the code returns true. *)
318   | Unless of string
319
320     (* Run the test only if 'string' is available in the daemon. *)
321   | IfAvailable of string
322
323 (* Some initial scenarios for testing. *)
324 and test_init =
325     (* Do nothing, block devices could contain random stuff including
326      * LVM PVs, and some filesystems might be mounted.  This is usually
327      * a bad idea.
328      *)
329   | InitNone
330
331     (* Block devices are empty and no filesystems are mounted. *)
332   | InitEmpty
333
334     (* /dev/sda contains a single partition /dev/sda1, with random
335      * content.  /dev/sdb and /dev/sdc may have random content.
336      * No LVM.
337      *)
338   | InitPartition
339
340     (* /dev/sda contains a single partition /dev/sda1, which is formatted
341      * as ext2, empty [except for lost+found] and mounted on /.
342      * /dev/sdb and /dev/sdc may have random content.
343      * No LVM.
344      *)
345   | InitBasicFS
346
347     (* /dev/sda:
348      *   /dev/sda1 (is a PV):
349      *     /dev/VG/LV (size 8MB):
350      *       formatted as ext2, empty [except for lost+found], mounted on /
351      * /dev/sdb and /dev/sdc may have random content.
352      *)
353   | InitBasicFSonLVM
354
355     (* /dev/sdd (the ISO, see images/ directory in source)
356      * is mounted on /
357      *)
358   | InitISOFS
359
360 (* Sequence of commands for testing. *)
361 and seq = cmd list
362 and cmd = string list
363
364 (* Note about long descriptions: When referring to another
365  * action, use the format C<guestfs_other> (ie. the full name of
366  * the C function).  This will be replaced as appropriate in other
367  * language bindings.
368  *
369  * Apart from that, long descriptions are just perldoc paragraphs.
370  *)
371
372 (* Generate a random UUID (used in tests). *)
373 let uuidgen () =
374   let chan = open_process_in "uuidgen" in
375   let uuid = input_line chan in
376   (match close_process_in chan with
377    | WEXITED 0 -> ()
378    | WEXITED _ ->
379        failwith "uuidgen: process exited with non-zero status"
380    | WSIGNALED _ | WSTOPPED _ ->
381        failwith "uuidgen: process signalled or stopped by signal"
382   );
383   uuid
384
385 (* These test functions are used in the language binding tests. *)
386
387 let test_all_args = [
388   String "str";
389   OptString "optstr";
390   StringList "strlist";
391   Bool "b";
392   Int "integer";
393   Int64 "integer64";
394   FileIn "filein";
395   FileOut "fileout";
396   BufferIn "bufferin";
397 ]
398
399 let test_all_rets = [
400   (* except for RErr, which is tested thoroughly elsewhere *)
401   "test0rint",         RInt "valout";
402   "test0rint64",       RInt64 "valout";
403   "test0rbool",        RBool "valout";
404   "test0rconststring", RConstString "valout";
405   "test0rconstoptstring", RConstOptString "valout";
406   "test0rstring",      RString "valout";
407   "test0rstringlist",  RStringList "valout";
408   "test0rstruct",      RStruct ("valout", "lvm_pv");
409   "test0rstructlist",  RStructList ("valout", "lvm_pv");
410   "test0rhashtable",   RHashtable "valout";
411 ]
412
413 let test_functions = [
414   ("test0", (RErr, test_all_args), -1, [NotInFish; NotInDocs],
415    [],
416    "internal test function - do not use",
417    "\
418 This is an internal test function which is used to test whether
419 the automatically generated bindings can handle every possible
420 parameter type correctly.
421
422 It echos the contents of each parameter to stdout.
423
424 You probably don't want to call this function.");
425 ] @ List.flatten (
426   List.map (
427     fun (name, ret) ->
428       [(name, (ret, [String "val"]), -1, [NotInFish; NotInDocs],
429         [],
430         "internal test function - do not use",
431         "\
432 This is an internal test function which is used to test whether
433 the automatically generated bindings can handle every possible
434 return type correctly.
435
436 It converts string C<val> to the return type.
437
438 You probably don't want to call this function.");
439        (name ^ "err", (ret, []), -1, [NotInFish; NotInDocs],
440         [],
441         "internal test function - do not use",
442         "\
443 This is an internal test function which is used to test whether
444 the automatically generated bindings can handle every possible
445 return type correctly.
446
447 This function always returns an error.
448
449 You probably don't want to call this function.")]
450   ) test_all_rets
451 )
452
453 (* non_daemon_functions are any functions which don't get processed
454  * in the daemon, eg. functions for setting and getting local
455  * configuration values.
456  *)
457
458 let non_daemon_functions = test_functions @ [
459   ("launch", (RErr, []), -1, [FishAlias "run"],
460    [],
461    "launch the qemu subprocess",
462    "\
463 Internally libguestfs is implemented by running a virtual machine
464 using L<qemu(1)>.
465
466 You should call this after configuring the handle
467 (eg. adding drives) but before performing any actions.");
468
469   ("wait_ready", (RErr, []), -1, [NotInFish],
470    [],
471    "wait until the qemu subprocess launches (no op)",
472    "\
473 This function is a no op.
474
475 In versions of the API E<lt> 1.0.71 you had to call this function
476 just after calling C<guestfs_launch> to wait for the launch
477 to complete.  However this is no longer necessary because
478 C<guestfs_launch> now does the waiting.
479
480 If you see any calls to this function in code then you can just
481 remove them, unless you want to retain compatibility with older
482 versions of the API.");
483
484   ("kill_subprocess", (RErr, []), -1, [],
485    [],
486    "kill the qemu subprocess",
487    "\
488 This kills the qemu subprocess.  You should never need to call this.");
489
490   ("add_drive", (RErr, [String "filename"]), -1, [FishAlias "add"],
491    [],
492    "add an image to examine or modify",
493    "\
494 This function adds a virtual machine disk image C<filename> to the
495 guest.  The first time you call this function, the disk appears as IDE
496 disk 0 (C</dev/sda>) in the guest, the second time as C</dev/sdb>, and
497 so on.
498
499 You don't necessarily need to be root when using libguestfs.  However
500 you obviously do need sufficient permissions to access the filename
501 for whatever operations you want to perform (ie. read access if you
502 just want to read the image or write access if you want to modify the
503 image).
504
505 This is equivalent to the qemu parameter
506 C<-drive file=filename,cache=off,if=...>.
507
508 C<cache=off> is omitted in cases where it is not supported by
509 the underlying filesystem.
510
511 C<if=...> is set at compile time by the configuration option
512 C<./configure --with-drive-if=...>.  In the rare case where you
513 might need to change this at run time, use C<guestfs_add_drive_with_if>
514 or C<guestfs_add_drive_ro_with_if>.
515
516 Note that this call checks for the existence of C<filename>.  This
517 stops you from specifying other types of drive which are supported
518 by qemu such as C<nbd:> and C<http:> URLs.  To specify those, use
519 the general C<guestfs_config> call instead.");
520
521   ("add_cdrom", (RErr, [String "filename"]), -1, [FishAlias "cdrom"],
522    [],
523    "add a CD-ROM disk image to examine",
524    "\
525 This function adds a virtual CD-ROM disk image to the guest.
526
527 This is equivalent to the qemu parameter C<-cdrom filename>.
528
529 Notes:
530
531 =over 4
532
533 =item *
534
535 This call checks for the existence of C<filename>.  This
536 stops you from specifying other types of drive which are supported
537 by qemu such as C<nbd:> and C<http:> URLs.  To specify those, use
538 the general C<guestfs_config> call instead.
539
540 =item *
541
542 If you just want to add an ISO file (often you use this as an
543 efficient way to transfer large files into the guest), then you
544 should probably use C<guestfs_add_drive_ro> instead.
545
546 =back");
547
548   ("add_drive_ro", (RErr, [String "filename"]), -1, [FishAlias "add-ro"],
549    [],
550    "add a drive in snapshot mode (read-only)",
551    "\
552 This adds a drive in snapshot mode, making it effectively
553 read-only.
554
555 Note that writes to the device are allowed, and will be seen for
556 the duration of the guestfs handle, but they are written
557 to a temporary file which is discarded as soon as the guestfs
558 handle is closed.  We don't currently have any method to enable
559 changes to be committed, although qemu can support this.
560
561 This is equivalent to the qemu parameter
562 C<-drive file=filename,snapshot=on,if=...>.
563
564 C<if=...> is set at compile time by the configuration option
565 C<./configure --with-drive-if=...>.  In the rare case where you
566 might need to change this at run time, use C<guestfs_add_drive_with_if>
567 or C<guestfs_add_drive_ro_with_if>.
568
569 Note that this call checks for the existence of C<filename>.  This
570 stops you from specifying other types of drive which are supported
571 by qemu such as C<nbd:> and C<http:> URLs.  To specify those, use
572 the general C<guestfs_config> call instead.");
573
574   ("config", (RErr, [String "qemuparam"; OptString "qemuvalue"]), -1, [],
575    [],
576    "add qemu parameters",
577    "\
578 This can be used to add arbitrary qemu command line parameters
579 of the form C<-param value>.  Actually it's not quite arbitrary - we
580 prevent you from setting some parameters which would interfere with
581 parameters that we use.
582
583 The first character of C<param> string must be a C<-> (dash).
584
585 C<value> can be NULL.");
586
587   ("set_qemu", (RErr, [OptString "qemu"]), -1, [FishAlias "qemu"],
588    [],
589    "set the qemu binary",
590    "\
591 Set the qemu binary that we will use.
592
593 The default is chosen when the library was compiled by the
594 configure script.
595
596 You can also override this by setting the C<LIBGUESTFS_QEMU>
597 environment variable.
598
599 Setting C<qemu> to C<NULL> restores the default qemu binary.
600
601 Note that you should call this function as early as possible
602 after creating the handle.  This is because some pre-launch
603 operations depend on testing qemu features (by running C<qemu -help>).
604 If the qemu binary changes, we don't retest features, and
605 so you might see inconsistent results.  Using the environment
606 variable C<LIBGUESTFS_QEMU> is safest of all since that picks
607 the qemu binary at the same time as the handle is created.");
608
609   ("get_qemu", (RConstString "qemu", []), -1, [],
610    [InitNone, Always, TestRun (
611       [["get_qemu"]])],
612    "get the qemu binary",
613    "\
614 Return the current qemu binary.
615
616 This is always non-NULL.  If it wasn't set already, then this will
617 return the default qemu binary name.");
618
619   ("set_path", (RErr, [OptString "searchpath"]), -1, [FishAlias "path"],
620    [],
621    "set the search path",
622    "\
623 Set the path that libguestfs searches for kernel and initrd.img.
624
625 The default is C<$libdir/guestfs> unless overridden by setting
626 C<LIBGUESTFS_PATH> environment variable.
627
628 Setting C<path> to C<NULL> restores the default path.");
629
630   ("get_path", (RConstString "path", []), -1, [],
631    [InitNone, Always, TestRun (
632       [["get_path"]])],
633    "get the search path",
634    "\
635 Return the current search path.
636
637 This is always non-NULL.  If it wasn't set already, then this will
638 return the default path.");
639
640   ("set_append", (RErr, [OptString "append"]), -1, [FishAlias "append"],
641    [],
642    "add options to kernel command line",
643    "\
644 This function is used to add additional options to the
645 guest kernel command line.
646
647 The default is C<NULL> unless overridden by setting
648 C<LIBGUESTFS_APPEND> environment variable.
649
650 Setting C<append> to C<NULL> means I<no> additional options
651 are passed (libguestfs always adds a few of its own).");
652
653   ("get_append", (RConstOptString "append", []), -1, [],
654    (* This cannot be tested with the current framework.  The
655     * function can return NULL in normal operations, which the
656     * test framework interprets as an error.
657     *)
658    [],
659    "get the additional kernel options",
660    "\
661 Return the additional kernel options which are added to the
662 guest kernel command line.
663
664 If C<NULL> then no options are added.");
665
666   ("set_autosync", (RErr, [Bool "autosync"]), -1, [FishAlias "autosync"],
667    [],
668    "set autosync mode",
669    "\
670 If C<autosync> is true, this enables autosync.  Libguestfs will make a
671 best effort attempt to run C<guestfs_umount_all> followed by
672 C<guestfs_sync> when the handle is closed
673 (also if the program exits without closing handles).
674
675 This is disabled by default (except in guestfish where it is
676 enabled by default).");
677
678   ("get_autosync", (RBool "autosync", []), -1, [],
679    [InitNone, Always, TestRun (
680       [["get_autosync"]])],
681    "get autosync mode",
682    "\
683 Get the autosync flag.");
684
685   ("set_verbose", (RErr, [Bool "verbose"]), -1, [FishAlias "verbose"],
686    [],
687    "set verbose mode",
688    "\
689 If C<verbose> is true, this turns on verbose messages (to C<stderr>).
690
691 Verbose messages are disabled unless the environment variable
692 C<LIBGUESTFS_DEBUG> is defined and set to C<1>.");
693
694   ("get_verbose", (RBool "verbose", []), -1, [],
695    [],
696    "get verbose mode",
697    "\
698 This returns the verbose messages flag.");
699
700   ("is_ready", (RBool "ready", []), -1, [],
701    [InitNone, Always, TestOutputTrue (
702       [["is_ready"]])],
703    "is ready to accept commands",
704    "\
705 This returns true iff this handle is ready to accept commands
706 (in the C<READY> state).
707
708 For more information on states, see L<guestfs(3)>.");
709
710   ("is_config", (RBool "config", []), -1, [],
711    [InitNone, Always, TestOutputFalse (
712       [["is_config"]])],
713    "is in configuration state",
714    "\
715 This returns true iff this handle is being configured
716 (in the C<CONFIG> state).
717
718 For more information on states, see L<guestfs(3)>.");
719
720   ("is_launching", (RBool "launching", []), -1, [],
721    [InitNone, Always, TestOutputFalse (
722       [["is_launching"]])],
723    "is launching subprocess",
724    "\
725 This returns true iff this handle is launching the subprocess
726 (in the C<LAUNCHING> state).
727
728 For more information on states, see L<guestfs(3)>.");
729
730   ("is_busy", (RBool "busy", []), -1, [],
731    [InitNone, Always, TestOutputFalse (
732       [["is_busy"]])],
733    "is busy processing a command",
734    "\
735 This returns true iff this handle is busy processing a command
736 (in the C<BUSY> state).
737
738 For more information on states, see L<guestfs(3)>.");
739
740   ("get_state", (RInt "state", []), -1, [],
741    [],
742    "get the current state",
743    "\
744 This returns the current state as an opaque integer.  This is
745 only useful for printing debug and internal error messages.
746
747 For more information on states, see L<guestfs(3)>.");
748
749   ("set_memsize", (RErr, [Int "memsize"]), -1, [FishAlias "memsize"],
750    [InitNone, Always, TestOutputInt (
751       [["set_memsize"; "500"];
752        ["get_memsize"]], 500)],
753    "set memory allocated to the qemu subprocess",
754    "\
755 This sets the memory size in megabytes allocated to the
756 qemu subprocess.  This only has any effect if called before
757 C<guestfs_launch>.
758
759 You can also change this by setting the environment
760 variable C<LIBGUESTFS_MEMSIZE> before the handle is
761 created.
762
763 For more information on the architecture of libguestfs,
764 see L<guestfs(3)>.");
765
766   ("get_memsize", (RInt "memsize", []), -1, [],
767    [InitNone, Always, TestOutputIntOp (
768       [["get_memsize"]], ">=", 256)],
769    "get memory allocated to the qemu subprocess",
770    "\
771 This gets the memory size in megabytes allocated to the
772 qemu subprocess.
773
774 If C<guestfs_set_memsize> was not called
775 on this handle, and if C<LIBGUESTFS_MEMSIZE> was not set,
776 then this returns the compiled-in default value for memsize.
777
778 For more information on the architecture of libguestfs,
779 see L<guestfs(3)>.");
780
781   ("get_pid", (RInt "pid", []), -1, [FishAlias "pid"],
782    [InitNone, Always, TestOutputIntOp (
783       [["get_pid"]], ">=", 1)],
784    "get PID of qemu subprocess",
785    "\
786 Return the process ID of the qemu subprocess.  If there is no
787 qemu subprocess, then this will return an error.
788
789 This is an internal call used for debugging and testing.");
790
791   ("version", (RStruct ("version", "version"), []), -1, [],
792    [InitNone, Always, TestOutputStruct (
793       [["version"]], [CompareWithInt ("major", 1)])],
794    "get the library version number",
795    "\
796 Return the libguestfs version number that the program is linked
797 against.
798
799 Note that because of dynamic linking this is not necessarily
800 the version of libguestfs that you compiled against.  You can
801 compile the program, and then at runtime dynamically link
802 against a completely different C<libguestfs.so> library.
803
804 This call was added in version C<1.0.58>.  In previous
805 versions of libguestfs there was no way to get the version
806 number.  From C code you can use dynamic linker functions
807 to find out if this symbol exists (if it doesn't, then
808 it's an earlier version).
809
810 The call returns a structure with four elements.  The first
811 three (C<major>, C<minor> and C<release>) are numbers and
812 correspond to the usual version triplet.  The fourth element
813 (C<extra>) is a string and is normally empty, but may be
814 used for distro-specific information.
815
816 To construct the original version string:
817 C<$major.$minor.$release$extra>
818
819 See also: L<guestfs(3)/LIBGUESTFS VERSION NUMBERS>.
820
821 I<Note:> Don't use this call to test for availability
822 of features.  In enterprise distributions we backport
823 features from later versions into earlier versions,
824 making this an unreliable way to test for features.
825 Use C<guestfs_available> instead.");
826
827   ("set_selinux", (RErr, [Bool "selinux"]), -1, [FishAlias "selinux"],
828    [InitNone, Always, TestOutputTrue (
829       [["set_selinux"; "true"];
830        ["get_selinux"]])],
831    "set SELinux enabled or disabled at appliance boot",
832    "\
833 This sets the selinux flag that is passed to the appliance
834 at boot time.  The default is C<selinux=0> (disabled).
835
836 Note that if SELinux is enabled, it is always in
837 Permissive mode (C<enforcing=0>).
838
839 For more information on the architecture of libguestfs,
840 see L<guestfs(3)>.");
841
842   ("get_selinux", (RBool "selinux", []), -1, [],
843    [],
844    "get SELinux enabled flag",
845    "\
846 This returns the current setting of the selinux flag which
847 is passed to the appliance at boot time.  See C<guestfs_set_selinux>.
848
849 For more information on the architecture of libguestfs,
850 see L<guestfs(3)>.");
851
852   ("set_trace", (RErr, [Bool "trace"]), -1, [FishAlias "trace"],
853    [InitNone, Always, TestOutputFalse (
854       [["set_trace"; "false"];
855        ["get_trace"]])],
856    "enable or disable command traces",
857    "\
858 If the command trace flag is set to 1, then commands are
859 printed on stderr before they are executed in a format
860 which is very similar to the one used by guestfish.  In
861 other words, you can run a program with this enabled, and
862 you will get out a script which you can feed to guestfish
863 to perform the same set of actions.
864
865 If you want to trace C API calls into libguestfs (and
866 other libraries) then possibly a better way is to use
867 the external ltrace(1) command.
868
869 Command traces are disabled unless the environment variable
870 C<LIBGUESTFS_TRACE> is defined and set to C<1>.");
871
872   ("get_trace", (RBool "trace", []), -1, [],
873    [],
874    "get command trace enabled flag",
875    "\
876 Return the command trace flag.");
877
878   ("set_direct", (RErr, [Bool "direct"]), -1, [FishAlias "direct"],
879    [InitNone, Always, TestOutputFalse (
880       [["set_direct"; "false"];
881        ["get_direct"]])],
882    "enable or disable direct appliance mode",
883    "\
884 If the direct appliance mode flag is enabled, then stdin and
885 stdout are passed directly through to the appliance once it
886 is launched.
887
888 One consequence of this is that log messages aren't caught
889 by the library and handled by C<guestfs_set_log_message_callback>,
890 but go straight to stdout.
891
892 You probably don't want to use this unless you know what you
893 are doing.
894
895 The default is disabled.");
896
897   ("get_direct", (RBool "direct", []), -1, [],
898    [],
899    "get direct appliance mode flag",
900    "\
901 Return the direct appliance mode flag.");
902
903   ("set_recovery_proc", (RErr, [Bool "recoveryproc"]), -1, [FishAlias "recovery-proc"],
904    [InitNone, Always, TestOutputTrue (
905       [["set_recovery_proc"; "true"];
906        ["get_recovery_proc"]])],
907    "enable or disable the recovery process",
908    "\
909 If this is called with the parameter C<false> then
910 C<guestfs_launch> does not create a recovery process.  The
911 purpose of the recovery process is to stop runaway qemu
912 processes in the case where the main program aborts abruptly.
913
914 This only has any effect if called before C<guestfs_launch>,
915 and the default is true.
916
917 About the only time when you would want to disable this is
918 if the main process will fork itself into the background
919 (\"daemonize\" itself).  In this case the recovery process
920 thinks that the main program has disappeared and so kills
921 qemu, which is not very helpful.");
922
923   ("get_recovery_proc", (RBool "recoveryproc", []), -1, [],
924    [],
925    "get recovery process enabled flag",
926    "\
927 Return the recovery process enabled flag.");
928
929   ("add_drive_with_if", (RErr, [String "filename"; String "iface"]), -1, [],
930    [],
931    "add a drive specifying the QEMU block emulation to use",
932    "\
933 This is the same as C<guestfs_add_drive> but it allows you
934 to specify the QEMU interface emulation to use at run time.");
935
936   ("add_drive_ro_with_if", (RErr, [String "filename"; String "iface"]), -1, [],
937    [],
938    "add a drive read-only specifying the QEMU block emulation to use",
939    "\
940 This is the same as C<guestfs_add_drive_ro> but it allows you
941 to specify the QEMU interface emulation to use at run time.");
942
943   ("file_architecture", (RString "arch", [Pathname "filename"]), -1, [],
944    [InitISOFS, Always, TestOutput (
945       [["file_architecture"; "/bin-i586-dynamic"]], "i386");
946     InitISOFS, Always, TestOutput (
947       [["file_architecture"; "/bin-sparc-dynamic"]], "sparc");
948     InitISOFS, Always, TestOutput (
949       [["file_architecture"; "/bin-win32.exe"]], "i386");
950     InitISOFS, Always, TestOutput (
951       [["file_architecture"; "/bin-win64.exe"]], "x86_64");
952     InitISOFS, Always, TestOutput (
953       [["file_architecture"; "/bin-x86_64-dynamic"]], "x86_64");
954     InitISOFS, Always, TestOutput (
955       [["file_architecture"; "/lib-i586.so"]], "i386");
956     InitISOFS, Always, TestOutput (
957       [["file_architecture"; "/lib-sparc.so"]], "sparc");
958     InitISOFS, Always, TestOutput (
959       [["file_architecture"; "/lib-win32.dll"]], "i386");
960     InitISOFS, Always, TestOutput (
961       [["file_architecture"; "/lib-win64.dll"]], "x86_64");
962     InitISOFS, Always, TestOutput (
963       [["file_architecture"; "/lib-x86_64.so"]], "x86_64");
964     InitISOFS, Always, TestOutput (
965       [["file_architecture"; "/initrd-x86_64.img"]], "x86_64");
966     InitISOFS, Always, TestOutput (
967       [["file_architecture"; "/initrd-x86_64.img.gz"]], "x86_64");],
968    "detect the architecture of a binary file",
969    "\
970 This detects the architecture of the binary C<filename>,
971 and returns it if known.
972
973 Currently defined architectures are:
974
975 =over 4
976
977 =item \"i386\"
978
979 This string is returned for all 32 bit i386, i486, i586, i686 binaries
980 irrespective of the precise processor requirements of the binary.
981
982 =item \"x86_64\"
983
984 64 bit x86-64.
985
986 =item \"sparc\"
987
988 32 bit SPARC.
989
990 =item \"sparc64\"
991
992 64 bit SPARC V9 and above.
993
994 =item \"ia64\"
995
996 Intel Itanium.
997
998 =item \"ppc\"
999
1000 32 bit Power PC.
1001
1002 =item \"ppc64\"
1003
1004 64 bit Power PC.
1005
1006 =back
1007
1008 Libguestfs may return other architecture strings in future.
1009
1010 The function works on at least the following types of files:
1011
1012 =over 4
1013
1014 =item *
1015
1016 many types of Un*x and Linux binary
1017
1018 =item *
1019
1020 many types of Un*x and Linux shared library
1021
1022 =item *
1023
1024 Windows Win32 and Win64 binaries
1025
1026 =item *
1027
1028 Windows Win32 and Win64 DLLs
1029
1030 Win32 binaries and DLLs return C<i386>.
1031
1032 Win64 binaries and DLLs return C<x86_64>.
1033
1034 =item *
1035
1036 Linux kernel modules
1037
1038 =item *
1039
1040 Linux new-style initrd images
1041
1042 =item *
1043
1044 some non-x86 Linux vmlinuz kernels
1045
1046 =back
1047
1048 What it can't do currently:
1049
1050 =over 4
1051
1052 =item *
1053
1054 static libraries (libfoo.a)
1055
1056 =item *
1057
1058 Linux old-style initrd as compressed ext2 filesystem (RHEL 3)
1059
1060 =item *
1061
1062 x86 Linux vmlinuz kernels
1063
1064 x86 vmlinuz images (bzImage format) consist of a mix of 16-, 32- and
1065 compressed code, and are horribly hard to unpack.  If you want to find
1066 the architecture of a kernel, use the architecture of the associated
1067 initrd or kernel module(s) instead.
1068
1069 =back");
1070
1071   ("inspect_os", (RStringList "roots", []), -1, [],
1072    [],
1073    "inspect disk and return list of operating systems found",
1074    "\
1075 This function uses other libguestfs functions and certain
1076 heuristics to inspect the disk(s) (usually disks belonging to
1077 a virtual machine), looking for operating systems.
1078
1079 The list returned is empty if no operating systems were found.
1080
1081 If one operating system was found, then this returns a list with
1082 a single element, which is the name of the root filesystem of
1083 this operating system.  It is also possible for this function
1084 to return a list containing more than one element, indicating
1085 a dual-boot or multi-boot virtual machine, with each element being
1086 the root filesystem of one of the operating systems.
1087
1088 You can pass the root string(s) returned to other
1089 C<guestfs_inspect_get_*> functions in order to query further
1090 information about each operating system, such as the name
1091 and version.
1092
1093 This function uses other libguestfs features such as
1094 C<guestfs_mount_ro> and C<guestfs_umount_all> in order to mount
1095 and unmount filesystems and look at the contents.  This should
1096 be called with no disks currently mounted.  The function may also
1097 use Augeas, so any existing Augeas handle will be closed.
1098
1099 This function cannot decrypt encrypted disks.  The caller
1100 must do that first (supplying the necessary keys) if the
1101 disk is encrypted.
1102
1103 Please read L<guestfs(3)/INSPECTION> for more details.");
1104
1105   ("inspect_get_type", (RString "name", [Device "root"]), -1, [],
1106    [],
1107    "get type of inspected operating system",
1108    "\
1109 This function should only be called with a root device string
1110 as returned by C<guestfs_inspect_os>.
1111
1112 This returns the type of the inspected operating system.
1113 Currently defined types are:
1114
1115 =over 4
1116
1117 =item \"linux\"
1118
1119 Any Linux-based operating system.
1120
1121 =item \"windows\"
1122
1123 Any Microsoft Windows operating system.
1124
1125 =item \"unknown\"
1126
1127 The operating system type could not be determined.
1128
1129 =back
1130
1131 Future versions of libguestfs may return other strings here.
1132 The caller should be prepared to handle any string.
1133
1134 Please read L<guestfs(3)/INSPECTION> for more details.");
1135
1136   ("inspect_get_arch", (RString "arch", [Device "root"]), -1, [],
1137    [],
1138    "get architecture of inspected operating system",
1139    "\
1140 This function should only be called with a root device string
1141 as returned by C<guestfs_inspect_os>.
1142
1143 This returns the architecture of the inspected operating system.
1144 The possible return values are listed under
1145 C<guestfs_file_architecture>.
1146
1147 If the architecture could not be determined, then the
1148 string C<unknown> is returned.
1149
1150 Please read L<guestfs(3)/INSPECTION> for more details.");
1151
1152   ("inspect_get_distro", (RString "distro", [Device "root"]), -1, [],
1153    [],
1154    "get distro of inspected operating system",
1155    "\
1156 This function should only be called with a root device string
1157 as returned by C<guestfs_inspect_os>.
1158
1159 This returns the distro (distribution) of the inspected operating
1160 system.
1161
1162 Currently defined distros are:
1163
1164 =over 4
1165
1166 =item \"debian\"
1167
1168 Debian or a Debian-derived distro such as Ubuntu.
1169
1170 =item \"fedora\"
1171
1172 Fedora.
1173
1174 =item \"redhat-based\"
1175
1176 Some Red Hat-derived distro.
1177
1178 =item \"rhel\"
1179
1180 Red Hat Enterprise Linux and some derivatives.
1181
1182 =item \"windows\"
1183
1184 Windows does not have distributions.  This string is
1185 returned if the OS type is Windows.
1186
1187 =item \"unknown\"
1188
1189 The distro could not be determined.
1190
1191 =back
1192
1193 Future versions of libguestfs may return other strings here.
1194 The caller should be prepared to handle any string.
1195
1196 Please read L<guestfs(3)/INSPECTION> for more details.");
1197
1198   ("inspect_get_major_version", (RInt "major", [Device "root"]), -1, [],
1199    [],
1200    "get major version of inspected operating system",
1201    "\
1202 This function should only be called with a root device string
1203 as returned by C<guestfs_inspect_os>.
1204
1205 This returns the major version number of the inspected operating
1206 system.
1207
1208 Windows uses a consistent versioning scheme which is I<not>
1209 reflected in the popular public names used by the operating system.
1210 Notably the operating system known as \"Windows 7\" is really
1211 version 6.1 (ie. major = 6, minor = 1).  You can find out the
1212 real versions corresponding to releases of Windows by consulting
1213 Wikipedia or MSDN.
1214
1215 If the version could not be determined, then C<0> is returned.
1216
1217 Please read L<guestfs(3)/INSPECTION> for more details.");
1218
1219   ("inspect_get_minor_version", (RInt "minor", [Device "root"]), -1, [],
1220    [],
1221    "get minor version of inspected operating system",
1222    "\
1223 This function should only be called with a root device string
1224 as returned by C<guestfs_inspect_os>.
1225
1226 This returns the minor version number of the inspected operating
1227 system.
1228
1229 If the version could not be determined, then C<0> is returned.
1230
1231 Please read L<guestfs(3)/INSPECTION> for more details.
1232 See also C<guestfs_inspect_get_major_version>.");
1233
1234   ("inspect_get_product_name", (RString "product", [Device "root"]), -1, [],
1235    [],
1236    "get product name of inspected operating system",
1237    "\
1238 This function should only be called with a root device string
1239 as returned by C<guestfs_inspect_os>.
1240
1241 This returns the product name of the inspected operating
1242 system.  The product name is generally some freeform string
1243 which can be displayed to the user, but should not be
1244 parsed by programs.
1245
1246 If the product name could not be determined, then the
1247 string C<unknown> is returned.
1248
1249 Please read L<guestfs(3)/INSPECTION> for more details.");
1250
1251   ("inspect_get_mountpoints", (RHashtable "mountpoints", [Device "root"]), -1, [],
1252    [],
1253    "get mountpoints of inspected operating system",
1254    "\
1255 This function should only be called with a root device string
1256 as returned by C<guestfs_inspect_os>.
1257
1258 This returns a hash of where we think the filesystems
1259 associated with this operating system should be mounted.
1260 Callers should note that this is at best an educated guess
1261 made by reading configuration files such as C</etc/fstab>.
1262
1263 Each element in the returned hashtable has a key which
1264 is the path of the mountpoint (eg. C</boot>) and a value
1265 which is the filesystem that would be mounted there
1266 (eg. C</dev/sda1>).
1267
1268 Non-mounted devices such as swap devices are I<not>
1269 returned in this list.
1270
1271 Please read L<guestfs(3)/INSPECTION> for more details.
1272 See also C<guestfs_inspect_get_filesystems>.");
1273
1274   ("inspect_get_filesystems", (RStringList "filesystems", [Device "root"]), -1, [],
1275    [],
1276    "get filesystems associated with inspected operating system",
1277    "\
1278 This function should only be called with a root device string
1279 as returned by C<guestfs_inspect_os>.
1280
1281 This returns a list of all the filesystems that we think
1282 are associated with this operating system.  This includes
1283 the root filesystem, other ordinary filesystems, and
1284 non-mounted devices like swap partitions.
1285
1286 In the case of a multi-boot virtual machine, it is possible
1287 for a filesystem to be shared between operating systems.
1288
1289 Please read L<guestfs(3)/INSPECTION> for more details.
1290 See also C<guestfs_inspect_get_mountpoints>.");
1291
1292 ]
1293
1294 (* daemon_functions are any functions which cause some action
1295  * to take place in the daemon.
1296  *)
1297
1298 let daemon_functions = [
1299   ("mount", (RErr, [Device "device"; String "mountpoint"]), 1, [],
1300    [InitEmpty, Always, TestOutput (
1301       [["part_disk"; "/dev/sda"; "mbr"];
1302        ["mkfs"; "ext2"; "/dev/sda1"];
1303        ["mount"; "/dev/sda1"; "/"];
1304        ["write"; "/new"; "new file contents"];
1305        ["cat"; "/new"]], "new file contents")],
1306    "mount a guest disk at a position in the filesystem",
1307    "\
1308 Mount a guest disk at a position in the filesystem.  Block devices
1309 are named C</dev/sda>, C</dev/sdb> and so on, as they were added to
1310 the guest.  If those block devices contain partitions, they will have
1311 the usual names (eg. C</dev/sda1>).  Also LVM C</dev/VG/LV>-style
1312 names can be used.
1313
1314 The rules are the same as for L<mount(2)>:  A filesystem must
1315 first be mounted on C</> before others can be mounted.  Other
1316 filesystems can only be mounted on directories which already
1317 exist.
1318
1319 The mounted filesystem is writable, if we have sufficient permissions
1320 on the underlying device.
1321
1322 B<Important note:>
1323 When you use this call, the filesystem options C<sync> and C<noatime>
1324 are set implicitly.  This was originally done because we thought it
1325 would improve reliability, but it turns out that I<-o sync> has a
1326 very large negative performance impact and negligible effect on
1327 reliability.  Therefore we recommend that you avoid using
1328 C<guestfs_mount> in any code that needs performance, and instead
1329 use C<guestfs_mount_options> (use an empty string for the first
1330 parameter if you don't want any options).");
1331
1332   ("sync", (RErr, []), 2, [],
1333    [ InitEmpty, Always, TestRun [["sync"]]],
1334    "sync disks, writes are flushed through to the disk image",
1335    "\
1336 This syncs the disk, so that any writes are flushed through to the
1337 underlying disk image.
1338
1339 You should always call this if you have modified a disk image, before
1340 closing the handle.");
1341
1342   ("touch", (RErr, [Pathname "path"]), 3, [],
1343    [InitBasicFS, Always, TestOutputTrue (
1344       [["touch"; "/new"];
1345        ["exists"; "/new"]])],
1346    "update file timestamps or create a new file",
1347    "\
1348 Touch acts like the L<touch(1)> command.  It can be used to
1349 update the timestamps on a file, or, if the file does not exist,
1350 to create a new zero-length file.
1351
1352 This command only works on regular files, and will fail on other
1353 file types such as directories, symbolic links, block special etc.");
1354
1355   ("cat", (RString "content", [Pathname "path"]), 4, [ProtocolLimitWarning],
1356    [InitISOFS, Always, TestOutput (
1357       [["cat"; "/known-2"]], "abcdef\n")],
1358    "list the contents of a file",
1359    "\
1360 Return the contents of the file named C<path>.
1361
1362 Note that this function cannot correctly handle binary files
1363 (specifically, files containing C<\\0> character which is treated
1364 as end of string).  For those you need to use the C<guestfs_read_file>
1365 or C<guestfs_download> functions which have a more complex interface.");
1366
1367   ("ll", (RString "listing", [Pathname "directory"]), 5, [],
1368    [], (* XXX Tricky to test because it depends on the exact format
1369         * of the 'ls -l' command, which changes between F10 and F11.
1370         *)
1371    "list the files in a directory (long format)",
1372    "\
1373 List the files in C<directory> (relative to the root directory,
1374 there is no cwd) in the format of 'ls -la'.
1375
1376 This command is mostly useful for interactive sessions.  It
1377 is I<not> intended that you try to parse the output string.");
1378
1379   ("ls", (RStringList "listing", [Pathname "directory"]), 6, [],
1380    [InitBasicFS, Always, TestOutputList (
1381       [["touch"; "/new"];
1382        ["touch"; "/newer"];
1383        ["touch"; "/newest"];
1384        ["ls"; "/"]], ["lost+found"; "new"; "newer"; "newest"])],
1385    "list the files in a directory",
1386    "\
1387 List the files in C<directory> (relative to the root directory,
1388 there is no cwd).  The '.' and '..' entries are not returned, but
1389 hidden files are shown.
1390
1391 This command is mostly useful for interactive sessions.  Programs
1392 should probably use C<guestfs_readdir> instead.");
1393
1394   ("list_devices", (RStringList "devices", []), 7, [],
1395    [InitEmpty, Always, TestOutputListOfDevices (
1396       [["list_devices"]], ["/dev/sda"; "/dev/sdb"; "/dev/sdc"; "/dev/sdd"])],
1397    "list the block devices",
1398    "\
1399 List all the block devices.
1400
1401 The full block device names are returned, eg. C</dev/sda>");
1402
1403   ("list_partitions", (RStringList "partitions", []), 8, [],
1404    [InitBasicFS, Always, TestOutputListOfDevices (
1405       [["list_partitions"]], ["/dev/sda1"]);
1406     InitEmpty, Always, TestOutputListOfDevices (
1407       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1408        ["list_partitions"]], ["/dev/sda1"; "/dev/sda2"; "/dev/sda3"])],
1409    "list the partitions",
1410    "\
1411 List all the partitions detected on all block devices.
1412
1413 The full partition device names are returned, eg. C</dev/sda1>
1414
1415 This does not return logical volumes.  For that you will need to
1416 call C<guestfs_lvs>.");
1417
1418   ("pvs", (RStringList "physvols", []), 9, [Optional "lvm2"],
1419    [InitBasicFSonLVM, Always, TestOutputListOfDevices (
1420       [["pvs"]], ["/dev/sda1"]);
1421     InitEmpty, Always, TestOutputListOfDevices (
1422       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1423        ["pvcreate"; "/dev/sda1"];
1424        ["pvcreate"; "/dev/sda2"];
1425        ["pvcreate"; "/dev/sda3"];
1426        ["pvs"]], ["/dev/sda1"; "/dev/sda2"; "/dev/sda3"])],
1427    "list the LVM physical volumes (PVs)",
1428    "\
1429 List all the physical volumes detected.  This is the equivalent
1430 of the L<pvs(8)> command.
1431
1432 This returns a list of just the device names that contain
1433 PVs (eg. C</dev/sda2>).
1434
1435 See also C<guestfs_pvs_full>.");
1436
1437   ("vgs", (RStringList "volgroups", []), 10, [Optional "lvm2"],
1438    [InitBasicFSonLVM, Always, TestOutputList (
1439       [["vgs"]], ["VG"]);
1440     InitEmpty, Always, TestOutputList (
1441       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1442        ["pvcreate"; "/dev/sda1"];
1443        ["pvcreate"; "/dev/sda2"];
1444        ["pvcreate"; "/dev/sda3"];
1445        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1446        ["vgcreate"; "VG2"; "/dev/sda3"];
1447        ["vgs"]], ["VG1"; "VG2"])],
1448    "list the LVM volume groups (VGs)",
1449    "\
1450 List all the volumes groups detected.  This is the equivalent
1451 of the L<vgs(8)> command.
1452
1453 This returns a list of just the volume group names that were
1454 detected (eg. C<VolGroup00>).
1455
1456 See also C<guestfs_vgs_full>.");
1457
1458   ("lvs", (RStringList "logvols", []), 11, [Optional "lvm2"],
1459    [InitBasicFSonLVM, Always, TestOutputList (
1460       [["lvs"]], ["/dev/VG/LV"]);
1461     InitEmpty, Always, TestOutputList (
1462       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1463        ["pvcreate"; "/dev/sda1"];
1464        ["pvcreate"; "/dev/sda2"];
1465        ["pvcreate"; "/dev/sda3"];
1466        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1467        ["vgcreate"; "VG2"; "/dev/sda3"];
1468        ["lvcreate"; "LV1"; "VG1"; "50"];
1469        ["lvcreate"; "LV2"; "VG1"; "50"];
1470        ["lvcreate"; "LV3"; "VG2"; "50"];
1471        ["lvs"]], ["/dev/VG1/LV1"; "/dev/VG1/LV2"; "/dev/VG2/LV3"])],
1472    "list the LVM logical volumes (LVs)",
1473    "\
1474 List all the logical volumes detected.  This is the equivalent
1475 of the L<lvs(8)> command.
1476
1477 This returns a list of the logical volume device names
1478 (eg. C</dev/VolGroup00/LogVol00>).
1479
1480 See also C<guestfs_lvs_full>.");
1481
1482   ("pvs_full", (RStructList ("physvols", "lvm_pv"), []), 12, [Optional "lvm2"],
1483    [], (* XXX how to test? *)
1484    "list the LVM physical volumes (PVs)",
1485    "\
1486 List all the physical volumes detected.  This is the equivalent
1487 of the L<pvs(8)> command.  The \"full\" version includes all fields.");
1488
1489   ("vgs_full", (RStructList ("volgroups", "lvm_vg"), []), 13, [Optional "lvm2"],
1490    [], (* XXX how to test? *)
1491    "list the LVM volume groups (VGs)",
1492    "\
1493 List all the volumes groups detected.  This is the equivalent
1494 of the L<vgs(8)> command.  The \"full\" version includes all fields.");
1495
1496   ("lvs_full", (RStructList ("logvols", "lvm_lv"), []), 14, [Optional "lvm2"],
1497    [], (* XXX how to test? *)
1498    "list the LVM logical volumes (LVs)",
1499    "\
1500 List all the logical volumes detected.  This is the equivalent
1501 of the L<lvs(8)> command.  The \"full\" version includes all fields.");
1502
1503   ("read_lines", (RStringList "lines", [Pathname "path"]), 15, [],
1504    [InitISOFS, Always, TestOutputList (
1505       [["read_lines"; "/known-4"]], ["abc"; "def"; "ghi"]);
1506     InitISOFS, Always, TestOutputList (
1507       [["read_lines"; "/empty"]], [])],
1508    "read file as lines",
1509    "\
1510 Return the contents of the file named C<path>.
1511
1512 The file contents are returned as a list of lines.  Trailing
1513 C<LF> and C<CRLF> character sequences are I<not> returned.
1514
1515 Note that this function cannot correctly handle binary files
1516 (specifically, files containing C<\\0> character which is treated
1517 as end of line).  For those you need to use the C<guestfs_read_file>
1518 function which has a more complex interface.");
1519
1520   ("aug_init", (RErr, [Pathname "root"; Int "flags"]), 16, [Optional "augeas"],
1521    [], (* XXX Augeas code needs tests. *)
1522    "create a new Augeas handle",
1523    "\
1524 Create a new Augeas handle for editing configuration files.
1525 If there was any previous Augeas handle associated with this
1526 guestfs session, then it is closed.
1527
1528 You must call this before using any other C<guestfs_aug_*>
1529 commands.
1530
1531 C<root> is the filesystem root.  C<root> must not be NULL,
1532 use C</> instead.
1533
1534 The flags are the same as the flags defined in
1535 E<lt>augeas.hE<gt>, the logical I<or> of the following
1536 integers:
1537
1538 =over 4
1539
1540 =item C<AUG_SAVE_BACKUP> = 1
1541
1542 Keep the original file with a C<.augsave> extension.
1543
1544 =item C<AUG_SAVE_NEWFILE> = 2
1545
1546 Save changes into a file with extension C<.augnew>, and
1547 do not overwrite original.  Overrides C<AUG_SAVE_BACKUP>.
1548
1549 =item C<AUG_TYPE_CHECK> = 4
1550
1551 Typecheck lenses (can be expensive).
1552
1553 =item C<AUG_NO_STDINC> = 8
1554
1555 Do not use standard load path for modules.
1556
1557 =item C<AUG_SAVE_NOOP> = 16
1558
1559 Make save a no-op, just record what would have been changed.
1560
1561 =item C<AUG_NO_LOAD> = 32
1562
1563 Do not load the tree in C<guestfs_aug_init>.
1564
1565 =back
1566
1567 To close the handle, you can call C<guestfs_aug_close>.
1568
1569 To find out more about Augeas, see L<http://augeas.net/>.");
1570
1571   ("aug_close", (RErr, []), 26, [Optional "augeas"],
1572    [], (* XXX Augeas code needs tests. *)
1573    "close the current Augeas handle",
1574    "\
1575 Close the current Augeas handle and free up any resources
1576 used by it.  After calling this, you have to call
1577 C<guestfs_aug_init> again before you can use any other
1578 Augeas functions.");
1579
1580   ("aug_defvar", (RInt "nrnodes", [String "name"; OptString "expr"]), 17, [Optional "augeas"],
1581    [], (* XXX Augeas code needs tests. *)
1582    "define an Augeas variable",
1583    "\
1584 Defines an Augeas variable C<name> whose value is the result
1585 of evaluating C<expr>.  If C<expr> is NULL, then C<name> is
1586 undefined.
1587
1588 On success this returns the number of nodes in C<expr>, or
1589 C<0> if C<expr> evaluates to something which is not a nodeset.");
1590
1591   ("aug_defnode", (RStruct ("nrnodescreated", "int_bool"), [String "name"; String "expr"; String "val"]), 18, [Optional "augeas"],
1592    [], (* XXX Augeas code needs tests. *)
1593    "define an Augeas node",
1594    "\
1595 Defines a variable C<name> whose value is the result of
1596 evaluating C<expr>.
1597
1598 If C<expr> evaluates to an empty nodeset, a node is created,
1599 equivalent to calling C<guestfs_aug_set> C<expr>, C<value>.
1600 C<name> will be the nodeset containing that single node.
1601
1602 On success this returns a pair containing the
1603 number of nodes in the nodeset, and a boolean flag
1604 if a node was created.");
1605
1606   ("aug_get", (RString "val", [String "augpath"]), 19, [Optional "augeas"],
1607    [], (* XXX Augeas code needs tests. *)
1608    "look up the value of an Augeas path",
1609    "\
1610 Look up the value associated with C<path>.  If C<path>
1611 matches exactly one node, the C<value> is returned.");
1612
1613   ("aug_set", (RErr, [String "augpath"; String "val"]), 20, [Optional "augeas"],
1614    [], (* XXX Augeas code needs tests. *)
1615    "set Augeas path to value",
1616    "\
1617 Set the value associated with C<path> to C<val>.
1618
1619 In the Augeas API, it is possible to clear a node by setting
1620 the value to NULL.  Due to an oversight in the libguestfs API
1621 you cannot do that with this call.  Instead you must use the
1622 C<guestfs_aug_clear> call.");
1623
1624   ("aug_insert", (RErr, [String "augpath"; String "label"; Bool "before"]), 21, [Optional "augeas"],
1625    [], (* XXX Augeas code needs tests. *)
1626    "insert a sibling Augeas node",
1627    "\
1628 Create a new sibling C<label> for C<path>, inserting it into
1629 the tree before or after C<path> (depending on the boolean
1630 flag C<before>).
1631
1632 C<path> must match exactly one existing node in the tree, and
1633 C<label> must be a label, ie. not contain C</>, C<*> or end
1634 with a bracketed index C<[N]>.");
1635
1636   ("aug_rm", (RInt "nrnodes", [String "augpath"]), 22, [Optional "augeas"],
1637    [], (* XXX Augeas code needs tests. *)
1638    "remove an Augeas path",
1639    "\
1640 Remove C<path> and all of its children.
1641
1642 On success this returns the number of entries which were removed.");
1643
1644   ("aug_mv", (RErr, [String "src"; String "dest"]), 23, [Optional "augeas"],
1645    [], (* XXX Augeas code needs tests. *)
1646    "move Augeas node",
1647    "\
1648 Move the node C<src> to C<dest>.  C<src> must match exactly
1649 one node.  C<dest> is overwritten if it exists.");
1650
1651   ("aug_match", (RStringList "matches", [String "augpath"]), 24, [Optional "augeas"],
1652    [], (* XXX Augeas code needs tests. *)
1653    "return Augeas nodes which match augpath",
1654    "\
1655 Returns a list of paths which match the path expression C<path>.
1656 The returned paths are sufficiently qualified so that they match
1657 exactly one node in the current tree.");
1658
1659   ("aug_save", (RErr, []), 25, [Optional "augeas"],
1660    [], (* XXX Augeas code needs tests. *)
1661    "write all pending Augeas changes to disk",
1662    "\
1663 This writes all pending changes to disk.
1664
1665 The flags which were passed to C<guestfs_aug_init> affect exactly
1666 how files are saved.");
1667
1668   ("aug_load", (RErr, []), 27, [Optional "augeas"],
1669    [], (* XXX Augeas code needs tests. *)
1670    "load files into the tree",
1671    "\
1672 Load files into the tree.
1673
1674 See C<aug_load> in the Augeas documentation for the full gory
1675 details.");
1676
1677   ("aug_ls", (RStringList "matches", [String "augpath"]), 28, [Optional "augeas"],
1678    [], (* XXX Augeas code needs tests. *)
1679    "list Augeas nodes under augpath",
1680    "\
1681 This is just a shortcut for listing C<guestfs_aug_match>
1682 C<path/*> and sorting the resulting nodes into alphabetical order.");
1683
1684   ("rm", (RErr, [Pathname "path"]), 29, [],
1685    [InitBasicFS, Always, TestRun
1686       [["touch"; "/new"];
1687        ["rm"; "/new"]];
1688     InitBasicFS, Always, TestLastFail
1689       [["rm"; "/new"]];
1690     InitBasicFS, Always, TestLastFail
1691       [["mkdir"; "/new"];
1692        ["rm"; "/new"]]],
1693    "remove a file",
1694    "\
1695 Remove the single file C<path>.");
1696
1697   ("rmdir", (RErr, [Pathname "path"]), 30, [],
1698    [InitBasicFS, Always, TestRun
1699       [["mkdir"; "/new"];
1700        ["rmdir"; "/new"]];
1701     InitBasicFS, Always, TestLastFail
1702       [["rmdir"; "/new"]];
1703     InitBasicFS, Always, TestLastFail
1704       [["touch"; "/new"];
1705        ["rmdir"; "/new"]]],
1706    "remove a directory",
1707    "\
1708 Remove the single directory C<path>.");
1709
1710   ("rm_rf", (RErr, [Pathname "path"]), 31, [],
1711    [InitBasicFS, Always, TestOutputFalse
1712       [["mkdir"; "/new"];
1713        ["mkdir"; "/new/foo"];
1714        ["touch"; "/new/foo/bar"];
1715        ["rm_rf"; "/new"];
1716        ["exists"; "/new"]]],
1717    "remove a file or directory recursively",
1718    "\
1719 Remove the file or directory C<path>, recursively removing the
1720 contents if its a directory.  This is like the C<rm -rf> shell
1721 command.");
1722
1723   ("mkdir", (RErr, [Pathname "path"]), 32, [],
1724    [InitBasicFS, Always, TestOutputTrue
1725       [["mkdir"; "/new"];
1726        ["is_dir"; "/new"]];
1727     InitBasicFS, Always, TestLastFail
1728       [["mkdir"; "/new/foo/bar"]]],
1729    "create a directory",
1730    "\
1731 Create a directory named C<path>.");
1732
1733   ("mkdir_p", (RErr, [Pathname "path"]), 33, [],
1734    [InitBasicFS, Always, TestOutputTrue
1735       [["mkdir_p"; "/new/foo/bar"];
1736        ["is_dir"; "/new/foo/bar"]];
1737     InitBasicFS, Always, TestOutputTrue
1738       [["mkdir_p"; "/new/foo/bar"];
1739        ["is_dir"; "/new/foo"]];
1740     InitBasicFS, Always, TestOutputTrue
1741       [["mkdir_p"; "/new/foo/bar"];
1742        ["is_dir"; "/new"]];
1743     (* Regression tests for RHBZ#503133: *)
1744     InitBasicFS, Always, TestRun
1745       [["mkdir"; "/new"];
1746        ["mkdir_p"; "/new"]];
1747     InitBasicFS, Always, TestLastFail
1748       [["touch"; "/new"];
1749        ["mkdir_p"; "/new"]]],
1750    "create a directory and parents",
1751    "\
1752 Create a directory named C<path>, creating any parent directories
1753 as necessary.  This is like the C<mkdir -p> shell command.");
1754
1755   ("chmod", (RErr, [Int "mode"; Pathname "path"]), 34, [],
1756    [], (* XXX Need stat command to test *)
1757    "change file mode",
1758    "\
1759 Change the mode (permissions) of C<path> to C<mode>.  Only
1760 numeric modes are supported.
1761
1762 I<Note>: When using this command from guestfish, C<mode>
1763 by default would be decimal, unless you prefix it with
1764 C<0> to get octal, ie. use C<0700> not C<700>.
1765
1766 The mode actually set is affected by the umask.");
1767
1768   ("chown", (RErr, [Int "owner"; Int "group"; Pathname "path"]), 35, [],
1769    [], (* XXX Need stat command to test *)
1770    "change file owner and group",
1771    "\
1772 Change the file owner to C<owner> and group to C<group>.
1773
1774 Only numeric uid and gid are supported.  If you want to use
1775 names, you will need to locate and parse the password file
1776 yourself (Augeas support makes this relatively easy).");
1777
1778   ("exists", (RBool "existsflag", [Pathname "path"]), 36, [],
1779    [InitISOFS, Always, TestOutputTrue (
1780       [["exists"; "/empty"]]);
1781     InitISOFS, Always, TestOutputTrue (
1782       [["exists"; "/directory"]])],
1783    "test if file or directory exists",
1784    "\
1785 This returns C<true> if and only if there is a file, directory
1786 (or anything) with the given C<path> name.
1787
1788 See also C<guestfs_is_file>, C<guestfs_is_dir>, C<guestfs_stat>.");
1789
1790   ("is_file", (RBool "fileflag", [Pathname "path"]), 37, [],
1791    [InitISOFS, Always, TestOutputTrue (
1792       [["is_file"; "/known-1"]]);
1793     InitISOFS, Always, TestOutputFalse (
1794       [["is_file"; "/directory"]])],
1795    "test if file exists",
1796    "\
1797 This returns C<true> if and only if there is a file
1798 with the given C<path> name.  Note that it returns false for
1799 other objects like directories.
1800
1801 See also C<guestfs_stat>.");
1802
1803   ("is_dir", (RBool "dirflag", [Pathname "path"]), 38, [],
1804    [InitISOFS, Always, TestOutputFalse (
1805       [["is_dir"; "/known-3"]]);
1806     InitISOFS, Always, TestOutputTrue (
1807       [["is_dir"; "/directory"]])],
1808    "test if file exists",
1809    "\
1810 This returns C<true> if and only if there is a directory
1811 with the given C<path> name.  Note that it returns false for
1812 other objects like files.
1813
1814 See also C<guestfs_stat>.");
1815
1816   ("pvcreate", (RErr, [Device "device"]), 39, [Optional "lvm2"],
1817    [InitEmpty, Always, TestOutputListOfDevices (
1818       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1819        ["pvcreate"; "/dev/sda1"];
1820        ["pvcreate"; "/dev/sda2"];
1821        ["pvcreate"; "/dev/sda3"];
1822        ["pvs"]], ["/dev/sda1"; "/dev/sda2"; "/dev/sda3"])],
1823    "create an LVM physical volume",
1824    "\
1825 This creates an LVM physical volume on the named C<device>,
1826 where C<device> should usually be a partition name such
1827 as C</dev/sda1>.");
1828
1829   ("vgcreate", (RErr, [String "volgroup"; DeviceList "physvols"]), 40, [Optional "lvm2"],
1830    [InitEmpty, Always, TestOutputList (
1831       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1832        ["pvcreate"; "/dev/sda1"];
1833        ["pvcreate"; "/dev/sda2"];
1834        ["pvcreate"; "/dev/sda3"];
1835        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1836        ["vgcreate"; "VG2"; "/dev/sda3"];
1837        ["vgs"]], ["VG1"; "VG2"])],
1838    "create an LVM volume group",
1839    "\
1840 This creates an LVM volume group called C<volgroup>
1841 from the non-empty list of physical volumes C<physvols>.");
1842
1843   ("lvcreate", (RErr, [String "logvol"; String "volgroup"; Int "mbytes"]), 41, [Optional "lvm2"],
1844    [InitEmpty, Always, TestOutputList (
1845       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1846        ["pvcreate"; "/dev/sda1"];
1847        ["pvcreate"; "/dev/sda2"];
1848        ["pvcreate"; "/dev/sda3"];
1849        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1850        ["vgcreate"; "VG2"; "/dev/sda3"];
1851        ["lvcreate"; "LV1"; "VG1"; "50"];
1852        ["lvcreate"; "LV2"; "VG1"; "50"];
1853        ["lvcreate"; "LV3"; "VG2"; "50"];
1854        ["lvcreate"; "LV4"; "VG2"; "50"];
1855        ["lvcreate"; "LV5"; "VG2"; "50"];
1856        ["lvs"]],
1857       ["/dev/VG1/LV1"; "/dev/VG1/LV2";
1858        "/dev/VG2/LV3"; "/dev/VG2/LV4"; "/dev/VG2/LV5"])],
1859    "create an LVM logical volume",
1860    "\
1861 This creates an LVM logical volume called C<logvol>
1862 on the volume group C<volgroup>, with C<size> megabytes.");
1863
1864   ("mkfs", (RErr, [String "fstype"; Device "device"]), 42, [],
1865    [InitEmpty, Always, TestOutput (
1866       [["part_disk"; "/dev/sda"; "mbr"];
1867        ["mkfs"; "ext2"; "/dev/sda1"];
1868        ["mount_options"; ""; "/dev/sda1"; "/"];
1869        ["write"; "/new"; "new file contents"];
1870        ["cat"; "/new"]], "new file contents")],
1871    "make a filesystem",
1872    "\
1873 This creates a filesystem on C<device> (usually a partition
1874 or LVM logical volume).  The filesystem type is C<fstype>, for
1875 example C<ext3>.");
1876
1877   ("sfdisk", (RErr, [Device "device";
1878                      Int "cyls"; Int "heads"; Int "sectors";
1879                      StringList "lines"]), 43, [DangerWillRobinson],
1880    [],
1881    "create partitions on a block device",
1882    "\
1883 This is a direct interface to the L<sfdisk(8)> program for creating
1884 partitions on block devices.
1885
1886 C<device> should be a block device, for example C</dev/sda>.
1887
1888 C<cyls>, C<heads> and C<sectors> are the number of cylinders, heads
1889 and sectors on the device, which are passed directly to sfdisk as
1890 the I<-C>, I<-H> and I<-S> parameters.  If you pass C<0> for any
1891 of these, then the corresponding parameter is omitted.  Usually for
1892 'large' disks, you can just pass C<0> for these, but for small
1893 (floppy-sized) disks, sfdisk (or rather, the kernel) cannot work
1894 out the right geometry and you will need to tell it.
1895
1896 C<lines> is a list of lines that we feed to C<sfdisk>.  For more
1897 information refer to the L<sfdisk(8)> manpage.
1898
1899 To create a single partition occupying the whole disk, you would
1900 pass C<lines> as a single element list, when the single element being
1901 the string C<,> (comma).
1902
1903 See also: C<guestfs_sfdisk_l>, C<guestfs_sfdisk_N>,
1904 C<guestfs_part_init>");
1905
1906   ("write_file", (RErr, [Pathname "path"; String "content"; Int "size"]), 44, [ProtocolLimitWarning; DeprecatedBy "write"],
1907    (* Regression test for RHBZ#597135. *)
1908    [InitBasicFS, Always, TestLastFail
1909       [["write_file"; "/new"; "abc"; "10000"]]],
1910    "create a file",
1911    "\
1912 This call creates a file called C<path>.  The contents of the
1913 file is the string C<content> (which can contain any 8 bit data),
1914 with length C<size>.
1915
1916 As a special case, if C<size> is C<0>
1917 then the length is calculated using C<strlen> (so in this case
1918 the content cannot contain embedded ASCII NULs).
1919
1920 I<NB.> Owing to a bug, writing content containing ASCII NUL
1921 characters does I<not> work, even if the length is specified.");
1922
1923   ("umount", (RErr, [String "pathordevice"]), 45, [FishAlias "unmount"],
1924    [InitEmpty, Always, TestOutputListOfDevices (
1925       [["part_disk"; "/dev/sda"; "mbr"];
1926        ["mkfs"; "ext2"; "/dev/sda1"];
1927        ["mount_options"; ""; "/dev/sda1"; "/"];
1928        ["mounts"]], ["/dev/sda1"]);
1929     InitEmpty, Always, TestOutputList (
1930       [["part_disk"; "/dev/sda"; "mbr"];
1931        ["mkfs"; "ext2"; "/dev/sda1"];
1932        ["mount_options"; ""; "/dev/sda1"; "/"];
1933        ["umount"; "/"];
1934        ["mounts"]], [])],
1935    "unmount a filesystem",
1936    "\
1937 This unmounts the given filesystem.  The filesystem may be
1938 specified either by its mountpoint (path) or the device which
1939 contains the filesystem.");
1940
1941   ("mounts", (RStringList "devices", []), 46, [],
1942    [InitBasicFS, Always, TestOutputListOfDevices (
1943       [["mounts"]], ["/dev/sda1"])],
1944    "show mounted filesystems",
1945    "\
1946 This returns the list of currently mounted filesystems.  It returns
1947 the list of devices (eg. C</dev/sda1>, C</dev/VG/LV>).
1948
1949 Some internal mounts are not shown.
1950
1951 See also: C<guestfs_mountpoints>");
1952
1953   ("umount_all", (RErr, []), 47, [FishAlias "unmount-all"],
1954    [InitBasicFS, Always, TestOutputList (
1955       [["umount_all"];
1956        ["mounts"]], []);
1957     (* check that umount_all can unmount nested mounts correctly: *)
1958     InitEmpty, Always, TestOutputList (
1959       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1960        ["mkfs"; "ext2"; "/dev/sda1"];
1961        ["mkfs"; "ext2"; "/dev/sda2"];
1962        ["mkfs"; "ext2"; "/dev/sda3"];
1963        ["mount_options"; ""; "/dev/sda1"; "/"];
1964        ["mkdir"; "/mp1"];
1965        ["mount_options"; ""; "/dev/sda2"; "/mp1"];
1966        ["mkdir"; "/mp1/mp2"];
1967        ["mount_options"; ""; "/dev/sda3"; "/mp1/mp2"];
1968        ["mkdir"; "/mp1/mp2/mp3"];
1969        ["umount_all"];
1970        ["mounts"]], [])],
1971    "unmount all filesystems",
1972    "\
1973 This unmounts all mounted filesystems.
1974
1975 Some internal mounts are not unmounted by this call.");
1976
1977   ("lvm_remove_all", (RErr, []), 48, [DangerWillRobinson; Optional "lvm2"],
1978    [],
1979    "remove all LVM LVs, VGs and PVs",
1980    "\
1981 This command removes all LVM logical volumes, volume groups
1982 and physical volumes.");
1983
1984   ("file", (RString "description", [Dev_or_Path "path"]), 49, [],
1985    [InitISOFS, Always, TestOutput (
1986       [["file"; "/empty"]], "empty");
1987     InitISOFS, Always, TestOutput (
1988       [["file"; "/known-1"]], "ASCII text");
1989     InitISOFS, Always, TestLastFail (
1990       [["file"; "/notexists"]]);
1991     InitISOFS, Always, TestOutput (
1992       [["file"; "/abssymlink"]], "symbolic link");
1993     InitISOFS, Always, TestOutput (
1994       [["file"; "/directory"]], "directory")],
1995    "determine file type",
1996    "\
1997 This call uses the standard L<file(1)> command to determine
1998 the type or contents of the file.
1999
2000 This call will also transparently look inside various types
2001 of compressed file.
2002
2003 The exact command which runs is C<file -zb path>.  Note in
2004 particular that the filename is not prepended to the output
2005 (the C<-b> option).
2006
2007 This command can also be used on C</dev/> devices
2008 (and partitions, LV names).  You can for example use this
2009 to determine if a device contains a filesystem, although
2010 it's usually better to use C<guestfs_vfs_type>.
2011
2012 If the C<path> does not begin with C</dev/> then
2013 this command only works for the content of regular files.
2014 For other file types (directory, symbolic link etc) it
2015 will just return the string C<directory> etc.");
2016
2017   ("command", (RString "output", [StringList "arguments"]), 50, [ProtocolLimitWarning],
2018    [InitBasicFS, Always, TestOutput (
2019       [["upload"; "test-command"; "/test-command"];
2020        ["chmod"; "0o755"; "/test-command"];
2021        ["command"; "/test-command 1"]], "Result1");
2022     InitBasicFS, Always, TestOutput (
2023       [["upload"; "test-command"; "/test-command"];
2024        ["chmod"; "0o755"; "/test-command"];
2025        ["command"; "/test-command 2"]], "Result2\n");
2026     InitBasicFS, Always, TestOutput (
2027       [["upload"; "test-command"; "/test-command"];
2028        ["chmod"; "0o755"; "/test-command"];
2029        ["command"; "/test-command 3"]], "\nResult3");
2030     InitBasicFS, Always, TestOutput (
2031       [["upload"; "test-command"; "/test-command"];
2032        ["chmod"; "0o755"; "/test-command"];
2033        ["command"; "/test-command 4"]], "\nResult4\n");
2034     InitBasicFS, Always, TestOutput (
2035       [["upload"; "test-command"; "/test-command"];
2036        ["chmod"; "0o755"; "/test-command"];
2037        ["command"; "/test-command 5"]], "\nResult5\n\n");
2038     InitBasicFS, Always, TestOutput (
2039       [["upload"; "test-command"; "/test-command"];
2040        ["chmod"; "0o755"; "/test-command"];
2041        ["command"; "/test-command 6"]], "\n\nResult6\n\n");
2042     InitBasicFS, Always, TestOutput (
2043       [["upload"; "test-command"; "/test-command"];
2044        ["chmod"; "0o755"; "/test-command"];
2045        ["command"; "/test-command 7"]], "");
2046     InitBasicFS, Always, TestOutput (
2047       [["upload"; "test-command"; "/test-command"];
2048        ["chmod"; "0o755"; "/test-command"];
2049        ["command"; "/test-command 8"]], "\n");
2050     InitBasicFS, Always, TestOutput (
2051       [["upload"; "test-command"; "/test-command"];
2052        ["chmod"; "0o755"; "/test-command"];
2053        ["command"; "/test-command 9"]], "\n\n");
2054     InitBasicFS, Always, TestOutput (
2055       [["upload"; "test-command"; "/test-command"];
2056        ["chmod"; "0o755"; "/test-command"];
2057        ["command"; "/test-command 10"]], "Result10-1\nResult10-2\n");
2058     InitBasicFS, Always, TestOutput (
2059       [["upload"; "test-command"; "/test-command"];
2060        ["chmod"; "0o755"; "/test-command"];
2061        ["command"; "/test-command 11"]], "Result11-1\nResult11-2");
2062     InitBasicFS, Always, TestLastFail (
2063       [["upload"; "test-command"; "/test-command"];
2064        ["chmod"; "0o755"; "/test-command"];
2065        ["command"; "/test-command"]])],
2066    "run a command from the guest filesystem",
2067    "\
2068 This call runs a command from the guest filesystem.  The
2069 filesystem must be mounted, and must contain a compatible
2070 operating system (ie. something Linux, with the same
2071 or compatible processor architecture).
2072
2073 The single parameter is an argv-style list of arguments.
2074 The first element is the name of the program to run.
2075 Subsequent elements are parameters.  The list must be
2076 non-empty (ie. must contain a program name).  Note that
2077 the command runs directly, and is I<not> invoked via
2078 the shell (see C<guestfs_sh>).
2079
2080 The return value is anything printed to I<stdout> by
2081 the command.
2082
2083 If the command returns a non-zero exit status, then
2084 this function returns an error message.  The error message
2085 string is the content of I<stderr> from the command.
2086
2087 The C<$PATH> environment variable will contain at least
2088 C</usr/bin> and C</bin>.  If you require a program from
2089 another location, you should provide the full path in the
2090 first parameter.
2091
2092 Shared libraries and data files required by the program
2093 must be available on filesystems which are mounted in the
2094 correct places.  It is the caller's responsibility to ensure
2095 all filesystems that are needed are mounted at the right
2096 locations.");
2097
2098   ("command_lines", (RStringList "lines", [StringList "arguments"]), 51, [ProtocolLimitWarning],
2099    [InitBasicFS, Always, TestOutputList (
2100       [["upload"; "test-command"; "/test-command"];
2101        ["chmod"; "0o755"; "/test-command"];
2102        ["command_lines"; "/test-command 1"]], ["Result1"]);
2103     InitBasicFS, Always, TestOutputList (
2104       [["upload"; "test-command"; "/test-command"];
2105        ["chmod"; "0o755"; "/test-command"];
2106        ["command_lines"; "/test-command 2"]], ["Result2"]);
2107     InitBasicFS, Always, TestOutputList (
2108       [["upload"; "test-command"; "/test-command"];
2109        ["chmod"; "0o755"; "/test-command"];
2110        ["command_lines"; "/test-command 3"]], ["";"Result3"]);
2111     InitBasicFS, Always, TestOutputList (
2112       [["upload"; "test-command"; "/test-command"];
2113        ["chmod"; "0o755"; "/test-command"];
2114        ["command_lines"; "/test-command 4"]], ["";"Result4"]);
2115     InitBasicFS, Always, TestOutputList (
2116       [["upload"; "test-command"; "/test-command"];
2117        ["chmod"; "0o755"; "/test-command"];
2118        ["command_lines"; "/test-command 5"]], ["";"Result5";""]);
2119     InitBasicFS, Always, TestOutputList (
2120       [["upload"; "test-command"; "/test-command"];
2121        ["chmod"; "0o755"; "/test-command"];
2122        ["command_lines"; "/test-command 6"]], ["";"";"Result6";""]);
2123     InitBasicFS, Always, TestOutputList (
2124       [["upload"; "test-command"; "/test-command"];
2125        ["chmod"; "0o755"; "/test-command"];
2126        ["command_lines"; "/test-command 7"]], []);
2127     InitBasicFS, Always, TestOutputList (
2128       [["upload"; "test-command"; "/test-command"];
2129        ["chmod"; "0o755"; "/test-command"];
2130        ["command_lines"; "/test-command 8"]], [""]);
2131     InitBasicFS, Always, TestOutputList (
2132       [["upload"; "test-command"; "/test-command"];
2133        ["chmod"; "0o755"; "/test-command"];
2134        ["command_lines"; "/test-command 9"]], ["";""]);
2135     InitBasicFS, Always, TestOutputList (
2136       [["upload"; "test-command"; "/test-command"];
2137        ["chmod"; "0o755"; "/test-command"];
2138        ["command_lines"; "/test-command 10"]], ["Result10-1";"Result10-2"]);
2139     InitBasicFS, Always, TestOutputList (
2140       [["upload"; "test-command"; "/test-command"];
2141        ["chmod"; "0o755"; "/test-command"];
2142        ["command_lines"; "/test-command 11"]], ["Result11-1";"Result11-2"])],
2143    "run a command, returning lines",
2144    "\
2145 This is the same as C<guestfs_command>, but splits the
2146 result into a list of lines.
2147
2148 See also: C<guestfs_sh_lines>");
2149
2150   ("stat", (RStruct ("statbuf", "stat"), [Pathname "path"]), 52, [],
2151    [InitISOFS, Always, TestOutputStruct (
2152       [["stat"; "/empty"]], [CompareWithInt ("size", 0)])],
2153    "get file information",
2154    "\
2155 Returns file information for the given C<path>.
2156
2157 This is the same as the C<stat(2)> system call.");
2158
2159   ("lstat", (RStruct ("statbuf", "stat"), [Pathname "path"]), 53, [],
2160    [InitISOFS, Always, TestOutputStruct (
2161       [["lstat"; "/empty"]], [CompareWithInt ("size", 0)])],
2162    "get file information for a symbolic link",
2163    "\
2164 Returns file information for the given C<path>.
2165
2166 This is the same as C<guestfs_stat> except that if C<path>
2167 is a symbolic link, then the link is stat-ed, not the file it
2168 refers to.
2169
2170 This is the same as the C<lstat(2)> system call.");
2171
2172   ("statvfs", (RStruct ("statbuf", "statvfs"), [Pathname "path"]), 54, [],
2173    [InitISOFS, Always, TestOutputStruct (
2174       [["statvfs"; "/"]], [CompareWithInt ("namemax", 255)])],
2175    "get file system statistics",
2176    "\
2177 Returns file system statistics for any mounted file system.
2178 C<path> should be a file or directory in the mounted file system
2179 (typically it is the mount point itself, but it doesn't need to be).
2180
2181 This is the same as the C<statvfs(2)> system call.");
2182
2183   ("tune2fs_l", (RHashtable "superblock", [Device "device"]), 55, [],
2184    [], (* XXX test *)
2185    "get ext2/ext3/ext4 superblock details",
2186    "\
2187 This returns the contents of the ext2, ext3 or ext4 filesystem
2188 superblock on C<device>.
2189
2190 It is the same as running C<tune2fs -l device>.  See L<tune2fs(8)>
2191 manpage for more details.  The list of fields returned isn't
2192 clearly defined, and depends on both the version of C<tune2fs>
2193 that libguestfs was built against, and the filesystem itself.");
2194
2195   ("blockdev_setro", (RErr, [Device "device"]), 56, [],
2196    [InitEmpty, Always, TestOutputTrue (
2197       [["blockdev_setro"; "/dev/sda"];
2198        ["blockdev_getro"; "/dev/sda"]])],
2199    "set block device to read-only",
2200    "\
2201 Sets the block device named C<device> to read-only.
2202
2203 This uses the L<blockdev(8)> command.");
2204
2205   ("blockdev_setrw", (RErr, [Device "device"]), 57, [],
2206    [InitEmpty, Always, TestOutputFalse (
2207       [["blockdev_setrw"; "/dev/sda"];
2208        ["blockdev_getro"; "/dev/sda"]])],
2209    "set block device to read-write",
2210    "\
2211 Sets the block device named C<device> to read-write.
2212
2213 This uses the L<blockdev(8)> command.");
2214
2215   ("blockdev_getro", (RBool "ro", [Device "device"]), 58, [],
2216    [InitEmpty, Always, TestOutputTrue (
2217       [["blockdev_setro"; "/dev/sda"];
2218        ["blockdev_getro"; "/dev/sda"]])],
2219    "is block device set to read-only",
2220    "\
2221 Returns a boolean indicating if the block device is read-only
2222 (true if read-only, false if not).
2223
2224 This uses the L<blockdev(8)> command.");
2225
2226   ("blockdev_getss", (RInt "sectorsize", [Device "device"]), 59, [],
2227    [InitEmpty, Always, TestOutputInt (
2228       [["blockdev_getss"; "/dev/sda"]], 512)],
2229    "get sectorsize of block device",
2230    "\
2231 This returns the size of sectors on a block device.
2232 Usually 512, but can be larger for modern devices.
2233
2234 (Note, this is not the size in sectors, use C<guestfs_blockdev_getsz>
2235 for that).
2236
2237 This uses the L<blockdev(8)> command.");
2238
2239   ("blockdev_getbsz", (RInt "blocksize", [Device "device"]), 60, [],
2240    [InitEmpty, Always, TestOutputInt (
2241       [["blockdev_getbsz"; "/dev/sda"]], 4096)],
2242    "get blocksize of block device",
2243    "\
2244 This returns the block size of a device.
2245
2246 (Note this is different from both I<size in blocks> and
2247 I<filesystem block size>).
2248
2249 This uses the L<blockdev(8)> command.");
2250
2251   ("blockdev_setbsz", (RErr, [Device "device"; Int "blocksize"]), 61, [],
2252    [], (* XXX test *)
2253    "set blocksize of block device",
2254    "\
2255 This sets the block size of a device.
2256
2257 (Note this is different from both I<size in blocks> and
2258 I<filesystem block size>).
2259
2260 This uses the L<blockdev(8)> command.");
2261
2262   ("blockdev_getsz", (RInt64 "sizeinsectors", [Device "device"]), 62, [],
2263    [InitEmpty, Always, TestOutputInt (
2264       [["blockdev_getsz"; "/dev/sda"]], 1024000)],
2265    "get total size of device in 512-byte sectors",
2266    "\
2267 This returns the size of the device in units of 512-byte sectors
2268 (even if the sectorsize isn't 512 bytes ... weird).
2269
2270 See also C<guestfs_blockdev_getss> for the real sector size of
2271 the device, and C<guestfs_blockdev_getsize64> for the more
2272 useful I<size in bytes>.
2273
2274 This uses the L<blockdev(8)> command.");
2275
2276   ("blockdev_getsize64", (RInt64 "sizeinbytes", [Device "device"]), 63, [],
2277    [InitEmpty, Always, TestOutputInt (
2278       [["blockdev_getsize64"; "/dev/sda"]], 524288000)],
2279    "get total size of device in bytes",
2280    "\
2281 This returns the size of the device in bytes.
2282
2283 See also C<guestfs_blockdev_getsz>.
2284
2285 This uses the L<blockdev(8)> command.");
2286
2287   ("blockdev_flushbufs", (RErr, [Device "device"]), 64, [],
2288    [InitEmpty, Always, TestRun
2289       [["blockdev_flushbufs"; "/dev/sda"]]],
2290    "flush device buffers",
2291    "\
2292 This tells the kernel to flush internal buffers associated
2293 with C<device>.
2294
2295 This uses the L<blockdev(8)> command.");
2296
2297   ("blockdev_rereadpt", (RErr, [Device "device"]), 65, [],
2298    [InitEmpty, Always, TestRun
2299       [["blockdev_rereadpt"; "/dev/sda"]]],
2300    "reread partition table",
2301    "\
2302 Reread the partition table on C<device>.
2303
2304 This uses the L<blockdev(8)> command.");
2305
2306   ("upload", (RErr, [FileIn "filename"; Dev_or_Path "remotefilename"]), 66, [],
2307    [InitBasicFS, Always, TestOutput (
2308       (* Pick a file from cwd which isn't likely to change. *)
2309       [["upload"; "../COPYING.LIB"; "/COPYING.LIB"];
2310        ["checksum"; "md5"; "/COPYING.LIB"]],
2311       Digest.to_hex (Digest.file "COPYING.LIB"))],
2312    "upload a file from the local machine",
2313    "\
2314 Upload local file C<filename> to C<remotefilename> on the
2315 filesystem.
2316
2317 C<filename> can also be a named pipe.
2318
2319 See also C<guestfs_download>.");
2320
2321   ("download", (RErr, [Dev_or_Path "remotefilename"; FileOut "filename"]), 67, [],
2322    [InitBasicFS, Always, TestOutput (
2323       (* Pick a file from cwd which isn't likely to change. *)
2324       [["upload"; "../COPYING.LIB"; "/COPYING.LIB"];
2325        ["download"; "/COPYING.LIB"; "testdownload.tmp"];
2326        ["upload"; "testdownload.tmp"; "/upload"];
2327        ["checksum"; "md5"; "/upload"]],
2328       Digest.to_hex (Digest.file "COPYING.LIB"))],
2329    "download a file to the local machine",
2330    "\
2331 Download file C<remotefilename> and save it as C<filename>
2332 on the local machine.
2333
2334 C<filename> can also be a named pipe.
2335
2336 See also C<guestfs_upload>, C<guestfs_cat>.");
2337
2338   ("checksum", (RString "checksum", [String "csumtype"; Pathname "path"]), 68, [],
2339    [InitISOFS, Always, TestOutput (
2340       [["checksum"; "crc"; "/known-3"]], "2891671662");
2341     InitISOFS, Always, TestLastFail (
2342       [["checksum"; "crc"; "/notexists"]]);
2343     InitISOFS, Always, TestOutput (
2344       [["checksum"; "md5"; "/known-3"]], "46d6ca27ee07cdc6fa99c2e138cc522c");
2345     InitISOFS, Always, TestOutput (
2346       [["checksum"; "sha1"; "/known-3"]], "b7ebccc3ee418311091c3eda0a45b83c0a770f15");
2347     InitISOFS, Always, TestOutput (
2348       [["checksum"; "sha224"; "/known-3"]], "d2cd1774b28f3659c14116be0a6dc2bb5c4b350ce9cd5defac707741");
2349     InitISOFS, Always, TestOutput (
2350       [["checksum"; "sha256"; "/known-3"]], "75bb71b90cd20cb13f86d2bea8dad63ac7194e7517c3b52b8d06ff52d3487d30");
2351     InitISOFS, Always, TestOutput (
2352       [["checksum"; "sha384"; "/known-3"]], "5fa7883430f357b5d7b7271d3a1d2872b51d73cba72731de6863d3dea55f30646af2799bef44d5ea776a5ec7941ac640");
2353     InitISOFS, Always, TestOutput (
2354       [["checksum"; "sha512"; "/known-3"]], "2794062c328c6b216dca90443b7f7134c5f40e56bd0ed7853123275a09982a6f992e6ca682f9d2fba34a4c5e870d8fe077694ff831e3032a004ee077e00603f6");
2355     (* Test for RHBZ#579608, absolute symbolic links. *)
2356     InitISOFS, Always, TestOutput (
2357       [["checksum"; "sha512"; "/abssymlink"]], "5f57d0639bc95081c53afc63a449403883818edc64da48930ad6b1a4fb49be90404686877743fbcd7c99811f3def7df7bc22635c885c6a8cf79c806b43451c1a")],
2358    "compute MD5, SHAx or CRC checksum of file",
2359    "\
2360 This call computes the MD5, SHAx or CRC checksum of the
2361 file named C<path>.
2362
2363 The type of checksum to compute is given by the C<csumtype>
2364 parameter which must have one of the following values:
2365
2366 =over 4
2367
2368 =item C<crc>
2369
2370 Compute the cyclic redundancy check (CRC) specified by POSIX
2371 for the C<cksum> command.
2372
2373 =item C<md5>
2374
2375 Compute the MD5 hash (using the C<md5sum> program).
2376
2377 =item C<sha1>
2378
2379 Compute the SHA1 hash (using the C<sha1sum> program).
2380
2381 =item C<sha224>
2382
2383 Compute the SHA224 hash (using the C<sha224sum> program).
2384
2385 =item C<sha256>
2386
2387 Compute the SHA256 hash (using the C<sha256sum> program).
2388
2389 =item C<sha384>
2390
2391 Compute the SHA384 hash (using the C<sha384sum> program).
2392
2393 =item C<sha512>
2394
2395 Compute the SHA512 hash (using the C<sha512sum> program).
2396
2397 =back
2398
2399 The checksum is returned as a printable string.
2400
2401 To get the checksum for a device, use C<guestfs_checksum_device>.
2402
2403 To get the checksums for many files, use C<guestfs_checksums_out>.");
2404
2405   ("tar_in", (RErr, [FileIn "tarfile"; Pathname "directory"]), 69, [],
2406    [InitBasicFS, Always, TestOutput (
2407       [["tar_in"; "../images/helloworld.tar"; "/"];
2408        ["cat"; "/hello"]], "hello\n")],
2409    "unpack tarfile to directory",
2410    "\
2411 This command uploads and unpacks local file C<tarfile> (an
2412 I<uncompressed> tar file) into C<directory>.
2413
2414 To upload a compressed tarball, use C<guestfs_tgz_in>
2415 or C<guestfs_txz_in>.");
2416
2417   ("tar_out", (RErr, [String "directory"; FileOut "tarfile"]), 70, [],
2418    [],
2419    "pack directory into tarfile",
2420    "\
2421 This command packs the contents of C<directory> and downloads
2422 it to local file C<tarfile>.
2423
2424 To download a compressed tarball, use C<guestfs_tgz_out>
2425 or C<guestfs_txz_out>.");
2426
2427   ("tgz_in", (RErr, [FileIn "tarball"; Pathname "directory"]), 71, [],
2428    [InitBasicFS, Always, TestOutput (
2429       [["tgz_in"; "../images/helloworld.tar.gz"; "/"];
2430        ["cat"; "/hello"]], "hello\n")],
2431    "unpack compressed tarball to directory",
2432    "\
2433 This command uploads and unpacks local file C<tarball> (a
2434 I<gzip compressed> tar file) into C<directory>.
2435
2436 To upload an uncompressed tarball, use C<guestfs_tar_in>.");
2437
2438   ("tgz_out", (RErr, [Pathname "directory"; FileOut "tarball"]), 72, [],
2439    [],
2440    "pack directory into compressed tarball",
2441    "\
2442 This command packs the contents of C<directory> and downloads
2443 it to local file C<tarball>.
2444
2445 To download an uncompressed tarball, use C<guestfs_tar_out>.");
2446
2447   ("mount_ro", (RErr, [Device "device"; String "mountpoint"]), 73, [],
2448    [InitBasicFS, Always, TestLastFail (
2449       [["umount"; "/"];
2450        ["mount_ro"; "/dev/sda1"; "/"];
2451        ["touch"; "/new"]]);
2452     InitBasicFS, Always, TestOutput (
2453       [["write"; "/new"; "data"];
2454        ["umount"; "/"];
2455        ["mount_ro"; "/dev/sda1"; "/"];
2456        ["cat"; "/new"]], "data")],
2457    "mount a guest disk, read-only",
2458    "\
2459 This is the same as the C<guestfs_mount> command, but it
2460 mounts the filesystem with the read-only (I<-o ro>) flag.");
2461
2462   ("mount_options", (RErr, [String "options"; Device "device"; String "mountpoint"]), 74, [],
2463    [],
2464    "mount a guest disk with mount options",
2465    "\
2466 This is the same as the C<guestfs_mount> command, but it
2467 allows you to set the mount options as for the
2468 L<mount(8)> I<-o> flag.
2469
2470 If the C<options> parameter is an empty string, then
2471 no options are passed (all options default to whatever
2472 the filesystem uses).");
2473
2474   ("mount_vfs", (RErr, [String "options"; String "vfstype"; Device "device"; String "mountpoint"]), 75, [],
2475    [],
2476    "mount a guest disk with mount options and vfstype",
2477    "\
2478 This is the same as the C<guestfs_mount> command, but it
2479 allows you to set both the mount options and the vfstype
2480 as for the L<mount(8)> I<-o> and I<-t> flags.");
2481
2482   ("debug", (RString "result", [String "subcmd"; StringList "extraargs"]), 76, [],
2483    [],
2484    "debugging and internals",
2485    "\
2486 The C<guestfs_debug> command exposes some internals of
2487 C<guestfsd> (the guestfs daemon) that runs inside the
2488 qemu subprocess.
2489
2490 There is no comprehensive help for this command.  You have
2491 to look at the file C<daemon/debug.c> in the libguestfs source
2492 to find out what you can do.");
2493
2494   ("lvremove", (RErr, [Device "device"]), 77, [Optional "lvm2"],
2495    [InitEmpty, Always, TestOutputList (
2496       [["part_disk"; "/dev/sda"; "mbr"];
2497        ["pvcreate"; "/dev/sda1"];
2498        ["vgcreate"; "VG"; "/dev/sda1"];
2499        ["lvcreate"; "LV1"; "VG"; "50"];
2500        ["lvcreate"; "LV2"; "VG"; "50"];
2501        ["lvremove"; "/dev/VG/LV1"];
2502        ["lvs"]], ["/dev/VG/LV2"]);
2503     InitEmpty, Always, TestOutputList (
2504       [["part_disk"; "/dev/sda"; "mbr"];
2505        ["pvcreate"; "/dev/sda1"];
2506        ["vgcreate"; "VG"; "/dev/sda1"];
2507        ["lvcreate"; "LV1"; "VG"; "50"];
2508        ["lvcreate"; "LV2"; "VG"; "50"];
2509        ["lvremove"; "/dev/VG"];
2510        ["lvs"]], []);
2511     InitEmpty, Always, TestOutputList (
2512       [["part_disk"; "/dev/sda"; "mbr"];
2513        ["pvcreate"; "/dev/sda1"];
2514        ["vgcreate"; "VG"; "/dev/sda1"];
2515        ["lvcreate"; "LV1"; "VG"; "50"];
2516        ["lvcreate"; "LV2"; "VG"; "50"];
2517        ["lvremove"; "/dev/VG"];
2518        ["vgs"]], ["VG"])],
2519    "remove an LVM logical volume",
2520    "\
2521 Remove an LVM logical volume C<device>, where C<device> is
2522 the path to the LV, such as C</dev/VG/LV>.
2523
2524 You can also remove all LVs in a volume group by specifying
2525 the VG name, C</dev/VG>.");
2526
2527   ("vgremove", (RErr, [String "vgname"]), 78, [Optional "lvm2"],
2528    [InitEmpty, Always, TestOutputList (
2529       [["part_disk"; "/dev/sda"; "mbr"];
2530        ["pvcreate"; "/dev/sda1"];
2531        ["vgcreate"; "VG"; "/dev/sda1"];
2532        ["lvcreate"; "LV1"; "VG"; "50"];
2533        ["lvcreate"; "LV2"; "VG"; "50"];
2534        ["vgremove"; "VG"];
2535        ["lvs"]], []);
2536     InitEmpty, Always, TestOutputList (
2537       [["part_disk"; "/dev/sda"; "mbr"];
2538        ["pvcreate"; "/dev/sda1"];
2539        ["vgcreate"; "VG"; "/dev/sda1"];
2540        ["lvcreate"; "LV1"; "VG"; "50"];
2541        ["lvcreate"; "LV2"; "VG"; "50"];
2542        ["vgremove"; "VG"];
2543        ["vgs"]], [])],
2544    "remove an LVM volume group",
2545    "\
2546 Remove an LVM volume group C<vgname>, (for example C<VG>).
2547
2548 This also forcibly removes all logical volumes in the volume
2549 group (if any).");
2550
2551   ("pvremove", (RErr, [Device "device"]), 79, [Optional "lvm2"],
2552    [InitEmpty, Always, TestOutputListOfDevices (
2553       [["part_disk"; "/dev/sda"; "mbr"];
2554        ["pvcreate"; "/dev/sda1"];
2555        ["vgcreate"; "VG"; "/dev/sda1"];
2556        ["lvcreate"; "LV1"; "VG"; "50"];
2557        ["lvcreate"; "LV2"; "VG"; "50"];
2558        ["vgremove"; "VG"];
2559        ["pvremove"; "/dev/sda1"];
2560        ["lvs"]], []);
2561     InitEmpty, Always, TestOutputListOfDevices (
2562       [["part_disk"; "/dev/sda"; "mbr"];
2563        ["pvcreate"; "/dev/sda1"];
2564        ["vgcreate"; "VG"; "/dev/sda1"];
2565        ["lvcreate"; "LV1"; "VG"; "50"];
2566        ["lvcreate"; "LV2"; "VG"; "50"];
2567        ["vgremove"; "VG"];
2568        ["pvremove"; "/dev/sda1"];
2569        ["vgs"]], []);
2570     InitEmpty, Always, TestOutputListOfDevices (
2571       [["part_disk"; "/dev/sda"; "mbr"];
2572        ["pvcreate"; "/dev/sda1"];
2573        ["vgcreate"; "VG"; "/dev/sda1"];
2574        ["lvcreate"; "LV1"; "VG"; "50"];
2575        ["lvcreate"; "LV2"; "VG"; "50"];
2576        ["vgremove"; "VG"];
2577        ["pvremove"; "/dev/sda1"];
2578        ["pvs"]], [])],
2579    "remove an LVM physical volume",
2580    "\
2581 This wipes a physical volume C<device> so that LVM will no longer
2582 recognise it.
2583
2584 The implementation uses the C<pvremove> command which refuses to
2585 wipe physical volumes that contain any volume groups, so you have
2586 to remove those first.");
2587
2588   ("set_e2label", (RErr, [Device "device"; String "label"]), 80, [],
2589    [InitBasicFS, Always, TestOutput (
2590       [["set_e2label"; "/dev/sda1"; "testlabel"];
2591        ["get_e2label"; "/dev/sda1"]], "testlabel")],
2592    "set the ext2/3/4 filesystem label",
2593    "\
2594 This sets the ext2/3/4 filesystem label of the filesystem on
2595 C<device> to C<label>.  Filesystem labels are limited to
2596 16 characters.
2597
2598 You can use either C<guestfs_tune2fs_l> or C<guestfs_get_e2label>
2599 to return the existing label on a filesystem.");
2600
2601   ("get_e2label", (RString "label", [Device "device"]), 81, [DeprecatedBy "vfs_label"],
2602    [],
2603    "get the ext2/3/4 filesystem label",
2604    "\
2605 This returns the ext2/3/4 filesystem label of the filesystem on
2606 C<device>.");
2607
2608   ("set_e2uuid", (RErr, [Device "device"; String "uuid"]), 82, [],
2609    (let uuid = uuidgen () in
2610     [InitBasicFS, Always, TestOutput (
2611        [["set_e2uuid"; "/dev/sda1"; uuid];
2612         ["get_e2uuid"; "/dev/sda1"]], uuid);
2613      InitBasicFS, Always, TestOutput (
2614        [["set_e2uuid"; "/dev/sda1"; "clear"];
2615         ["get_e2uuid"; "/dev/sda1"]], "");
2616      (* We can't predict what UUIDs will be, so just check the commands run. *)
2617      InitBasicFS, Always, TestRun (
2618        [["set_e2uuid"; "/dev/sda1"; "random"]]);
2619      InitBasicFS, Always, TestRun (
2620        [["set_e2uuid"; "/dev/sda1"; "time"]])]),
2621    "set the ext2/3/4 filesystem UUID",
2622    "\
2623 This sets the ext2/3/4 filesystem UUID of the filesystem on
2624 C<device> to C<uuid>.  The format of the UUID and alternatives
2625 such as C<clear>, C<random> and C<time> are described in the
2626 L<tune2fs(8)> manpage.
2627
2628 You can use either C<guestfs_tune2fs_l> or C<guestfs_get_e2uuid>
2629 to return the existing UUID of a filesystem.");
2630
2631   ("get_e2uuid", (RString "uuid", [Device "device"]), 83, [DeprecatedBy "vfs_uuid"],
2632    (* Regression test for RHBZ#597112. *)
2633    (let uuid = uuidgen () in
2634     [InitBasicFS, Always, TestOutput (
2635        [["mke2journal"; "1024"; "/dev/sdb"];
2636         ["set_e2uuid"; "/dev/sdb"; uuid];
2637         ["get_e2uuid"; "/dev/sdb"]], uuid)]),
2638    "get the ext2/3/4 filesystem UUID",
2639    "\
2640 This returns the ext2/3/4 filesystem UUID of the filesystem on
2641 C<device>.");
2642
2643   ("fsck", (RInt "status", [String "fstype"; Device "device"]), 84, [FishOutput FishOutputHexadecimal],
2644    [InitBasicFS, Always, TestOutputInt (
2645       [["umount"; "/dev/sda1"];
2646        ["fsck"; "ext2"; "/dev/sda1"]], 0);
2647     InitBasicFS, Always, TestOutputInt (
2648       [["umount"; "/dev/sda1"];
2649        ["zero"; "/dev/sda1"];
2650        ["fsck"; "ext2"; "/dev/sda1"]], 8)],
2651    "run the filesystem checker",
2652    "\
2653 This runs the filesystem checker (fsck) on C<device> which
2654 should have filesystem type C<fstype>.
2655
2656 The returned integer is the status.  See L<fsck(8)> for the
2657 list of status codes from C<fsck>.
2658
2659 Notes:
2660
2661 =over 4
2662
2663 =item *
2664
2665 Multiple status codes can be summed together.
2666
2667 =item *
2668
2669 A non-zero return code can mean \"success\", for example if
2670 errors have been corrected on the filesystem.
2671
2672 =item *
2673
2674 Checking or repairing NTFS volumes is not supported
2675 (by linux-ntfs).
2676
2677 =back
2678
2679 This command is entirely equivalent to running C<fsck -a -t fstype device>.");
2680
2681   ("zero", (RErr, [Device "device"]), 85, [],
2682    [InitBasicFS, Always, TestOutput (
2683       [["umount"; "/dev/sda1"];
2684        ["zero"; "/dev/sda1"];
2685        ["file"; "/dev/sda1"]], "data")],
2686    "write zeroes to the device",
2687    "\
2688 This command writes zeroes over the first few blocks of C<device>.
2689
2690 How many blocks are zeroed isn't specified (but it's I<not> enough
2691 to securely wipe the device).  It should be sufficient to remove
2692 any partition tables, filesystem superblocks and so on.
2693
2694 See also: C<guestfs_zero_device>, C<guestfs_scrub_device>.");
2695
2696   ("grub_install", (RErr, [Pathname "root"; Device "device"]), 86, [],
2697    (* See:
2698     * https://bugzilla.redhat.com/show_bug.cgi?id=484986
2699     * https://bugzilla.redhat.com/show_bug.cgi?id=479760
2700     *)
2701    [InitBasicFS, Always, TestOutputTrue (
2702       [["mkdir_p"; "/boot/grub"];
2703        ["write"; "/boot/grub/device.map"; "(hd0) /dev/vda"];
2704        ["grub_install"; "/"; "/dev/vda"];
2705        ["is_dir"; "/boot"]])],
2706    "install GRUB",
2707    "\
2708 This command installs GRUB (the Grand Unified Bootloader) on
2709 C<device>, with the root directory being C<root>.
2710
2711 Note: If grub-install reports the error
2712 \"No suitable drive was found in the generated device map.\"
2713 it may be that you need to create a C</boot/grub/device.map>
2714 file first that contains the mapping between grub device names
2715 and Linux device names.  It is usually sufficient to create
2716 a file containing:
2717
2718  (hd0) /dev/vda
2719
2720 replacing C</dev/vda> with the name of the installation device.");
2721
2722   ("cp", (RErr, [Pathname "src"; Pathname "dest"]), 87, [],
2723    [InitBasicFS, Always, TestOutput (
2724       [["write"; "/old"; "file content"];
2725        ["cp"; "/old"; "/new"];
2726        ["cat"; "/new"]], "file content");
2727     InitBasicFS, Always, TestOutputTrue (
2728       [["write"; "/old"; "file content"];
2729        ["cp"; "/old"; "/new"];
2730        ["is_file"; "/old"]]);
2731     InitBasicFS, Always, TestOutput (
2732       [["write"; "/old"; "file content"];
2733        ["mkdir"; "/dir"];
2734        ["cp"; "/old"; "/dir/new"];
2735        ["cat"; "/dir/new"]], "file content")],
2736    "copy a file",
2737    "\
2738 This copies a file from C<src> to C<dest> where C<dest> is
2739 either a destination filename or destination directory.");
2740
2741   ("cp_a", (RErr, [Pathname "src"; Pathname "dest"]), 88, [],
2742    [InitBasicFS, Always, TestOutput (
2743       [["mkdir"; "/olddir"];
2744        ["mkdir"; "/newdir"];
2745        ["write"; "/olddir/file"; "file content"];
2746        ["cp_a"; "/olddir"; "/newdir"];
2747        ["cat"; "/newdir/olddir/file"]], "file content")],
2748    "copy a file or directory recursively",
2749    "\
2750 This copies a file or directory from C<src> to C<dest>
2751 recursively using the C<cp -a> command.");
2752
2753   ("mv", (RErr, [Pathname "src"; Pathname "dest"]), 89, [],
2754    [InitBasicFS, Always, TestOutput (
2755       [["write"; "/old"; "file content"];
2756        ["mv"; "/old"; "/new"];
2757        ["cat"; "/new"]], "file content");
2758     InitBasicFS, Always, TestOutputFalse (
2759       [["write"; "/old"; "file content"];
2760        ["mv"; "/old"; "/new"];
2761        ["is_file"; "/old"]])],
2762    "move a file",
2763    "\
2764 This moves a file from C<src> to C<dest> where C<dest> is
2765 either a destination filename or destination directory.");
2766
2767   ("drop_caches", (RErr, [Int "whattodrop"]), 90, [],
2768    [InitEmpty, Always, TestRun (
2769       [["drop_caches"; "3"]])],
2770    "drop kernel page cache, dentries and inodes",
2771    "\
2772 This instructs the guest kernel to drop its page cache,
2773 and/or dentries and inode caches.  The parameter C<whattodrop>
2774 tells the kernel what precisely to drop, see
2775 L<http://linux-mm.org/Drop_Caches>
2776
2777 Setting C<whattodrop> to 3 should drop everything.
2778
2779 This automatically calls L<sync(2)> before the operation,
2780 so that the maximum guest memory is freed.");
2781
2782   ("dmesg", (RString "kmsgs", []), 91, [],
2783    [InitEmpty, Always, TestRun (
2784       [["dmesg"]])],
2785    "return kernel messages",
2786    "\
2787 This returns the kernel messages (C<dmesg> output) from
2788 the guest kernel.  This is sometimes useful for extended
2789 debugging of problems.
2790
2791 Another way to get the same information is to enable
2792 verbose messages with C<guestfs_set_verbose> or by setting
2793 the environment variable C<LIBGUESTFS_DEBUG=1> before
2794 running the program.");
2795
2796   ("ping_daemon", (RErr, []), 92, [],
2797    [InitEmpty, Always, TestRun (
2798       [["ping_daemon"]])],
2799    "ping the guest daemon",
2800    "\
2801 This is a test probe into the guestfs daemon running inside
2802 the qemu subprocess.  Calling this function checks that the
2803 daemon responds to the ping message, without affecting the daemon
2804 or attached block device(s) in any other way.");
2805
2806   ("equal", (RBool "equality", [Pathname "file1"; Pathname "file2"]), 93, [],
2807    [InitBasicFS, Always, TestOutputTrue (
2808       [["write"; "/file1"; "contents of a file"];
2809        ["cp"; "/file1"; "/file2"];
2810        ["equal"; "/file1"; "/file2"]]);
2811     InitBasicFS, Always, TestOutputFalse (
2812       [["write"; "/file1"; "contents of a file"];
2813        ["write"; "/file2"; "contents of another file"];
2814        ["equal"; "/file1"; "/file2"]]);
2815     InitBasicFS, Always, TestLastFail (
2816       [["equal"; "/file1"; "/file2"]])],
2817    "test if two files have equal contents",
2818    "\
2819 This compares the two files C<file1> and C<file2> and returns
2820 true if their content is exactly equal, or false otherwise.
2821
2822 The external L<cmp(1)> program is used for the comparison.");
2823
2824   ("strings", (RStringList "stringsout", [Pathname "path"]), 94, [ProtocolLimitWarning],
2825    [InitISOFS, Always, TestOutputList (
2826       [["strings"; "/known-5"]], ["abcdefghi"; "jklmnopqr"]);
2827     InitISOFS, Always, TestOutputList (
2828       [["strings"; "/empty"]], []);
2829     (* Test for RHBZ#579608, absolute symbolic links. *)
2830     InitISOFS, Always, TestRun (
2831       [["strings"; "/abssymlink"]])],
2832    "print the printable strings in a file",
2833    "\
2834 This runs the L<strings(1)> command on a file and returns
2835 the list of printable strings found.");
2836
2837   ("strings_e", (RStringList "stringsout", [String "encoding"; Pathname "path"]), 95, [ProtocolLimitWarning],
2838    [InitISOFS, Always, TestOutputList (
2839       [["strings_e"; "b"; "/known-5"]], []);
2840     InitBasicFS, Always, TestOutputList (
2841       [["write"; "/new"; "\000h\000e\000l\000l\000o\000\n\000w\000o\000r\000l\000d\000\n"];
2842        ["strings_e"; "b"; "/new"]], ["hello"; "world"])],
2843    "print the printable strings in a file",
2844    "\
2845 This is like the C<guestfs_strings> command, but allows you to
2846 specify the encoding of strings that are looked for in
2847 the source file C<path>.
2848
2849 Allowed encodings are:
2850
2851 =over 4
2852
2853 =item s
2854
2855 Single 7-bit-byte characters like ASCII and the ASCII-compatible
2856 parts of ISO-8859-X (this is what C<guestfs_strings> uses).
2857
2858 =item S
2859
2860 Single 8-bit-byte characters.
2861
2862 =item b
2863
2864 16-bit big endian strings such as those encoded in
2865 UTF-16BE or UCS-2BE.
2866
2867 =item l (lower case letter L)
2868
2869 16-bit little endian such as UTF-16LE and UCS-2LE.
2870 This is useful for examining binaries in Windows guests.
2871
2872 =item B
2873
2874 32-bit big endian such as UCS-4BE.
2875
2876 =item L
2877
2878 32-bit little endian such as UCS-4LE.
2879
2880 =back
2881
2882 The returned strings are transcoded to UTF-8.");
2883
2884   ("hexdump", (RString "dump", [Pathname "path"]), 96, [ProtocolLimitWarning],
2885    [InitISOFS, Always, TestOutput (
2886       [["hexdump"; "/known-4"]], "00000000  61 62 63 0a 64 65 66 0a  67 68 69                 |abc.def.ghi|\n0000000b\n");
2887     (* Test for RHBZ#501888c2 regression which caused large hexdump
2888      * commands to segfault.
2889      *)
2890     InitISOFS, Always, TestRun (
2891       [["hexdump"; "/100krandom"]]);
2892     (* Test for RHBZ#579608, absolute symbolic links. *)
2893     InitISOFS, Always, TestRun (
2894       [["hexdump"; "/abssymlink"]])],
2895    "dump a file in hexadecimal",
2896    "\
2897 This runs C<hexdump -C> on the given C<path>.  The result is
2898 the human-readable, canonical hex dump of the file.");
2899
2900   ("zerofree", (RErr, [Device "device"]), 97, [Optional "zerofree"],
2901    [InitNone, Always, TestOutput (
2902       [["part_disk"; "/dev/sda"; "mbr"];
2903        ["mkfs"; "ext3"; "/dev/sda1"];
2904        ["mount_options"; ""; "/dev/sda1"; "/"];
2905        ["write"; "/new"; "test file"];
2906        ["umount"; "/dev/sda1"];
2907        ["zerofree"; "/dev/sda1"];
2908        ["mount_options"; ""; "/dev/sda1"; "/"];
2909        ["cat"; "/new"]], "test file")],
2910    "zero unused inodes and disk blocks on ext2/3 filesystem",
2911    "\
2912 This runs the I<zerofree> program on C<device>.  This program
2913 claims to zero unused inodes and disk blocks on an ext2/3
2914 filesystem, thus making it possible to compress the filesystem
2915 more effectively.
2916
2917 You should B<not> run this program if the filesystem is
2918 mounted.
2919
2920 It is possible that using this program can damage the filesystem
2921 or data on the filesystem.");
2922
2923   ("pvresize", (RErr, [Device "device"]), 98, [Optional "lvm2"],
2924    [],
2925    "resize an LVM physical volume",
2926    "\
2927 This resizes (expands or shrinks) an existing LVM physical
2928 volume to match the new size of the underlying device.");
2929
2930   ("sfdisk_N", (RErr, [Device "device"; Int "partnum";
2931                        Int "cyls"; Int "heads"; Int "sectors";
2932                        String "line"]), 99, [DangerWillRobinson],
2933    [],
2934    "modify a single partition on a block device",
2935    "\
2936 This runs L<sfdisk(8)> option to modify just the single
2937 partition C<n> (note: C<n> counts from 1).
2938
2939 For other parameters, see C<guestfs_sfdisk>.  You should usually
2940 pass C<0> for the cyls/heads/sectors parameters.
2941
2942 See also: C<guestfs_part_add>");
2943
2944   ("sfdisk_l", (RString "partitions", [Device "device"]), 100, [],
2945    [],
2946    "display the partition table",
2947    "\
2948 This displays the partition table on C<device>, in the
2949 human-readable output of the L<sfdisk(8)> command.  It is
2950 not intended to be parsed.
2951
2952 See also: C<guestfs_part_list>");
2953
2954   ("sfdisk_kernel_geometry", (RString "partitions", [Device "device"]), 101, [],
2955    [],
2956    "display the kernel geometry",
2957    "\
2958 This displays the kernel's idea of the geometry of C<device>.
2959
2960 The result is in human-readable format, and not designed to
2961 be parsed.");
2962
2963   ("sfdisk_disk_geometry", (RString "partitions", [Device "device"]), 102, [],
2964    [],
2965    "display the disk geometry from the partition table",
2966    "\
2967 This displays the disk geometry of C<device> read from the
2968 partition table.  Especially in the case where the underlying
2969 block device has been resized, this can be different from the
2970 kernel's idea of the geometry (see C<guestfs_sfdisk_kernel_geometry>).
2971
2972 The result is in human-readable format, and not designed to
2973 be parsed.");
2974
2975   ("vg_activate_all", (RErr, [Bool "activate"]), 103, [Optional "lvm2"],
2976    [],
2977    "activate or deactivate all volume groups",
2978    "\
2979 This command activates or (if C<activate> is false) deactivates
2980 all logical volumes in all volume groups.
2981 If activated, then they are made known to the
2982 kernel, ie. they appear as C</dev/mapper> devices.  If deactivated,
2983 then those devices disappear.
2984
2985 This command is the same as running C<vgchange -a y|n>");
2986
2987   ("vg_activate", (RErr, [Bool "activate"; StringList "volgroups"]), 104, [Optional "lvm2"],
2988    [],
2989    "activate or deactivate some volume groups",
2990    "\
2991 This command activates or (if C<activate> is false) deactivates
2992 all logical volumes in the listed volume groups C<volgroups>.
2993 If activated, then they are made known to the
2994 kernel, ie. they appear as C</dev/mapper> devices.  If deactivated,
2995 then those devices disappear.
2996
2997 This command is the same as running C<vgchange -a y|n volgroups...>
2998
2999 Note that if C<volgroups> is an empty list then B<all> volume groups
3000 are activated or deactivated.");
3001
3002   ("lvresize", (RErr, [Device "device"; Int "mbytes"]), 105, [Optional "lvm2"],
3003    [InitNone, Always, TestOutput (
3004       [["part_disk"; "/dev/sda"; "mbr"];
3005        ["pvcreate"; "/dev/sda1"];
3006        ["vgcreate"; "VG"; "/dev/sda1"];
3007        ["lvcreate"; "LV"; "VG"; "10"];
3008        ["mkfs"; "ext2"; "/dev/VG/LV"];
3009        ["mount_options"; ""; "/dev/VG/LV"; "/"];
3010        ["write"; "/new"; "test content"];
3011        ["umount"; "/"];
3012        ["lvresize"; "/dev/VG/LV"; "20"];
3013        ["e2fsck_f"; "/dev/VG/LV"];
3014        ["resize2fs"; "/dev/VG/LV"];
3015        ["mount_options"; ""; "/dev/VG/LV"; "/"];
3016        ["cat"; "/new"]], "test content");
3017     InitNone, Always, TestRun (
3018       (* Make an LV smaller to test RHBZ#587484. *)
3019       [["part_disk"; "/dev/sda"; "mbr"];
3020        ["pvcreate"; "/dev/sda1"];
3021        ["vgcreate"; "VG"; "/dev/sda1"];
3022        ["lvcreate"; "LV"; "VG"; "20"];
3023        ["lvresize"; "/dev/VG/LV"; "10"]])],
3024    "resize an LVM logical volume",
3025    "\
3026 This resizes (expands or shrinks) an existing LVM logical
3027 volume to C<mbytes>.  When reducing, data in the reduced part
3028 is lost.");
3029
3030   ("resize2fs", (RErr, [Device "device"]), 106, [],
3031    [], (* lvresize tests this *)
3032    "resize an ext2, ext3 or ext4 filesystem",
3033    "\
3034 This resizes an ext2, ext3 or ext4 filesystem to match the size of
3035 the underlying device.
3036
3037 I<Note:> It is sometimes required that you run C<guestfs_e2fsck_f>
3038 on the C<device> before calling this command.  For unknown reasons
3039 C<resize2fs> sometimes gives an error about this and sometimes not.
3040 In any case, it is always safe to call C<guestfs_e2fsck_f> before
3041 calling this function.");
3042
3043   ("find", (RStringList "names", [Pathname "directory"]), 107, [ProtocolLimitWarning],
3044    [InitBasicFS, Always, TestOutputList (
3045       [["find"; "/"]], ["lost+found"]);
3046     InitBasicFS, Always, TestOutputList (
3047       [["touch"; "/a"];
3048        ["mkdir"; "/b"];
3049        ["touch"; "/b/c"];
3050        ["find"; "/"]], ["a"; "b"; "b/c"; "lost+found"]);
3051     InitBasicFS, Always, TestOutputList (
3052       [["mkdir_p"; "/a/b/c"];
3053        ["touch"; "/a/b/c/d"];
3054        ["find"; "/a/b/"]], ["c"; "c/d"])],
3055    "find all files and directories",
3056    "\
3057 This command lists out all files and directories, recursively,
3058 starting at C<directory>.  It is essentially equivalent to
3059 running the shell command C<find directory -print> but some
3060 post-processing happens on the output, described below.
3061
3062 This returns a list of strings I<without any prefix>.  Thus
3063 if the directory structure was:
3064
3065  /tmp/a
3066  /tmp/b
3067  /tmp/c/d
3068
3069 then the returned list from C<guestfs_find> C</tmp> would be
3070 4 elements:
3071
3072  a
3073  b
3074  c
3075  c/d
3076
3077 If C<directory> is not a directory, then this command returns
3078 an error.
3079
3080 The returned list is sorted.
3081
3082 See also C<guestfs_find0>.");
3083
3084   ("e2fsck_f", (RErr, [Device "device"]), 108, [],
3085    [], (* lvresize tests this *)
3086    "check an ext2/ext3 filesystem",
3087    "\
3088 This runs C<e2fsck -p -f device>, ie. runs the ext2/ext3
3089 filesystem checker on C<device>, noninteractively (C<-p>),
3090 even if the filesystem appears to be clean (C<-f>).
3091
3092 This command is only needed because of C<guestfs_resize2fs>
3093 (q.v.).  Normally you should use C<guestfs_fsck>.");
3094
3095   ("sleep", (RErr, [Int "secs"]), 109, [],
3096    [InitNone, Always, TestRun (
3097       [["sleep"; "1"]])],
3098    "sleep for some seconds",
3099    "\
3100 Sleep for C<secs> seconds.");
3101
3102   ("ntfs_3g_probe", (RInt "status", [Bool "rw"; Device "device"]), 110, [Optional "ntfs3g"],
3103    [InitNone, Always, TestOutputInt (
3104       [["part_disk"; "/dev/sda"; "mbr"];
3105        ["mkfs"; "ntfs"; "/dev/sda1"];
3106        ["ntfs_3g_probe"; "true"; "/dev/sda1"]], 0);
3107     InitNone, Always, TestOutputInt (
3108       [["part_disk"; "/dev/sda"; "mbr"];
3109        ["mkfs"; "ext2"; "/dev/sda1"];
3110        ["ntfs_3g_probe"; "true"; "/dev/sda1"]], 12)],
3111    "probe NTFS volume",
3112    "\
3113 This command runs the L<ntfs-3g.probe(8)> command which probes
3114 an NTFS C<device> for mountability.  (Not all NTFS volumes can
3115 be mounted read-write, and some cannot be mounted at all).
3116
3117 C<rw> is a boolean flag.  Set it to true if you want to test
3118 if the volume can be mounted read-write.  Set it to false if
3119 you want to test if the volume can be mounted read-only.
3120
3121 The return value is an integer which C<0> if the operation
3122 would succeed, or some non-zero value documented in the
3123 L<ntfs-3g.probe(8)> manual page.");
3124
3125   ("sh", (RString "output", [String "command"]), 111, [],
3126    [], (* XXX needs tests *)
3127    "run a command via the shell",
3128    "\
3129 This call runs a command from the guest filesystem via the
3130 guest's C</bin/sh>.
3131
3132 This is like C<guestfs_command>, but passes the command to:
3133
3134  /bin/sh -c \"command\"
3135
3136 Depending on the guest's shell, this usually results in
3137 wildcards being expanded, shell expressions being interpolated
3138 and so on.
3139
3140 All the provisos about C<guestfs_command> apply to this call.");
3141
3142   ("sh_lines", (RStringList "lines", [String "command"]), 112, [],
3143    [], (* XXX needs tests *)
3144    "run a command via the shell returning lines",
3145    "\
3146 This is the same as C<guestfs_sh>, but splits the result
3147 into a list of lines.
3148
3149 See also: C<guestfs_command_lines>");
3150
3151   ("glob_expand", (RStringList "paths", [Pathname "pattern"]), 113, [],
3152    (* Use Pathname here, and hence ABS_PATH (pattern,... in generated
3153     * code in stubs.c, since all valid glob patterns must start with "/".
3154     * There is no concept of "cwd" in libguestfs, hence no "."-relative names.
3155     *)
3156    [InitBasicFS, Always, TestOutputList (
3157       [["mkdir_p"; "/a/b/c"];
3158        ["touch"; "/a/b/c/d"];
3159        ["touch"; "/a/b/c/e"];
3160        ["glob_expand"; "/a/b/c/*"]], ["/a/b/c/d"; "/a/b/c/e"]);
3161     InitBasicFS, Always, TestOutputList (
3162       [["mkdir_p"; "/a/b/c"];
3163        ["touch"; "/a/b/c/d"];
3164        ["touch"; "/a/b/c/e"];
3165        ["glob_expand"; "/a/*/c/*"]], ["/a/b/c/d"; "/a/b/c/e"]);
3166     InitBasicFS, Always, TestOutputList (
3167       [["mkdir_p"; "/a/b/c"];
3168        ["touch"; "/a/b/c/d"];
3169        ["touch"; "/a/b/c/e"];
3170        ["glob_expand"; "/a/*/x/*"]], [])],
3171    "expand a wildcard path",
3172    "\
3173 This command searches for all the pathnames matching
3174 C<pattern> according to the wildcard expansion rules
3175 used by the shell.
3176
3177 If no paths match, then this returns an empty list
3178 (note: not an error).
3179
3180 It is just a wrapper around the C L<glob(3)> function
3181 with flags C<GLOB_MARK|GLOB_BRACE>.
3182 See that manual page for more details.");
3183
3184   ("scrub_device", (RErr, [Device "device"]), 114, [DangerWillRobinson; Optional "scrub"],
3185    [InitNone, Always, TestRun ( (* use /dev/sdc because it's smaller *)
3186       [["scrub_device"; "/dev/sdc"]])],
3187    "scrub (securely wipe) a device",
3188    "\
3189 This command writes patterns over C<device> to make data retrieval
3190 more difficult.
3191
3192 It is an interface to the L<scrub(1)> program.  See that
3193 manual page for more details.");
3194
3195   ("scrub_file", (RErr, [Pathname "file"]), 115, [Optional "scrub"],
3196    [InitBasicFS, Always, TestRun (
3197       [["write"; "/file"; "content"];
3198        ["scrub_file"; "/file"]])],
3199    "scrub (securely wipe) a file",
3200    "\
3201 This command writes patterns over a file to make data retrieval
3202 more difficult.
3203
3204 The file is I<removed> after scrubbing.
3205
3206 It is an interface to the L<scrub(1)> program.  See that
3207 manual page for more details.");
3208
3209   ("scrub_freespace", (RErr, [Pathname "dir"]), 116, [Optional "scrub"],
3210    [], (* XXX needs testing *)
3211    "scrub (securely wipe) free space",
3212    "\
3213 This command creates the directory C<dir> and then fills it
3214 with files until the filesystem is full, and scrubs the files
3215 as for C<guestfs_scrub_file>, and deletes them.
3216 The intention is to scrub any free space on the partition
3217 containing C<dir>.
3218
3219 It is an interface to the L<scrub(1)> program.  See that
3220 manual page for more details.");
3221
3222   ("mkdtemp", (RString "dir", [Pathname "template"]), 117, [],
3223    [InitBasicFS, Always, TestRun (
3224       [["mkdir"; "/tmp"];
3225        ["mkdtemp"; "/tmp/tmpXXXXXX"]])],
3226    "create a temporary directory",
3227    "\
3228 This command creates a temporary directory.  The
3229 C<template> parameter should be a full pathname for the
3230 temporary directory name with the final six characters being
3231 \"XXXXXX\".
3232
3233 For example: \"/tmp/myprogXXXXXX\" or \"/Temp/myprogXXXXXX\",
3234 the second one being suitable for Windows filesystems.
3235
3236 The name of the temporary directory that was created
3237 is returned.
3238
3239 The temporary directory is created with mode 0700
3240 and is owned by root.
3241
3242 The caller is responsible for deleting the temporary
3243 directory and its contents after use.
3244
3245 See also: L<mkdtemp(3)>");
3246
3247   ("wc_l", (RInt "lines", [Pathname "path"]), 118, [],
3248    [InitISOFS, Always, TestOutputInt (
3249       [["wc_l"; "/10klines"]], 10000);
3250     (* Test for RHBZ#579608, absolute symbolic links. *)
3251     InitISOFS, Always, TestOutputInt (
3252       [["wc_l"; "/abssymlink"]], 10000)],
3253    "count lines in a file",
3254    "\
3255 This command counts the lines in a file, using the
3256 C<wc -l> external command.");
3257
3258   ("wc_w", (RInt "words", [Pathname "path"]), 119, [],
3259    [InitISOFS, Always, TestOutputInt (
3260       [["wc_w"; "/10klines"]], 10000)],
3261    "count words in a file",
3262    "\
3263 This command counts the words in a file, using the
3264 C<wc -w> external command.");
3265
3266   ("wc_c", (RInt "chars", [Pathname "path"]), 120, [],
3267    [InitISOFS, Always, TestOutputInt (
3268       [["wc_c"; "/100kallspaces"]], 102400)],
3269    "count characters in a file",
3270    "\
3271 This command counts the characters in a file, using the
3272 C<wc -c> external command.");
3273
3274   ("head", (RStringList "lines", [Pathname "path"]), 121, [ProtocolLimitWarning],
3275    [InitISOFS, Always, TestOutputList (
3276       [["head"; "/10klines"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz";"3abcdefghijklmnopqrstuvwxyz";"4abcdefghijklmnopqrstuvwxyz";"5abcdefghijklmnopqrstuvwxyz";"6abcdefghijklmnopqrstuvwxyz";"7abcdefghijklmnopqrstuvwxyz";"8abcdefghijklmnopqrstuvwxyz";"9abcdefghijklmnopqrstuvwxyz"]);
3277     (* Test for RHBZ#579608, absolute symbolic links. *)
3278     InitISOFS, Always, TestOutputList (
3279       [["head"; "/abssymlink"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz";"3abcdefghijklmnopqrstuvwxyz";"4abcdefghijklmnopqrstuvwxyz";"5abcdefghijklmnopqrstuvwxyz";"6abcdefghijklmnopqrstuvwxyz";"7abcdefghijklmnopqrstuvwxyz";"8abcdefghijklmnopqrstuvwxyz";"9abcdefghijklmnopqrstuvwxyz"])],
3280    "return first 10 lines of a file",
3281    "\
3282 This command returns up to the first 10 lines of a file as
3283 a list of strings.");
3284
3285   ("head_n", (RStringList "lines", [Int "nrlines"; Pathname "path"]), 122, [ProtocolLimitWarning],
3286    [InitISOFS, Always, TestOutputList (
3287       [["head_n"; "3"; "/10klines"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz"]);
3288     InitISOFS, Always, TestOutputList (
3289       [["head_n"; "-9997"; "/10klines"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz"]);
3290     InitISOFS, Always, TestOutputList (
3291       [["head_n"; "0"; "/10klines"]], [])],
3292    "return first N lines of a file",
3293    "\
3294 If the parameter C<nrlines> is a positive number, this returns the first
3295 C<nrlines> lines of the file C<path>.
3296
3297 If the parameter C<nrlines> is a negative number, this returns lines
3298 from the file C<path>, excluding the last C<nrlines> lines.
3299
3300 If the parameter C<nrlines> is zero, this returns an empty list.");
3301
3302   ("tail", (RStringList "lines", [Pathname "path"]), 123, [ProtocolLimitWarning],
3303    [InitISOFS, Always, TestOutputList (
3304       [["tail"; "/10klines"]], ["9990abcdefghijklmnopqrstuvwxyz";"9991abcdefghijklmnopqrstuvwxyz";"9992abcdefghijklmnopqrstuvwxyz";"9993abcdefghijklmnopqrstuvwxyz";"9994abcdefghijklmnopqrstuvwxyz";"9995abcdefghijklmnopqrstuvwxyz";"9996abcdefghijklmnopqrstuvwxyz";"9997abcdefghijklmnopqrstuvwxyz";"9998abcdefghijklmnopqrstuvwxyz";"9999abcdefghijklmnopqrstuvwxyz"])],
3305    "return last 10 lines of a file",
3306    "\
3307 This command returns up to the last 10 lines of a file as
3308 a list of strings.");
3309
3310   ("tail_n", (RStringList "lines", [Int "nrlines"; Pathname "path"]), 124, [ProtocolLimitWarning],
3311    [InitISOFS, Always, TestOutputList (
3312       [["tail_n"; "3"; "/10klines"]], ["9997abcdefghijklmnopqrstuvwxyz";"9998abcdefghijklmnopqrstuvwxyz";"9999abcdefghijklmnopqrstuvwxyz"]);
3313     InitISOFS, Always, TestOutputList (
3314       [["tail_n"; "-9998"; "/10klines"]], ["9997abcdefghijklmnopqrstuvwxyz";"9998abcdefghijklmnopqrstuvwxyz";"9999abcdefghijklmnopqrstuvwxyz"]);
3315     InitISOFS, Always, TestOutputList (
3316       [["tail_n"; "0"; "/10klines"]], [])],
3317    "return last N lines of a file",
3318    "\
3319 If the parameter C<nrlines> is a positive number, this returns the last
3320 C<nrlines> lines of the file C<path>.
3321
3322 If the parameter C<nrlines> is a negative number, this returns lines
3323 from the file C<path>, starting with the C<-nrlines>th line.
3324
3325 If the parameter C<nrlines> is zero, this returns an empty list.");
3326
3327   ("df", (RString "output", []), 125, [],
3328    [], (* XXX Tricky to test because it depends on the exact format
3329         * of the 'df' command and other imponderables.
3330         *)
3331    "report file system disk space usage",
3332    "\
3333 This command runs the C<df> command to report disk space used.
3334
3335 This command is mostly useful for interactive sessions.  It
3336 is I<not> intended that you try to parse the output string.
3337 Use C<statvfs> from programs.");
3338
3339   ("df_h", (RString "output", []), 126, [],
3340    [], (* XXX Tricky to test because it depends on the exact format
3341         * of the 'df' command and other imponderables.
3342         *)
3343    "report file system disk space usage (human readable)",
3344    "\
3345 This command runs the C<df -h> command to report disk space used
3346 in human-readable format.
3347
3348 This command is mostly useful for interactive sessions.  It
3349 is I<not> intended that you try to parse the output string.
3350 Use C<statvfs> from programs.");
3351
3352   ("du", (RInt64 "sizekb", [Pathname "path"]), 127, [],
3353    [InitISOFS, Always, TestOutputInt (
3354       [["du"; "/directory"]], 2 (* ISO fs blocksize is 2K *))],
3355    "estimate file space usage",
3356    "\
3357 This command runs the C<du -s> command to estimate file space
3358 usage for C<path>.
3359
3360 C<path> can be a file or a directory.  If C<path> is a directory
3361 then the estimate includes the contents of the directory and all
3362 subdirectories (recursively).
3363
3364 The result is the estimated size in I<kilobytes>
3365 (ie. units of 1024 bytes).");
3366
3367   ("initrd_list", (RStringList "filenames", [Pathname "path"]), 128, [],
3368    [InitISOFS, Always, TestOutputList (
3369       [["initrd_list"; "/initrd"]], ["empty";"known-1";"known-2";"known-3";"known-4"; "known-5"])],
3370    "list files in an initrd",
3371    "\
3372 This command lists out files contained in an initrd.
3373
3374 The files are listed without any initial C</> character.  The
3375 files are listed in the order they appear (not necessarily
3376 alphabetical).  Directory names are listed as separate items.
3377
3378 Old Linux kernels (2.4 and earlier) used a compressed ext2
3379 filesystem as initrd.  We I<only> support the newer initramfs
3380 format (compressed cpio files).");
3381
3382   ("mount_loop", (RErr, [Pathname "file"; Pathname "mountpoint"]), 129, [],
3383    [],
3384    "mount a file using the loop device",
3385    "\
3386 This command lets you mount C<file> (a filesystem image
3387 in a file) on a mount point.  It is entirely equivalent to
3388 the command C<mount -o loop file mountpoint>.");
3389
3390   ("mkswap", (RErr, [Device "device"]), 130, [],
3391    [InitEmpty, Always, TestRun (
3392       [["part_disk"; "/dev/sda"; "mbr"];
3393        ["mkswap"; "/dev/sda1"]])],
3394    "create a swap partition",
3395    "\
3396 Create a swap partition on C<device>.");
3397
3398   ("mkswap_L", (RErr, [String "label"; Device "device"]), 131, [],
3399    [InitEmpty, Always, TestRun (
3400       [["part_disk"; "/dev/sda"; "mbr"];
3401        ["mkswap_L"; "hello"; "/dev/sda1"]])],
3402    "create a swap partition with a label",
3403    "\
3404 Create a swap partition on C<device> with label C<label>.
3405
3406 Note that you cannot attach a swap label to a block device
3407 (eg. C</dev/sda>), just to a partition.  This appears to be
3408 a limitation of the kernel or swap tools.");
3409
3410   ("mkswap_U", (RErr, [String "uuid"; Device "device"]), 132, [Optional "linuxfsuuid"],
3411    (let uuid = uuidgen () in
3412     [InitEmpty, Always, TestRun (
3413        [["part_disk"; "/dev/sda"; "mbr"];
3414         ["mkswap_U"; uuid; "/dev/sda1"]])]),
3415    "create a swap partition with an explicit UUID",
3416    "\
3417 Create a swap partition on C<device> with UUID C<uuid>.");
3418
3419   ("mknod", (RErr, [Int "mode"; Int "devmajor"; Int "devminor"; Pathname "path"]), 133, [Optional "mknod"],
3420    [InitBasicFS, Always, TestOutputStruct (
3421       [["mknod"; "0o10777"; "0"; "0"; "/node"];
3422        (* NB: default umask 022 means 0777 -> 0755 in these tests *)
3423        ["stat"; "/node"]], [CompareWithInt ("mode", 0o10755)]);
3424     InitBasicFS, Always, TestOutputStruct (
3425       [["mknod"; "0o60777"; "66"; "99"; "/node"];
3426        ["stat"; "/node"]], [CompareWithInt ("mode", 0o60755)])],
3427    "make block, character or FIFO devices",
3428    "\
3429 This call creates block or character special devices, or
3430 named pipes (FIFOs).
3431
3432 The C<mode> parameter should be the mode, using the standard
3433 constants.  C<devmajor> and C<devminor> are the
3434 device major and minor numbers, only used when creating block
3435 and character special devices.
3436
3437 Note that, just like L<mknod(2)>, the mode must be bitwise
3438 OR'd with S_IFBLK, S_IFCHR, S_IFIFO or S_IFSOCK (otherwise this call
3439 just creates a regular file).  These constants are
3440 available in the standard Linux header files, or you can use
3441 C<guestfs_mknod_b>, C<guestfs_mknod_c> or C<guestfs_mkfifo>
3442 which are wrappers around this command which bitwise OR
3443 in the appropriate constant for you.
3444
3445 The mode actually set is affected by the umask.");
3446
3447   ("mkfifo", (RErr, [Int "mode"; Pathname "path"]), 134, [Optional "mknod"],
3448    [InitBasicFS, Always, TestOutputStruct (
3449       [["mkfifo"; "0o777"; "/node"];
3450        ["stat"; "/node"]], [CompareWithInt ("mode", 0o10755)])],
3451    "make FIFO (named pipe)",
3452    "\
3453 This call creates a FIFO (named pipe) called C<path> with
3454 mode C<mode>.  It is just a convenient wrapper around
3455 C<guestfs_mknod>.
3456
3457 The mode actually set is affected by the umask.");
3458
3459   ("mknod_b", (RErr, [Int "mode"; Int "devmajor"; Int "devminor"; Pathname "path"]), 135, [Optional "mknod"],
3460    [InitBasicFS, Always, TestOutputStruct (
3461       [["mknod_b"; "0o777"; "99"; "66"; "/node"];
3462        ["stat"; "/node"]], [CompareWithInt ("mode", 0o60755)])],
3463    "make block device node",
3464    "\
3465 This call creates a block device node called C<path> with
3466 mode C<mode> and device major/minor C<devmajor> and C<devminor>.
3467 It is just a convenient wrapper around C<guestfs_mknod>.
3468
3469 The mode actually set is affected by the umask.");
3470
3471   ("mknod_c", (RErr, [Int "mode"; Int "devmajor"; Int "devminor"; Pathname "path"]), 136, [Optional "mknod"],
3472    [InitBasicFS, Always, TestOutputStruct (
3473       [["mknod_c"; "0o777"; "99"; "66"; "/node"];
3474        ["stat"; "/node"]], [CompareWithInt ("mode", 0o20755)])],
3475    "make char device node",
3476    "\
3477 This call creates a char device node called C<path> with
3478 mode C<mode> and device major/minor C<devmajor> and C<devminor>.
3479 It is just a convenient wrapper around C<guestfs_mknod>.
3480
3481 The mode actually set is affected by the umask.");
3482
3483   ("umask", (RInt "oldmask", [Int "mask"]), 137, [FishOutput FishOutputOctal],
3484    [InitEmpty, Always, TestOutputInt (
3485       [["umask"; "0o22"]], 0o22)],
3486    "set file mode creation mask (umask)",
3487    "\
3488 This function sets the mask used for creating new files and
3489 device nodes to C<mask & 0777>.
3490
3491 Typical umask values would be C<022> which creates new files
3492 with permissions like \"-rw-r--r--\" or \"-rwxr-xr-x\", and
3493 C<002> which creates new files with permissions like
3494 \"-rw-rw-r--\" or \"-rwxrwxr-x\".
3495
3496 The default umask is C<022>.  This is important because it
3497 means that directories and device nodes will be created with
3498 C<0644> or C<0755> mode even if you specify C<0777>.
3499
3500 See also C<guestfs_get_umask>,
3501 L<umask(2)>, C<guestfs_mknod>, C<guestfs_mkdir>.
3502
3503 This call returns the previous umask.");
3504
3505   ("readdir", (RStructList ("entries", "dirent"), [Pathname "dir"]), 138, [],
3506    [],
3507    "read directories entries",
3508    "\
3509 This returns the list of directory entries in directory C<dir>.
3510
3511 All entries in the directory are returned, including C<.> and
3512 C<..>.  The entries are I<not> sorted, but returned in the same
3513 order as the underlying filesystem.
3514
3515 Also this call returns basic file type information about each
3516 file.  The C<ftyp> field will contain one of the following characters:
3517
3518 =over 4
3519
3520 =item 'b'
3521
3522 Block special
3523
3524 =item 'c'
3525
3526 Char special
3527
3528 =item 'd'
3529
3530 Directory
3531
3532 =item 'f'
3533
3534 FIFO (named pipe)
3535
3536 =item 'l'
3537
3538 Symbolic link
3539
3540 =item 'r'
3541
3542 Regular file
3543
3544 =item 's'
3545
3546 Socket
3547
3548 =item 'u'
3549
3550 Unknown file type
3551
3552 =item '?'
3553
3554 The L<readdir(3)> call returned a C<d_type> field with an
3555 unexpected value
3556
3557 =back
3558
3559 This function is primarily intended for use by programs.  To
3560 get a simple list of names, use C<guestfs_ls>.  To get a printable
3561 directory for human consumption, use C<guestfs_ll>.");
3562
3563   ("sfdiskM", (RErr, [Device "device"; StringList "lines"]), 139, [DangerWillRobinson],
3564    [],
3565    "create partitions on a block device",
3566    "\
3567 This is a simplified interface to the C<guestfs_sfdisk>
3568 command, where partition sizes are specified in megabytes
3569 only (rounded to the nearest cylinder) and you don't need
3570 to specify the cyls, heads and sectors parameters which
3571 were rarely if ever used anyway.
3572
3573 See also: C<guestfs_sfdisk>, the L<sfdisk(8)> manpage
3574 and C<guestfs_part_disk>");
3575
3576   ("zfile", (RString "description", [String "meth"; Pathname "path"]), 140, [DeprecatedBy "file"],
3577    [],
3578    "determine file type inside a compressed file",
3579    "\
3580 This command runs C<file> after first decompressing C<path>
3581 using C<method>.
3582
3583 C<method> must be one of C<gzip>, C<compress> or C<bzip2>.
3584
3585 Since 1.0.63, use C<guestfs_file> instead which can now
3586 process compressed files.");
3587
3588   ("getxattrs", (RStructList ("xattrs", "xattr"), [Pathname "path"]), 141, [Optional "linuxxattrs"],
3589    [],
3590    "list extended attributes of a file or directory",
3591    "\
3592 This call lists the extended attributes of the file or directory
3593 C<path>.
3594
3595 At the system call level, this is a combination of the
3596 L<listxattr(2)> and L<getxattr(2)> calls.
3597
3598 See also: C<guestfs_lgetxattrs>, L<attr(5)>.");
3599
3600   ("lgetxattrs", (RStructList ("xattrs", "xattr"), [Pathname "path"]), 142, [Optional "linuxxattrs"],
3601    [],
3602    "list extended attributes of a file or directory",
3603    "\
3604 This is the same as C<guestfs_getxattrs>, but if C<path>
3605 is a symbolic link, then it returns the extended attributes
3606 of the link itself.");
3607
3608   ("setxattr", (RErr, [String "xattr";
3609                        String "val"; Int "vallen"; (* will be BufferIn *)
3610                        Pathname "path"]), 143, [Optional "linuxxattrs"],
3611    [],
3612    "set extended attribute of a file or directory",
3613    "\
3614 This call sets the extended attribute named C<xattr>
3615 of the file C<path> to the value C<val> (of length C<vallen>).
3616 The value is arbitrary 8 bit data.
3617
3618 See also: C<guestfs_lsetxattr>, L<attr(5)>.");
3619
3620   ("lsetxattr", (RErr, [String "xattr";
3621                         String "val"; Int "vallen"; (* will be BufferIn *)
3622                         Pathname "path"]), 144, [Optional "linuxxattrs"],
3623    [],
3624    "set extended attribute of a file or directory",
3625    "\
3626 This is the same as C<guestfs_setxattr>, but if C<path>
3627 is a symbolic link, then it sets an extended attribute
3628 of the link itself.");
3629
3630   ("removexattr", (RErr, [String "xattr"; Pathname "path"]), 145, [Optional "linuxxattrs"],
3631    [],
3632    "remove extended attribute of a file or directory",
3633    "\
3634 This call removes the extended attribute named C<xattr>
3635 of the file C<path>.
3636
3637 See also: C<guestfs_lremovexattr>, L<attr(5)>.");
3638
3639   ("lremovexattr", (RErr, [String "xattr"; Pathname "path"]), 146, [Optional "linuxxattrs"],
3640    [],
3641    "remove extended attribute of a file or directory",
3642    "\
3643 This is the same as C<guestfs_removexattr>, but if C<path>
3644 is a symbolic link, then it removes an extended attribute
3645 of the link itself.");
3646
3647   ("mountpoints", (RHashtable "mps", []), 147, [],
3648    [],
3649    "show mountpoints",
3650    "\
3651 This call is similar to C<guestfs_mounts>.  That call returns
3652 a list of devices.  This one returns a hash table (map) of
3653 device name to directory where the device is mounted.");
3654
3655   ("mkmountpoint", (RErr, [String "exemptpath"]), 148, [],
3656    (* This is a special case: while you would expect a parameter
3657     * of type "Pathname", that doesn't work, because it implies
3658     * NEED_ROOT in the generated calling code in stubs.c, and
3659     * this function cannot use NEED_ROOT.
3660     *)
3661    [],
3662    "create a mountpoint",
3663    "\
3664 C<guestfs_mkmountpoint> and C<guestfs_rmmountpoint> are
3665 specialized calls that can be used to create extra mountpoints
3666 before mounting the first filesystem.
3667
3668 These calls are I<only> necessary in some very limited circumstances,
3669 mainly the case where you want to mount a mix of unrelated and/or
3670 read-only filesystems together.
3671
3672 For example, live CDs often contain a \"Russian doll\" nest of
3673 filesystems, an ISO outer layer, with a squashfs image inside, with
3674 an ext2/3 image inside that.  You can unpack this as follows
3675 in guestfish:
3676
3677  add-ro Fedora-11-i686-Live.iso
3678  run
3679  mkmountpoint /cd
3680  mkmountpoint /squash
3681  mkmountpoint /ext3
3682  mount /dev/sda /cd
3683  mount-loop /cd/LiveOS/squashfs.img /squash
3684  mount-loop /squash/LiveOS/ext3fs.img /ext3
3685
3686 The inner filesystem is now unpacked under the /ext3 mountpoint.");
3687
3688   ("rmmountpoint", (RErr, [String "exemptpath"]), 149, [],
3689    [],
3690    "remove a mountpoint",
3691    "\
3692 This calls removes a mountpoint that was previously created
3693 with C<guestfs_mkmountpoint>.  See C<guestfs_mkmountpoint>
3694 for full details.");
3695
3696   ("read_file", (RBufferOut "content", [Pathname "path"]), 150, [ProtocolLimitWarning],
3697    [InitISOFS, Always, TestOutputBuffer (
3698       [["read_file"; "/known-4"]], "abc\ndef\nghi");
3699     (* Test various near large, large and too large files (RHBZ#589039). *)
3700     InitBasicFS, Always, TestLastFail (
3701       [["touch"; "/a"];
3702        ["truncate_size"; "/a"; "4194303"]; (* GUESTFS_MESSAGE_MAX - 1 *)
3703        ["read_file"; "/a"]]);
3704     InitBasicFS, Always, TestLastFail (
3705       [["touch"; "/a"];
3706        ["truncate_size"; "/a"; "4194304"]; (* GUESTFS_MESSAGE_MAX *)
3707        ["read_file"; "/a"]]);
3708     InitBasicFS, Always, TestLastFail (
3709       [["touch"; "/a"];
3710        ["truncate_size"; "/a"; "41943040"]; (* GUESTFS_MESSAGE_MAX * 10 *)
3711        ["read_file"; "/a"]])],
3712    "read a file",
3713    "\
3714 This calls returns the contents of the file C<path> as a
3715 buffer.
3716
3717 Unlike C<guestfs_cat>, this function can correctly
3718 handle files that contain embedded ASCII NUL characters.
3719 However unlike C<guestfs_download>, this function is limited
3720 in the total size of file that can be handled.");
3721
3722   ("grep", (RStringList "lines", [String "regex"; Pathname "path"]), 151, [ProtocolLimitWarning],
3723    [InitISOFS, Always, TestOutputList (
3724       [["grep"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"]);
3725     InitISOFS, Always, TestOutputList (
3726       [["grep"; "nomatch"; "/test-grep.txt"]], []);
3727     (* Test for RHBZ#579608, absolute symbolic links. *)
3728     InitISOFS, Always, TestOutputList (
3729       [["grep"; "nomatch"; "/abssymlink"]], [])],
3730    "return lines matching a pattern",
3731    "\
3732 This calls the external C<grep> program and returns the
3733 matching lines.");
3734
3735   ("egrep", (RStringList "lines", [String "regex"; Pathname "path"]), 152, [ProtocolLimitWarning],
3736    [InitISOFS, Always, TestOutputList (
3737       [["egrep"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"])],
3738    "return lines matching a pattern",
3739    "\
3740 This calls the external C<egrep> program and returns the
3741 matching lines.");
3742
3743   ("fgrep", (RStringList "lines", [String "pattern"; Pathname "path"]), 153, [ProtocolLimitWarning],
3744    [InitISOFS, Always, TestOutputList (
3745       [["fgrep"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"])],
3746    "return lines matching a pattern",
3747    "\
3748 This calls the external C<fgrep> program and returns the
3749 matching lines.");
3750
3751   ("grepi", (RStringList "lines", [String "regex"; Pathname "path"]), 154, [ProtocolLimitWarning],
3752    [InitISOFS, Always, TestOutputList (
3753       [["grepi"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"; "ABC"])],
3754    "return lines matching a pattern",
3755    "\
3756 This calls the external C<grep -i> program and returns the
3757 matching lines.");
3758
3759   ("egrepi", (RStringList "lines", [String "regex"; Pathname "path"]), 155, [ProtocolLimitWarning],
3760    [InitISOFS, Always, TestOutputList (
3761       [["egrepi"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"; "ABC"])],
3762    "return lines matching a pattern",
3763    "\
3764 This calls the external C<egrep -i> program and returns the
3765 matching lines.");
3766
3767   ("fgrepi", (RStringList "lines", [String "pattern"; Pathname "path"]), 156, [ProtocolLimitWarning],
3768    [InitISOFS, Always, TestOutputList (
3769       [["fgrepi"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"; "ABC"])],
3770    "return lines matching a pattern",
3771    "\
3772 This calls the external C<fgrep -i> program and returns the
3773 matching lines.");
3774
3775   ("zgrep", (RStringList "lines", [String "regex"; Pathname "path"]), 157, [ProtocolLimitWarning],
3776    [InitISOFS, Always, TestOutputList (
3777       [["zgrep"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"])],
3778    "return lines matching a pattern",
3779    "\
3780 This calls the external C<zgrep> program and returns the
3781 matching lines.");
3782
3783   ("zegrep", (RStringList "lines", [String "regex"; Pathname "path"]), 158, [ProtocolLimitWarning],
3784    [InitISOFS, Always, TestOutputList (
3785       [["zegrep"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"])],
3786    "return lines matching a pattern",
3787    "\
3788 This calls the external C<zegrep> program and returns the
3789 matching lines.");
3790
3791   ("zfgrep", (RStringList "lines", [String "pattern"; Pathname "path"]), 159, [ProtocolLimitWarning],
3792    [InitISOFS, Always, TestOutputList (
3793       [["zfgrep"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"])],
3794    "return lines matching a pattern",
3795    "\
3796 This calls the external C<zfgrep> program and returns the
3797 matching lines.");
3798
3799   ("zgrepi", (RStringList "lines", [String "regex"; Pathname "path"]), 160, [ProtocolLimitWarning],
3800    [InitISOFS, Always, TestOutputList (
3801       [["zgrepi"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"; "ABC"])],
3802    "return lines matching a pattern",
3803    "\
3804 This calls the external C<zgrep -i> program and returns the
3805 matching lines.");
3806
3807   ("zegrepi", (RStringList "lines", [String "regex"; Pathname "path"]), 161, [ProtocolLimitWarning],
3808    [InitISOFS, Always, TestOutputList (
3809       [["zegrepi"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"; "ABC"])],
3810    "return lines matching a pattern",
3811    "\
3812 This calls the external C<zegrep -i> program and returns the
3813 matching lines.");
3814
3815   ("zfgrepi", (RStringList "lines", [String "pattern"; Pathname "path"]), 162, [ProtocolLimitWarning],
3816    [InitISOFS, Always, TestOutputList (
3817       [["zfgrepi"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"; "ABC"])],
3818    "return lines matching a pattern",
3819    "\
3820 This calls the external C<zfgrep -i> program and returns the
3821 matching lines.");
3822
3823   ("realpath", (RString "rpath", [Pathname "path"]), 163, [Optional "realpath"],
3824    [InitISOFS, Always, TestOutput (
3825       [["realpath"; "/../directory"]], "/directory")],
3826    "canonicalized absolute pathname",
3827    "\
3828 Return the canonicalized absolute pathname of C<path>.  The
3829 returned path has no C<.>, C<..> or symbolic link path elements.");
3830
3831   ("ln", (RErr, [String "target"; Pathname "linkname"]), 164, [],
3832    [InitBasicFS, Always, TestOutputStruct (
3833       [["touch"; "/a"];
3834        ["ln"; "/a"; "/b"];
3835        ["stat"; "/b"]], [CompareWithInt ("nlink", 2)])],
3836    "create a hard link",
3837    "\
3838 This command creates a hard link using the C<ln> command.");
3839
3840   ("ln_f", (RErr, [String "target"; Pathname "linkname"]), 165, [],
3841    [InitBasicFS, Always, TestOutputStruct (
3842       [["touch"; "/a"];
3843        ["touch"; "/b"];
3844        ["ln_f"; "/a"; "/b"];
3845        ["stat"; "/b"]], [CompareWithInt ("nlink", 2)])],
3846    "create a hard link",
3847    "\
3848 This command creates a hard link using the C<ln -f> command.
3849 The C<-f> option removes the link (C<linkname>) if it exists already.");
3850
3851   ("ln_s", (RErr, [String "target"; Pathname "linkname"]), 166, [],
3852    [InitBasicFS, Always, TestOutputStruct (
3853       [["touch"; "/a"];
3854        ["ln_s"; "a"; "/b"];
3855        ["lstat"; "/b"]], [CompareWithInt ("mode", 0o120777)])],
3856    "create a symbolic link",
3857    "\
3858 This command creates a symbolic link using the C<ln -s> command.");
3859
3860   ("ln_sf", (RErr, [String "target"; Pathname "linkname"]), 167, [],
3861    [InitBasicFS, Always, TestOutput (
3862       [["mkdir_p"; "/a/b"];
3863        ["touch"; "/a/b/c"];
3864        ["ln_sf"; "../d"; "/a/b/c"];
3865        ["readlink"; "/a/b/c"]], "../d")],
3866    "create a symbolic link",
3867    "\
3868 This command creates a symbolic link using the C<ln -sf> command,
3869 The C<-f> option removes the link (C<linkname>) if it exists already.");
3870
3871   ("readlink", (RString "link", [Pathname "path"]), 168, [],
3872    [] (* XXX tested above *),
3873    "read the target of a symbolic link",
3874    "\
3875 This command reads the target of a symbolic link.");
3876
3877   ("fallocate", (RErr, [Pathname "path"; Int "len"]), 169, [DeprecatedBy "fallocate64"],
3878    [InitBasicFS, Always, TestOutputStruct (
3879       [["fallocate"; "/a"; "1000000"];
3880        ["stat"; "/a"]], [CompareWithInt ("size", 1_000_000)])],
3881    "preallocate a file in the guest filesystem",
3882    "\
3883 This command preallocates a file (containing zero bytes) named
3884 C<path> of size C<len> bytes.  If the file exists already, it
3885 is overwritten.
3886
3887 Do not confuse this with the guestfish-specific
3888 C<alloc> command which allocates a file in the host and
3889 attaches it as a device.");
3890
3891   ("swapon_device", (RErr, [Device "device"]), 170, [],
3892    [InitPartition, Always, TestRun (
3893       [["mkswap"; "/dev/sda1"];
3894        ["swapon_device"; "/dev/sda1"];
3895        ["swapoff_device"; "/dev/sda1"]])],
3896    "enable swap on device",
3897    "\
3898 This command enables the libguestfs appliance to use the
3899 swap device or partition named C<device>.  The increased
3900 memory is made available for all commands, for example
3901 those run using C<guestfs_command> or C<guestfs_sh>.
3902
3903 Note that you should not swap to existing guest swap
3904 partitions unless you know what you are doing.  They may
3905 contain hibernation information, or other information that
3906 the guest doesn't want you to trash.  You also risk leaking
3907 information about the host to the guest this way.  Instead,
3908 attach a new host device to the guest and swap on that.");
3909
3910   ("swapoff_device", (RErr, [Device "device"]), 171, [],
3911    [], (* XXX tested by swapon_device *)
3912    "disable swap on device",
3913    "\
3914 This command disables the libguestfs appliance swap
3915 device or partition named C<device>.
3916 See C<guestfs_swapon_device>.");
3917
3918   ("swapon_file", (RErr, [Pathname "file"]), 172, [],
3919    [InitBasicFS, Always, TestRun (
3920       [["fallocate"; "/swap"; "8388608"];
3921        ["mkswap_file"; "/swap"];
3922        ["swapon_file"; "/swap"];
3923        ["swapoff_file"; "/swap"]])],
3924    "enable swap on file",
3925    "\
3926 This command enables swap to a file.
3927 See C<guestfs_swapon_device> for other notes.");
3928
3929   ("swapoff_file", (RErr, [Pathname "file"]), 173, [],
3930    [], (* XXX tested by swapon_file *)
3931    "disable swap on file",
3932    "\
3933 This command disables the libguestfs appliance swap on file.");
3934
3935   ("swapon_label", (RErr, [String "label"]), 174, [],
3936    [InitEmpty, Always, TestRun (
3937       [["part_disk"; "/dev/sdb"; "mbr"];
3938        ["mkswap_L"; "swapit"; "/dev/sdb1"];
3939        ["swapon_label"; "swapit"];
3940        ["swapoff_label"; "swapit"];
3941        ["zero"; "/dev/sdb"];
3942        ["blockdev_rereadpt"; "/dev/sdb"]])],
3943    "enable swap on labeled swap partition",
3944    "\
3945 This command enables swap to a labeled swap partition.
3946 See C<guestfs_swapon_device> for other notes.");
3947
3948   ("swapoff_label", (RErr, [String "label"]), 175, [],
3949    [], (* XXX tested by swapon_label *)
3950    "disable swap on labeled swap partition",
3951    "\
3952 This command disables the libguestfs appliance swap on
3953 labeled swap partition.");
3954
3955   ("swapon_uuid", (RErr, [String "uuid"]), 176, [Optional "linuxfsuuid"],
3956    (let uuid = uuidgen () in
3957     [InitEmpty, Always, TestRun (
3958        [["mkswap_U"; uuid; "/dev/sdb"];
3959         ["swapon_uuid"; uuid];
3960         ["swapoff_uuid"; uuid]])]),
3961    "enable swap on swap partition by UUID",
3962    "\
3963 This command enables swap to a swap partition with the given UUID.
3964 See C<guestfs_swapon_device> for other notes.");
3965
3966   ("swapoff_uuid", (RErr, [String "uuid"]), 177, [Optional "linuxfsuuid"],
3967    [], (* XXX tested by swapon_uuid *)
3968    "disable swap on swap partition by UUID",
3969    "\
3970 This command disables the libguestfs appliance swap partition
3971 with the given UUID.");
3972
3973   ("mkswap_file", (RErr, [Pathname "path"]), 178, [],
3974    [InitBasicFS, Always, TestRun (
3975       [["fallocate"; "/swap"; "8388608"];
3976        ["mkswap_file"; "/swap"]])],
3977    "create a swap file",
3978    "\
3979 Create a swap file.
3980
3981 This command just writes a swap file signature to an existing
3982 file.  To create the file itself, use something like C<guestfs_fallocate>.");
3983
3984   ("inotify_init", (RErr, [Int "maxevents"]), 179, [Optional "inotify"],
3985    [InitISOFS, Always, TestRun (
3986       [["inotify_init"; "0"]])],
3987    "create an inotify handle",
3988    "\
3989 This command creates a new inotify handle.
3990 The inotify subsystem can be used to notify events which happen to
3991 objects in the guest filesystem.
3992
3993 C<maxevents> is the maximum number of events which will be
3994 queued up between calls to C<guestfs_inotify_read> or
3995 C<guestfs_inotify_files>.
3996 If this is passed as C<0>, then the kernel (or previously set)
3997 default is used.  For Linux 2.6.29 the default was 16384 events.
3998 Beyond this limit, the kernel throws away events, but records
3999 the fact that it threw them away by setting a flag
4000 C<IN_Q_OVERFLOW> in the returned structure list (see
4001 C<guestfs_inotify_read>).
4002
4003 Before any events are generated, you have to add some
4004 watches to the internal watch list.  See:
4005 C<guestfs_inotify_add_watch>,
4006 C<guestfs_inotify_rm_watch> and
4007 C<guestfs_inotify_watch_all>.
4008
4009 Queued up events should be read periodically by calling
4010 C<guestfs_inotify_read>
4011 (or C<guestfs_inotify_files> which is just a helpful
4012 wrapper around C<guestfs_inotify_read>).  If you don't
4013 read the events out often enough then you risk the internal
4014 queue overflowing.
4015
4016 The handle should be closed after use by calling
4017 C<guestfs_inotify_close>.  This also removes any
4018 watches automatically.
4019
4020 See also L<inotify(7)> for an overview of the inotify interface
4021 as exposed by the Linux kernel, which is roughly what we expose
4022 via libguestfs.  Note that there is one global inotify handle
4023 per libguestfs instance.");
4024
4025   ("inotify_add_watch", (RInt64 "wd", [Pathname "path"; Int "mask"]), 180, [Optional "inotify"],
4026    [InitBasicFS, Always, TestOutputList (
4027       [["inotify_init"; "0"];
4028        ["inotify_add_watch"; "/"; "1073741823"];
4029        ["touch"; "/a"];
4030        ["touch"; "/b"];
4031        ["inotify_files"]], ["a"; "b"])],
4032    "add an inotify watch",
4033    "\
4034 Watch C<path> for the events listed in C<mask>.
4035
4036 Note that if C<path> is a directory then events within that
4037 directory are watched, but this does I<not> happen recursively
4038 (in subdirectories).
4039
4040 Note for non-C or non-Linux callers: the inotify events are
4041 defined by the Linux kernel ABI and are listed in
4042 C</usr/include/sys/inotify.h>.");
4043
4044   ("inotify_rm_watch", (RErr, [Int(*XXX64*) "wd"]), 181, [Optional "inotify"],
4045    [],
4046    "remove an inotify watch",
4047    "\
4048 Remove a previously defined inotify watch.
4049 See C<guestfs_inotify_add_watch>.");
4050
4051   ("inotify_read", (RStructList ("events", "inotify_event"), []), 182, [Optional "inotify"],
4052    [],
4053    "return list of inotify events",
4054    "\
4055 Return the complete queue of events that have happened
4056 since the previous read call.
4057
4058 If no events have happened, this returns an empty list.
4059
4060 I<Note>: In order to make sure that all events have been
4061 read, you must call this function repeatedly until it
4062 returns an empty list.  The reason is that the call will
4063 read events up to the maximum appliance-to-host message
4064 size and leave remaining events in the queue.");
4065
4066   ("inotify_files", (RStringList "paths", []), 183, [Optional "inotify"],
4067    [],
4068    "return list of watched files that had events",
4069    "\
4070 This function is a helpful wrapper around C<guestfs_inotify_read>
4071 which just returns a list of pathnames of objects that were
4072 touched.  The returned pathnames are sorted and deduplicated.");
4073
4074   ("inotify_close", (RErr, []), 184, [Optional "inotify"],
4075    [],
4076    "close the inotify handle",
4077    "\
4078 This closes the inotify handle which was previously
4079 opened by inotify_init.  It removes all watches, throws
4080 away any pending events, and deallocates all resources.");
4081
4082   ("setcon", (RErr, [String "context"]), 185, [Optional "selinux"],
4083    [],
4084    "set SELinux security context",
4085    "\
4086 This sets the SELinux security context of the daemon
4087 to the string C<context>.
4088
4089 See the documentation about SELINUX in L<guestfs(3)>.");
4090
4091   ("getcon", (RString "context", []), 186, [Optional "selinux"],
4092    [],
4093    "get SELinux security context",
4094    "\
4095 This gets the SELinux security context of the daemon.
4096
4097 See the documentation about SELINUX in L<guestfs(3)>,
4098 and C<guestfs_setcon>");
4099
4100   ("mkfs_b", (RErr, [String "fstype"; Int "blocksize"; Device "device"]), 187, [],
4101    [InitEmpty, Always, TestOutput (
4102       [["part_disk"; "/dev/sda"; "mbr"];
4103        ["mkfs_b"; "ext2"; "4096"; "/dev/sda1"];
4104        ["mount_options"; ""; "/dev/sda1"; "/"];
4105        ["write"; "/new"; "new file contents"];
4106        ["cat"; "/new"]], "new file contents");
4107     InitEmpty, Always, TestRun (
4108       [["part_disk"; "/dev/sda"; "mbr"];
4109        ["mkfs_b"; "vfat"; "32768"; "/dev/sda1"]]);
4110     InitEmpty, Always, TestLastFail (
4111       [["part_disk"; "/dev/sda"; "mbr"];
4112        ["mkfs_b"; "vfat"; "32769"; "/dev/sda1"]]);
4113     InitEmpty, Always, TestLastFail (
4114       [["part_disk"; "/dev/sda"; "mbr"];
4115        ["mkfs_b"; "vfat"; "33280"; "/dev/sda1"]]);
4116     InitEmpty, IfAvailable "ntfsprogs", TestRun (
4117       [["part_disk"; "/dev/sda"; "mbr"];
4118        ["mkfs_b"; "ntfs"; "32768"; "/dev/sda1"]])],
4119    "make a filesystem with block size",
4120    "\
4121 This call is similar to C<guestfs_mkfs>, but it allows you to
4122 control the block size of the resulting filesystem.  Supported
4123 block sizes depend on the filesystem type, but typically they
4124 are C<1024>, C<2048> or C<4096> only.
4125
4126 For VFAT and NTFS the C<blocksize> parameter is treated as
4127 the requested cluster size.");
4128
4129   ("mke2journal", (RErr, [Int "blocksize"; Device "device"]), 188, [],
4130    [InitEmpty, Always, TestOutput (
4131       [["sfdiskM"; "/dev/sda"; ",100 ,"];
4132        ["mke2journal"; "4096"; "/dev/sda1"];
4133        ["mke2fs_J"; "ext2"; "4096"; "/dev/sda2"; "/dev/sda1"];
4134        ["mount_options"; ""; "/dev/sda2"; "/"];
4135        ["write"; "/new"; "new file contents"];
4136        ["cat"; "/new"]], "new file contents")],
4137    "make ext2/3/4 external journal",
4138    "\
4139 This creates an ext2 external journal on C<device>.  It is equivalent
4140 to the command:
4141
4142  mke2fs -O journal_dev -b blocksize device");
4143
4144   ("mke2journal_L", (RErr, [Int "blocksize"; String "label"; Device "device"]), 189, [],
4145    [InitEmpty, Always, TestOutput (
4146       [["sfdiskM"; "/dev/sda"; ",100 ,"];
4147        ["mke2journal_L"; "4096"; "JOURNAL"; "/dev/sda1"];
4148        ["mke2fs_JL"; "ext2"; "4096"; "/dev/sda2"; "JOURNAL"];
4149        ["mount_options"; ""; "/dev/sda2"; "/"];
4150        ["write"; "/new"; "new file contents"];
4151        ["cat"; "/new"]], "new file contents")],
4152    "make ext2/3/4 external journal with label",
4153    "\
4154 This creates an ext2 external journal on C<device> with label C<label>.");
4155
4156   ("mke2journal_U", (RErr, [Int "blocksize"; String "uuid"; Device "device"]), 190, [Optional "linuxfsuuid"],
4157    (let uuid = uuidgen () in
4158     [InitEmpty, Always, TestOutput (
4159        [["sfdiskM"; "/dev/sda"; ",100 ,"];
4160         ["mke2journal_U"; "4096"; uuid; "/dev/sda1"];
4161         ["mke2fs_JU"; "ext2"; "4096"; "/dev/sda2"; uuid];
4162         ["mount_options"; ""; "/dev/sda2"; "/"];
4163         ["write"; "/new"; "new file contents"];
4164         ["cat"; "/new"]], "new file contents")]),
4165    "make ext2/3/4 external journal with UUID",
4166    "\
4167 This creates an ext2 external journal on C<device> with UUID C<uuid>.");
4168
4169   ("mke2fs_J", (RErr, [String "fstype"; Int "blocksize"; Device "device"; Device "journal"]), 191, [],
4170    [],
4171    "make ext2/3/4 filesystem with external journal",
4172    "\
4173 This creates an ext2/3/4 filesystem on C<device> with
4174 an external journal on C<journal>.  It is equivalent
4175 to the command:
4176
4177  mke2fs -t fstype -b blocksize -J device=<journal> <device>
4178
4179 See also C<guestfs_mke2journal>.");
4180
4181   ("mke2fs_JL", (RErr, [String "fstype"; Int "blocksize"; Device "device"; String "label"]), 192, [],
4182    [],
4183    "make ext2/3/4 filesystem with external journal",
4184    "\
4185 This creates an ext2/3/4 filesystem on C<device> with
4186 an external journal on the journal labeled C<label>.
4187
4188 See also C<guestfs_mke2journal_L>.");
4189
4190   ("mke2fs_JU", (RErr, [String "fstype"; Int "blocksize"; Device "device"; String "uuid"]), 193, [Optional "linuxfsuuid"],
4191    [],
4192    "make ext2/3/4 filesystem with external journal",
4193    "\
4194 This creates an ext2/3/4 filesystem on C<device> with
4195 an external journal on the journal with UUID C<uuid>.
4196
4197 See also C<guestfs_mke2journal_U>.");
4198
4199   ("modprobe", (RErr, [String "modulename"]), 194, [Optional "linuxmodules"],
4200    [InitNone, Always, TestRun [["modprobe"; "fat"]]],
4201    "load a kernel module",
4202    "\
4203 This loads a kernel module in the appliance.
4204
4205 The kernel module must have been whitelisted when libguestfs
4206 was built (see C<appliance/kmod.whitelist.in> in the source).");
4207
4208   ("echo_daemon", (RString "output", [StringList "words"]), 195, [],
4209    [InitNone, Always, TestOutput (
4210       [["echo_daemon"; "This is a test"]], "This is a test"
4211     )],
4212    "echo arguments back to the client",
4213    "\
4214 This command concatenates the list of C<words> passed with single spaces
4215 between them and returns the resulting string.
4216
4217 You can use this command to test the connection through to the daemon.
4218
4219 See also C<guestfs_ping_daemon>.");
4220
4221   ("find0", (RErr, [Pathname "directory"; FileOut "files"]), 196, [],
4222    [], (* There is a regression test for this. *)
4223    "find all files and directories, returning NUL-separated list",
4224    "\
4225 This command lists out all files and directories, recursively,
4226 starting at C<directory>, placing the resulting list in the
4227 external file called C<files>.
4228
4229 This command works the same way as C<guestfs_find> with the
4230 following exceptions:
4231
4232 =over 4
4233
4234 =item *
4235
4236 The resulting list is written to an external file.
4237
4238 =item *
4239
4240 Items (filenames) in the result are separated
4241 by C<\\0> characters.  See L<find(1)> option I<-print0>.
4242
4243 =item *
4244
4245 This command is not limited in the number of names that it
4246 can return.
4247
4248 =item *
4249
4250 The result list is not sorted.
4251
4252 =back");
4253
4254   ("case_sensitive_path", (RString "rpath", [Pathname "path"]), 197, [],
4255    [InitISOFS, Always, TestOutput (
4256       [["case_sensitive_path"; "/DIRECTORY"]], "/directory");
4257     InitISOFS, Always, TestOutput (
4258       [["case_sensitive_path"; "/DIRECTORY/"]], "/directory");
4259     InitISOFS, Always, TestOutput (
4260       [["case_sensitive_path"; "/Known-1"]], "/known-1");
4261     InitISOFS, Always, TestLastFail (
4262       [["case_sensitive_path"; "/Known-1/"]]);
4263     InitBasicFS, Always, TestOutput (
4264       [["mkdir"; "/a"];
4265        ["mkdir"; "/a/bbb"];
4266        ["touch"; "/a/bbb/c"];
4267        ["case_sensitive_path"; "/A/bbB/C"]], "/a/bbb/c");
4268     InitBasicFS, Always, TestOutput (
4269       [["mkdir"; "/a"];
4270        ["mkdir"; "/a/bbb"];
4271        ["touch"; "/a/bbb/c"];
4272        ["case_sensitive_path"; "/A////bbB/C"]], "/a/bbb/c");
4273     InitBasicFS, Always, TestLastFail (
4274       [["mkdir"; "/a"];
4275        ["mkdir"; "/a/bbb"];
4276        ["touch"; "/a/bbb/c"];
4277        ["case_sensitive_path"; "/A/bbb/../bbb/C"]])],
4278    "return true path on case-insensitive filesystem",
4279    "\
4280 This can be used to resolve case insensitive paths on
4281 a filesystem which is case sensitive.  The use case is
4282 to resolve paths which you have read from Windows configuration
4283 files or the Windows Registry, to the true path.
4284
4285 The command handles a peculiarity of the Linux ntfs-3g
4286 filesystem driver (and probably others), which is that although
4287 the underlying filesystem is case-insensitive, the driver
4288 exports the filesystem to Linux as case-sensitive.
4289
4290 One consequence of this is that special directories such
4291 as C<c:\\windows> may appear as C</WINDOWS> or C</windows>
4292 (or other things) depending on the precise details of how
4293 they were created.  In Windows itself this would not be
4294 a problem.
4295
4296 Bug or feature?  You decide:
4297 L<http://www.tuxera.com/community/ntfs-3g-faq/#posixfilenames1>
4298
4299 This function resolves the true case of each element in the
4300 path and returns the case-sensitive path.
4301
4302 Thus C<guestfs_case_sensitive_path> (\"/Windows/System32\")
4303 might return C<\"/WINDOWS/system32\"> (the exact return value
4304 would depend on details of how the directories were originally
4305 created under Windows).
4306
4307 I<Note>:
4308 This function does not handle drive names, backslashes etc.
4309
4310 See also C<guestfs_realpath>.");
4311
4312   ("vfs_type", (RString "fstype", [Device "device"]), 198, [],
4313    [InitBasicFS, Always, TestOutput (
4314       [["vfs_type"; "/dev/sda1"]], "ext2")],
4315    "get the Linux VFS type corresponding to a mounted device",
4316    "\
4317 This command gets the filesystem type corresponding to
4318 the filesystem on C<device>.
4319
4320 For most filesystems, the result is the name of the Linux
4321 VFS module which would be used to mount this filesystem
4322 if you mounted it without specifying the filesystem type.
4323 For example a string such as C<ext3> or C<ntfs>.");
4324
4325   ("truncate", (RErr, [Pathname "path"]), 199, [],
4326    [InitBasicFS, Always, TestOutputStruct (
4327       [["write"; "/test"; "some stuff so size is not zero"];
4328        ["truncate"; "/test"];
4329        ["stat"; "/test"]], [CompareWithInt ("size", 0)])],
4330    "truncate a file to zero size",
4331    "\
4332 This command truncates C<path> to a zero-length file.  The
4333 file must exist already.");
4334
4335   ("truncate_size", (RErr, [Pathname "path"; Int64 "size"]), 200, [],
4336    [InitBasicFS, Always, TestOutputStruct (
4337       [["touch"; "/test"];
4338        ["truncate_size"; "/test"; "1000"];
4339        ["stat"; "/test"]], [CompareWithInt ("size", 1000)])],
4340    "truncate a file to a particular size",
4341    "\
4342 This command truncates C<path> to size C<size> bytes.  The file
4343 must exist already.
4344
4345 If the current file size is less than C<size> then
4346 the file is extended to the required size with zero bytes.
4347 This creates a sparse file (ie. disk blocks are not allocated
4348 for the file until you write to it).  To create a non-sparse
4349 file of zeroes, use C<guestfs_fallocate64> instead.");
4350
4351   ("utimens", (RErr, [Pathname "path"; Int64 "atsecs"; Int64 "atnsecs"; Int64 "mtsecs"; Int64 "mtnsecs"]), 201, [],
4352    [InitBasicFS, Always, TestOutputStruct (
4353       [["touch"; "/test"];
4354        ["utimens"; "/test"; "12345"; "67890"; "9876"; "5432"];
4355        ["stat"; "/test"]], [CompareWithInt ("mtime", 9876)])],
4356    "set timestamp of a file with nanosecond precision",
4357    "\
4358 This command sets the timestamps of a file with nanosecond
4359 precision.
4360
4361 C<atsecs, atnsecs> are the last access time (atime) in secs and
4362 nanoseconds from the epoch.
4363
4364 C<mtsecs, mtnsecs> are the last modification time (mtime) in
4365 secs and nanoseconds from the epoch.
4366
4367 If the C<*nsecs> field contains the special value C<-1> then
4368 the corresponding timestamp is set to the current time.  (The
4369 C<*secs> field is ignored in this case).
4370
4371 If the C<*nsecs> field contains the special value C<-2> then
4372 the corresponding timestamp is left unchanged.  (The
4373 C<*secs> field is ignored in this case).");
4374
4375   ("mkdir_mode", (RErr, [Pathname "path"; Int "mode"]), 202, [],
4376    [InitBasicFS, Always, TestOutputStruct (
4377       [["mkdir_mode"; "/test"; "0o111"];
4378        ["stat"; "/test"]], [CompareWithInt ("mode", 0o40111)])],
4379    "create a directory with a particular mode",
4380    "\
4381 This command creates a directory, setting the initial permissions
4382 of the directory to C<mode>.
4383
4384 For common Linux filesystems, the actual mode which is set will
4385 be C<mode & ~umask & 01777>.  Non-native-Linux filesystems may
4386 interpret the mode in other ways.
4387
4388 See also C<guestfs_mkdir>, C<guestfs_umask>");
4389
4390   ("lchown", (RErr, [Int "owner"; Int "group"; Pathname "path"]), 203, [],
4391    [], (* XXX *)
4392    "change file owner and group",
4393    "\
4394 Change the file owner to C<owner> and group to C<group>.
4395 This is like C<guestfs_chown> but if C<path> is a symlink then
4396 the link itself is changed, not the target.
4397
4398 Only numeric uid and gid are supported.  If you want to use
4399 names, you will need to locate and parse the password file
4400 yourself (Augeas support makes this relatively easy).");
4401
4402   ("lstatlist", (RStructList ("statbufs", "stat"), [Pathname "path"; StringList "names"]), 204, [],
4403    [], (* XXX *)
4404    "lstat on multiple files",
4405    "\
4406 This call allows you to perform the C<guestfs_lstat> operation
4407 on multiple files, where all files are in the directory C<path>.
4408 C<names> is the list of files from this directory.
4409
4410 On return you get a list of stat structs, with a one-to-one
4411 correspondence to the C<names> list.  If any name did not exist
4412 or could not be lstat'd, then the C<ino> field of that structure
4413 is set to C<-1>.
4414
4415 This call is intended for programs that want to efficiently
4416 list a directory contents without making many round-trips.
4417 See also C<guestfs_lxattrlist> for a similarly efficient call
4418 for getting extended attributes.  Very long directory listings
4419 might cause the protocol message size to be exceeded, causing
4420 this call to fail.  The caller must split up such requests
4421 into smaller groups of names.");
4422
4423   ("lxattrlist", (RStructList ("xattrs", "xattr"), [Pathname "path"; StringList "names"]), 205, [Optional "linuxxattrs"],
4424    [], (* XXX *)
4425    "lgetxattr on multiple files",
4426    "\
4427 This call allows you to get the extended attributes
4428 of multiple files, where all files are in the directory C<path>.
4429 C<names> is the list of files from this directory.
4430
4431 On return you get a flat list of xattr structs which must be
4432 interpreted sequentially.  The first xattr struct always has a zero-length
4433 C<attrname>.  C<attrval> in this struct is zero-length
4434 to indicate there was an error doing C<lgetxattr> for this
4435 file, I<or> is a C string which is a decimal number
4436 (the number of following attributes for this file, which could
4437 be C<\"0\">).  Then after the first xattr struct are the
4438 zero or more attributes for the first named file.
4439 This repeats for the second and subsequent files.
4440
4441 This call is intended for programs that want to efficiently
4442 list a directory contents without making many round-trips.
4443 See also C<guestfs_lstatlist> for a similarly efficient call
4444 for getting standard stats.  Very long directory listings
4445 might cause the protocol message size to be exceeded, causing
4446 this call to fail.  The caller must split up such requests
4447 into smaller groups of names.");
4448
4449   ("readlinklist", (RStringList "links", [Pathname "path"; StringList "names"]), 206, [],
4450    [], (* XXX *)
4451    "readlink on multiple files",
4452    "\
4453 This call allows you to do a C<readlink> operation
4454 on multiple files, where all files are in the directory C<path>.
4455 C<names> is the list of files from this directory.
4456
4457 On return you get a list of strings, with a one-to-one
4458 correspondence to the C<names> list.  Each string is the
4459 value of the symbolic link.
4460
4461 If the C<readlink(2)> operation fails on any name, then
4462 the corresponding result string is the empty string C<\"\">.
4463 However the whole operation is completed even if there
4464 were C<readlink(2)> errors, and so you can call this
4465 function with names where you don't know if they are
4466 symbolic links already (albeit slightly less efficient).
4467
4468 This call is intended for programs that want to efficiently
4469 list a directory contents without making many round-trips.
4470 Very long directory listings might cause the protocol
4471 message size to be exceeded, causing
4472 this call to fail.  The caller must split up such requests
4473 into smaller groups of names.");
4474
4475   ("pread", (RBufferOut "content", [Pathname "path"; Int "count"; Int64 "offset"]), 207, [ProtocolLimitWarning],
4476    [InitISOFS, Always, TestOutputBuffer (
4477       [["pread"; "/known-4"; "1"; "3"]], "\n");
4478     InitISOFS, Always, TestOutputBuffer (
4479       [["pread"; "/empty"; "0"; "100"]], "")],
4480    "read part of a file",
4481    "\
4482 This command lets you read part of a file.  It reads C<count>
4483 bytes of the file, starting at C<offset>, from file C<path>.
4484
4485 This may read fewer bytes than requested.  For further details
4486 see the L<pread(2)> system call.
4487
4488 See also C<guestfs_pwrite>.");
4489
4490   ("part_init", (RErr, [Device "device"; String "parttype"]), 208, [],
4491    [InitEmpty, Always, TestRun (
4492       [["part_init"; "/dev/sda"; "gpt"]])],
4493    "create an empty partition table",
4494    "\
4495 This creates an empty partition table on C<device> of one of the
4496 partition types listed below.  Usually C<parttype> should be
4497 either C<msdos> or C<gpt> (for large disks).
4498
4499 Initially there are no partitions.  Following this, you should
4500 call C<guestfs_part_add> for each partition required.
4501
4502 Possible values for C<parttype> are:
4503
4504 =over 4
4505
4506 =item B<efi> | B<gpt>
4507
4508 Intel EFI / GPT partition table.
4509
4510 This is recommended for >= 2 TB partitions that will be accessed
4511 from Linux and Intel-based Mac OS X.  It also has limited backwards
4512 compatibility with the C<mbr> format.
4513
4514 =item B<mbr> | B<msdos>
4515
4516 The standard PC \"Master Boot Record\" (MBR) format used
4517 by MS-DOS and Windows.  This partition type will B<only> work
4518 for device sizes up to 2 TB.  For large disks we recommend
4519 using C<gpt>.
4520
4521 =back
4522
4523 Other partition table types that may work but are not
4524 supported include:
4525
4526 =over 4
4527
4528 =item B<aix>
4529
4530 AIX disk labels.
4531
4532 =item B<amiga> | B<rdb>
4533
4534 Amiga \"Rigid Disk Block\" format.
4535
4536 =item B<bsd>
4537
4538 BSD disk labels.
4539
4540 =item B<dasd>
4541
4542 DASD, used on IBM mainframes.
4543
4544 =item B<dvh>
4545
4546 MIPS/SGI volumes.
4547
4548 =item B<mac>
4549
4550 Old Mac partition format.  Modern Macs use C<gpt>.
4551
4552 =item B<pc98>
4553
4554 NEC PC-98 format, common in Japan apparently.
4555
4556 =item B<sun>
4557
4558 Sun disk labels.
4559
4560 =back");
4561
4562   ("part_add", (RErr, [Device "device"; String "prlogex"; Int64 "startsect"; Int64 "endsect"]), 209, [],
4563    [InitEmpty, Always, TestRun (
4564       [["part_init"; "/dev/sda"; "mbr"];
4565        ["part_add"; "/dev/sda"; "primary"; "1"; "-1"]]);
4566     InitEmpty, Always, TestRun (
4567       [["part_init"; "/dev/sda"; "gpt"];
4568        ["part_add"; "/dev/sda"; "primary"; "34"; "127"];
4569        ["part_add"; "/dev/sda"; "primary"; "128"; "-34"]]);
4570     InitEmpty, Always, TestRun (
4571       [["part_init"; "/dev/sda"; "mbr"];
4572        ["part_add"; "/dev/sda"; "primary"; "32"; "127"];
4573        ["part_add"; "/dev/sda"; "primary"; "128"; "255"];
4574        ["part_add"; "/dev/sda"; "primary"; "256"; "511"];
4575        ["part_add"; "/dev/sda"; "primary"; "512"; "-1"]])],
4576    "add a partition to the device",
4577    "\
4578 This command adds a partition to C<device>.  If there is no partition
4579 table on the device, call C<guestfs_part_init> first.
4580
4581 The C<prlogex> parameter is the type of partition.  Normally you
4582 should pass C<p> or C<primary> here, but MBR partition tables also
4583 support C<l> (or C<logical>) and C<e> (or C<extended>) partition
4584 types.
4585
4586 C<startsect> and C<endsect> are the start and end of the partition
4587 in I<sectors>.  C<endsect> may be negative, which means it counts
4588 backwards from the end of the disk (C<-1> is the last sector).
4589
4590 Creating a partition which covers the whole disk is not so easy.
4591 Use C<guestfs_part_disk> to do that.");
4592
4593   ("part_disk", (RErr, [Device "device"; String "parttype"]), 210, [DangerWillRobinson],
4594    [InitEmpty, Always, TestRun (
4595       [["part_disk"; "/dev/sda"; "mbr"]]);
4596     InitEmpty, Always, TestRun (
4597       [["part_disk"; "/dev/sda"; "gpt"]])],
4598    "partition whole disk with a single primary partition",
4599    "\
4600 This command is simply a combination of C<guestfs_part_init>
4601 followed by C<guestfs_part_add> to create a single primary partition
4602 covering the whole disk.
4603
4604 C<parttype> is the partition table type, usually C<mbr> or C<gpt>,
4605 but other possible values are described in C<guestfs_part_init>.");
4606
4607   ("part_set_bootable", (RErr, [Device "device"; Int "partnum"; Bool "bootable"]), 211, [],
4608    [InitEmpty, Always, TestRun (
4609       [["part_disk"; "/dev/sda"; "mbr"];
4610        ["part_set_bootable"; "/dev/sda"; "1"; "true"]])],
4611    "make a partition bootable",
4612    "\
4613 This sets the bootable flag on partition numbered C<partnum> on
4614 device C<device>.  Note that partitions are numbered from 1.
4615
4616 The bootable flag is used by some operating systems (notably
4617 Windows) to determine which partition to boot from.  It is by
4618 no means universally recognized.");
4619
4620   ("part_set_name", (RErr, [Device "device"; Int "partnum"; String "name"]), 212, [],
4621    [InitEmpty, Always, TestRun (
4622       [["part_disk"; "/dev/sda"; "gpt"];
4623        ["part_set_name"; "/dev/sda"; "1"; "thepartname"]])],
4624    "set partition name",
4625    "\
4626 This sets the partition name on partition numbered C<partnum> on
4627 device C<device>.  Note that partitions are numbered from 1.
4628
4629 The partition name can only be set on certain types of partition
4630 table.  This works on C<gpt> but not on C<mbr> partitions.");
4631
4632   ("part_list", (RStructList ("partitions", "partition"), [Device "device"]), 213, [],
4633    [], (* XXX Add a regression test for this. *)
4634    "list partitions on a device",
4635    "\
4636 This command parses the partition table on C<device> and
4637 returns the list of partitions found.
4638
4639 The fields in the returned structure are:
4640
4641 =over 4
4642
4643 =item B<part_num>
4644
4645 Partition number, counting from 1.
4646
4647 =item B<part_start>
4648
4649 Start of the partition I<in bytes>.  To get sectors you have to
4650 divide by the device's sector size, see C<guestfs_blockdev_getss>.
4651
4652 =item B<part_end>
4653
4654 End of the partition in bytes.
4655
4656 =item B<part_size>
4657
4658 Size of the partition in bytes.
4659
4660 =back");
4661
4662   ("part_get_parttype", (RString "parttype", [Device "device"]), 214, [],
4663    [InitEmpty, Always, TestOutput (
4664       [["part_disk"; "/dev/sda"; "gpt"];
4665        ["part_get_parttype"; "/dev/sda"]], "gpt")],
4666    "get the partition table type",
4667    "\
4668 This command examines the partition table on C<device> and
4669 returns the partition table type (format) being used.
4670
4671 Common return values include: C<msdos> (a DOS/Windows style MBR
4672 partition table), C<gpt> (a GPT/EFI-style partition table).  Other
4673 values are possible, although unusual.  See C<guestfs_part_init>
4674 for a full list.");
4675
4676   ("fill", (RErr, [Int "c"; Int "len"; Pathname "path"]), 215, [],
4677    [InitBasicFS, Always, TestOutputBuffer (
4678       [["fill"; "0x63"; "10"; "/test"];
4679        ["read_file"; "/test"]], "cccccccccc")],
4680    "fill a file with octets",
4681    "\
4682 This command creates a new file called C<path>.  The initial
4683 content of the file is C<len> octets of C<c>, where C<c>
4684 must be a number in the range C<[0..255]>.
4685
4686 To fill a file with zero bytes (sparsely), it is
4687 much more efficient to use C<guestfs_truncate_size>.
4688 To create a file with a pattern of repeating bytes
4689 use C<guestfs_fill_pattern>.");
4690
4691   ("available", (RErr, [StringList "groups"]), 216, [],
4692    [InitNone, Always, TestRun [["available"; ""]]],
4693    "test availability of some parts of the API",
4694    "\
4695 This command is used to check the availability of some
4696 groups of functionality in the appliance, which not all builds of
4697 the libguestfs appliance will be able to provide.
4698
4699 The libguestfs groups, and the functions that those
4700 groups correspond to, are listed in L<guestfs(3)/AVAILABILITY>.
4701 You can also fetch this list at runtime by calling
4702 C<guestfs_available_all_groups>.
4703
4704 The argument C<groups> is a list of group names, eg:
4705 C<[\"inotify\", \"augeas\"]> would check for the availability of
4706 the Linux inotify functions and Augeas (configuration file
4707 editing) functions.
4708
4709 The command returns no error if I<all> requested groups are available.
4710
4711 It fails with an error if one or more of the requested
4712 groups is unavailable in the appliance.
4713
4714 If an unknown group name is included in the
4715 list of groups then an error is always returned.
4716
4717 I<Notes:>
4718
4719 =over 4
4720
4721 =item *
4722
4723 You must call C<guestfs_launch> before calling this function.
4724
4725 The reason is because we don't know what groups are
4726 supported by the appliance/daemon until it is running and can
4727 be queried.
4728
4729 =item *
4730
4731 If a group of functions is available, this does not necessarily
4732 mean that they will work.  You still have to check for errors
4733 when calling individual API functions even if they are
4734 available.
4735
4736 =item *
4737
4738 It is usually the job of distro packagers to build
4739 complete functionality into the libguestfs appliance.
4740 Upstream libguestfs, if built from source with all
4741 requirements satisfied, will support everything.
4742
4743 =item *
4744
4745 This call was added in version C<1.0.80>.  In previous
4746 versions of libguestfs all you could do would be to speculatively
4747 execute a command to find out if the daemon implemented it.
4748 See also C<guestfs_version>.
4749
4750 =back");
4751
4752   ("dd", (RErr, [Dev_or_Path "src"; Dev_or_Path "dest"]), 217, [],
4753    [InitBasicFS, Always, TestOutputBuffer (
4754       [["write"; "/src"; "hello, world"];
4755        ["dd"; "/src"; "/dest"];
4756        ["read_file"; "/dest"]], "hello, world")],
4757    "copy from source to destination using dd",
4758    "\
4759 This command copies from one source device or file C<src>
4760 to another destination device or file C<dest>.  Normally you
4761 would use this to copy to or from a device or partition, for
4762 example to duplicate a filesystem.
4763
4764 If the destination is a device, it must be as large or larger
4765 than the source file or device, otherwise the copy will fail.
4766 This command cannot do partial copies (see C<guestfs_copy_size>).");
4767
4768   ("filesize", (RInt64 "size", [Pathname "file"]), 218, [],
4769    [InitBasicFS, Always, TestOutputInt (
4770       [["write"; "/file"; "hello, world"];
4771        ["filesize"; "/file"]], 12)],
4772    "return the size of the file in bytes",
4773    "\
4774 This command returns the size of C<file> in bytes.
4775
4776 To get other stats about a file, use C<guestfs_stat>, C<guestfs_lstat>,
4777 C<guestfs_is_dir>, C<guestfs_is_file> etc.
4778 To get the size of block devices, use C<guestfs_blockdev_getsize64>.");
4779
4780   ("lvrename", (RErr, [String "logvol"; String "newlogvol"]), 219, [],
4781    [InitBasicFSonLVM, Always, TestOutputList (
4782       [["lvrename"; "/dev/VG/LV"; "/dev/VG/LV2"];
4783        ["lvs"]], ["/dev/VG/LV2"])],
4784    "rename an LVM logical volume",
4785    "\
4786 Rename a logical volume C<logvol> with the new name C<newlogvol>.");
4787
4788   ("vgrename", (RErr, [String "volgroup"; String "newvolgroup"]), 220, [],
4789    [InitBasicFSonLVM, Always, TestOutputList (
4790       [["umount"; "/"];
4791        ["vg_activate"; "false"; "VG"];
4792        ["vgrename"; "VG"; "VG2"];
4793        ["vg_activate"; "true"; "VG2"];
4794        ["mount_options"; ""; "/dev/VG2/LV"; "/"];
4795        ["vgs"]], ["VG2"])],
4796    "rename an LVM volume group",
4797    "\
4798 Rename a volume group C<volgroup> with the new name C<newvolgroup>.");
4799
4800   ("initrd_cat", (RBufferOut "content", [Pathname "initrdpath"; String "filename"]), 221, [ProtocolLimitWarning],
4801    [InitISOFS, Always, TestOutputBuffer (
4802       [["initrd_cat"; "/initrd"; "known-4"]], "abc\ndef\nghi")],
4803    "list the contents of a single file in an initrd",
4804    "\
4805 This command unpacks the file C<filename> from the initrd file
4806 called C<initrdpath>.  The filename must be given I<without> the
4807 initial C</> character.
4808
4809 For example, in guestfish you could use the following command
4810 to examine the boot script (usually called C</init>)
4811 contained in a Linux initrd or initramfs image:
4812
4813  initrd-cat /boot/initrd-<version>.img init
4814
4815 See also C<guestfs_initrd_list>.");
4816
4817   ("pvuuid", (RString "uuid", [Device "device"]), 222, [],
4818    [],
4819    "get the UUID of a physical volume",
4820    "\
4821 This command returns the UUID of the LVM PV C<device>.");
4822
4823   ("vguuid", (RString "uuid", [String "vgname"]), 223, [],
4824    [],
4825    "get the UUID of a volume group",
4826    "\
4827 This command returns the UUID of the LVM VG named C<vgname>.");
4828
4829   ("lvuuid", (RString "uuid", [Device "device"]), 224, [],
4830    [],
4831    "get the UUID of a logical volume",
4832    "\
4833 This command returns the UUID of the LVM LV C<device>.");
4834
4835   ("vgpvuuids", (RStringList "uuids", [String "vgname"]), 225, [],
4836    [],
4837    "get the PV UUIDs containing the volume group",
4838    "\
4839 Given a VG called C<vgname>, this returns the UUIDs of all
4840 the physical volumes that this volume group resides on.
4841
4842 You can use this along with C<guestfs_pvs> and C<guestfs_pvuuid>
4843 calls to associate physical volumes and volume groups.
4844
4845 See also C<guestfs_vglvuuids>.");
4846
4847   ("vglvuuids", (RStringList "uuids", [String "vgname"]), 226, [],
4848    [],
4849    "get the LV UUIDs of all LVs in the volume group",
4850    "\
4851 Given a VG called C<vgname>, this returns the UUIDs of all
4852 the logical volumes created in this volume group.
4853
4854 You can use this along with C<guestfs_lvs> and C<guestfs_lvuuid>
4855 calls to associate logical volumes and volume groups.
4856
4857 See also C<guestfs_vgpvuuids>.");
4858
4859   ("copy_size", (RErr, [Dev_or_Path "src"; Dev_or_Path "dest"; Int64 "size"]), 227, [],
4860    [InitBasicFS, Always, TestOutputBuffer (
4861       [["write"; "/src"; "hello, world"];
4862        ["copy_size"; "/src"; "/dest"; "5"];
4863        ["read_file"; "/dest"]], "hello")],
4864    "copy size bytes from source to destination using dd",
4865    "\
4866 This command copies exactly C<size> bytes from one source device
4867 or file C<src> to another destination device or file C<dest>.
4868
4869 Note this will fail if the source is too short or if the destination
4870 is not large enough.");
4871
4872   ("zero_device", (RErr, [Device "device"]), 228, [DangerWillRobinson],
4873    [InitBasicFSonLVM, Always, TestRun (
4874       [["zero_device"; "/dev/VG/LV"]])],
4875    "write zeroes to an entire device",
4876    "\
4877 This command writes zeroes over the entire C<device>.  Compare
4878 with C<guestfs_zero> which just zeroes the first few blocks of
4879 a device.");
4880
4881   ("txz_in", (RErr, [FileIn "tarball"; Pathname "directory"]), 229, [Optional "xz"],
4882    [InitBasicFS, Always, TestOutput (
4883       [["txz_in"; "../images/helloworld.tar.xz"; "/"];
4884        ["cat"; "/hello"]], "hello\n")],
4885    "unpack compressed tarball to directory",
4886    "\
4887 This command uploads and unpacks local file C<tarball> (an
4888 I<xz compressed> tar file) into C<directory>.");
4889
4890   ("txz_out", (RErr, [Pathname "directory"; FileOut "tarball"]), 230, [Optional "xz"],
4891    [],
4892    "pack directory into compressed tarball",
4893    "\
4894 This command packs the contents of C<directory> and downloads
4895 it to local file C<tarball> (as an xz compressed tar archive).");
4896
4897   ("ntfsresize", (RErr, [Device "device"]), 231, [Optional "ntfsprogs"],
4898    [],
4899    "resize an NTFS filesystem",
4900    "\
4901 This command resizes an NTFS filesystem, expanding or
4902 shrinking it to the size of the underlying device.
4903 See also L<ntfsresize(8)>.");
4904
4905   ("vgscan", (RErr, []), 232, [],
4906    [InitEmpty, Always, TestRun (
4907       [["vgscan"]])],
4908    "rescan for LVM physical volumes, volume groups and logical volumes",
4909    "\
4910 This rescans all block devices and rebuilds the list of LVM
4911 physical volumes, volume groups and logical volumes.");
4912
4913   ("part_del", (RErr, [Device "device"; Int "partnum"]), 233, [],
4914    [InitEmpty, Always, TestRun (
4915       [["part_init"; "/dev/sda"; "mbr"];
4916        ["part_add"; "/dev/sda"; "primary"; "1"; "-1"];
4917        ["part_del"; "/dev/sda"; "1"]])],
4918    "delete a partition",
4919    "\
4920 This command deletes the partition numbered C<partnum> on C<device>.
4921
4922 Note that in the case of MBR partitioning, deleting an
4923 extended partition also deletes any logical partitions
4924 it contains.");
4925
4926   ("part_get_bootable", (RBool "bootable", [Device "device"; Int "partnum"]), 234, [],
4927    [InitEmpty, Always, TestOutputTrue (
4928       [["part_init"; "/dev/sda"; "mbr"];
4929        ["part_add"; "/dev/sda"; "primary"; "1"; "-1"];
4930        ["part_set_bootable"; "/dev/sda"; "1"; "true"];
4931        ["part_get_bootable"; "/dev/sda"; "1"]])],
4932    "return true if a partition is bootable",
4933    "\
4934 This command returns true if the partition C<partnum> on
4935 C<device> has the bootable flag set.
4936
4937 See also C<guestfs_part_set_bootable>.");
4938
4939   ("part_get_mbr_id", (RInt "idbyte", [Device "device"; Int "partnum"]), 235, [FishOutput FishOutputHexadecimal],
4940    [InitEmpty, Always, TestOutputInt (
4941       [["part_init"; "/dev/sda"; "mbr"];
4942        ["part_add"; "/dev/sda"; "primary"; "1"; "-1"];
4943        ["part_set_mbr_id"; "/dev/sda"; "1"; "0x7f"];
4944        ["part_get_mbr_id"; "/dev/sda"; "1"]], 0x7f)],
4945    "get the MBR type byte (ID byte) from a partition",
4946    "\
4947 Returns the MBR type byte (also known as the ID byte) from
4948 the numbered partition C<partnum>.
4949
4950 Note that only MBR (old DOS-style) partitions have type bytes.
4951 You will get undefined results for other partition table
4952 types (see C<guestfs_part_get_parttype>).");
4953
4954   ("part_set_mbr_id", (RErr, [Device "device"; Int "partnum"; Int "idbyte"]), 236, [],
4955    [], (* tested by part_get_mbr_id *)
4956    "set the MBR type byte (ID byte) of a partition",
4957    "\
4958 Sets the MBR type byte (also known as the ID byte) of
4959 the numbered partition C<partnum> to C<idbyte>.  Note
4960 that the type bytes quoted in most documentation are
4961 in fact hexadecimal numbers, but usually documented
4962 without any leading \"0x\" which might be confusing.
4963
4964 Note that only MBR (old DOS-style) partitions have type bytes.
4965 You will get undefined results for other partition table
4966 types (see C<guestfs_part_get_parttype>).");
4967
4968   ("checksum_device", (RString "checksum", [String "csumtype"; Device "device"]), 237, [],
4969    [InitISOFS, Always, TestOutput (
4970       [["checksum_device"; "md5"; "/dev/sdd"]],
4971       (Digest.to_hex (Digest.file "images/test.iso")))],
4972    "compute MD5, SHAx or CRC checksum of the contents of a device",
4973    "\
4974 This call computes the MD5, SHAx or CRC checksum of the
4975 contents of the device named C<device>.  For the types of
4976 checksums supported see the C<guestfs_checksum> command.");
4977
4978   ("lvresize_free", (RErr, [Device "lv"; Int "percent"]), 238, [Optional "lvm2"],
4979    [InitNone, Always, TestRun (
4980       [["part_disk"; "/dev/sda"; "mbr"];
4981        ["pvcreate"; "/dev/sda1"];
4982        ["vgcreate"; "VG"; "/dev/sda1"];
4983        ["lvcreate"; "LV"; "VG"; "10"];
4984        ["lvresize_free"; "/dev/VG/LV"; "100"]])],
4985    "expand an LV to fill free space",
4986    "\
4987 This expands an existing logical volume C<lv> so that it fills
4988 C<pc>% of the remaining free space in the volume group.  Commonly
4989 you would call this with pc = 100 which expands the logical volume
4990 as much as possible, using all remaining free space in the volume
4991 group.");
4992
4993   ("aug_clear", (RErr, [String "augpath"]), 239, [Optional "augeas"],
4994    [], (* XXX Augeas code needs tests. *)
4995    "clear Augeas path",
4996    "\
4997 Set the value associated with C<path> to C<NULL>.  This
4998 is the same as the L<augtool(1)> C<clear> command.");
4999
5000   ("get_umask", (RInt "mask", []), 240, [FishOutput FishOutputOctal],
5001    [InitEmpty, Always, TestOutputInt (
5002       [["get_umask"]], 0o22)],
5003    "get the current umask",
5004    "\
5005 Return the current umask.  By default the umask is C<022>
5006 unless it has been set by calling C<guestfs_umask>.");
5007
5008   ("debug_upload", (RErr, [FileIn "filename"; String "tmpname"; Int "mode"]), 241, [],
5009    [],
5010    "upload a file to the appliance (internal use only)",
5011    "\
5012 The C<guestfs_debug_upload> command uploads a file to
5013 the libguestfs appliance.
5014
5015 There is no comprehensive help for this command.  You have
5016 to look at the file C<daemon/debug.c> in the libguestfs source
5017 to find out what it is for.");
5018
5019   ("base64_in", (RErr, [FileIn "base64file"; Pathname "filename"]), 242, [],
5020    [InitBasicFS, Always, TestOutput (
5021       [["base64_in"; "../images/hello.b64"; "/hello"];
5022        ["cat"; "/hello"]], "hello\n")],
5023    "upload base64-encoded data to file",
5024    "\
5025 This command uploads base64-encoded data from C<base64file>
5026 to C<filename>.");
5027
5028   ("base64_out", (RErr, [Pathname "filename"; FileOut "base64file"]), 243, [],
5029    [],
5030    "download file and encode as base64",
5031    "\
5032 This command downloads the contents of C<filename>, writing
5033 it out to local file C<base64file> encoded as base64.");
5034
5035   ("checksums_out", (RErr, [String "csumtype"; Pathname "directory"; FileOut "sumsfile"]), 244, [],
5036    [],
5037    "compute MD5, SHAx or CRC checksum of files in a directory",
5038    "\
5039 This command computes the checksums of all regular files in
5040 C<directory> and then emits a list of those checksums to
5041 the local output file C<sumsfile>.
5042
5043 This can be used for verifying the integrity of a virtual
5044 machine.  However to be properly secure you should pay
5045 attention to the output of the checksum command (it uses
5046 the ones from GNU coreutils).  In particular when the
5047 filename is not printable, coreutils uses a special
5048 backslash syntax.  For more information, see the GNU
5049 coreutils info file.");
5050
5051   ("fill_pattern", (RErr, [String "pattern"; Int "len"; Pathname "path"]), 245, [],
5052    [InitBasicFS, Always, TestOutputBuffer (
5053       [["fill_pattern"; "abcdefghijklmnopqrstuvwxyz"; "28"; "/test"];
5054        ["read_file"; "/test"]], "abcdefghijklmnopqrstuvwxyzab")],
5055    "fill a file with a repeating pattern of bytes",
5056    "\
5057 This function is like C<guestfs_fill> except that it creates
5058 a new file of length C<len> containing the repeating pattern
5059 of bytes in C<pattern>.  The pattern is truncated if necessary
5060 to ensure the length of the file is exactly C<len> bytes.");
5061
5062   ("write", (RErr, [Pathname "path"; BufferIn "content"]), 246, [ProtocolLimitWarning],
5063    [InitBasicFS, Always, TestOutput (
5064       [["write"; "/new"; "new file contents"];
5065        ["cat"; "/new"]], "new file contents");
5066     InitBasicFS, Always, TestOutput (
5067       [["write"; "/new"; "\nnew file contents\n"];
5068        ["cat"; "/new"]], "\nnew file contents\n");
5069     InitBasicFS, Always, TestOutput (
5070       [["write"; "/new"; "\n\n"];
5071        ["cat"; "/new"]], "\n\n");
5072     InitBasicFS, Always, TestOutput (
5073       [["write"; "/new"; ""];
5074        ["cat"; "/new"]], "");
5075     InitBasicFS, Always, TestOutput (
5076       [["write"; "/new"; "\n\n\n"];
5077        ["cat"; "/new"]], "\n\n\n");
5078     InitBasicFS, Always, TestOutput (
5079       [["write"; "/new"; "\n"];
5080        ["cat"; "/new"]], "\n")],
5081    "create a new file",
5082    "\
5083 This call creates a file called C<path>.  The content of the
5084 file is the string C<content> (which can contain any 8 bit data).");
5085
5086   ("pwrite", (RInt "nbytes", [Pathname "path"; BufferIn "content"; Int64 "offset"]), 247, [ProtocolLimitWarning],
5087    [InitBasicFS, Always, TestOutput (
5088       [["write"; "/new"; "new file contents"];
5089        ["pwrite"; "/new"; "data"; "4"];
5090        ["cat"; "/new"]], "new data contents");
5091     InitBasicFS, Always, TestOutput (
5092       [["write"; "/new"; "new file contents"];
5093        ["pwrite"; "/new"; "is extended"; "9"];
5094        ["cat"; "/new"]], "new file is extended");
5095     InitBasicFS, Always, TestOutput (
5096       [["write"; "/new"; "new file contents"];
5097        ["pwrite"; "/new"; ""; "4"];
5098        ["cat"; "/new"]], "new file contents")],
5099    "write to part of a file",
5100    "\
5101 This command writes to part of a file.  It writes the data
5102 buffer C<content> to the file C<path> starting at offset C<offset>.
5103
5104 This command implements the L<pwrite(2)> system call, and like
5105 that system call it may not write the full data requested.  The
5106 return value is the number of bytes that were actually written
5107 to the file.  This could even be 0, although short writes are
5108 unlikely for regular files in ordinary circumstances.
5109
5110 See also C<guestfs_pread>.");
5111
5112   ("resize2fs_size", (RErr, [Device "device"; Int64 "size"]), 248, [],
5113    [],
5114    "resize an ext2, ext3 or ext4 filesystem (with size)",
5115    "\
5116 This command is the same as C<guestfs_resize2fs> except that it
5117 allows you to specify the new size (in bytes) explicitly.");
5118
5119   ("pvresize_size", (RErr, [Device "device"; Int64 "size"]), 249, [Optional "lvm2"],
5120    [],
5121    "resize an LVM physical volume (with size)",
5122    "\
5123 This command is the same as C<guestfs_pvresize> except that it
5124 allows you to specify the new size (in bytes) explicitly.");
5125
5126   ("ntfsresize_size", (RErr, [Device "device"; Int64 "size"]), 250, [Optional "ntfsprogs"],
5127    [],
5128    "resize an NTFS filesystem (with size)",
5129    "\
5130 This command is the same as C<guestfs_ntfsresize> except that it
5131 allows you to specify the new size (in bytes) explicitly.");
5132
5133   ("available_all_groups", (RStringList "groups", []), 251, [],
5134    [InitNone, Always, TestRun [["available_all_groups"]]],
5135    "return a list of all optional groups",
5136    "\
5137 This command returns a list of all optional groups that this
5138 daemon knows about.  Note this returns both supported and unsupported
5139 groups.  To find out which ones the daemon can actually support
5140 you have to call C<guestfs_available> on each member of the
5141 returned list.
5142
5143 See also C<guestfs_available> and L<guestfs(3)/AVAILABILITY>.");
5144
5145   ("fallocate64", (RErr, [Pathname "path"; Int64 "len"]), 252, [],
5146    [InitBasicFS, Always, TestOutputStruct (
5147       [["fallocate64"; "/a"; "1000000"];
5148        ["stat"; "/a"]], [CompareWithInt ("size", 1_000_000)])],
5149    "preallocate a file in the guest filesystem",
5150    "\
5151 This command preallocates a file (containing zero bytes) named
5152 C<path> of size C<len> bytes.  If the file exists already, it
5153 is overwritten.
5154
5155 Note that this call allocates disk blocks for the file.
5156 To create a sparse file use C<guestfs_truncate_size> instead.
5157
5158 The deprecated call C<guestfs_fallocate> does the same,
5159 but owing to an oversight it only allowed 30 bit lengths
5160 to be specified, effectively limiting the maximum size
5161 of files created through that call to 1GB.
5162
5163 Do not confuse this with the guestfish-specific
5164 C<alloc> and C<sparse> commands which create
5165 a file in the host and attach it as a device.");
5166
5167   ("vfs_label", (RString "label", [Device "device"]), 253, [],
5168    [InitBasicFS, Always, TestOutput (
5169        [["set_e2label"; "/dev/sda1"; "LTEST"];
5170         ["vfs_label"; "/dev/sda1"]], "LTEST")],
5171    "get the filesystem label",
5172    "\
5173 This returns the filesystem label of the filesystem on
5174 C<device>.
5175
5176 If the filesystem is unlabeled, this returns the empty string.
5177
5178 To find a filesystem from the label, use C<guestfs_findfs_label>.");
5179
5180   ("vfs_uuid", (RString "uuid", [Device "device"]), 254, [],
5181    (let uuid = uuidgen () in
5182     [InitBasicFS, Always, TestOutput (
5183        [["set_e2uuid"; "/dev/sda1"; uuid];
5184         ["vfs_uuid"; "/dev/sda1"]], uuid)]),
5185    "get the filesystem UUID",
5186    "\
5187 This returns the filesystem UUID of the filesystem on
5188 C<device>.
5189
5190 If the filesystem does not have a UUID, this returns the empty string.
5191
5192 To find a filesystem from the UUID, use C<guestfs_findfs_uuid>.");
5193
5194   ("lvm_set_filter", (RErr, [DeviceList "devices"]), 255, [Optional "lvm2"],
5195    (* Can't be tested with the current framework because
5196     * the VG is being used by the mounted filesystem, so
5197     * the vgchange -an command we do first will fail.
5198     *)
5199     [],
5200    "set LVM device filter",
5201    "\
5202 This sets the LVM device filter so that LVM will only be
5203 able to \"see\" the block devices in the list C<devices>,
5204 and will ignore all other attached block devices.
5205
5206 Where disk image(s) contain duplicate PVs or VGs, this
5207 command is useful to get LVM to ignore the duplicates, otherwise
5208 LVM can get confused.  Note also there are two types
5209 of duplication possible: either cloned PVs/VGs which have
5210 identical UUIDs; or VGs that are not cloned but just happen
5211 to have the same name.  In normal operation you cannot
5212 create this situation, but you can do it outside LVM, eg.
5213 by cloning disk images or by bit twiddling inside the LVM
5214 metadata.
5215
5216 This command also clears the LVM cache and performs a volume
5217 group scan.
5218
5219 You can filter whole block devices or individual partitions.
5220
5221 You cannot use this if any VG is currently in use (eg.
5222 contains a mounted filesystem), even if you are not
5223 filtering out that VG.");
5224
5225   ("lvm_clear_filter", (RErr, []), 256, [],
5226    [], (* see note on lvm_set_filter *)
5227    "clear LVM device filter",
5228    "\
5229 This undoes the effect of C<guestfs_lvm_set_filter>.  LVM
5230 will be able to see every block device.
5231
5232 This command also clears the LVM cache and performs a volume
5233 group scan.");
5234
5235   ("luks_open", (RErr, [Device "device"; Key "key"; String "mapname"]), 257, [Optional "luks"],
5236    [],
5237    "open a LUKS-encrypted block device",
5238    "\
5239 This command opens a block device which has been encrypted
5240 according to the Linux Unified Key Setup (LUKS) standard.
5241
5242 C<device> is the encrypted block device or partition.
5243
5244 The caller must supply one of the keys associated with the
5245 LUKS block device, in the C<key> parameter.
5246
5247 This creates a new block device called C</dev/mapper/mapname>.
5248 Reads and writes to this block device are decrypted from and
5249 encrypted to the underlying C<device> respectively.
5250
5251 If this block device contains LVM volume groups, then
5252 calling C<guestfs_vgscan> followed by C<guestfs_vg_activate_all>
5253 will make them visible.");
5254
5255   ("luks_open_ro", (RErr, [Device "device"; Key "key"; String "mapname"]), 258, [Optional "luks"],
5256    [],
5257    "open a LUKS-encrypted block device read-only",
5258    "\
5259 This is the same as C<guestfs_luks_open> except that a read-only
5260 mapping is created.");
5261
5262   ("luks_close", (RErr, [Device "device"]), 259, [Optional "luks"],
5263    [],
5264    "close a LUKS device",
5265    "\
5266 This closes a LUKS device that was created earlier by
5267 C<guestfs_luks_open> or C<guestfs_luks_open_ro>.  The
5268 C<device> parameter must be the name of the LUKS mapping
5269 device (ie. C</dev/mapper/mapname>) and I<not> the name
5270 of the underlying block device.");
5271
5272   ("luks_format", (RErr, [Device "device"; Key "key"; Int "keyslot"]), 260, [Optional "luks"; DangerWillRobinson],
5273    [],
5274    "format a block device as a LUKS encrypted device",
5275    "\
5276 This command erases existing data on C<device> and formats
5277 the device as a LUKS encrypted device.  C<key> is the
5278 initial key, which is added to key slot C<slot>.  (LUKS
5279 supports 8 key slots, numbered 0-7).");
5280
5281   ("luks_format_cipher", (RErr, [Device "device"; Key "key"; Int "keyslot"; String "cipher"]), 261, [Optional "luks"; DangerWillRobinson],
5282    [],
5283    "format a block device as a LUKS encrypted device",
5284    "\
5285 This command is the same as C<guestfs_luks_format> but
5286 it also allows you to set the C<cipher> used.");
5287
5288   ("luks_add_key", (RErr, [Device "device"; Key "key"; Key "newkey"; Int "keyslot"]), 262, [Optional "luks"],
5289    [],
5290    "add a key on a LUKS encrypted device",
5291    "\
5292 This command adds a new key on LUKS device C<device>.
5293 C<key> is any existing key, and is used to access the device.
5294 C<newkey> is the new key to add.  C<keyslot> is the key slot
5295 that will be replaced.
5296
5297 Note that if C<keyslot> already contains a key, then this
5298 command will fail.  You have to use C<guestfs_luks_kill_slot>
5299 first to remove that key.");
5300
5301   ("luks_kill_slot", (RErr, [Device "device"; Key "key"; Int "keyslot"]), 263, [Optional "luks"],
5302    [],
5303    "remove a key from a LUKS encrypted device",
5304    "\
5305 This command deletes the key in key slot C<keyslot> from the
5306 encrypted LUKS device C<device>.  C<key> must be one of the
5307 I<other> keys.");
5308
5309   ("is_lv", (RBool "lvflag", [Device "device"]), 264, [Optional "lvm2"],
5310    [InitBasicFSonLVM, IfAvailable "lvm2", TestOutputTrue (
5311       [["is_lv"; "/dev/VG/LV"]]);
5312     InitBasicFSonLVM, IfAvailable "lvm2", TestOutputFalse (
5313       [["is_lv"; "/dev/sda1"]])],
5314    "test if device is a logical volume",
5315    "\
5316 This command tests whether C<device> is a logical volume, and
5317 returns true iff this is the case.");
5318
5319   ("findfs_uuid", (RString "device", [String "uuid"]), 265, [],
5320    [],
5321    "find a filesystem by UUID",
5322    "\
5323 This command searches the filesystems and returns the one
5324 which has the given UUID.  An error is returned if no such
5325 filesystem can be found.
5326
5327 To find the UUID of a filesystem, use C<guestfs_vfs_uuid>.");
5328
5329   ("findfs_label", (RString "device", [String "label"]), 266, [],
5330    [],
5331    "find a filesystem by label",
5332    "\
5333 This command searches the filesystems and returns the one
5334 which has the given label.  An error is returned if no such
5335 filesystem can be found.
5336
5337 To find the label of a filesystem, use C<guestfs_vfs_label>.");
5338
5339 ]
5340
5341 let all_functions = non_daemon_functions @ daemon_functions
5342
5343 (* In some places we want the functions to be displayed sorted
5344  * alphabetically, so this is useful:
5345  *)
5346 let all_functions_sorted =
5347   List.sort (fun (n1,_,_,_,_,_,_) (n2,_,_,_,_,_,_) ->
5348                compare n1 n2) all_functions
5349
5350 (* This is used to generate the src/MAX_PROC_NR file which
5351  * contains the maximum procedure number, a surrogate for the
5352  * ABI version number.  See src/Makefile.am for the details.
5353  *)
5354 let max_proc_nr =
5355   let proc_nrs = List.map (
5356     fun (_, _, proc_nr, _, _, _, _) -> proc_nr
5357   ) daemon_functions in
5358   List.fold_left max 0 proc_nrs
5359
5360 (* Field types for structures. *)
5361 type field =
5362   | FChar                       (* C 'char' (really, a 7 bit byte). *)
5363   | FString                     (* nul-terminated ASCII string, NOT NULL. *)
5364   | FBuffer                     (* opaque buffer of bytes, (char *, int) pair *)
5365   | FUInt32
5366   | FInt32
5367   | FUInt64
5368   | FInt64
5369   | FBytes                      (* Any int measure that counts bytes. *)
5370   | FUUID                       (* 32 bytes long, NOT nul-terminated. *)
5371   | FOptPercent                 (* [0..100], or -1 meaning "not present". *)
5372
5373 (* Because we generate extra parsing code for LVM command line tools,
5374  * we have to pull out the LVM columns separately here.
5375  *)
5376 let lvm_pv_cols = [
5377   "pv_name", FString;
5378   "pv_uuid", FUUID;
5379   "pv_fmt", FString;
5380   "pv_size", FBytes;
5381   "dev_size", FBytes;
5382   "pv_free", FBytes;
5383   "pv_used", FBytes;
5384   "pv_attr", FString (* XXX *);
5385   "pv_pe_count", FInt64;
5386   "pv_pe_alloc_count", FInt64;
5387   "pv_tags", FString;
5388   "pe_start", FBytes;
5389   "pv_mda_count", FInt64;
5390   "pv_mda_free", FBytes;
5391   (* Not in Fedora 10:
5392      "pv_mda_size", FBytes;
5393   *)
5394 ]
5395 let lvm_vg_cols = [
5396   "vg_name", FString;
5397   "vg_uuid", FUUID;
5398   "vg_fmt", FString;
5399   "vg_attr", FString (* XXX *);
5400   "vg_size", FBytes;
5401   "vg_free", FBytes;
5402   "vg_sysid", FString;
5403   "vg_extent_size", FBytes;
5404   "vg_extent_count", FInt64;
5405   "vg_free_count", FInt64;
5406   "max_lv", FInt64;
5407   "max_pv", FInt64;
5408   "pv_count", FInt64;
5409   "lv_count", FInt64;
5410   "snap_count", FInt64;
5411   "vg_seqno", FInt64;
5412   "vg_tags", FString;
5413   "vg_mda_count", FInt64;
5414   "vg_mda_free", FBytes;
5415   (* Not in Fedora 10:
5416      "vg_mda_size", FBytes;
5417   *)
5418 ]
5419 let lvm_lv_cols = [
5420   "lv_name", FString;
5421   "lv_uuid", FUUID;
5422   "lv_attr", FString (* XXX *);
5423   "lv_major", FInt64;
5424   "lv_minor", FInt64;
5425   "lv_kernel_major", FInt64;
5426   "lv_kernel_minor", FInt64;
5427   "lv_size", FBytes;
5428   "seg_count", FInt64;
5429   "origin", FString;
5430   "snap_percent", FOptPercent;
5431   "copy_percent", FOptPercent;
5432   "move_pv", FString;
5433   "lv_tags", FString;
5434   "mirror_log", FString;
5435   "modules", FString;
5436 ]
5437
5438 (* Names and fields in all structures (in RStruct and RStructList)
5439  * that we support.
5440  *)
5441 let structs = [
5442   (* The old RIntBool return type, only ever used for aug_defnode.  Do
5443    * not use this struct in any new code.
5444    *)
5445   "int_bool", [
5446     "i", FInt32;                (* for historical compatibility *)
5447     "b", FInt32;                (* for historical compatibility *)
5448   ];
5449
5450   (* LVM PVs, VGs, LVs. *)
5451   "lvm_pv", lvm_pv_cols;
5452   "lvm_vg", lvm_vg_cols;
5453   "lvm_lv", lvm_lv_cols;
5454
5455   (* Column names and types from stat structures.
5456    * NB. Can't use things like 'st_atime' because glibc header files
5457    * define some of these as macros.  Ugh.
5458    *)
5459   "stat", [
5460     "dev", FInt64;
5461     "ino", FInt64;
5462     "mode", FInt64;
5463     "nlink", FInt64;
5464     "uid", FInt64;
5465     "gid", FInt64;
5466     "rdev", FInt64;
5467     "size", FInt64;
5468     "blksize", FInt64;
5469     "blocks", FInt64;
5470     "atime", FInt64;
5471     "mtime", FInt64;
5472     "ctime", FInt64;
5473   ];
5474   "statvfs", [
5475     "bsize", FInt64;
5476     "frsize", FInt64;
5477     "blocks", FInt64;
5478     "bfree", FInt64;
5479     "bavail", FInt64;
5480     "files", FInt64;
5481     "ffree", FInt64;
5482     "favail", FInt64;
5483     "fsid", FInt64;
5484     "flag", FInt64;
5485     "namemax", FInt64;
5486   ];
5487
5488   (* Column names in dirent structure. *)
5489   "dirent", [
5490     "ino", FInt64;
5491     (* 'b' 'c' 'd' 'f' (FIFO) 'l' 'r' (regular file) 's' 'u' '?' *)
5492     "ftyp", FChar;
5493     "name", FString;
5494   ];
5495
5496   (* Version numbers. *)
5497   "version", [
5498     "major", FInt64;
5499     "minor", FInt64;
5500     "release", FInt64;
5501     "extra", FString;
5502   ];
5503
5504   (* Extended attribute. *)
5505   "xattr", [
5506     "attrname", FString;
5507     "attrval", FBuffer;
5508   ];
5509
5510   (* Inotify events. *)
5511   "inotify_event", [
5512     "in_wd", FInt64;
5513     "in_mask", FUInt32;
5514     "in_cookie", FUInt32;
5515     "in_name", FString;
5516   ];
5517
5518   (* Partition table entry. *)
5519   "partition", [
5520     "part_num", FInt32;
5521     "part_start", FBytes;
5522     "part_end", FBytes;
5523     "part_size", FBytes;
5524   ];
5525 ] (* end of structs *)
5526
5527 (* Ugh, Java has to be different ..
5528  * These names are also used by the Haskell bindings.
5529  *)
5530 let java_structs = [
5531   "int_bool", "IntBool";
5532   "lvm_pv", "PV";
5533   "lvm_vg", "VG";
5534   "lvm_lv", "LV";
5535   "stat", "Stat";
5536   "statvfs", "StatVFS";
5537   "dirent", "Dirent";
5538   "version", "Version";
5539   "xattr", "XAttr";
5540   "inotify_event", "INotifyEvent";
5541   "partition", "Partition";
5542 ]
5543
5544 (* What structs are actually returned. *)
5545 type rstructs_used_t = RStructOnly | RStructListOnly | RStructAndList
5546
5547 (* Returns a list of RStruct/RStructList structs that are returned
5548  * by any function.  Each element of returned list is a pair:
5549  *
5550  * (structname, RStructOnly)
5551  *    == there exists function which returns RStruct (_, structname)
5552  * (structname, RStructListOnly)
5553  *    == there exists function which returns RStructList (_, structname)
5554  * (structname, RStructAndList)
5555  *    == there are functions returning both RStruct (_, structname)
5556  *                                      and RStructList (_, structname)
5557  *)
5558 let rstructs_used_by functions =
5559   (* ||| is a "logical OR" for rstructs_used_t *)
5560   let (|||) a b =
5561     match a, b with
5562     | RStructAndList, _
5563     | _, RStructAndList -> RStructAndList
5564     | RStructOnly, RStructListOnly
5565     | RStructListOnly, RStructOnly -> RStructAndList
5566     | RStructOnly, RStructOnly -> RStructOnly
5567     | RStructListOnly, RStructListOnly -> RStructListOnly
5568   in
5569
5570   let h = Hashtbl.create 13 in
5571
5572   (* if elem->oldv exists, update entry using ||| operator,
5573    * else just add elem->newv to the hash
5574    *)
5575   let update elem newv =
5576     try  let oldv = Hashtbl.find h elem in
5577          Hashtbl.replace h elem (newv ||| oldv)
5578     with Not_found -> Hashtbl.add h elem newv
5579   in
5580
5581   List.iter (
5582     fun (_, style, _, _, _, _, _) ->
5583       match fst style with
5584       | RStruct (_, structname) -> update structname RStructOnly
5585       | RStructList (_, structname) -> update structname RStructListOnly
5586       | _ -> ()
5587   ) functions;
5588
5589   (* return key->values as a list of (key,value) *)
5590   Hashtbl.fold (fun key value xs -> (key, value) :: xs) h []
5591
5592 (* Used for testing language bindings. *)
5593 type callt =
5594   | CallString of string
5595   | CallOptString of string option
5596   | CallStringList of string list
5597   | CallInt of int
5598   | CallInt64 of int64
5599   | CallBool of bool
5600   | CallBuffer of string
5601
5602 (* Used to memoize the result of pod2text. *)
5603 let pod2text_memo_filename = "src/.pod2text.data"
5604 let pod2text_memo : ((int * string * string), string list) Hashtbl.t =
5605   try
5606     let chan = open_in pod2text_memo_filename in
5607     let v = input_value chan in
5608     close_in chan;
5609     v
5610   with
5611     _ -> Hashtbl.create 13
5612 let pod2text_memo_updated () =
5613   let chan = open_out pod2text_memo_filename in
5614   output_value chan pod2text_memo;
5615   close_out chan
5616
5617 (* Useful functions.
5618  * Note we don't want to use any external OCaml libraries which
5619  * makes this a bit harder than it should be.
5620  *)
5621 module StringMap = Map.Make (String)
5622
5623 let failwithf fs = ksprintf failwith fs
5624
5625 let unique = let i = ref 0 in fun () -> incr i; !i
5626
5627 let replace_char s c1 c2 =
5628   let s2 = String.copy s in
5629   let r = ref false in
5630   for i = 0 to String.length s2 - 1 do
5631     if String.unsafe_get s2 i = c1 then (
5632       String.unsafe_set s2 i c2;
5633       r := true
5634     )
5635   done;
5636   if not !r then s else s2
5637
5638 let isspace c =
5639   c = ' '
5640   (* || c = '\f' *) || c = '\n' || c = '\r' || c = '\t' (* || c = '\v' *)
5641
5642 let triml ?(test = isspace) str =
5643   let i = ref 0 in
5644   let n = ref (String.length str) in
5645   while !n > 0 && test str.[!i]; do
5646     decr n;
5647     incr i
5648   done;
5649   if !i = 0 then str
5650   else String.sub str !i !n
5651
5652 let trimr ?(test = isspace) str =
5653   let n = ref (String.length str) in
5654   while !n > 0 && test str.[!n-1]; do
5655     decr n
5656   done;
5657   if !n = String.length str then str
5658   else String.sub str 0 !n
5659
5660 let trim ?(test = isspace) str =
5661   trimr ~test (triml ~test str)
5662
5663 let rec find s sub =
5664   let len = String.length s in
5665   let sublen = String.length sub in
5666   let rec loop i =
5667     if i <= len-sublen then (
5668       let rec loop2 j =
5669         if j < sublen then (
5670           if s.[i+j] = sub.[j] then loop2 (j+1)
5671           else -1
5672         ) else
5673           i (* found *)
5674       in
5675       let r = loop2 0 in
5676       if r = -1 then loop (i+1) else r
5677     ) else
5678       -1 (* not found *)
5679   in
5680   loop 0
5681
5682 let rec replace_str s s1 s2 =
5683   let len = String.length s in
5684   let sublen = String.length s1 in
5685   let i = find s s1 in
5686   if i = -1 then s
5687   else (
5688     let s' = String.sub s 0 i in
5689     let s'' = String.sub s (i+sublen) (len-i-sublen) in
5690     s' ^ s2 ^ replace_str s'' s1 s2
5691   )
5692
5693 let rec string_split sep str =
5694   let len = String.length str in
5695   let seplen = String.length sep in
5696   let i = find str sep in
5697   if i = -1 then [str]
5698   else (
5699     let s' = String.sub str 0 i in
5700     let s'' = String.sub str (i+seplen) (len-i-seplen) in
5701     s' :: string_split sep s''
5702   )
5703
5704 let files_equal n1 n2 =
5705   let cmd = sprintf "cmp -s %s %s" (Filename.quote n1) (Filename.quote n2) in
5706   match Sys.command cmd with
5707   | 0 -> true
5708   | 1 -> false
5709   | i -> failwithf "%s: failed with error code %d" cmd i
5710
5711 let rec filter_map f = function
5712   | [] -> []
5713   | x :: xs ->
5714       match f x with
5715       | Some y -> y :: filter_map f xs
5716       | None -> filter_map f xs
5717
5718 let rec find_map f = function
5719   | [] -> raise Not_found
5720   | x :: xs ->
5721       match f x with
5722       | Some y -> y
5723       | None -> find_map f xs
5724
5725 let iteri f xs =
5726   let rec loop i = function
5727     | [] -> ()
5728     | x :: xs -> f i x; loop (i+1) xs
5729   in
5730   loop 0 xs
5731
5732 let mapi f xs =
5733   let rec loop i = function
5734     | [] -> []
5735     | x :: xs -> let r = f i x in r :: loop (i+1) xs
5736   in
5737   loop 0 xs
5738
5739 let count_chars c str =
5740   let count = ref 0 in
5741   for i = 0 to String.length str - 1 do
5742     if c = String.unsafe_get str i then incr count
5743   done;
5744   !count
5745
5746 let explode str =
5747   let r = ref [] in
5748   for i = 0 to String.length str - 1 do
5749     let c = String.unsafe_get str i in
5750     r := c :: !r;
5751   done;
5752   List.rev !r
5753
5754 let map_chars f str =
5755   List.map f (explode str)
5756
5757 let name_of_argt = function
5758   | Pathname n | Device n | Dev_or_Path n | String n | OptString n
5759   | StringList n | DeviceList n | Bool n | Int n | Int64 n
5760   | FileIn n | FileOut n | BufferIn n | Key n -> n
5761
5762 let java_name_of_struct typ =
5763   try List.assoc typ java_structs
5764   with Not_found ->
5765     failwithf
5766       "java_name_of_struct: no java_structs entry corresponding to %s" typ
5767
5768 let cols_of_struct typ =
5769   try List.assoc typ structs
5770   with Not_found ->
5771     failwithf "cols_of_struct: unknown struct %s" typ
5772
5773 let seq_of_test = function
5774   | TestRun s | TestOutput (s, _) | TestOutputList (s, _)
5775   | TestOutputListOfDevices (s, _)
5776   | TestOutputInt (s, _) | TestOutputIntOp (s, _, _)
5777   | TestOutputTrue s | TestOutputFalse s
5778   | TestOutputLength (s, _) | TestOutputBuffer (s, _)
5779   | TestOutputStruct (s, _)
5780   | TestLastFail s -> s
5781
5782 (* Handling for function flags. *)
5783 let protocol_limit_warning =
5784   "Because of the message protocol, there is a transfer limit
5785 of somewhere between 2MB and 4MB.  See L<guestfs(3)/PROTOCOL LIMITS>."
5786
5787 let danger_will_robinson =
5788   "B<This command is dangerous.  Without careful use you
5789 can easily destroy all your data>."
5790
5791 let deprecation_notice flags =
5792   try
5793     let alt =
5794       find_map (function DeprecatedBy str -> Some str | _ -> None) flags in
5795     let txt =
5796       sprintf "This function is deprecated.
5797 In new code, use the C<%s> call instead.
5798
5799 Deprecated functions will not be removed from the API, but the
5800 fact that they are deprecated indicates that there are problems
5801 with correct use of these functions." alt in
5802     Some txt
5803   with
5804     Not_found -> None
5805
5806 (* Create list of optional groups. *)
5807 let optgroups =
5808   let h = Hashtbl.create 13 in
5809   List.iter (
5810     fun (name, _, _, flags, _, _, _) ->
5811       List.iter (
5812         function
5813         | Optional group ->
5814             let names = try Hashtbl.find h group with Not_found -> [] in
5815             Hashtbl.replace h group (name :: names)
5816         | _ -> ()
5817       ) flags
5818   ) daemon_functions;
5819   let groups = Hashtbl.fold (fun k _ ks -> k :: ks) h [] in
5820   let groups =
5821     List.map (
5822       fun group -> group, List.sort compare (Hashtbl.find h group)
5823     ) groups in
5824   List.sort (fun x y -> compare (fst x) (fst y)) groups
5825
5826 (* Check function names etc. for consistency. *)
5827 let check_functions () =
5828   let contains_uppercase str =
5829     let len = String.length str in
5830     let rec loop i =
5831       if i >= len then false
5832       else (
5833         let c = str.[i] in
5834         if c >= 'A' && c <= 'Z' then true
5835         else loop (i+1)
5836       )
5837     in
5838     loop 0
5839   in
5840
5841   (* Check function names. *)
5842   List.iter (
5843     fun (name, _, _, _, _, _, _) ->
5844       if String.length name >= 7 && String.sub name 0 7 = "guestfs" then
5845         failwithf "function name %s does not need 'guestfs' prefix" name;
5846       if name = "" then
5847         failwithf "function name is empty";
5848       if name.[0] < 'a' || name.[0] > 'z' then
5849         failwithf "function name %s must start with lowercase a-z" name;
5850       if String.contains name '-' then
5851         failwithf "function name %s should not contain '-', use '_' instead."
5852           name
5853   ) all_functions;
5854
5855   (* Check function parameter/return names. *)
5856   List.iter (
5857     fun (name, style, _, _, _, _, _) ->
5858       let check_arg_ret_name n =
5859         if contains_uppercase n then
5860           failwithf "%s param/ret %s should not contain uppercase chars"
5861             name n;
5862         if String.contains n '-' || String.contains n '_' then
5863           failwithf "%s param/ret %s should not contain '-' or '_'"
5864             name n;
5865         if n = "value" then
5866           failwithf "%s has a param/ret called 'value', which causes conflicts in the OCaml bindings, use something like 'val' or a more descriptive name" name;
5867         if n = "int" || n = "char" || n = "short" || n = "long" then
5868           failwithf "%s has a param/ret which conflicts with a C type (eg. 'int', 'char' etc.)" name;
5869         if n = "i" || n = "n" then
5870           failwithf "%s has a param/ret called 'i' or 'n', which will cause some conflicts in the generated code" name;
5871         if n = "argv" || n = "args" then
5872           failwithf "%s has a param/ret called 'argv' or 'args', which will cause some conflicts in the generated code" name;
5873
5874         (* List Haskell, OCaml and C keywords here.
5875          * http://www.haskell.org/haskellwiki/Keywords
5876          * http://caml.inria.fr/pub/docs/manual-ocaml/lex.html#operator-char
5877          * http://en.wikipedia.org/wiki/C_syntax#Reserved_keywords
5878          * Formatted via: cat c haskell ocaml|sort -u|grep -vE '_|^val$' \
5879          *   |perl -pe 's/(.+)/"$1";/'|fmt -70
5880          * Omitting _-containing words, since they're handled above.
5881          * Omitting the OCaml reserved word, "val", is ok,
5882          * and saves us from renaming several parameters.
5883          *)
5884         let reserved = [
5885           "and"; "as"; "asr"; "assert"; "auto"; "begin"; "break"; "case";
5886           "char"; "class"; "const"; "constraint"; "continue"; "data";
5887           "default"; "deriving"; "do"; "done"; "double"; "downto"; "else";
5888           "end"; "enum"; "exception"; "extern"; "external"; "false"; "float";
5889           "for"; "forall"; "foreign"; "fun"; "function"; "functor"; "goto";
5890           "hiding"; "if"; "import"; "in"; "include"; "infix"; "infixl";
5891           "infixr"; "inherit"; "initializer"; "inline"; "instance"; "int";
5892           "interface";
5893           "land"; "lazy"; "let"; "long"; "lor"; "lsl"; "lsr"; "lxor";
5894           "match"; "mdo"; "method"; "mod"; "module"; "mutable"; "new";
5895           "newtype"; "object"; "of"; "open"; "or"; "private"; "qualified";
5896           "rec"; "register"; "restrict"; "return"; "short"; "sig"; "signed";
5897           "sizeof"; "static"; "struct"; "switch"; "then"; "to"; "true"; "try";
5898           "type"; "typedef"; "union"; "unsigned"; "virtual"; "void";
5899           "volatile"; "when"; "where"; "while";
5900           ] in
5901         if List.mem n reserved then
5902           failwithf "%s has param/ret using reserved word %s" name n;
5903       in
5904
5905       (match fst style with
5906        | RErr -> ()
5907        | RInt n | RInt64 n | RBool n
5908        | RConstString n | RConstOptString n | RString n
5909        | RStringList n | RStruct (n, _) | RStructList (n, _)
5910        | RHashtable n | RBufferOut n ->
5911            check_arg_ret_name n
5912       );
5913       List.iter (fun arg -> check_arg_ret_name (name_of_argt arg)) (snd style)
5914   ) all_functions;
5915
5916   (* Check short descriptions. *)
5917   List.iter (
5918     fun (name, _, _, _, _, shortdesc, _) ->
5919       if shortdesc.[0] <> Char.lowercase shortdesc.[0] then
5920         failwithf "short description of %s should begin with lowercase." name;
5921       let c = shortdesc.[String.length shortdesc-1] in
5922       if c = '\n' || c = '.' then
5923         failwithf "short description of %s should not end with . or \\n." name
5924   ) all_functions;
5925
5926   (* Check long descriptions. *)
5927   List.iter (
5928     fun (name, _, _, _, _, _, longdesc) ->
5929       if longdesc.[String.length longdesc-1] = '\n' then
5930         failwithf "long description of %s should not end with \\n." name
5931   ) all_functions;
5932
5933   (* Check proc_nrs. *)
5934   List.iter (
5935     fun (name, _, proc_nr, _, _, _, _) ->
5936       if proc_nr <= 0 then
5937         failwithf "daemon function %s should have proc_nr > 0" name
5938   ) daemon_functions;
5939
5940   List.iter (
5941     fun (name, _, proc_nr, _, _, _, _) ->
5942       if proc_nr <> -1 then
5943         failwithf "non-daemon function %s should have proc_nr -1" name
5944   ) non_daemon_functions;
5945
5946   let proc_nrs =
5947     List.map (fun (name, _, proc_nr, _, _, _, _) -> name, proc_nr)
5948       daemon_functions in
5949   let proc_nrs =
5950     List.sort (fun (_,nr1) (_,nr2) -> compare nr1 nr2) proc_nrs in
5951   let rec loop = function
5952     | [] -> ()
5953     | [_] -> ()
5954     | (name1,nr1) :: ((name2,nr2) :: _ as rest) when nr1 < nr2 ->
5955         loop rest
5956     | (name1,nr1) :: (name2,nr2) :: _ ->
5957         failwithf "%s and %s have conflicting procedure numbers (%d, %d)"
5958           name1 name2 nr1 nr2
5959   in
5960   loop proc_nrs;
5961
5962   (* Check tests. *)
5963   List.iter (
5964     function
5965       (* Ignore functions that have no tests.  We generate a
5966        * warning when the user does 'make check' instead.
5967        *)
5968     | name, _, _, _, [], _, _ -> ()
5969     | name, _, _, _, tests, _, _ ->
5970         let funcs =
5971           List.map (
5972             fun (_, _, test) ->
5973               match seq_of_test test with
5974               | [] ->
5975                   failwithf "%s has a test containing an empty sequence" name
5976               | cmds -> List.map List.hd cmds
5977           ) tests in
5978         let funcs = List.flatten funcs in
5979
5980         let tested = List.mem name funcs in
5981
5982         if not tested then
5983           failwithf "function %s has tests but does not test itself" name
5984   ) all_functions
5985
5986 (* 'pr' prints to the current output file. *)
5987 let chan = ref Pervasives.stdout
5988 let lines = ref 0
5989 let pr fs =
5990   ksprintf
5991     (fun str ->
5992        let i = count_chars '\n' str in
5993        lines := !lines + i;
5994        output_string !chan str
5995     ) fs
5996
5997 let copyright_years =
5998   let this_year = 1900 + (localtime (time ())).tm_year in
5999   if this_year > 2009 then sprintf "2009-%04d" this_year else "2009"
6000
6001 (* Generate a header block in a number of standard styles. *)
6002 type comment_style =
6003     CStyle | CPlusPlusStyle | HashStyle | OCamlStyle | HaskellStyle
6004 type license = GPLv2plus | LGPLv2plus
6005
6006 let generate_header ?(extra_inputs = []) comment license =
6007   let inputs = "src/generator.ml" :: extra_inputs in
6008   let c = match comment with
6009     | CStyle ->         pr "/* "; " *"
6010     | CPlusPlusStyle -> pr "// "; "//"
6011     | HashStyle ->      pr "# ";  "#"
6012     | OCamlStyle ->     pr "(* "; " *"
6013     | HaskellStyle ->   pr "{- "; "  " in
6014   pr "libguestfs generated file\n";
6015   pr "%s WARNING: THIS FILE IS GENERATED FROM:\n" c;
6016   List.iter (pr "%s   %s\n" c) inputs;
6017   pr "%s ANY CHANGES YOU MAKE TO THIS FILE WILL BE LOST.\n" c;
6018   pr "%s\n" c;
6019   pr "%s Copyright (C) %s Red Hat Inc.\n" c copyright_years;
6020   pr "%s\n" c;
6021   (match license with
6022    | GPLv2plus ->
6023        pr "%s This program is free software; you can redistribute it and/or modify\n" c;
6024        pr "%s it under the terms of the GNU General Public License as published by\n" c;
6025        pr "%s the Free Software Foundation; either version 2 of the License, or\n" c;
6026        pr "%s (at your option) any later version.\n" c;
6027        pr "%s\n" c;
6028        pr "%s This program is distributed in the hope that it will be useful,\n" c;
6029        pr "%s but WITHOUT ANY WARRANTY; without even the implied warranty of\n" c;
6030        pr "%s MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the\n" c;
6031        pr "%s GNU General Public License for more details.\n" c;
6032        pr "%s\n" c;
6033        pr "%s You should have received a copy of the GNU General Public License along\n" c;
6034        pr "%s with this program; if not, write to the Free Software Foundation, Inc.,\n" c;
6035        pr "%s 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA.\n" c;
6036
6037    | LGPLv2plus ->
6038        pr "%s This library is free software; you can redistribute it and/or\n" c;
6039        pr "%s modify it under the terms of the GNU Lesser General Public\n" c;
6040        pr "%s License as published by the Free Software Foundation; either\n" c;
6041        pr "%s version 2 of the License, or (at your option) any later version.\n" c;
6042        pr "%s\n" c;
6043        pr "%s This library is distributed in the hope that it will be useful,\n" c;
6044        pr "%s but WITHOUT ANY WARRANTY; without even the implied warranty of\n" c;
6045        pr "%s MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU\n" c;
6046        pr "%s Lesser General Public License for more details.\n" c;
6047        pr "%s\n" c;
6048        pr "%s You should have received a copy of the GNU Lesser General Public\n" c;
6049        pr "%s License along with this library; if not, write to the Free Software\n" c;
6050        pr "%s Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA\n" c;
6051   );
6052   (match comment with
6053    | CStyle -> pr " */\n"
6054    | CPlusPlusStyle
6055    | HashStyle -> ()
6056    | OCamlStyle -> pr " *)\n"
6057    | HaskellStyle -> pr "-}\n"
6058   );
6059   pr "\n"
6060
6061 (* Start of main code generation functions below this line. *)
6062
6063 (* Generate the pod documentation for the C API. *)
6064 let rec generate_actions_pod () =
6065   List.iter (
6066     fun (shortname, style, _, flags, _, _, longdesc) ->
6067       if not (List.mem NotInDocs flags) then (
6068         let name = "guestfs_" ^ shortname in
6069         pr "=head2 %s\n\n" name;
6070         pr " ";
6071         generate_prototype ~extern:false ~handle:"g" name style;
6072         pr "\n\n";
6073         pr "%s\n\n" longdesc;
6074         (match fst style with
6075          | RErr ->
6076              pr "This function returns 0 on success or -1 on error.\n\n"
6077          | RInt _ ->
6078              pr "On error this function returns -1.\n\n"
6079          | RInt64 _ ->
6080              pr "On error this function returns -1.\n\n"
6081          | RBool _ ->
6082              pr "This function returns a C truth value on success or -1 on error.\n\n"
6083          | RConstString _ ->
6084              pr "This function returns a string, or NULL on error.
6085 The string is owned by the guest handle and must I<not> be freed.\n\n"
6086          | RConstOptString _ ->
6087              pr "This function returns a string which may be NULL.
6088 There is no way to return an error from this function.
6089 The string is owned by the guest handle and must I<not> be freed.\n\n"
6090          | RString _ ->
6091              pr "This function returns a string, or NULL on error.
6092 I<The caller must free the returned string after use>.\n\n"
6093          | RStringList _ ->
6094              pr "This function returns a NULL-terminated array of strings
6095 (like L<environ(3)>), or NULL if there was an error.
6096 I<The caller must free the strings and the array after use>.\n\n"
6097          | RStruct (_, typ) ->
6098              pr "This function returns a C<struct guestfs_%s *>,
6099 or NULL if there was an error.
6100 I<The caller must call C<guestfs_free_%s> after use>.\n\n" typ typ
6101          | RStructList (_, typ) ->
6102              pr "This function returns a C<struct guestfs_%s_list *>
6103 (see E<lt>guestfs-structs.hE<gt>),
6104 or NULL if there was an error.
6105 I<The caller must call C<guestfs_free_%s_list> after use>.\n\n" typ typ
6106          | RHashtable _ ->
6107              pr "This function returns a NULL-terminated array of
6108 strings, or NULL if there was an error.
6109 The array of strings will always have length C<2n+1>, where
6110 C<n> keys and values alternate, followed by the trailing NULL entry.
6111 I<The caller must free the strings and the array after use>.\n\n"
6112          | RBufferOut _ ->
6113              pr "This function returns a buffer, or NULL on error.
6114 The size of the returned buffer is written to C<*size_r>.
6115 I<The caller must free the returned buffer after use>.\n\n"
6116         );
6117         if List.mem ProtocolLimitWarning flags then
6118           pr "%s\n\n" protocol_limit_warning;
6119         if List.mem DangerWillRobinson flags then
6120           pr "%s\n\n" danger_will_robinson;
6121         if List.exists (function Key _ -> true | _ -> false) (snd style) then
6122           pr "This function takes a key or passphrase parameter which
6123 could contain sensitive material.  Read the section
6124 L</KEYS AND PASSPHRASES> for more information.\n\n";
6125         match deprecation_notice flags with
6126         | None -> ()
6127         | Some txt -> pr "%s\n\n" txt
6128       )
6129   ) all_functions_sorted
6130
6131 and generate_structs_pod () =
6132   (* Structs documentation. *)
6133   List.iter (
6134     fun (typ, cols) ->
6135       pr "=head2 guestfs_%s\n" typ;
6136       pr "\n";
6137       pr " struct guestfs_%s {\n" typ;
6138       List.iter (
6139         function
6140         | name, FChar -> pr "   char %s;\n" name
6141         | name, FUInt32 -> pr "   uint32_t %s;\n" name
6142         | name, FInt32 -> pr "   int32_t %s;\n" name
6143         | name, (FUInt64|FBytes) -> pr "   uint64_t %s;\n" name
6144         | name, FInt64 -> pr "   int64_t %s;\n" name
6145         | name, FString -> pr "   char *%s;\n" name
6146         | name, FBuffer ->
6147             pr "   /* The next two fields describe a byte array. */\n";
6148             pr "   uint32_t %s_len;\n" name;
6149             pr "   char *%s;\n" name
6150         | name, FUUID ->
6151             pr "   /* The next field is NOT nul-terminated, be careful when printing it: */\n";
6152             pr "   char %s[32];\n" name
6153         | name, FOptPercent ->
6154             pr "   /* The next field is [0..100] or -1 meaning 'not present': */\n";
6155             pr "   float %s;\n" name
6156       ) cols;
6157       pr " };\n";
6158       pr " \n";
6159       pr " struct guestfs_%s_list {\n" typ;
6160       pr "   uint32_t len; /* Number of elements in list. */\n";
6161       pr "   struct guestfs_%s *val; /* Elements. */\n" typ;
6162       pr " };\n";
6163       pr " \n";
6164       pr " void guestfs_free_%s (struct guestfs_free_%s *);\n" typ typ;
6165       pr " void guestfs_free_%s_list (struct guestfs_free_%s_list *);\n"
6166         typ typ;
6167       pr "\n"
6168   ) structs
6169
6170 and generate_availability_pod () =
6171   (* Availability documentation. *)
6172   pr "=over 4\n";
6173   pr "\n";
6174   List.iter (
6175     fun (group, functions) ->
6176       pr "=item B<%s>\n" group;
6177       pr "\n";
6178       pr "The following functions:\n";
6179       List.iter (pr "L</guestfs_%s>\n") functions;
6180       pr "\n"
6181   ) optgroups;
6182   pr "=back\n";
6183   pr "\n"
6184
6185 (* Generate the protocol (XDR) file, 'guestfs_protocol.x' and
6186  * indirectly 'guestfs_protocol.h' and 'guestfs_protocol.c'.
6187  *
6188  * We have to use an underscore instead of a dash because otherwise
6189  * rpcgen generates incorrect code.
6190  *
6191  * This header is NOT exported to clients, but see also generate_structs_h.
6192  *)
6193 and generate_xdr () =
6194   generate_header CStyle LGPLv2plus;
6195
6196   (* This has to be defined to get around a limitation in Sun's rpcgen. *)
6197   pr "typedef string str<>;\n";
6198   pr "\n";
6199
6200   (* Internal structures. *)
6201   List.iter (
6202     function
6203     | typ, cols ->
6204         pr "struct guestfs_int_%s {\n" typ;
6205         List.iter (function
6206                    | name, FChar -> pr "  char %s;\n" name
6207                    | name, FString -> pr "  string %s<>;\n" name
6208                    | name, FBuffer -> pr "  opaque %s<>;\n" name
6209                    | name, FUUID -> pr "  opaque %s[32];\n" name
6210                    | name, (FInt32|FUInt32) -> pr "  int %s;\n" name
6211                    | name, (FInt64|FUInt64|FBytes) -> pr "  hyper %s;\n" name
6212                    | name, FOptPercent -> pr "  float %s;\n" name
6213                   ) cols;
6214         pr "};\n";
6215         pr "\n";
6216         pr "typedef struct guestfs_int_%s guestfs_int_%s_list<>;\n" typ typ;
6217         pr "\n";
6218   ) structs;
6219
6220   List.iter (
6221     fun (shortname, style, _, _, _, _, _) ->
6222       let name = "guestfs_" ^ shortname in
6223
6224       (match snd style with
6225        | [] -> ()
6226        | args ->
6227            pr "struct %s_args {\n" name;
6228            List.iter (
6229              function
6230              | Pathname n | Device n | Dev_or_Path n | String n | Key n ->
6231                  pr "  string %s<>;\n" n
6232              | OptString n -> pr "  str *%s;\n" n
6233              | StringList n | DeviceList n -> pr "  str %s<>;\n" n
6234              | Bool n -> pr "  bool %s;\n" n
6235              | Int n -> pr "  int %s;\n" n
6236              | Int64 n -> pr "  hyper %s;\n" n
6237              | BufferIn n ->
6238                  pr "  opaque %s<>;\n" n
6239              | FileIn _ | FileOut _ -> ()
6240            ) args;
6241            pr "};\n\n"
6242       );
6243       (match fst style with
6244        | RErr -> ()
6245        | RInt n ->
6246            pr "struct %s_ret {\n" name;
6247            pr "  int %s;\n" n;
6248            pr "};\n\n"
6249        | RInt64 n ->
6250            pr "struct %s_ret {\n" name;
6251            pr "  hyper %s;\n" n;
6252            pr "};\n\n"
6253        | RBool n ->
6254            pr "struct %s_ret {\n" name;
6255            pr "  bool %s;\n" n;
6256            pr "};\n\n"
6257        | RConstString _ | RConstOptString _ ->
6258            failwithf "RConstString|RConstOptString cannot be used by daemon functions"
6259        | RString n ->
6260            pr "struct %s_ret {\n" name;
6261            pr "  string %s<>;\n" n;
6262            pr "};\n\n"
6263        | RStringList n ->
6264            pr "struct %s_ret {\n" name;
6265            pr "  str %s<>;\n" n;
6266            pr "};\n\n"
6267        | RStruct (n, typ) ->
6268            pr "struct %s_ret {\n" name;
6269            pr "  guestfs_int_%s %s;\n" typ n;
6270            pr "};\n\n"
6271        | RStructList (n, typ) ->
6272            pr "struct %s_ret {\n" name;
6273            pr "  guestfs_int_%s_list %s;\n" typ n;
6274            pr "};\n\n"
6275        | RHashtable n ->
6276            pr "struct %s_ret {\n" name;
6277            pr "  str %s<>;\n" n;
6278            pr "};\n\n"
6279        | RBufferOut n ->
6280            pr "struct %s_ret {\n" name;
6281            pr "  opaque %s<>;\n" n;
6282            pr "};\n\n"
6283       );
6284   ) daemon_functions;
6285
6286   (* Table of procedure numbers. *)
6287   pr "enum guestfs_procedure {\n";
6288   List.iter (
6289     fun (shortname, _, proc_nr, _, _, _, _) ->
6290       pr "  GUESTFS_PROC_%s = %d,\n" (String.uppercase shortname) proc_nr
6291   ) daemon_functions;
6292   pr "  GUESTFS_PROC_NR_PROCS\n";
6293   pr "};\n";
6294   pr "\n";
6295
6296   (* Having to choose a maximum message size is annoying for several
6297    * reasons (it limits what we can do in the API), but it (a) makes
6298    * the protocol a lot simpler, and (b) provides a bound on the size
6299    * of the daemon which operates in limited memory space.
6300    *)
6301   pr "const GUESTFS_MESSAGE_MAX = %d;\n" (4 * 1024 * 1024);
6302   pr "\n";
6303
6304   (* Message header, etc. *)
6305   pr "\
6306 /* The communication protocol is now documented in the guestfs(3)
6307  * manpage.
6308  */
6309
6310 const GUESTFS_PROGRAM = 0x2000F5F5;
6311 const GUESTFS_PROTOCOL_VERSION = 1;
6312
6313 /* These constants must be larger than any possible message length. */
6314 const GUESTFS_LAUNCH_FLAG = 0xf5f55ff5;
6315 const GUESTFS_CANCEL_FLAG = 0xffffeeee;
6316
6317 enum guestfs_message_direction {
6318   GUESTFS_DIRECTION_CALL = 0,        /* client -> daemon */
6319   GUESTFS_DIRECTION_REPLY = 1        /* daemon -> client */
6320 };
6321
6322 enum guestfs_message_status {
6323   GUESTFS_STATUS_OK = 0,
6324   GUESTFS_STATUS_ERROR = 1
6325 };
6326
6327 const GUESTFS_ERROR_LEN = 256;
6328
6329 struct guestfs_message_error {
6330   string error_message<GUESTFS_ERROR_LEN>;
6331 };
6332
6333 struct guestfs_message_header {
6334   unsigned prog;                     /* GUESTFS_PROGRAM */
6335   unsigned vers;                     /* GUESTFS_PROTOCOL_VERSION */
6336   guestfs_procedure proc;            /* GUESTFS_PROC_x */
6337   guestfs_message_direction direction;
6338   unsigned serial;                   /* message serial number */
6339   guestfs_message_status status;
6340 };
6341
6342 const GUESTFS_MAX_CHUNK_SIZE = 8192;
6343
6344 struct guestfs_chunk {
6345   int cancel;                        /* if non-zero, transfer is cancelled */
6346   /* data size is 0 bytes if the transfer has finished successfully */
6347   opaque data<GUESTFS_MAX_CHUNK_SIZE>;
6348 };
6349 "
6350
6351 (* Generate the guestfs-structs.h file. *)
6352 and generate_structs_h () =
6353   generate_header CStyle LGPLv2plus;
6354
6355   (* This is a public exported header file containing various
6356    * structures.  The structures are carefully written to have
6357    * exactly the same in-memory format as the XDR structures that
6358    * we use on the wire to the daemon.  The reason for creating
6359    * copies of these structures here is just so we don't have to
6360    * export the whole of guestfs_protocol.h (which includes much
6361    * unrelated and XDR-dependent stuff that we don't want to be
6362    * public, or required by clients).
6363    *
6364    * To reiterate, we will pass these structures to and from the
6365    * client with a simple assignment or memcpy, so the format
6366    * must be identical to what rpcgen / the RFC defines.
6367    *)
6368
6369   (* Public structures. *)
6370   List.iter (
6371     fun (typ, cols) ->
6372       pr "struct guestfs_%s {\n" typ;
6373       List.iter (
6374         function
6375         | name, FChar -> pr "  char %s;\n" name
6376         | name, FString -> pr "  char *%s;\n" name
6377         | name, FBuffer ->
6378             pr "  uint32_t %s_len;\n" name;
6379             pr "  char *%s;\n" name
6380         | name, FUUID -> pr "  char %s[32]; /* this is NOT nul-terminated, be careful when printing */\n" name
6381         | name, FUInt32 -> pr "  uint32_t %s;\n" name
6382         | name, FInt32 -> pr "  int32_t %s;\n" name
6383         | name, (FUInt64|FBytes) -> pr "  uint64_t %s;\n" name
6384         | name, FInt64 -> pr "  int64_t %s;\n" name
6385         | name, FOptPercent -> pr "  float %s; /* [0..100] or -1 */\n" name
6386       ) cols;
6387       pr "};\n";
6388       pr "\n";
6389       pr "struct guestfs_%s_list {\n" typ;
6390       pr "  uint32_t len;\n";
6391       pr "  struct guestfs_%s *val;\n" typ;
6392       pr "};\n";
6393       pr "\n";
6394       pr "extern void guestfs_free_%s (struct guestfs_%s *);\n" typ typ;
6395       pr "extern void guestfs_free_%s_list (struct guestfs_%s_list *);\n" typ typ;
6396       pr "\n"
6397   ) structs
6398
6399 (* Generate the guestfs-actions.h file. *)
6400 and generate_actions_h () =
6401   generate_header CStyle LGPLv2plus;
6402   List.iter (
6403     fun (shortname, style, _, _, _, _, _) ->
6404       let name = "guestfs_" ^ shortname in
6405       generate_prototype ~single_line:true ~newline:true ~handle:"g"
6406         name style
6407   ) all_functions
6408
6409 (* Generate the guestfs-internal-actions.h file. *)
6410 and generate_internal_actions_h () =
6411   generate_header CStyle LGPLv2plus;
6412   List.iter (
6413     fun (shortname, style, _, _, _, _, _) ->
6414       let name = "guestfs__" ^ shortname in
6415       generate_prototype ~single_line:true ~newline:true ~handle:"g"
6416         name style
6417   ) non_daemon_functions
6418
6419 (* Generate the client-side dispatch stubs. *)
6420 and generate_client_actions () =
6421   generate_header CStyle LGPLv2plus;
6422
6423   pr "\
6424 #include <stdio.h>
6425 #include <stdlib.h>
6426 #include <stdint.h>
6427 #include <string.h>
6428 #include <inttypes.h>
6429
6430 #include \"guestfs.h\"
6431 #include \"guestfs-internal.h\"
6432 #include \"guestfs-internal-actions.h\"
6433 #include \"guestfs_protocol.h\"
6434
6435 /* Check the return message from a call for validity. */
6436 static int
6437 check_reply_header (guestfs_h *g,
6438                     const struct guestfs_message_header *hdr,
6439                     unsigned int proc_nr, unsigned int serial)
6440 {
6441   if (hdr->prog != GUESTFS_PROGRAM) {
6442     error (g, \"wrong program (%%d/%%d)\", hdr->prog, GUESTFS_PROGRAM);
6443     return -1;
6444   }
6445   if (hdr->vers != GUESTFS_PROTOCOL_VERSION) {
6446     error (g, \"wrong protocol version (%%d/%%d)\",
6447            hdr->vers, GUESTFS_PROTOCOL_VERSION);
6448     return -1;
6449   }
6450   if (hdr->direction != GUESTFS_DIRECTION_REPLY) {
6451     error (g, \"unexpected message direction (%%d/%%d)\",
6452            hdr->direction, GUESTFS_DIRECTION_REPLY);
6453     return -1;
6454   }
6455   if (hdr->proc != proc_nr) {
6456     error (g, \"unexpected procedure number (%%d/%%d)\", hdr->proc, proc_nr);
6457     return -1;
6458   }
6459   if (hdr->serial != serial) {
6460     error (g, \"unexpected serial (%%d/%%d)\", hdr->serial, serial);
6461     return -1;
6462   }
6463
6464   return 0;
6465 }
6466
6467 /* Check we are in the right state to run a high-level action. */
6468 static int
6469 check_state (guestfs_h *g, const char *caller)
6470 {
6471   if (!guestfs__is_ready (g)) {
6472     if (guestfs__is_config (g) || guestfs__is_launching (g))
6473       error (g, \"%%s: call launch before using this function\\n(in guestfish, don't forget to use the 'run' command)\",
6474         caller);
6475     else
6476       error (g, \"%%s called from the wrong state, %%d != READY\",
6477         caller, guestfs__get_state (g));
6478     return -1;
6479   }
6480   return 0;
6481 }
6482
6483 ";
6484
6485   let error_code_of = function
6486     | RErr | RInt _ | RInt64 _ | RBool _ -> "-1"
6487     | RConstString _ | RConstOptString _
6488     | RString _ | RStringList _
6489     | RStruct _ | RStructList _
6490     | RHashtable _ | RBufferOut _ -> "NULL"
6491   in
6492
6493   (* Generate code to check String-like parameters are not passed in
6494    * as NULL (returning an error if they are).
6495    *)
6496   let check_null_strings shortname style =
6497     let pr_newline = ref false in
6498     List.iter (
6499       function
6500       (* parameters which should not be NULL *)
6501       | String n
6502       | Device n
6503       | Pathname n
6504       | Dev_or_Path n
6505       | FileIn n
6506       | FileOut n
6507       | BufferIn n
6508       | StringList n
6509       | DeviceList n
6510       | Key n ->
6511           pr "  if (%s == NULL) {\n" n;
6512           pr "    error (g, \"%%s: %%s: parameter cannot be NULL\",\n";
6513           pr "           \"%s\", \"%s\");\n" shortname n;
6514           pr "    return %s;\n" (error_code_of (fst style));
6515           pr "  }\n";
6516           pr_newline := true
6517
6518       (* can be NULL *)
6519       | OptString _
6520
6521       (* not applicable *)
6522       | Bool _
6523       | Int _
6524       | Int64 _ -> ()
6525     ) (snd style);
6526
6527     if !pr_newline then pr "\n";
6528   in
6529
6530   (* Generate code to generate guestfish call traces. *)
6531   let trace_call shortname style =
6532     pr "  if (guestfs__get_trace (g)) {\n";
6533
6534     let needs_i =
6535       List.exists (function
6536                    | StringList _ | DeviceList _ -> true
6537                    | _ -> false) (snd style) in
6538     if needs_i then (
6539       pr "    size_t i;\n";
6540       pr "\n"
6541     );
6542
6543     pr "    fprintf (stderr, \"%s\");\n" shortname;
6544     List.iter (
6545       function
6546       | String n                        (* strings *)
6547       | Device n
6548       | Pathname n
6549       | Dev_or_Path n
6550       | FileIn n
6551       | FileOut n
6552       | BufferIn n
6553       | Key n ->
6554           (* guestfish doesn't support string escaping, so neither do we *)
6555           pr "    fprintf (stderr, \" \\\"%%s\\\"\", %s);\n" n
6556       | OptString n ->                  (* string option *)
6557           pr "    if (%s) fprintf (stderr, \" \\\"%%s\\\"\", %s);\n" n n;
6558           pr "    else fprintf (stderr, \" null\");\n"
6559       | StringList n
6560       | DeviceList n ->                 (* string list *)
6561           pr "    fputc (' ', stderr);\n";
6562           pr "    fputc ('\"', stderr);\n";
6563           pr "    for (i = 0; %s[i]; ++i) {\n" n;
6564           pr "      if (i > 0) fputc (' ', stderr);\n";
6565           pr "      fputs (%s[i], stderr);\n" n;
6566           pr "    }\n";
6567           pr "    fputc ('\"', stderr);\n";
6568       | Bool n ->                       (* boolean *)
6569           pr "    fputs (%s ? \" true\" : \" false\", stderr);\n" n
6570       | Int n ->                        (* int *)
6571           pr "    fprintf (stderr, \" %%d\", %s);\n" n
6572       | Int64 n ->
6573           pr "    fprintf (stderr, \" %%\" PRIi64, %s);\n" n
6574     ) (snd style);
6575     pr "    fputc ('\\n', stderr);\n";
6576     pr "  }\n";
6577     pr "\n";
6578   in
6579
6580   (* For non-daemon functions, generate a wrapper around each function. *)
6581   List.iter (
6582     fun (shortname, style, _, _, _, _, _) ->
6583       let name = "guestfs_" ^ shortname in
6584
6585       generate_prototype ~extern:false ~semicolon:false ~newline:true
6586         ~handle:"g" name style;
6587       pr "{\n";
6588       check_null_strings shortname style;
6589       trace_call shortname style;
6590       pr "  return guestfs__%s " shortname;
6591       generate_c_call_args ~handle:"g" style;
6592       pr ";\n";
6593       pr "}\n";
6594       pr "\n"
6595   ) non_daemon_functions;
6596
6597   (* Client-side stubs for each function. *)
6598   List.iter (
6599     fun (shortname, style, _, _, _, _, _) ->
6600       let name = "guestfs_" ^ shortname in
6601       let error_code = error_code_of (fst style) in
6602
6603       (* Generate the action stub. *)
6604       generate_prototype ~extern:false ~semicolon:false ~newline:true
6605         ~handle:"g" name style;
6606
6607       pr "{\n";
6608
6609       (match snd style with
6610        | [] -> ()
6611        | _ -> pr "  struct %s_args args;\n" name
6612       );
6613
6614       pr "  guestfs_message_header hdr;\n";
6615       pr "  guestfs_message_error err;\n";
6616       let has_ret =
6617         match fst style with
6618         | RErr -> false
6619         | RConstString _ | RConstOptString _ ->
6620             failwithf "RConstString|RConstOptString cannot be used by daemon functions"
6621         | RInt _ | RInt64 _
6622         | RBool _ | RString _ | RStringList _
6623         | RStruct _ | RStructList _
6624         | RHashtable _ | RBufferOut _ ->
6625             pr "  struct %s_ret ret;\n" name;
6626             true in
6627
6628       pr "  int serial;\n";
6629       pr "  int r;\n";
6630       pr "\n";
6631       check_null_strings shortname style;
6632       trace_call shortname style;
6633       pr "  if (check_state (g, \"%s\") == -1) return %s;\n"
6634         shortname error_code;
6635       pr "  guestfs___set_busy (g);\n";
6636       pr "\n";
6637
6638       (* Send the main header and arguments. *)
6639       (match snd style with
6640        | [] ->
6641            pr "  serial = guestfs___send (g, GUESTFS_PROC_%s, NULL, NULL);\n"
6642              (String.uppercase shortname)
6643        | args ->
6644            List.iter (
6645              function
6646              | Pathname n | Device n | Dev_or_Path n | String n | Key n ->
6647                  pr "  args.%s = (char *) %s;\n" n n
6648              | OptString n ->
6649                  pr "  args.%s = %s ? (char **) &%s : NULL;\n" n n n
6650              | StringList n | DeviceList n ->
6651                  pr "  args.%s.%s_val = (char **) %s;\n" n n n;
6652                  pr "  for (args.%s.%s_len = 0; %s[args.%s.%s_len]; args.%s.%s_len++) ;\n" n n n n n n n;
6653              | Bool n ->
6654                  pr "  args.%s = %s;\n" n n
6655              | Int n ->
6656                  pr "  args.%s = %s;\n" n n
6657              | Int64 n ->
6658                  pr "  args.%s = %s;\n" n n
6659              | FileIn _ | FileOut _ -> ()
6660              | BufferIn n ->
6661                  pr "  /* Just catch grossly large sizes. XDR encoding will make this precise. */\n";
6662                  pr "  if (%s_size >= GUESTFS_MESSAGE_MAX) {\n" n;
6663                  pr "    error (g, \"%%s: size of input buffer too large\", \"%s\");\n"
6664                    shortname;
6665                  pr "    guestfs___end_busy (g);\n";
6666                  pr "    return %s;\n" error_code;
6667                  pr "  }\n";
6668                  pr "  args.%s.%s_val = (char *) %s;\n" n n n;
6669                  pr "  args.%s.%s_len = %s_size;\n" n n n
6670            ) args;
6671            pr "  serial = guestfs___send (g, GUESTFS_PROC_%s,\n"
6672              (String.uppercase shortname);
6673            pr "        (xdrproc_t) xdr_%s_args, (char *) &args);\n"
6674              name;
6675       );
6676       pr "  if (serial == -1) {\n";
6677       pr "    guestfs___end_busy (g);\n";
6678       pr "    return %s;\n" error_code;
6679       pr "  }\n";
6680       pr "\n";
6681
6682       (* Send any additional files (FileIn) requested. *)
6683       let need_read_reply_label = ref false in
6684       List.iter (
6685         function
6686         | FileIn n ->
6687             pr "  r = guestfs___send_file (g, %s);\n" n;
6688             pr "  if (r == -1) {\n";
6689             pr "    guestfs___end_busy (g);\n";
6690             pr "    return %s;\n" error_code;
6691             pr "  }\n";
6692             pr "  if (r == -2) /* daemon cancelled */\n";
6693             pr "    goto read_reply;\n";
6694             need_read_reply_label := true;
6695             pr "\n";
6696         | _ -> ()
6697       ) (snd style);
6698
6699       (* Wait for the reply from the remote end. *)
6700       if !need_read_reply_label then pr " read_reply:\n";
6701       pr "  memset (&hdr, 0, sizeof hdr);\n";
6702       pr "  memset (&err, 0, sizeof err);\n";
6703       if has_ret then pr "  memset (&ret, 0, sizeof ret);\n";
6704       pr "\n";
6705       pr "  r = guestfs___recv (g, \"%s\", &hdr, &err,\n        " shortname;
6706       if not has_ret then
6707         pr "NULL, NULL"
6708       else
6709         pr "(xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret" shortname;
6710       pr ");\n";
6711
6712       pr "  if (r == -1) {\n";
6713       pr "    guestfs___end_busy (g);\n";
6714       pr "    return %s;\n" error_code;
6715       pr "  }\n";
6716       pr "\n";
6717
6718       pr "  if (check_reply_header (g, &hdr, GUESTFS_PROC_%s, serial) == -1) {\n"
6719         (String.uppercase shortname);
6720       pr "    guestfs___end_busy (g);\n";
6721       pr "    return %s;\n" error_code;
6722       pr "  }\n";
6723       pr "\n";
6724
6725       pr "  if (hdr.status == GUESTFS_STATUS_ERROR) {\n";
6726       pr "    error (g, \"%%s: %%s\", \"%s\", err.error_message);\n" shortname;
6727       pr "    free (err.error_message);\n";
6728       pr "    guestfs___end_busy (g);\n";
6729       pr "    return %s;\n" error_code;
6730       pr "  }\n";
6731       pr "\n";
6732
6733       (* Expecting to receive further files (FileOut)? *)
6734       List.iter (
6735         function
6736         | FileOut n ->
6737             pr "  if (guestfs___recv_file (g, %s) == -1) {\n" n;
6738             pr "    guestfs___end_busy (g);\n";
6739             pr "    return %s;\n" error_code;
6740             pr "  }\n";
6741             pr "\n";
6742         | _ -> ()
6743       ) (snd style);
6744
6745       pr "  guestfs___end_busy (g);\n";
6746
6747       (match fst style with
6748        | RErr -> pr "  return 0;\n"
6749        | RInt n | RInt64 n | RBool n ->
6750            pr "  return ret.%s;\n" n
6751        | RConstString _ | RConstOptString _ ->
6752            failwithf "RConstString|RConstOptString cannot be used by daemon functions"
6753        | RString n ->
6754            pr "  return ret.%s; /* caller will free */\n" n
6755        | RStringList n | RHashtable n ->
6756            pr "  /* caller will free this, but we need to add a NULL entry */\n";
6757            pr "  ret.%s.%s_val =\n" n n;
6758            pr "    safe_realloc (g, ret.%s.%s_val,\n" n n;
6759            pr "                  sizeof (char *) * (ret.%s.%s_len + 1));\n"
6760              n n;
6761            pr "  ret.%s.%s_val[ret.%s.%s_len] = NULL;\n" n n n n;
6762            pr "  return ret.%s.%s_val;\n" n n
6763        | RStruct (n, _) ->
6764            pr "  /* caller will free this */\n";
6765            pr "  return safe_memdup (g, &ret.%s, sizeof (ret.%s));\n" n n
6766        | RStructList (n, _) ->
6767            pr "  /* caller will free this */\n";
6768            pr "  return safe_memdup (g, &ret.%s, sizeof (ret.%s));\n" n n
6769        | RBufferOut n ->
6770            pr "  /* RBufferOut is tricky: If the buffer is zero-length, then\n";
6771            pr "   * _val might be NULL here.  To make the API saner for\n";
6772            pr "   * callers, we turn this case into a unique pointer (using\n";
6773            pr "   * malloc(1)).\n";
6774            pr "   */\n";
6775            pr "  if (ret.%s.%s_len > 0) {\n" n n;
6776            pr "    *size_r = ret.%s.%s_len;\n" n n;
6777            pr "    return ret.%s.%s_val; /* caller will free */\n" n n;
6778            pr "  } else {\n";
6779            pr "    free (ret.%s.%s_val);\n" n n;
6780            pr "    char *p = safe_malloc (g, 1);\n";
6781            pr "    *size_r = ret.%s.%s_len;\n" n n;
6782            pr "    return p;\n";
6783            pr "  }\n";
6784       );
6785
6786       pr "}\n\n"
6787   ) daemon_functions;
6788
6789   (* Functions to free structures. *)
6790   pr "/* Structure-freeing functions.  These rely on the fact that the\n";
6791   pr " * structure format is identical to the XDR format.  See note in\n";
6792   pr " * generator.ml.\n";
6793   pr " */\n";
6794   pr "\n";
6795
6796   List.iter (
6797     fun (typ, _) ->
6798       pr "void\n";
6799       pr "guestfs_free_%s (struct guestfs_%s *x)\n" typ typ;
6800       pr "{\n";
6801       pr "  xdr_free ((xdrproc_t) xdr_guestfs_int_%s, (char *) x);\n" typ;
6802       pr "  free (x);\n";
6803       pr "}\n";
6804       pr "\n";
6805
6806       pr "void\n";
6807       pr "guestfs_free_%s_list (struct guestfs_%s_list *x)\n" typ typ;
6808       pr "{\n";
6809       pr "  xdr_free ((xdrproc_t) xdr_guestfs_int_%s_list, (char *) x);\n" typ;
6810       pr "  free (x);\n";
6811       pr "}\n";
6812       pr "\n";
6813
6814   ) structs;
6815
6816 (* Generate daemon/actions.h. *)
6817 and generate_daemon_actions_h () =
6818   generate_header CStyle GPLv2plus;
6819
6820   pr "#include \"../src/guestfs_protocol.h\"\n";
6821   pr "\n";
6822
6823   List.iter (
6824     fun (name, style, _, _, _, _, _) ->
6825       generate_prototype
6826         ~single_line:true ~newline:true ~in_daemon:true ~prefix:"do_"
6827         name style;
6828   ) daemon_functions
6829
6830 (* Generate the linker script which controls the visibility of
6831  * symbols in the public ABI and ensures no other symbols get
6832  * exported accidentally.
6833  *)
6834 and generate_linker_script () =
6835   generate_header HashStyle GPLv2plus;
6836
6837   let globals = [
6838     "guestfs_create";
6839     "guestfs_close";
6840     "guestfs_get_error_handler";
6841     "guestfs_get_out_of_memory_handler";
6842     "guestfs_last_error";
6843     "guestfs_set_close_callback";
6844     "guestfs_set_error_handler";
6845     "guestfs_set_launch_done_callback";
6846     "guestfs_set_log_message_callback";
6847     "guestfs_set_out_of_memory_handler";
6848     "guestfs_set_subprocess_quit_callback";
6849
6850     (* Unofficial parts of the API: the bindings code use these
6851      * functions, so it is useful to export them.
6852      *)
6853     "guestfs_safe_calloc";
6854     "guestfs_safe_malloc";
6855     "guestfs_safe_strdup";
6856     "guestfs_safe_memdup";
6857   ] in
6858   let functions =
6859     List.map (fun (name, _, _, _, _, _, _) -> "guestfs_" ^ name)
6860       all_functions in
6861   let structs =
6862     List.concat (
6863       List.map (fun (typ, _) ->
6864                   ["guestfs_free_" ^ typ; "guestfs_free_" ^ typ ^ "_list"])
6865         structs
6866     ) in
6867   let globals = List.sort compare (globals @ functions @ structs) in
6868
6869   pr "{\n";
6870   pr "    global:\n";
6871   List.iter (pr "        %s;\n") globals;
6872   pr "\n";
6873
6874   pr "    local:\n";
6875   pr "        *;\n";
6876   pr "};\n"
6877
6878 (* Generate the server-side stubs. *)
6879 and generate_daemon_actions () =
6880   generate_header CStyle GPLv2plus;
6881
6882   pr "#include <config.h>\n";
6883   pr "\n";
6884   pr "#include <stdio.h>\n";
6885   pr "#include <stdlib.h>\n";
6886   pr "#include <string.h>\n";
6887   pr "#include <inttypes.h>\n";
6888   pr "#include <rpc/types.h>\n";
6889   pr "#include <rpc/xdr.h>\n";
6890   pr "\n";
6891   pr "#include \"daemon.h\"\n";
6892   pr "#include \"c-ctype.h\"\n";
6893   pr "#include \"../src/guestfs_protocol.h\"\n";
6894   pr "#include \"actions.h\"\n";
6895   pr "\n";
6896
6897   List.iter (
6898     fun (name, style, _, _, _, _, _) ->
6899       (* Generate server-side stubs. *)
6900       pr "static void %s_stub (XDR *xdr_in)\n" name;
6901       pr "{\n";
6902       let error_code =
6903         match fst style with
6904         | RErr | RInt _ -> pr "  int r;\n"; "-1"
6905         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
6906         | RBool _ -> pr "  int r;\n"; "-1"
6907         | RConstString _ | RConstOptString _ ->
6908             failwithf "RConstString|RConstOptString cannot be used by daemon functions"
6909         | RString _ -> pr "  char *r;\n"; "NULL"
6910         | RStringList _ | RHashtable _ -> pr "  char **r;\n"; "NULL"
6911         | RStruct (_, typ) -> pr "  guestfs_int_%s *r;\n" typ; "NULL"
6912         | RStructList (_, typ) -> pr "  guestfs_int_%s_list *r;\n" typ; "NULL"
6913         | RBufferOut _ ->
6914             pr "  size_t size = 1;\n";
6915             pr "  char *r;\n";
6916             "NULL" in
6917
6918       (match snd style with
6919        | [] -> ()
6920        | args ->
6921            pr "  struct guestfs_%s_args args;\n" name;
6922            List.iter (
6923              function
6924              | Device n | Dev_or_Path n
6925              | Pathname n
6926              | String n
6927              | Key n -> ()
6928              | OptString n -> pr "  char *%s;\n" n
6929              | StringList n | DeviceList n -> pr "  char **%s;\n" n
6930              | Bool n -> pr "  int %s;\n" n
6931              | Int n -> pr "  int %s;\n" n
6932              | Int64 n -> pr "  int64_t %s;\n" n
6933              | FileIn _ | FileOut _ -> ()
6934              | BufferIn n ->
6935                  pr "  const char *%s;\n" n;
6936                  pr "  size_t %s_size;\n" n
6937            ) args
6938       );
6939       pr "\n";
6940
6941       let is_filein =
6942         List.exists (function FileIn _ -> true | _ -> false) (snd style) in
6943
6944       (match snd style with
6945        | [] -> ()
6946        | args ->
6947            pr "  memset (&args, 0, sizeof args);\n";
6948            pr "\n";
6949            pr "  if (!xdr_guestfs_%s_args (xdr_in, &args)) {\n" name;
6950            if is_filein then
6951              pr "    if (cancel_receive () != -2)\n";
6952            pr "      reply_with_error (\"daemon failed to decode procedure arguments\");\n";
6953            pr "    goto done;\n";
6954            pr "  }\n";
6955            let pr_args n =
6956              pr "  char *%s = args.%s;\n" n n
6957            in
6958            let pr_list_handling_code n =
6959              pr "  %s = realloc (args.%s.%s_val,\n" n n n;
6960              pr "                sizeof (char *) * (args.%s.%s_len+1));\n" n n;
6961              pr "  if (%s == NULL) {\n" n;
6962              if is_filein then
6963                pr "    if (cancel_receive () != -2)\n";
6964              pr "      reply_with_perror (\"realloc\");\n";
6965              pr "    goto done;\n";
6966              pr "  }\n";
6967              pr "  %s[args.%s.%s_len] = NULL;\n" n n n;
6968              pr "  args.%s.%s_val = %s;\n" n n n;
6969            in
6970            List.iter (
6971              function
6972              | Pathname n ->
6973                  pr_args n;
6974                  pr "  ABS_PATH (%s, %s, goto done);\n"
6975                    n (if is_filein then "cancel_receive ()" else "0");
6976              | Device n ->
6977                  pr_args n;
6978                  pr "  RESOLVE_DEVICE (%s, %s, goto done);\n"
6979                    n (if is_filein then "cancel_receive ()" else "0");
6980              | Dev_or_Path n ->
6981                  pr_args n;
6982                  pr "  REQUIRE_ROOT_OR_RESOLVE_DEVICE (%s, %s, goto done);\n"
6983                    n (if is_filein then "cancel_receive ()" else "0");
6984              | String n | Key n -> pr_args n
6985              | OptString n -> pr "  %s = args.%s ? *args.%s : NULL;\n" n n n
6986              | StringList n ->
6987                  pr_list_handling_code n;
6988              | DeviceList n ->
6989                  pr_list_handling_code n;
6990                  pr "  /* Ensure that each is a device,\n";
6991                  pr "   * and perform device name translation.\n";
6992                  pr "   */\n";
6993                  pr "  {\n";
6994                  pr "    size_t i;\n";
6995                  pr "    for (i = 0; %s[i] != NULL; ++i)\n" n;
6996                  pr "      RESOLVE_DEVICE (%s[i], %s, goto done);\n" n
6997                    (if is_filein then "cancel_receive ()" else "0");
6998                  pr "  }\n";
6999              | Bool n -> pr "  %s = args.%s;\n" n n
7000              | Int n -> pr "  %s = args.%s;\n" n n
7001              | Int64 n -> pr "  %s = args.%s;\n" n n
7002              | FileIn _ | FileOut _ -> ()
7003              | BufferIn n ->
7004                  pr "  %s = args.%s.%s_val;\n" n n n;
7005                  pr "  %s_size = args.%s.%s_len;\n" n n n
7006            ) args;
7007            pr "\n"
7008       );
7009
7010       (* this is used at least for do_equal *)
7011       if List.exists (function Pathname _ -> true | _ -> false) (snd style) then (
7012         (* Emit NEED_ROOT just once, even when there are two or
7013            more Pathname args *)
7014         pr "  NEED_ROOT (%s, goto done);\n"
7015           (if is_filein then "cancel_receive ()" else "0");
7016       );
7017
7018       (* Don't want to call the impl with any FileIn or FileOut
7019        * parameters, since these go "outside" the RPC protocol.
7020        *)
7021       let args' =
7022         List.filter (function FileIn _ | FileOut _ -> false | _ -> true)
7023           (snd style) in
7024       pr "  r = do_%s " name;
7025       generate_c_call_args (fst style, args');
7026       pr ";\n";
7027
7028       (match fst style with
7029        | RErr | RInt _ | RInt64 _ | RBool _
7030        | RConstString _ | RConstOptString _
7031        | RString _ | RStringList _ | RHashtable _
7032        | RStruct (_, _) | RStructList (_, _) ->
7033            pr "  if (r == %s)\n" error_code;
7034            pr "    /* do_%s has already called reply_with_error */\n" name;
7035            pr "    goto done;\n";
7036            pr "\n"
7037        | RBufferOut _ ->
7038            pr "  /* size == 0 && r == NULL could be a non-error case (just\n";
7039            pr "   * an ordinary zero-length buffer), so be careful ...\n";
7040            pr "   */\n";
7041            pr "  if (size == 1 && r == %s)\n" error_code;
7042            pr "    /* do_%s has already called reply_with_error */\n" name;
7043            pr "    goto done;\n";
7044            pr "\n"
7045       );
7046
7047       (* If there are any FileOut parameters, then the impl must
7048        * send its own reply.
7049        *)
7050       let no_reply =
7051         List.exists (function FileOut _ -> true | _ -> false) (snd style) in
7052       if no_reply then
7053         pr "  /* do_%s has already sent a reply */\n" name
7054       else (
7055         match fst style with
7056         | RErr -> pr "  reply (NULL, NULL);\n"
7057         | RInt n | RInt64 n | RBool n ->
7058             pr "  struct guestfs_%s_ret ret;\n" name;
7059             pr "  ret.%s = r;\n" n;
7060             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
7061               name
7062         | RConstString _ | RConstOptString _ ->
7063             failwithf "RConstString|RConstOptString cannot be used by daemon functions"
7064         | RString n ->
7065             pr "  struct guestfs_%s_ret ret;\n" name;
7066             pr "  ret.%s = r;\n" n;
7067             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
7068               name;
7069             pr "  free (r);\n"
7070         | RStringList n | RHashtable n ->
7071             pr "  struct guestfs_%s_ret ret;\n" name;
7072             pr "  ret.%s.%s_len = count_strings (r);\n" n n;
7073             pr "  ret.%s.%s_val = r;\n" n n;
7074             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
7075               name;
7076             pr "  free_strings (r);\n"
7077         | RStruct (n, _) ->
7078             pr "  struct guestfs_%s_ret ret;\n" name;
7079             pr "  ret.%s = *r;\n" n;
7080             pr "  reply ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
7081               name;
7082             pr "  xdr_free ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
7083               name
7084         | RStructList (n, _) ->
7085             pr "  struct guestfs_%s_ret ret;\n" name;
7086             pr "  ret.%s = *r;\n" n;
7087             pr "  reply ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
7088               name;
7089             pr "  xdr_free ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
7090               name
7091         | RBufferOut n ->
7092             pr "  struct guestfs_%s_ret ret;\n" name;
7093             pr "  ret.%s.%s_val = r;\n" n n;
7094             pr "  ret.%s.%s_len = size;\n" n n;
7095             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
7096               name;
7097             pr "  free (r);\n"
7098       );
7099
7100       (* Free the args. *)
7101       pr "done:\n";
7102       (match snd style with
7103        | [] -> ()
7104        | _ ->
7105            pr "  xdr_free ((xdrproc_t) xdr_guestfs_%s_args, (char *) &args);\n"
7106              name
7107       );
7108       pr "  return;\n";
7109       pr "}\n\n";
7110   ) daemon_functions;
7111
7112   (* Dispatch function. *)
7113   pr "void dispatch_incoming_message (XDR *xdr_in)\n";
7114   pr "{\n";
7115   pr "  switch (proc_nr) {\n";
7116
7117   List.iter (
7118     fun (name, style, _, _, _, _, _) ->
7119       pr "    case GUESTFS_PROC_%s:\n" (String.uppercase name);
7120       pr "      %s_stub (xdr_in);\n" name;
7121       pr "      break;\n"
7122   ) daemon_functions;
7123
7124   pr "    default:\n";
7125   pr "      reply_with_error (\"dispatch_incoming_message: unknown procedure number %%d, set LIBGUESTFS_PATH to point to the matching libguestfs appliance directory\", proc_nr);\n";
7126   pr "  }\n";
7127   pr "}\n";
7128   pr "\n";
7129
7130   (* LVM columns and tokenization functions. *)
7131   (* XXX This generates crap code.  We should rethink how we
7132    * do this parsing.
7133    *)
7134   List.iter (
7135     function
7136     | typ, cols ->
7137         pr "static const char *lvm_%s_cols = \"%s\";\n"
7138           typ (String.concat "," (List.map fst cols));
7139         pr "\n";
7140
7141         pr "static int lvm_tokenize_%s (char *str, guestfs_int_lvm_%s *r)\n" typ typ;
7142         pr "{\n";
7143         pr "  char *tok, *p, *next;\n";
7144         pr "  size_t i, j;\n";
7145         pr "\n";
7146         (*
7147           pr "  fprintf (stderr, \"%%s: <<%%s>>\\n\", __func__, str);\n";
7148           pr "\n";
7149         *)
7150         pr "  if (!str) {\n";
7151         pr "    fprintf (stderr, \"%%s: failed: passed a NULL string\\n\", __func__);\n";
7152         pr "    return -1;\n";
7153         pr "  }\n";
7154         pr "  if (!*str || c_isspace (*str)) {\n";
7155         pr "    fprintf (stderr, \"%%s: failed: passed a empty string or one beginning with whitespace\\n\", __func__);\n";
7156         pr "    return -1;\n";
7157         pr "  }\n";
7158         pr "  tok = str;\n";
7159         List.iter (
7160           fun (name, coltype) ->
7161             pr "  if (!tok) {\n";
7162             pr "    fprintf (stderr, \"%%s: failed: string finished early, around token %%s\\n\", __func__, \"%s\");\n" name;
7163             pr "    return -1;\n";
7164             pr "  }\n";
7165             pr "  p = strchrnul (tok, ',');\n";
7166             pr "  if (*p) next = p+1; else next = NULL;\n";
7167             pr "  *p = '\\0';\n";
7168             (match coltype with
7169              | FString ->
7170                  pr "  r->%s = strdup (tok);\n" name;
7171                  pr "  if (r->%s == NULL) {\n" name;
7172                  pr "    perror (\"strdup\");\n";
7173                  pr "    return -1;\n";
7174                  pr "  }\n"
7175              | FUUID ->
7176                  pr "  for (i = j = 0; i < 32; ++j) {\n";
7177                  pr "    if (tok[j] == '\\0') {\n";
7178                  pr "      fprintf (stderr, \"%%s: failed to parse UUID from '%%s'\\n\", __func__, tok);\n";
7179                  pr "      return -1;\n";
7180                  pr "    } else if (tok[j] != '-')\n";
7181                  pr "      r->%s[i++] = tok[j];\n" name;
7182                  pr "  }\n";
7183              | FBytes ->
7184                  pr "  if (sscanf (tok, \"%%\"SCNu64, &r->%s) != 1) {\n" name;
7185                  pr "    fprintf (stderr, \"%%s: failed to parse size '%%s' from token %%s\\n\", __func__, tok, \"%s\");\n" name;
7186                  pr "    return -1;\n";
7187                  pr "  }\n";
7188              | FInt64 ->
7189                  pr "  if (sscanf (tok, \"%%\"SCNi64, &r->%s) != 1) {\n" name;
7190                  pr "    fprintf (stderr, \"%%s: failed to parse int '%%s' from token %%s\\n\", __func__, tok, \"%s\");\n" name;
7191                  pr "    return -1;\n";
7192                  pr "  }\n";
7193              | FOptPercent ->
7194                  pr "  if (tok[0] == '\\0')\n";
7195                  pr "    r->%s = -1;\n" name;
7196                  pr "  else if (sscanf (tok, \"%%f\", &r->%s) != 1) {\n" name;
7197                  pr "    fprintf (stderr, \"%%s: failed to parse float '%%s' from token %%s\\n\", __func__, tok, \"%s\");\n" name;
7198                  pr "    return -1;\n";
7199                  pr "  }\n";
7200              | FBuffer | FInt32 | FUInt32 | FUInt64 | FChar ->
7201                  assert false (* can never be an LVM column *)
7202             );
7203             pr "  tok = next;\n";
7204         ) cols;
7205
7206         pr "  if (tok != NULL) {\n";
7207         pr "    fprintf (stderr, \"%%s: failed: extra tokens at end of string\\n\", __func__);\n";
7208         pr "    return -1;\n";
7209         pr "  }\n";
7210         pr "  return 0;\n";
7211         pr "}\n";
7212         pr "\n";
7213
7214         pr "guestfs_int_lvm_%s_list *\n" typ;
7215         pr "parse_command_line_%ss (void)\n" typ;
7216         pr "{\n";
7217         pr "  char *out, *err;\n";
7218         pr "  char *p, *pend;\n";
7219         pr "  int r, i;\n";
7220         pr "  guestfs_int_lvm_%s_list *ret;\n" typ;
7221         pr "  void *newp;\n";
7222         pr "\n";
7223         pr "  ret = malloc (sizeof *ret);\n";
7224         pr "  if (!ret) {\n";
7225         pr "    reply_with_perror (\"malloc\");\n";
7226         pr "    return NULL;\n";
7227         pr "  }\n";
7228         pr "\n";
7229         pr "  ret->guestfs_int_lvm_%s_list_len = 0;\n" typ;
7230         pr "  ret->guestfs_int_lvm_%s_list_val = NULL;\n" typ;
7231         pr "\n";
7232         pr "  r = command (&out, &err,\n";
7233         pr "           \"lvm\", \"%ss\",\n" typ;
7234         pr "           \"-o\", lvm_%s_cols, \"--unbuffered\", \"--noheadings\",\n" typ;
7235         pr "           \"--nosuffix\", \"--separator\", \",\", \"--units\", \"b\", NULL);\n";
7236         pr "  if (r == -1) {\n";
7237         pr "    reply_with_error (\"%%s\", err);\n";
7238         pr "    free (out);\n";
7239         pr "    free (err);\n";
7240         pr "    free (ret);\n";
7241         pr "    return NULL;\n";
7242         pr "  }\n";
7243         pr "\n";
7244         pr "  free (err);\n";
7245         pr "\n";
7246         pr "  /* Tokenize each line of the output. */\n";
7247         pr "  p = out;\n";
7248         pr "  i = 0;\n";
7249         pr "  while (p) {\n";
7250         pr "    pend = strchr (p, '\\n');       /* Get the next line of output. */\n";
7251         pr "    if (pend) {\n";
7252         pr "      *pend = '\\0';\n";
7253         pr "      pend++;\n";
7254         pr "    }\n";
7255         pr "\n";
7256         pr "    while (*p && c_isspace (*p))    /* Skip any leading whitespace. */\n";
7257         pr "      p++;\n";
7258         pr "\n";
7259         pr "    if (!*p) {                      /* Empty line?  Skip it. */\n";
7260         pr "      p = pend;\n";
7261         pr "      continue;\n";
7262         pr "    }\n";
7263         pr "\n";
7264         pr "    /* Allocate some space to store this next entry. */\n";
7265         pr "    newp = realloc (ret->guestfs_int_lvm_%s_list_val,\n" typ;
7266         pr "                sizeof (guestfs_int_lvm_%s) * (i+1));\n" typ;
7267         pr "    if (newp == NULL) {\n";
7268         pr "      reply_with_perror (\"realloc\");\n";
7269         pr "      free (ret->guestfs_int_lvm_%s_list_val);\n" typ;
7270         pr "      free (ret);\n";
7271         pr "      free (out);\n";
7272         pr "      return NULL;\n";
7273         pr "    }\n";
7274         pr "    ret->guestfs_int_lvm_%s_list_val = newp;\n" typ;
7275         pr "\n";
7276         pr "    /* Tokenize the next entry. */\n";
7277         pr "    r = lvm_tokenize_%s (p, &ret->guestfs_int_lvm_%s_list_val[i]);\n" typ typ;
7278         pr "    if (r == -1) {\n";
7279         pr "      reply_with_error (\"failed to parse output of '%ss' command\");\n" typ;
7280         pr "      free (ret->guestfs_int_lvm_%s_list_val);\n" typ;
7281         pr "      free (ret);\n";
7282         pr "      free (out);\n";
7283         pr "      return NULL;\n";
7284         pr "    }\n";
7285         pr "\n";
7286         pr "    ++i;\n";
7287         pr "    p = pend;\n";
7288         pr "  }\n";
7289         pr "\n";
7290         pr "  ret->guestfs_int_lvm_%s_list_len = i;\n" typ;
7291         pr "\n";
7292         pr "  free (out);\n";
7293         pr "  return ret;\n";
7294         pr "}\n"
7295
7296   ) ["pv", lvm_pv_cols; "vg", lvm_vg_cols; "lv", lvm_lv_cols]
7297
7298 (* Generate a list of function names, for debugging in the daemon.. *)
7299 and generate_daemon_names () =
7300   generate_header CStyle GPLv2plus;
7301
7302   pr "#include <config.h>\n";
7303   pr "\n";
7304   pr "#include \"daemon.h\"\n";
7305   pr "\n";
7306
7307   pr "/* This array is indexed by proc_nr.  See guestfs_protocol.x. */\n";
7308   pr "const char *function_names[] = {\n";
7309   List.iter (
7310     fun (name, _, proc_nr, _, _, _, _) -> pr "  [%d] = \"%s\",\n" proc_nr name
7311   ) daemon_functions;
7312   pr "};\n";
7313
7314 (* Generate the optional groups for the daemon to implement
7315  * guestfs_available.
7316  *)
7317 and generate_daemon_optgroups_c () =
7318   generate_header CStyle GPLv2plus;
7319
7320   pr "#include <config.h>\n";
7321   pr "\n";
7322   pr "#include \"daemon.h\"\n";
7323   pr "#include \"optgroups.h\"\n";
7324   pr "\n";
7325
7326   pr "struct optgroup optgroups[] = {\n";
7327   List.iter (
7328     fun (group, _) ->
7329       pr "  { \"%s\", optgroup_%s_available },\n" group group
7330   ) optgroups;
7331   pr "  { NULL, NULL }\n";
7332   pr "};\n"
7333
7334 and generate_daemon_optgroups_h () =
7335   generate_header CStyle GPLv2plus;
7336
7337   List.iter (
7338     fun (group, _) ->
7339       pr "extern int optgroup_%s_available (void);\n" group
7340   ) optgroups
7341
7342 (* Generate the tests. *)
7343 and generate_tests () =
7344   generate_header CStyle GPLv2plus;
7345
7346   pr "\
7347 #include <stdio.h>
7348 #include <stdlib.h>
7349 #include <string.h>
7350 #include <unistd.h>
7351 #include <sys/types.h>
7352 #include <fcntl.h>
7353
7354 #include \"guestfs.h\"
7355 #include \"guestfs-internal.h\"
7356
7357 static guestfs_h *g;
7358 static int suppress_error = 0;
7359
7360 static void print_error (guestfs_h *g, void *data, const char *msg)
7361 {
7362   if (!suppress_error)
7363     fprintf (stderr, \"%%s\\n\", msg);
7364 }
7365
7366 /* FIXME: nearly identical code appears in fish.c */
7367 static void print_strings (char *const *argv)
7368 {
7369   size_t argc;
7370
7371   for (argc = 0; argv[argc] != NULL; ++argc)
7372     printf (\"\\t%%s\\n\", argv[argc]);
7373 }
7374
7375 /*
7376 static void print_table (char const *const *argv)
7377 {
7378   size_t i;
7379
7380   for (i = 0; argv[i] != NULL; i += 2)
7381     printf (\"%%s: %%s\\n\", argv[i], argv[i+1]);
7382 }
7383 */
7384
7385 static int
7386 is_available (const char *group)
7387 {
7388   const char *groups[] = { group, NULL };
7389   int r;
7390
7391   suppress_error = 1;
7392   r = guestfs_available (g, (char **) groups);
7393   suppress_error = 0;
7394
7395   return r == 0;
7396 }
7397
7398 static void
7399 incr (guestfs_h *g, void *iv)
7400 {
7401   int *i = (int *) iv;
7402   (*i)++;
7403 }
7404
7405 ";
7406
7407   (* Generate a list of commands which are not tested anywhere. *)
7408   pr "static void no_test_warnings (void)\n";
7409   pr "{\n";
7410
7411   let hash : (string, bool) Hashtbl.t = Hashtbl.create 13 in
7412   List.iter (
7413     fun (_, _, _, _, tests, _, _) ->
7414       let tests = filter_map (
7415         function
7416         | (_, (Always|If _|Unless _|IfAvailable _), test) -> Some test
7417         | (_, Disabled, _) -> None
7418       ) tests in
7419       let seq = List.concat (List.map seq_of_test tests) in
7420       let cmds_tested = List.map List.hd seq in
7421       List.iter (fun cmd -> Hashtbl.replace hash cmd true) cmds_tested
7422   ) all_functions;
7423
7424   List.iter (
7425     fun (name, _, _, _, _, _, _) ->
7426       if not (Hashtbl.mem hash name) then
7427         pr "  fprintf (stderr, \"warning: \\\"guestfs_%s\\\" has no tests\\n\");\n" name
7428   ) all_functions;
7429
7430   pr "}\n";
7431   pr "\n";
7432
7433   (* Generate the actual tests.  Note that we generate the tests
7434    * in reverse order, deliberately, so that (in general) the
7435    * newest tests run first.  This makes it quicker and easier to
7436    * debug them.
7437    *)
7438   let test_names =
7439     List.map (
7440       fun (name, _, _, flags, tests, _, _) ->
7441         mapi (generate_one_test name flags) tests
7442     ) (List.rev all_functions) in
7443   let test_names = List.concat test_names in
7444   let nr_tests = List.length test_names in
7445
7446   pr "\
7447 int main (int argc, char *argv[])
7448 {
7449   char c = 0;
7450   unsigned long int n_failed = 0;
7451   const char *filename;
7452   int fd;
7453   int nr_tests, test_num = 0;
7454
7455   setbuf (stdout, NULL);
7456
7457   no_test_warnings ();
7458
7459   g = guestfs_create ();
7460   if (g == NULL) {
7461     printf (\"guestfs_create FAILED\\n\");
7462     exit (EXIT_FAILURE);
7463   }
7464
7465   guestfs_set_error_handler (g, print_error, NULL);
7466
7467   guestfs_set_path (g, \"../appliance\");
7468
7469   filename = \"test1.img\";
7470   fd = open (filename, O_WRONLY|O_CREAT|O_NOCTTY|O_NONBLOCK|O_TRUNC, 0666);
7471   if (fd == -1) {
7472     perror (filename);
7473     exit (EXIT_FAILURE);
7474   }
7475   if (lseek (fd, %d, SEEK_SET) == -1) {
7476     perror (\"lseek\");
7477     close (fd);
7478     unlink (filename);
7479     exit (EXIT_FAILURE);
7480   }
7481   if (write (fd, &c, 1) == -1) {
7482     perror (\"write\");
7483     close (fd);
7484     unlink (filename);
7485     exit (EXIT_FAILURE);
7486   }
7487   if (close (fd) == -1) {
7488     perror (filename);
7489     unlink (filename);
7490     exit (EXIT_FAILURE);
7491   }
7492   if (guestfs_add_drive (g, filename) == -1) {
7493     printf (\"guestfs_add_drive %%s FAILED\\n\", filename);
7494     exit (EXIT_FAILURE);
7495   }
7496
7497   filename = \"test2.img\";
7498   fd = open (filename, O_WRONLY|O_CREAT|O_NOCTTY|O_NONBLOCK|O_TRUNC, 0666);
7499   if (fd == -1) {
7500     perror (filename);
7501     exit (EXIT_FAILURE);
7502   }
7503   if (lseek (fd, %d, SEEK_SET) == -1) {
7504     perror (\"lseek\");
7505     close (fd);
7506     unlink (filename);
7507     exit (EXIT_FAILURE);
7508   }
7509   if (write (fd, &c, 1) == -1) {
7510     perror (\"write\");
7511     close (fd);
7512     unlink (filename);
7513     exit (EXIT_FAILURE);
7514   }
7515   if (close (fd) == -1) {
7516     perror (filename);
7517     unlink (filename);
7518     exit (EXIT_FAILURE);
7519   }
7520   if (guestfs_add_drive (g, filename) == -1) {
7521     printf (\"guestfs_add_drive %%s FAILED\\n\", filename);
7522     exit (EXIT_FAILURE);
7523   }
7524
7525   filename = \"test3.img\";
7526   fd = open (filename, O_WRONLY|O_CREAT|O_NOCTTY|O_NONBLOCK|O_TRUNC, 0666);
7527   if (fd == -1) {
7528     perror (filename);
7529     exit (EXIT_FAILURE);
7530   }
7531   if (lseek (fd, %d, SEEK_SET) == -1) {
7532     perror (\"lseek\");
7533     close (fd);
7534     unlink (filename);
7535     exit (EXIT_FAILURE);
7536   }
7537   if (write (fd, &c, 1) == -1) {
7538     perror (\"write\");
7539     close (fd);
7540     unlink (filename);
7541     exit (EXIT_FAILURE);
7542   }
7543   if (close (fd) == -1) {
7544     perror (filename);
7545     unlink (filename);
7546     exit (EXIT_FAILURE);
7547   }
7548   if (guestfs_add_drive (g, filename) == -1) {
7549     printf (\"guestfs_add_drive %%s FAILED\\n\", filename);
7550     exit (EXIT_FAILURE);
7551   }
7552
7553   if (guestfs_add_drive_ro (g, \"../images/test.iso\") == -1) {
7554     printf (\"guestfs_add_drive_ro ../images/test.iso FAILED\\n\");
7555     exit (EXIT_FAILURE);
7556   }
7557
7558   /* Set a timeout in case qemu hangs during launch (RHBZ#505329). */
7559   alarm (600);
7560
7561   if (guestfs_launch (g) == -1) {
7562     printf (\"guestfs_launch FAILED\\n\");
7563     exit (EXIT_FAILURE);
7564   }
7565
7566   /* Cancel previous alarm. */
7567   alarm (0);
7568
7569   nr_tests = %d;
7570
7571 " (500 * 1024 * 1024) (50 * 1024 * 1024) (10 * 1024 * 1024) nr_tests;
7572
7573   iteri (
7574     fun i test_name ->
7575       pr "  test_num++;\n";
7576       pr "  if (guestfs_get_verbose (g))\n";
7577       pr "    printf (\"-------------------------------------------------------------------------------\\n\");\n";
7578       pr "  printf (\"%%3d/%%3d %s\\n\", test_num, nr_tests);\n" test_name;
7579       pr "  if (%s () == -1) {\n" test_name;
7580       pr "    printf (\"%s FAILED\\n\");\n" test_name;
7581       pr "    n_failed++;\n";
7582       pr "  }\n";
7583   ) test_names;
7584   pr "\n";
7585
7586   pr "  /* Check close callback is called. */
7587   int close_sentinel = 1;
7588   guestfs_set_close_callback (g, incr, &close_sentinel);
7589
7590   guestfs_close (g);
7591
7592   if (close_sentinel != 2) {
7593     fprintf (stderr, \"close callback was not called\\n\");
7594     exit (EXIT_FAILURE);
7595   }
7596
7597   unlink (\"test1.img\");
7598   unlink (\"test2.img\");
7599   unlink (\"test3.img\");
7600
7601 ";
7602
7603   pr "  if (n_failed > 0) {\n";
7604   pr "    printf (\"***** %%lu / %%d tests FAILED *****\\n\", n_failed, nr_tests);\n";
7605   pr "    exit (EXIT_FAILURE);\n";
7606   pr "  }\n";
7607   pr "\n";
7608
7609   pr "  exit (EXIT_SUCCESS);\n";
7610   pr "}\n"
7611
7612 and generate_one_test name flags i (init, prereq, test) =
7613   let test_name = sprintf "test_%s_%d" name i in
7614
7615   pr "\
7616 static int %s_skip (void)
7617 {
7618   const char *str;
7619
7620   str = getenv (\"TEST_ONLY\");
7621   if (str)
7622     return strstr (str, \"%s\") == NULL;
7623   str = getenv (\"SKIP_%s\");
7624   if (str && STREQ (str, \"1\")) return 1;
7625   str = getenv (\"SKIP_TEST_%s\");
7626   if (str && STREQ (str, \"1\")) return 1;
7627   return 0;
7628 }
7629
7630 " test_name name (String.uppercase test_name) (String.uppercase name);
7631
7632   (match prereq with
7633    | Disabled | Always | IfAvailable _ -> ()
7634    | If code | Unless code ->
7635        pr "static int %s_prereq (void)\n" test_name;
7636        pr "{\n";
7637        pr "  %s\n" code;
7638        pr "}\n";
7639        pr "\n";
7640   );
7641
7642   pr "\
7643 static int %s (void)
7644 {
7645   if (%s_skip ()) {
7646     printf (\"        %%s skipped (reason: environment variable set)\\n\", \"%s\");
7647     return 0;
7648   }
7649
7650 " test_name test_name test_name;
7651
7652   (* Optional functions should only be tested if the relevant
7653    * support is available in the daemon.
7654    *)
7655   List.iter (
7656     function
7657     | Optional group ->
7658         pr "  if (!is_available (\"%s\")) {\n" group;
7659         pr "    printf (\"        %%s skipped (reason: group %%s not available in daemon)\\n\", \"%s\", \"%s\");\n" test_name group;
7660         pr "    return 0;\n";
7661         pr "  }\n";
7662     | _ -> ()
7663   ) flags;
7664
7665   (match prereq with
7666    | Disabled ->
7667        pr "  printf (\"        %%s skipped (reason: test disabled in generator)\\n\", \"%s\");\n" test_name
7668    | If _ ->
7669        pr "  if (! %s_prereq ()) {\n" test_name;
7670        pr "    printf (\"        %%s skipped (reason: test prerequisite)\\n\", \"%s\");\n" test_name;
7671        pr "    return 0;\n";
7672        pr "  }\n";
7673        pr "\n";
7674        generate_one_test_body name i test_name init test;
7675    | Unless _ ->
7676        pr "  if (%s_prereq ()) {\n" test_name;
7677        pr "    printf (\"        %%s skipped (reason: test prerequisite)\\n\", \"%s\");\n" test_name;
7678        pr "    return 0;\n";
7679        pr "  }\n";
7680        pr "\n";
7681        generate_one_test_body name i test_name init test;
7682    | IfAvailable group ->
7683        pr "  if (!is_available (\"%s\")) {\n" group;
7684        pr "    printf (\"        %%s skipped (reason: %%s not available)\\n\", \"%s\", \"%s\");\n" test_name group;
7685        pr "    return 0;\n";
7686        pr "  }\n";
7687        pr "\n";
7688        generate_one_test_body name i test_name init test;
7689    | Always ->
7690        generate_one_test_body name i test_name init test
7691   );
7692
7693   pr "  return 0;\n";
7694   pr "}\n";
7695   pr "\n";
7696   test_name
7697
7698 and generate_one_test_body name i test_name init test =
7699   (match init with
7700    | InitNone (* XXX at some point, InitNone and InitEmpty became
7701                * folded together as the same thing.  Really we should
7702                * make InitNone do nothing at all, but the tests may
7703                * need to be checked to make sure this is OK.
7704                *)
7705    | InitEmpty ->
7706        pr "  /* InitNone|InitEmpty for %s */\n" test_name;
7707        List.iter (generate_test_command_call test_name)
7708          [["blockdev_setrw"; "/dev/sda"];
7709           ["umount_all"];
7710           ["lvm_remove_all"]]
7711    | InitPartition ->
7712        pr "  /* InitPartition for %s: create /dev/sda1 */\n" test_name;
7713        List.iter (generate_test_command_call test_name)
7714          [["blockdev_setrw"; "/dev/sda"];
7715           ["umount_all"];
7716           ["lvm_remove_all"];
7717           ["part_disk"; "/dev/sda"; "mbr"]]
7718    | InitBasicFS ->
7719        pr "  /* InitBasicFS for %s: create ext2 on /dev/sda1 */\n" test_name;
7720        List.iter (generate_test_command_call test_name)
7721          [["blockdev_setrw"; "/dev/sda"];
7722           ["umount_all"];
7723           ["lvm_remove_all"];
7724           ["part_disk"; "/dev/sda"; "mbr"];
7725           ["mkfs"; "ext2"; "/dev/sda1"];
7726           ["mount_options"; ""; "/dev/sda1"; "/"]]
7727    | InitBasicFSonLVM ->
7728        pr "  /* InitBasicFSonLVM for %s: create ext2 on /dev/VG/LV */\n"
7729          test_name;
7730        List.iter (generate_test_command_call test_name)
7731          [["blockdev_setrw"; "/dev/sda"];
7732           ["umount_all"];
7733           ["lvm_remove_all"];
7734           ["part_disk"; "/dev/sda"; "mbr"];
7735           ["pvcreate"; "/dev/sda1"];
7736           ["vgcreate"; "VG"; "/dev/sda1"];
7737           ["lvcreate"; "LV"; "VG"; "8"];
7738           ["mkfs"; "ext2"; "/dev/VG/LV"];
7739           ["mount_options"; ""; "/dev/VG/LV"; "/"]]
7740    | InitISOFS ->
7741        pr "  /* InitISOFS for %s */\n" test_name;
7742        List.iter (generate_test_command_call test_name)
7743          [["blockdev_setrw"; "/dev/sda"];
7744           ["umount_all"];
7745           ["lvm_remove_all"];
7746           ["mount_ro"; "/dev/sdd"; "/"]]
7747   );
7748
7749   let get_seq_last = function
7750     | [] ->
7751         failwithf "%s: you cannot use [] (empty list) when expecting a command"
7752           test_name
7753     | seq ->
7754         let seq = List.rev seq in
7755         List.rev (List.tl seq), List.hd seq
7756   in
7757
7758   match test with
7759   | TestRun seq ->
7760       pr "  /* TestRun for %s (%d) */\n" name i;
7761       List.iter (generate_test_command_call test_name) seq
7762   | TestOutput (seq, expected) ->
7763       pr "  /* TestOutput for %s (%d) */\n" name i;
7764       pr "  const char *expected = \"%s\";\n" (c_quote expected);
7765       let seq, last = get_seq_last seq in
7766       let test () =
7767         pr "    if (STRNEQ (r, expected)) {\n";
7768         pr "      fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r);\n" test_name;
7769         pr "      return -1;\n";
7770         pr "    }\n"
7771       in
7772       List.iter (generate_test_command_call test_name) seq;
7773       generate_test_command_call ~test test_name last
7774   | TestOutputList (seq, expected) ->
7775       pr "  /* TestOutputList for %s (%d) */\n" name i;
7776       let seq, last = get_seq_last seq in
7777       let test () =
7778         iteri (
7779           fun i str ->
7780             pr "    if (!r[%d]) {\n" i;
7781             pr "      fprintf (stderr, \"%s: short list returned from command\\n\");\n" test_name;
7782             pr "      print_strings (r);\n";
7783             pr "      return -1;\n";
7784             pr "    }\n";
7785             pr "    {\n";
7786             pr "      const char *expected = \"%s\";\n" (c_quote str);
7787             pr "      if (STRNEQ (r[%d], expected)) {\n" i;
7788             pr "        fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r[%d]);\n" test_name i;
7789             pr "        return -1;\n";
7790             pr "      }\n";
7791             pr "    }\n"
7792         ) expected;
7793         pr "    if (r[%d] != NULL) {\n" (List.length expected);
7794         pr "      fprintf (stderr, \"%s: extra elements returned from command\\n\");\n"
7795           test_name;
7796         pr "      print_strings (r);\n";
7797         pr "      return -1;\n";
7798         pr "    }\n"
7799       in
7800       List.iter (generate_test_command_call test_name) seq;
7801       generate_test_command_call ~test test_name last
7802   | TestOutputListOfDevices (seq, expected) ->
7803       pr "  /* TestOutputListOfDevices for %s (%d) */\n" name i;
7804       let seq, last = get_seq_last seq in
7805       let test () =
7806         iteri (
7807           fun i str ->
7808             pr "    if (!r[%d]) {\n" i;
7809             pr "      fprintf (stderr, \"%s: short list returned from command\\n\");\n" test_name;
7810             pr "      print_strings (r);\n";
7811             pr "      return -1;\n";
7812             pr "    }\n";
7813             pr "    {\n";
7814             pr "      const char *expected = \"%s\";\n" (c_quote str);
7815             pr "      r[%d][5] = 's';\n" i;
7816             pr "      if (STRNEQ (r[%d], expected)) {\n" i;
7817             pr "        fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r[%d]);\n" test_name i;
7818             pr "        return -1;\n";
7819             pr "      }\n";
7820             pr "    }\n"
7821         ) expected;
7822         pr "    if (r[%d] != NULL) {\n" (List.length expected);
7823         pr "      fprintf (stderr, \"%s: extra elements returned from command\\n\");\n"
7824           test_name;
7825         pr "      print_strings (r);\n";
7826         pr "      return -1;\n";
7827         pr "    }\n"
7828       in
7829       List.iter (generate_test_command_call test_name) seq;
7830       generate_test_command_call ~test test_name last
7831   | TestOutputInt (seq, expected) ->
7832       pr "  /* TestOutputInt for %s (%d) */\n" name i;
7833       let seq, last = get_seq_last seq in
7834       let test () =
7835         pr "    if (r != %d) {\n" expected;
7836         pr "      fprintf (stderr, \"%s: expected %d but got %%d\\n\","
7837           test_name expected;
7838         pr "               (int) r);\n";
7839         pr "      return -1;\n";
7840         pr "    }\n"
7841       in
7842       List.iter (generate_test_command_call test_name) seq;
7843       generate_test_command_call ~test test_name last
7844   | TestOutputIntOp (seq, op, expected) ->
7845       pr "  /* TestOutputIntOp for %s (%d) */\n" name i;
7846       let seq, last = get_seq_last seq in
7847       let test () =
7848         pr "    if (! (r %s %d)) {\n" op expected;
7849         pr "      fprintf (stderr, \"%s: expected %s %d but got %%d\\n\","
7850           test_name op expected;
7851         pr "               (int) r);\n";
7852         pr "      return -1;\n";
7853         pr "    }\n"
7854       in
7855       List.iter (generate_test_command_call test_name) seq;
7856       generate_test_command_call ~test test_name last
7857   | TestOutputTrue seq ->
7858       pr "  /* TestOutputTrue for %s (%d) */\n" name i;
7859       let seq, last = get_seq_last seq in
7860       let test () =
7861         pr "    if (!r) {\n";
7862         pr "      fprintf (stderr, \"%s: expected true, got false\\n\");\n"
7863           test_name;
7864         pr "      return -1;\n";
7865         pr "    }\n"
7866       in
7867       List.iter (generate_test_command_call test_name) seq;
7868       generate_test_command_call ~test test_name last
7869   | TestOutputFalse seq ->
7870       pr "  /* TestOutputFalse for %s (%d) */\n" name i;
7871       let seq, last = get_seq_last seq in
7872       let test () =
7873         pr "    if (r) {\n";
7874         pr "      fprintf (stderr, \"%s: expected false, got true\\n\");\n"
7875           test_name;
7876         pr "      return -1;\n";
7877         pr "    }\n"
7878       in
7879       List.iter (generate_test_command_call test_name) seq;
7880       generate_test_command_call ~test test_name last
7881   | TestOutputLength (seq, expected) ->
7882       pr "  /* TestOutputLength for %s (%d) */\n" name i;
7883       let seq, last = get_seq_last seq in
7884       let test () =
7885         pr "    int j;\n";
7886         pr "    for (j = 0; j < %d; ++j)\n" expected;
7887         pr "      if (r[j] == NULL) {\n";
7888         pr "        fprintf (stderr, \"%s: short list returned\\n\");\n"
7889           test_name;
7890         pr "        print_strings (r);\n";
7891         pr "        return -1;\n";
7892         pr "      }\n";
7893         pr "    if (r[j] != NULL) {\n";
7894         pr "      fprintf (stderr, \"%s: long list returned\\n\");\n"
7895           test_name;
7896         pr "      print_strings (r);\n";
7897         pr "      return -1;\n";
7898         pr "    }\n"
7899       in
7900       List.iter (generate_test_command_call test_name) seq;
7901       generate_test_command_call ~test test_name last
7902   | TestOutputBuffer (seq, expected) ->
7903       pr "  /* TestOutputBuffer for %s (%d) */\n" name i;
7904       pr "  const char *expected = \"%s\";\n" (c_quote expected);
7905       let seq, last = get_seq_last seq in
7906       let len = String.length expected in
7907       let test () =
7908         pr "    if (size != %d) {\n" len;
7909         pr "      fprintf (stderr, \"%s: returned size of buffer wrong, expected %d but got %%zu\\n\", size);\n" test_name len;
7910         pr "      return -1;\n";
7911         pr "    }\n";
7912         pr "    if (STRNEQLEN (r, expected, size)) {\n";
7913         pr "      fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r);\n" test_name;
7914         pr "      return -1;\n";
7915         pr "    }\n"
7916       in
7917       List.iter (generate_test_command_call test_name) seq;
7918       generate_test_command_call ~test test_name last
7919   | TestOutputStruct (seq, checks) ->
7920       pr "  /* TestOutputStruct for %s (%d) */\n" name i;
7921       let seq, last = get_seq_last seq in
7922       let test () =
7923         List.iter (
7924           function
7925           | CompareWithInt (field, expected) ->
7926               pr "    if (r->%s != %d) {\n" field expected;
7927               pr "      fprintf (stderr, \"%s: %s was %%d, expected %d\\n\",\n"
7928                 test_name field expected;
7929               pr "               (int) r->%s);\n" field;
7930               pr "      return -1;\n";
7931               pr "    }\n"
7932           | CompareWithIntOp (field, op, expected) ->
7933               pr "    if (!(r->%s %s %d)) {\n" field op expected;
7934               pr "      fprintf (stderr, \"%s: %s was %%d, expected %s %d\\n\",\n"
7935                 test_name field op expected;
7936               pr "               (int) r->%s);\n" field;
7937               pr "      return -1;\n";
7938               pr "    }\n"
7939           | CompareWithString (field, expected) ->
7940               pr "    if (STRNEQ (r->%s, \"%s\")) {\n" field expected;
7941               pr "      fprintf (stderr, \"%s: %s was \"%%s\", expected \"%s\"\\n\",\n"
7942                 test_name field expected;
7943               pr "               r->%s);\n" field;
7944               pr "      return -1;\n";
7945               pr "    }\n"
7946           | CompareFieldsIntEq (field1, field2) ->
7947               pr "    if (r->%s != r->%s) {\n" field1 field2;
7948               pr "      fprintf (stderr, \"%s: %s (%%d) <> %s (%%d)\\n\",\n"
7949                 test_name field1 field2;
7950               pr "               (int) r->%s, (int) r->%s);\n" field1 field2;
7951               pr "      return -1;\n";
7952               pr "    }\n"
7953           | CompareFieldsStrEq (field1, field2) ->
7954               pr "    if (STRNEQ (r->%s, r->%s)) {\n" field1 field2;
7955               pr "      fprintf (stderr, \"%s: %s (\"%%s\") <> %s (\"%%s\")\\n\",\n"
7956                 test_name field1 field2;
7957               pr "               r->%s, r->%s);\n" field1 field2;
7958               pr "      return -1;\n";
7959               pr "    }\n"
7960         ) checks
7961       in
7962       List.iter (generate_test_command_call test_name) seq;
7963       generate_test_command_call ~test test_name last
7964   | TestLastFail seq ->
7965       pr "  /* TestLastFail for %s (%d) */\n" name i;
7966       let seq, last = get_seq_last seq in
7967       List.iter (generate_test_command_call test_name) seq;
7968       generate_test_command_call test_name ~expect_error:true last
7969
7970 (* Generate the code to run a command, leaving the result in 'r'.
7971  * If you expect to get an error then you should set expect_error:true.
7972  *)
7973 and generate_test_command_call ?(expect_error = false) ?test test_name cmd =
7974   match cmd with
7975   | [] -> assert false
7976   | name :: args ->
7977       (* Look up the command to find out what args/ret it has. *)
7978       let style =
7979         try
7980           let _, style, _, _, _, _, _ =
7981             List.find (fun (n, _, _, _, _, _, _) -> n = name) all_functions in
7982           style
7983         with Not_found ->
7984           failwithf "%s: in test, command %s was not found" test_name name in
7985
7986       if List.length (snd style) <> List.length args then
7987         failwithf "%s: in test, wrong number of args given to %s"
7988           test_name name;
7989
7990       pr "  {\n";
7991
7992       List.iter (
7993         function
7994         | OptString n, "NULL" -> ()
7995         | Pathname n, arg
7996         | Device n, arg
7997         | Dev_or_Path n, arg
7998         | String n, arg
7999         | OptString n, arg
8000         | Key n, arg ->
8001             pr "    const char *%s = \"%s\";\n" n (c_quote arg);
8002         | BufferIn n, arg ->
8003             pr "    const char *%s = \"%s\";\n" n (c_quote arg);
8004             pr "    size_t %s_size = %d;\n" n (String.length arg)
8005         | Int _, _
8006         | Int64 _, _
8007         | Bool _, _
8008         | FileIn _, _ | FileOut _, _ -> ()
8009         | StringList n, "" | DeviceList n, "" ->
8010             pr "    const char *const %s[1] = { NULL };\n" n
8011         | StringList n, arg | DeviceList n, arg ->
8012             let strs = string_split " " arg in
8013             iteri (
8014               fun i str ->
8015                 pr "    const char *%s_%d = \"%s\";\n" n i (c_quote str);
8016             ) strs;
8017             pr "    const char *const %s[] = {\n" n;
8018             iteri (
8019               fun i _ -> pr "      %s_%d,\n" n i
8020             ) strs;
8021             pr "      NULL\n";
8022             pr "    };\n";
8023       ) (List.combine (snd style) args);
8024
8025       let error_code =
8026         match fst style with
8027         | RErr | RInt _ | RBool _ -> pr "    int r;\n"; "-1"
8028         | RInt64 _ -> pr "    int64_t r;\n"; "-1"
8029         | RConstString _ | RConstOptString _ ->
8030             pr "    const char *r;\n"; "NULL"
8031         | RString _ -> pr "    char *r;\n"; "NULL"
8032         | RStringList _ | RHashtable _ ->
8033             pr "    char **r;\n";
8034             pr "    size_t i;\n";
8035             "NULL"
8036         | RStruct (_, typ) ->
8037             pr "    struct guestfs_%s *r;\n" typ; "NULL"
8038         | RStructList (_, typ) ->
8039             pr "    struct guestfs_%s_list *r;\n" typ; "NULL"
8040         | RBufferOut _ ->
8041             pr "    char *r;\n";
8042             pr "    size_t size;\n";
8043             "NULL" in
8044
8045       pr "    suppress_error = %d;\n" (if expect_error then 1 else 0);
8046       pr "    r = guestfs_%s (g" name;
8047
8048       (* Generate the parameters. *)
8049       List.iter (
8050         function
8051         | OptString _, "NULL" -> pr ", NULL"
8052         | Pathname n, _
8053         | Device n, _ | Dev_or_Path n, _
8054         | String n, _
8055         | OptString n, _
8056         | Key n, _ ->
8057             pr ", %s" n
8058         | BufferIn n, _ ->
8059             pr ", %s, %s_size" n n
8060         | FileIn _, arg | FileOut _, arg ->
8061             pr ", \"%s\"" (c_quote arg)
8062         | StringList n, _ | DeviceList n, _ ->
8063             pr ", (char **) %s" n
8064         | Int _, arg ->
8065             let i =
8066               try int_of_string arg
8067               with Failure "int_of_string" ->
8068                 failwithf "%s: expecting an int, but got '%s'" test_name arg in
8069             pr ", %d" i
8070         | Int64 _, arg ->
8071             let i =
8072               try Int64.of_string arg
8073               with Failure "int_of_string" ->
8074                 failwithf "%s: expecting an int64, but got '%s'" test_name arg in
8075             pr ", %Ld" i
8076         | Bool _, arg ->
8077             let b = bool_of_string arg in pr ", %d" (if b then 1 else 0)
8078       ) (List.combine (snd style) args);
8079
8080       (match fst style with
8081        | RBufferOut _ -> pr ", &size"
8082        | _ -> ()
8083       );
8084
8085       pr ");\n";
8086
8087       if not expect_error then
8088         pr "    if (r == %s)\n" error_code
8089       else
8090         pr "    if (r != %s)\n" error_code;
8091       pr "      return -1;\n";
8092
8093       (* Insert the test code. *)
8094       (match test with
8095        | None -> ()
8096        | Some f -> f ()
8097       );
8098
8099       (match fst style with
8100        | RErr | RInt _ | RInt64 _ | RBool _
8101        | RConstString _ | RConstOptString _ -> ()
8102        | RString _ | RBufferOut _ -> pr "    free (r);\n"
8103        | RStringList _ | RHashtable _ ->
8104            pr "    for (i = 0; r[i] != NULL; ++i)\n";
8105            pr "      free (r[i]);\n";
8106            pr "    free (r);\n"
8107        | RStruct (_, typ) ->
8108            pr "    guestfs_free_%s (r);\n" typ
8109        | RStructList (_, typ) ->
8110            pr "    guestfs_free_%s_list (r);\n" typ
8111       );
8112
8113       pr "  }\n"
8114
8115 and c_quote str =
8116   let str = replace_str str "\r" "\\r" in
8117   let str = replace_str str "\n" "\\n" in
8118   let str = replace_str str "\t" "\\t" in
8119   let str = replace_str str "\000" "\\0" in
8120   str
8121
8122 (* Generate a lot of different functions for guestfish. *)
8123 and generate_fish_cmds () =
8124   generate_header CStyle GPLv2plus;
8125
8126   let all_functions =
8127     List.filter (
8128       fun (_, _, _, flags, _, _, _) -> not (List.mem NotInFish flags)
8129     ) all_functions in
8130   let all_functions_sorted =
8131     List.filter (
8132       fun (_, _, _, flags, _, _, _) -> not (List.mem NotInFish flags)
8133     ) all_functions_sorted in
8134
8135   pr "#include <config.h>\n";
8136   pr "\n";
8137   pr "#include <stdio.h>\n";
8138   pr "#include <stdlib.h>\n";
8139   pr "#include <string.h>\n";
8140   pr "#include <inttypes.h>\n";
8141   pr "\n";
8142   pr "#include <guestfs.h>\n";
8143   pr "#include \"c-ctype.h\"\n";
8144   pr "#include \"full-write.h\"\n";
8145   pr "#include \"xstrtol.h\"\n";
8146   pr "#include \"fish.h\"\n";
8147   pr "\n";
8148   pr "/* Valid suffixes allowed for numbers.  See Gnulib xstrtol function. */\n";
8149   pr "static const char *xstrtol_suffixes = \"0kKMGTPEZY\";\n";
8150   pr "\n";
8151
8152   (* list_commands function, which implements guestfish -h *)
8153   pr "void list_commands (void)\n";
8154   pr "{\n";
8155   pr "  printf (\"    %%-16s     %%s\\n\", _(\"Command\"), _(\"Description\"));\n";
8156   pr "  list_builtin_commands ();\n";
8157   List.iter (
8158     fun (name, _, _, flags, _, shortdesc, _) ->
8159       let name = replace_char name '_' '-' in
8160       pr "  printf (\"%%-20s %%s\\n\", \"%s\", _(\"%s\"));\n"
8161         name shortdesc
8162   ) all_functions_sorted;
8163   pr "  printf (\"    %%s\\n\",";
8164   pr "          _(\"Use -h <cmd> / help <cmd> to show detailed help for a command.\"));\n";
8165   pr "}\n";
8166   pr "\n";
8167
8168   (* display_command function, which implements guestfish -h cmd *)
8169   pr "int display_command (const char *cmd)\n";
8170   pr "{\n";
8171   List.iter (
8172     fun (name, style, _, flags, _, shortdesc, longdesc) ->
8173       let name2 = replace_char name '_' '-' in
8174       let alias =
8175         try find_map (function FishAlias n -> Some n | _ -> None) flags
8176         with Not_found -> name in
8177       let longdesc = replace_str longdesc "C<guestfs_" "C<" in
8178       let synopsis =
8179         match snd style with
8180         | [] -> name2
8181         | args ->
8182             let args = List.filter (function Key _ -> false | _ -> true) args in
8183             sprintf "%s %s"
8184               name2 (String.concat " " (List.map name_of_argt args)) in
8185
8186       let warnings =
8187         if List.exists (function Key _ -> true | _ -> false) (snd style) then
8188           "\n\nThis command has one or more key or passphrase parameters.
8189 Guestfish will prompt for these separately."
8190         else "" in
8191
8192       let warnings =
8193         warnings ^
8194           if List.mem ProtocolLimitWarning flags then
8195             ("\n\n" ^ protocol_limit_warning)
8196           else "" in
8197
8198       (* For DangerWillRobinson commands, we should probably have
8199        * guestfish prompt before allowing you to use them (especially
8200        * in interactive mode). XXX
8201        *)
8202       let warnings =
8203         warnings ^
8204           if List.mem DangerWillRobinson flags then
8205             ("\n\n" ^ danger_will_robinson)
8206           else "" in
8207
8208       let warnings =
8209         warnings ^
8210           match deprecation_notice flags with
8211           | None -> ""
8212           | Some txt -> "\n\n" ^ txt in
8213
8214       let describe_alias =
8215         if name <> alias then
8216           sprintf "\n\nYou can use '%s' as an alias for this command." alias
8217         else "" in
8218
8219       pr "  if (";
8220       pr "STRCASEEQ (cmd, \"%s\")" name;
8221       if name <> name2 then
8222         pr " || STRCASEEQ (cmd, \"%s\")" name2;
8223       if name <> alias then
8224         pr " || STRCASEEQ (cmd, \"%s\")" alias;
8225       pr ") {\n";
8226       pr "    pod2text (\"%s\", _(\"%s\"), %S);\n"
8227         name2 shortdesc
8228         ("=head1 SYNOPSIS\n\n " ^ synopsis ^ "\n\n" ^
8229          "=head1 DESCRIPTION\n\n" ^
8230          longdesc ^ warnings ^ describe_alias);
8231       pr "    return 0;\n";
8232       pr "  }\n";
8233       pr "  else\n"
8234   ) all_functions;
8235   pr "    return display_builtin_command (cmd);\n";
8236   pr "}\n";
8237   pr "\n";
8238
8239   let emit_print_list_function typ =
8240     pr "static void print_%s_list (struct guestfs_%s_list *%ss)\n"
8241       typ typ typ;
8242     pr "{\n";
8243     pr "  unsigned int i;\n";
8244     pr "\n";
8245     pr "  for (i = 0; i < %ss->len; ++i) {\n" typ;
8246     pr "    printf (\"[%%d] = {\\n\", i);\n";
8247     pr "    print_%s_indent (&%ss->val[i], \"  \");\n" typ typ;
8248     pr "    printf (\"}\\n\");\n";
8249     pr "  }\n";
8250     pr "}\n";
8251     pr "\n";
8252   in
8253
8254   (* print_* functions *)
8255   List.iter (
8256     fun (typ, cols) ->
8257       let needs_i =
8258         List.exists (function (_, (FUUID|FBuffer)) -> true | _ -> false) cols in
8259
8260       pr "static void print_%s_indent (struct guestfs_%s *%s, const char *indent)\n" typ typ typ;
8261       pr "{\n";
8262       if needs_i then (
8263         pr "  unsigned int i;\n";
8264         pr "\n"
8265       );
8266       List.iter (
8267         function
8268         | name, FString ->
8269             pr "  printf (\"%%s%s: %%s\\n\", indent, %s->%s);\n" name typ name
8270         | name, FUUID ->
8271             pr "  printf (\"%%s%s: \", indent);\n" name;
8272             pr "  for (i = 0; i < 32; ++i)\n";
8273             pr "    printf (\"%%c\", %s->%s[i]);\n" typ name;
8274             pr "  printf (\"\\n\");\n"
8275         | name, FBuffer ->
8276             pr "  printf (\"%%s%s: \", indent);\n" name;
8277             pr "  for (i = 0; i < %s->%s_len; ++i)\n" typ name;
8278             pr "    if (c_isprint (%s->%s[i]))\n" typ name;
8279             pr "      printf (\"%%c\", %s->%s[i]);\n" typ name;
8280             pr "    else\n";
8281             pr "      printf (\"\\\\x%%02x\", %s->%s[i]);\n" typ name;
8282             pr "  printf (\"\\n\");\n"
8283         | name, (FUInt64|FBytes) ->
8284             pr "  printf (\"%%s%s: %%\" PRIu64 \"\\n\", indent, %s->%s);\n"
8285               name typ name
8286         | name, FInt64 ->
8287             pr "  printf (\"%%s%s: %%\" PRIi64 \"\\n\", indent, %s->%s);\n"
8288               name typ name
8289         | name, FUInt32 ->
8290             pr "  printf (\"%%s%s: %%\" PRIu32 \"\\n\", indent, %s->%s);\n"
8291               name typ name
8292         | name, FInt32 ->
8293             pr "  printf (\"%%s%s: %%\" PRIi32 \"\\n\", indent, %s->%s);\n"
8294               name typ name
8295         | name, FChar ->
8296             pr "  printf (\"%%s%s: %%c\\n\", indent, %s->%s);\n"
8297               name typ name
8298         | name, FOptPercent ->
8299             pr "  if (%s->%s >= 0) printf (\"%%s%s: %%g %%%%\\n\", indent, %s->%s);\n"
8300               typ name name typ name;
8301             pr "  else printf (\"%%s%s: \\n\", indent);\n" name
8302       ) cols;
8303       pr "}\n";
8304       pr "\n";
8305   ) structs;
8306
8307   (* Emit a print_TYPE_list function definition only if that function is used. *)
8308   List.iter (
8309     function
8310     | typ, (RStructListOnly | RStructAndList) ->
8311         (* generate the function for typ *)
8312         emit_print_list_function typ
8313     | typ, _ -> () (* empty *)
8314   ) (rstructs_used_by all_functions);
8315
8316   (* Emit a print_TYPE function definition only if that function is used. *)
8317   List.iter (
8318     function
8319     | typ, (RStructOnly | RStructAndList) ->
8320         pr "static void print_%s (struct guestfs_%s *%s)\n" typ typ typ;
8321         pr "{\n";
8322         pr "  print_%s_indent (%s, \"\");\n" typ typ;
8323         pr "}\n";
8324         pr "\n";
8325     | typ, _ -> () (* empty *)
8326   ) (rstructs_used_by all_functions);
8327
8328   (* run_<action> actions *)
8329   List.iter (
8330     fun (name, style, _, flags, _, _, _) ->
8331       pr "static int run_%s (const char *cmd, int argc, char *argv[])\n" name;
8332       pr "{\n";
8333       (match fst style with
8334        | RErr
8335        | RInt _
8336        | RBool _ -> pr "  int r;\n"
8337        | RInt64 _ -> pr "  int64_t r;\n"
8338        | RConstString _ | RConstOptString _ -> pr "  const char *r;\n"
8339        | RString _ -> pr "  char *r;\n"
8340        | RStringList _ | RHashtable _ -> pr "  char **r;\n"
8341        | RStruct (_, typ) -> pr "  struct guestfs_%s *r;\n" typ
8342        | RStructList (_, typ) -> pr "  struct guestfs_%s_list *r;\n" typ
8343        | RBufferOut _ ->
8344            pr "  char *r;\n";
8345            pr "  size_t size;\n";
8346       );
8347       List.iter (
8348         function
8349         | Device n
8350         | String n
8351         | OptString n -> pr "  const char *%s;\n" n
8352         | Pathname n
8353         | Dev_or_Path n
8354         | FileIn n
8355         | FileOut n
8356         | Key n -> pr "  char *%s;\n" n
8357         | BufferIn n ->
8358             pr "  const char *%s;\n" n;
8359             pr "  size_t %s_size;\n" n
8360         | StringList n | DeviceList n -> pr "  char **%s;\n" n
8361         | Bool n -> pr "  int %s;\n" n
8362         | Int n -> pr "  int %s;\n" n
8363         | Int64 n -> pr "  int64_t %s;\n" n
8364       ) (snd style);
8365
8366       (* Check and convert parameters. *)
8367       let argc_expected =
8368         let args_no_keys =
8369           List.filter (function Key _ -> false | _ -> true) (snd style) in
8370         List.length args_no_keys in
8371       pr "  if (argc != %d) {\n" argc_expected;
8372       pr "    fprintf (stderr, _(\"%%s should have %%d parameter(s)\\n\"), cmd, %d);\n"
8373         argc_expected;
8374       pr "    fprintf (stderr, _(\"type 'help %%s' for help on %%s\\n\"), cmd, cmd);\n";
8375       pr "    return -1;\n";
8376       pr "  }\n";
8377
8378       let parse_integer fn fntyp rtyp range name =
8379         pr "  {\n";
8380         pr "    strtol_error xerr;\n";
8381         pr "    %s r;\n" fntyp;
8382         pr "\n";
8383         pr "    xerr = %s (argv[i++], NULL, 0, &r, xstrtol_suffixes);\n" fn;
8384         pr "    if (xerr != LONGINT_OK) {\n";
8385         pr "      fprintf (stderr,\n";
8386         pr "               _(\"%%s: %%s: invalid integer parameter (%%s returned %%d)\\n\"),\n";
8387         pr "               cmd, \"%s\", \"%s\", xerr);\n" name fn;
8388         pr "      return -1;\n";
8389         pr "    }\n";
8390         (match range with
8391          | None -> ()
8392          | Some (min, max, comment) ->
8393              pr "    /* %s */\n" comment;
8394              pr "    if (r < %s || r > %s) {\n" min max;
8395              pr "      fprintf (stderr, _(\"%%s: %%s: integer out of range\\n\"), cmd, \"%s\");\n"
8396                name;
8397              pr "      return -1;\n";
8398              pr "    }\n";
8399              pr "    /* The check above should ensure this assignment does not overflow. */\n";
8400         );
8401         pr "    %s = r;\n" name;
8402         pr "  }\n";
8403       in
8404
8405       if snd style <> [] then
8406         pr "  size_t i = 0;\n";
8407
8408       List.iter (
8409         function
8410         | Device name
8411         | String name ->
8412             pr "  %s = argv[i++];\n" name
8413         | Pathname name
8414         | Dev_or_Path name ->
8415             pr "  %s = resolve_win_path (argv[i++]);\n" name;
8416             pr "  if (%s == NULL) return -1;\n" name
8417         | OptString name ->
8418             pr "  %s = STRNEQ (argv[i], \"\") ? argv[i] : NULL;\n" name;
8419             pr "  i++;\n"
8420         | BufferIn name ->
8421             pr "  %s = argv[i];\n" name;
8422             pr "  %s_size = strlen (argv[i]);\n" name;
8423             pr "  i++;\n"
8424         | FileIn name ->
8425             pr "  %s = file_in (argv[i++]);\n" name;
8426             pr "  if (%s == NULL) return -1;\n" name
8427         | FileOut name ->
8428             pr "  %s = file_out (argv[i++]);\n" name;
8429             pr "  if (%s == NULL) return -1;\n" name
8430         | StringList name | DeviceList name ->
8431             pr "  %s = parse_string_list (argv[i++]);\n" name;
8432             pr "  if (%s == NULL) return -1;\n" name
8433         | Key name ->
8434             pr "  %s = read_key (\"%s\");\n" name name;
8435             pr "  if (%s == NULL) return -1;\n" name
8436         | Bool name ->
8437             pr "  %s = is_true (argv[i++]) ? 1 : 0;\n" name
8438         | Int name ->
8439             let range =
8440               let min = "(-(2LL<<30))"
8441               and max = "((2LL<<30)-1)"
8442               and comment =
8443                 "The Int type in the generator is a signed 31 bit int." in
8444               Some (min, max, comment) in
8445             parse_integer "xstrtoll" "long long" "int" range name
8446         | Int64 name ->
8447             parse_integer "xstrtoll" "long long" "int64_t" None name
8448       ) (snd style);
8449
8450       (* Call C API function. *)
8451       pr "  r = guestfs_%s " name;
8452       generate_c_call_args ~handle:"g" style;
8453       pr ";\n";
8454
8455       List.iter (
8456         function
8457         | Device _ | String _
8458         | OptString _ | Bool _
8459         | Int _ | Int64 _
8460         | BufferIn _ -> ()
8461         | Pathname name | Dev_or_Path name | FileOut name
8462         | Key name ->
8463             pr "  free (%s);\n" name
8464         | FileIn name ->
8465             pr "  free_file_in (%s);\n" name
8466         | StringList name | DeviceList name ->
8467             pr "  free_strings (%s);\n" name
8468       ) (snd style);
8469
8470       (* Any output flags? *)
8471       let fish_output =
8472         let flags = filter_map (
8473           function FishOutput flag -> Some flag | _ -> None
8474         ) flags in
8475         match flags with
8476         | [] -> None
8477         | [f] -> Some f
8478         | _ ->
8479             failwithf "%s: more than one FishOutput flag is not allowed" name in
8480
8481       (* Check return value for errors and display command results. *)
8482       (match fst style with
8483        | RErr -> pr "  return r;\n"
8484        | RInt _ ->
8485            pr "  if (r == -1) return -1;\n";
8486            (match fish_output with
8487             | None ->
8488                 pr "  printf (\"%%d\\n\", r);\n";
8489             | Some FishOutputOctal ->
8490                 pr "  printf (\"%%s%%o\\n\", r != 0 ? \"0\" : \"\", r);\n";
8491             | Some FishOutputHexadecimal ->
8492                 pr "  printf (\"%%s%%x\\n\", r != 0 ? \"0x\" : \"\", r);\n");
8493            pr "  return 0;\n"
8494        | RInt64 _ ->
8495            pr "  if (r == -1) return -1;\n";
8496            (match fish_output with
8497             | None ->
8498                 pr "  printf (\"%%\" PRIi64 \"\\n\", r);\n";
8499             | Some FishOutputOctal ->
8500                 pr "  printf (\"%%s%%\" PRIo64 \"\\n\", r != 0 ? \"0\" : \"\", r);\n";
8501             | Some FishOutputHexadecimal ->
8502                 pr "  printf (\"%%s%%\" PRIx64 \"\\n\", r != 0 ? \"0x\" : \"\", r);\n");
8503            pr "  return 0;\n"
8504        | RBool _ ->
8505            pr "  if (r == -1) return -1;\n";
8506            pr "  if (r) printf (\"true\\n\"); else printf (\"false\\n\");\n";
8507            pr "  return 0;\n"
8508        | RConstString _ ->
8509            pr "  if (r == NULL) return -1;\n";
8510            pr "  printf (\"%%s\\n\", r);\n";
8511            pr "  return 0;\n"
8512        | RConstOptString _ ->
8513            pr "  printf (\"%%s\\n\", r ? : \"(null)\");\n";
8514            pr "  return 0;\n"
8515        | RString _ ->
8516            pr "  if (r == NULL) return -1;\n";
8517            pr "  printf (\"%%s\\n\", r);\n";
8518            pr "  free (r);\n";
8519            pr "  return 0;\n"
8520        | RStringList _ ->
8521            pr "  if (r == NULL) return -1;\n";
8522            pr "  print_strings (r);\n";
8523            pr "  free_strings (r);\n";
8524            pr "  return 0;\n"
8525        | RStruct (_, typ) ->
8526            pr "  if (r == NULL) return -1;\n";
8527            pr "  print_%s (r);\n" typ;
8528            pr "  guestfs_free_%s (r);\n" typ;
8529            pr "  return 0;\n"
8530        | RStructList (_, typ) ->
8531            pr "  if (r == NULL) return -1;\n";
8532            pr "  print_%s_list (r);\n" typ;
8533            pr "  guestfs_free_%s_list (r);\n" typ;
8534            pr "  return 0;\n"
8535        | RHashtable _ ->
8536            pr "  if (r == NULL) return -1;\n";
8537            pr "  print_table (r);\n";
8538            pr "  free_strings (r);\n";
8539            pr "  return 0;\n"
8540        | RBufferOut _ ->
8541            pr "  if (r == NULL) return -1;\n";
8542            pr "  if (full_write (1, r, size) != size) {\n";
8543            pr "    perror (\"write\");\n";
8544            pr "    free (r);\n";
8545            pr "    return -1;\n";
8546            pr "  }\n";
8547            pr "  free (r);\n";
8548            pr "  return 0;\n"
8549       );
8550       pr "}\n";
8551       pr "\n"
8552   ) all_functions;
8553
8554   (* run_action function *)
8555   pr "int run_action (const char *cmd, int argc, char *argv[])\n";
8556   pr "{\n";
8557   List.iter (
8558     fun (name, _, _, flags, _, _, _) ->
8559       let name2 = replace_char name '_' '-' in
8560       let alias =
8561         try find_map (function FishAlias n -> Some n | _ -> None) flags
8562         with Not_found -> name in
8563       pr "  if (";
8564       pr "STRCASEEQ (cmd, \"%s\")" name;
8565       if name <> name2 then
8566         pr " || STRCASEEQ (cmd, \"%s\")" name2;
8567       if name <> alias then
8568         pr " || STRCASEEQ (cmd, \"%s\")" alias;
8569       pr ")\n";
8570       pr "    return run_%s (cmd, argc, argv);\n" name;
8571       pr "  else\n";
8572   ) all_functions;
8573   pr "    {\n";
8574   pr "      fprintf (stderr, _(\"%%s: unknown command\\n\"), cmd);\n";
8575   pr "      if (command_num == 1)\n";
8576   pr "        extended_help_message ();\n";
8577   pr "      return -1;\n";
8578   pr "    }\n";
8579   pr "  return 0;\n";
8580   pr "}\n";
8581   pr "\n"
8582
8583 (* Readline completion for guestfish. *)
8584 and generate_fish_completion () =
8585   generate_header CStyle GPLv2plus;
8586
8587   let all_functions =
8588     List.filter (
8589       fun (_, _, _, flags, _, _, _) -> not (List.mem NotInFish flags)
8590     ) all_functions in
8591
8592   pr "\
8593 #include <config.h>
8594
8595 #include <stdio.h>
8596 #include <stdlib.h>
8597 #include <string.h>
8598
8599 #ifdef HAVE_LIBREADLINE
8600 #include <readline/readline.h>
8601 #endif
8602
8603 #include \"fish.h\"
8604
8605 #ifdef HAVE_LIBREADLINE
8606
8607 static const char *const commands[] = {
8608   BUILTIN_COMMANDS_FOR_COMPLETION,
8609 ";
8610
8611   (* Get the commands, including the aliases.  They don't need to be
8612    * sorted - the generator() function just does a dumb linear search.
8613    *)
8614   let commands =
8615     List.map (
8616       fun (name, _, _, flags, _, _, _) ->
8617         let name2 = replace_char name '_' '-' in
8618         let alias =
8619           try find_map (function FishAlias n -> Some n | _ -> None) flags
8620           with Not_found -> name in
8621
8622         if name <> alias then [name2; alias] else [name2]
8623     ) all_functions in
8624   let commands = List.flatten commands in
8625
8626   List.iter (pr "  \"%s\",\n") commands;
8627
8628   pr "  NULL
8629 };
8630
8631 static char *
8632 generator (const char *text, int state)
8633 {
8634   static size_t index, len;
8635   const char *name;
8636
8637   if (!state) {
8638     index = 0;
8639     len = strlen (text);
8640   }
8641
8642   rl_attempted_completion_over = 1;
8643
8644   while ((name = commands[index]) != NULL) {
8645     index++;
8646     if (STRCASEEQLEN (name, text, len))
8647       return strdup (name);
8648   }
8649
8650   return NULL;
8651 }
8652
8653 #endif /* HAVE_LIBREADLINE */
8654
8655 #ifdef HAVE_RL_COMPLETION_MATCHES
8656 #define RL_COMPLETION_MATCHES rl_completion_matches
8657 #else
8658 #ifdef HAVE_COMPLETION_MATCHES
8659 #define RL_COMPLETION_MATCHES completion_matches
8660 #endif
8661 #endif /* else just fail if we don't have either symbol */
8662
8663 char **
8664 do_completion (const char *text, int start, int end)
8665 {
8666   char **matches = NULL;
8667
8668 #ifdef HAVE_LIBREADLINE
8669   rl_completion_append_character = ' ';
8670
8671   if (start == 0)
8672     matches = RL_COMPLETION_MATCHES (text, generator);
8673   else if (complete_dest_paths)
8674     matches = RL_COMPLETION_MATCHES (text, complete_dest_paths_generator);
8675 #endif
8676
8677   return matches;
8678 }
8679 ";
8680
8681 (* Generate the POD documentation for guestfish. *)
8682 and generate_fish_actions_pod () =
8683   let all_functions_sorted =
8684     List.filter (
8685       fun (_, _, _, flags, _, _, _) ->
8686         not (List.mem NotInFish flags || List.mem NotInDocs flags)
8687     ) all_functions_sorted in
8688
8689   let rex = Str.regexp "C<guestfs_\\([^>]+\\)>" in
8690
8691   List.iter (
8692     fun (name, style, _, flags, _, _, longdesc) ->
8693       let longdesc =
8694         Str.global_substitute rex (
8695           fun s ->
8696             let sub =
8697               try Str.matched_group 1 s
8698               with Not_found ->
8699                 failwithf "error substituting C<guestfs_...> in longdesc of function %s" name in
8700             "C<" ^ replace_char sub '_' '-' ^ ">"
8701         ) longdesc in
8702       let name = replace_char name '_' '-' in
8703       let alias =
8704         try find_map (function FishAlias n -> Some n | _ -> None) flags
8705         with Not_found -> name in
8706
8707       pr "=head2 %s" name;
8708       if name <> alias then
8709         pr " | %s" alias;
8710       pr "\n";
8711       pr "\n";
8712       pr " %s" name;
8713       List.iter (
8714         function
8715         | Pathname n | Device n | Dev_or_Path n | String n ->
8716             pr " %s" n
8717         | OptString n -> pr " %s" n
8718         | StringList n | DeviceList n -> pr " '%s ...'" n
8719         | Bool _ -> pr " true|false"
8720         | Int n -> pr " %s" n
8721         | Int64 n -> pr " %s" n
8722         | FileIn n | FileOut n -> pr " (%s|-)" n
8723         | BufferIn n -> pr " %s" n
8724         | Key _ -> () (* keys are entered at a prompt *)
8725       ) (snd style);
8726       pr "\n";
8727       pr "\n";
8728       pr "%s\n\n" longdesc;
8729
8730       if List.exists (function FileIn _ | FileOut _ -> true
8731                       | _ -> false) (snd style) then
8732         pr "Use C<-> instead of a filename to read/write from stdin/stdout.\n\n";
8733
8734       if List.exists (function Key _ -> true | _ -> false) (snd style) then
8735         pr "This command has one or more key or passphrase parameters.
8736 Guestfish will prompt for these separately.\n\n";
8737
8738       if List.mem ProtocolLimitWarning flags then
8739         pr "%s\n\n" protocol_limit_warning;
8740
8741       if List.mem DangerWillRobinson flags then
8742         pr "%s\n\n" danger_will_robinson;
8743
8744       match deprecation_notice flags with
8745       | None -> ()
8746       | Some txt -> pr "%s\n\n" txt
8747   ) all_functions_sorted
8748
8749 (* Generate a C function prototype. *)
8750 and generate_prototype ?(extern = true) ?(static = false) ?(semicolon = true)
8751     ?(single_line = false) ?(newline = false) ?(in_daemon = false)
8752     ?(prefix = "")
8753     ?handle name style =
8754   if extern then pr "extern ";
8755   if static then pr "static ";
8756   (match fst style with
8757    | RErr -> pr "int "
8758    | RInt _ -> pr "int "
8759    | RInt64 _ -> pr "int64_t "
8760    | RBool _ -> pr "int "
8761    | RConstString _ | RConstOptString _ -> pr "const char *"
8762    | RString _ | RBufferOut _ -> pr "char *"
8763    | RStringList _ | RHashtable _ -> pr "char **"
8764    | RStruct (_, typ) ->
8765        if not in_daemon then pr "struct guestfs_%s *" typ
8766        else pr "guestfs_int_%s *" typ
8767    | RStructList (_, typ) ->
8768        if not in_daemon then pr "struct guestfs_%s_list *" typ
8769        else pr "guestfs_int_%s_list *" typ
8770   );
8771   let is_RBufferOut = match fst style with RBufferOut _ -> true | _ -> false in
8772   pr "%s%s (" prefix name;
8773   if handle = None && List.length (snd style) = 0 && not is_RBufferOut then
8774     pr "void"
8775   else (
8776     let comma = ref false in
8777     (match handle with
8778      | None -> ()
8779      | Some handle -> pr "guestfs_h *%s" handle; comma := true
8780     );
8781     let next () =
8782       if !comma then (
8783         if single_line then pr ", " else pr ",\n\t\t"
8784       );
8785       comma := true
8786     in
8787     List.iter (
8788       function
8789       | Pathname n
8790       | Device n | Dev_or_Path n
8791       | String n
8792       | OptString n
8793       | Key n ->
8794           next ();
8795           pr "const char *%s" n
8796       | StringList n | DeviceList n ->
8797           next ();
8798           pr "char *const *%s" n
8799       | Bool n -> next (); pr "int %s" n
8800       | Int n -> next (); pr "int %s" n
8801       | Int64 n -> next (); pr "int64_t %s" n
8802       | FileIn n
8803       | FileOut n ->
8804           if not in_daemon then (next (); pr "const char *%s" n)
8805       | BufferIn n ->
8806           next ();
8807           pr "const char *%s" n;
8808           next ();
8809           pr "size_t %s_size" n
8810     ) (snd style);
8811     if is_RBufferOut then (next (); pr "size_t *size_r");
8812   );
8813   pr ")";
8814   if semicolon then pr ";";
8815   if newline then pr "\n"
8816
8817 (* Generate C call arguments, eg "(handle, foo, bar)" *)
8818 and generate_c_call_args ?handle ?(decl = false) style =
8819   pr "(";
8820   let comma = ref false in
8821   let next () =
8822     if !comma then pr ", ";
8823     comma := true
8824   in
8825   (match handle with
8826    | None -> ()
8827    | Some handle -> pr "%s" handle; comma := true
8828   );
8829   List.iter (
8830     function
8831     | BufferIn n ->
8832         next ();
8833         pr "%s, %s_size" n n
8834     | arg ->
8835         next ();
8836         pr "%s" (name_of_argt arg)
8837   ) (snd style);
8838   (* For RBufferOut calls, add implicit &size parameter. *)
8839   if not decl then (
8840     match fst style with
8841     | RBufferOut _ ->
8842         next ();
8843         pr "&size"
8844     | _ -> ()
8845   );
8846   pr ")"
8847
8848 (* Generate the OCaml bindings interface. *)
8849 and generate_ocaml_mli () =
8850   generate_header OCamlStyle LGPLv2plus;
8851
8852   pr "\
8853 (** For API documentation you should refer to the C API
8854     in the guestfs(3) manual page.  The OCaml API uses almost
8855     exactly the same calls. *)
8856
8857 type t
8858 (** A [guestfs_h] handle. *)
8859
8860 exception Error of string
8861 (** This exception is raised when there is an error. *)
8862
8863 exception Handle_closed of string
8864 (** This exception is raised if you use a {!Guestfs.t} handle
8865     after calling {!close} on it.  The string is the name of
8866     the function. *)
8867
8868 val create : unit -> t
8869 (** Create a {!Guestfs.t} handle. *)
8870
8871 val close : t -> unit
8872 (** Close the {!Guestfs.t} handle and free up all resources used
8873     by it immediately.
8874
8875     Handles are closed by the garbage collector when they become
8876     unreferenced, but callers can call this in order to provide
8877     predictable cleanup. *)
8878
8879 ";
8880   generate_ocaml_structure_decls ();
8881
8882   (* The actions. *)
8883   List.iter (
8884     fun (name, style, _, _, _, shortdesc, _) ->
8885       generate_ocaml_prototype name style;
8886       pr "(** %s *)\n" shortdesc;
8887       pr "\n"
8888   ) all_functions_sorted
8889
8890 (* Generate the OCaml bindings implementation. *)
8891 and generate_ocaml_ml () =
8892   generate_header OCamlStyle LGPLv2plus;
8893
8894   pr "\
8895 type t
8896
8897 exception Error of string
8898 exception Handle_closed of string
8899
8900 external create : unit -> t = \"ocaml_guestfs_create\"
8901 external close : t -> unit = \"ocaml_guestfs_close\"
8902
8903 (* Give the exceptions names, so they can be raised from the C code. *)
8904 let () =
8905   Callback.register_exception \"ocaml_guestfs_error\" (Error \"\");
8906   Callback.register_exception \"ocaml_guestfs_closed\" (Handle_closed \"\")
8907
8908 ";
8909
8910   generate_ocaml_structure_decls ();
8911
8912   (* The actions. *)
8913   List.iter (
8914     fun (name, style, _, _, _, shortdesc, _) ->
8915       generate_ocaml_prototype ~is_external:true name style;
8916   ) all_functions_sorted
8917
8918 (* Generate the OCaml bindings C implementation. *)
8919 and generate_ocaml_c () =
8920   generate_header CStyle LGPLv2plus;
8921
8922   pr "\
8923 #include <stdio.h>
8924 #include <stdlib.h>
8925 #include <string.h>
8926
8927 #include <caml/config.h>
8928 #include <caml/alloc.h>
8929 #include <caml/callback.h>
8930 #include <caml/fail.h>
8931 #include <caml/memory.h>
8932 #include <caml/mlvalues.h>
8933 #include <caml/signals.h>
8934
8935 #include \"guestfs.h\"
8936
8937 #include \"guestfs_c.h\"
8938
8939 /* Copy a hashtable of string pairs into an assoc-list.  We return
8940  * the list in reverse order, but hashtables aren't supposed to be
8941  * ordered anyway.
8942  */
8943 static CAMLprim value
8944 copy_table (char * const * argv)
8945 {
8946   CAMLparam0 ();
8947   CAMLlocal5 (rv, pairv, kv, vv, cons);
8948   size_t i;
8949
8950   rv = Val_int (0);
8951   for (i = 0; argv[i] != NULL; i += 2) {
8952     kv = caml_copy_string (argv[i]);
8953     vv = caml_copy_string (argv[i+1]);
8954     pairv = caml_alloc (2, 0);
8955     Store_field (pairv, 0, kv);
8956     Store_field (pairv, 1, vv);
8957     cons = caml_alloc (2, 0);
8958     Store_field (cons, 1, rv);
8959     rv = cons;
8960     Store_field (cons, 0, pairv);
8961   }
8962
8963   CAMLreturn (rv);
8964 }
8965
8966 ";
8967
8968   (* Struct copy functions. *)
8969
8970   let emit_ocaml_copy_list_function typ =
8971     pr "static CAMLprim value\n";
8972     pr "copy_%s_list (const struct guestfs_%s_list *%ss)\n" typ typ typ;
8973     pr "{\n";
8974     pr "  CAMLparam0 ();\n";
8975     pr "  CAMLlocal2 (rv, v);\n";
8976     pr "  unsigned int i;\n";
8977     pr "\n";
8978     pr "  if (%ss->len == 0)\n" typ;
8979     pr "    CAMLreturn (Atom (0));\n";
8980     pr "  else {\n";
8981     pr "    rv = caml_alloc (%ss->len, 0);\n" typ;
8982     pr "    for (i = 0; i < %ss->len; ++i) {\n" typ;
8983     pr "      v = copy_%s (&%ss->val[i]);\n" typ typ;
8984     pr "      caml_modify (&Field (rv, i), v);\n";
8985     pr "    }\n";
8986     pr "    CAMLreturn (rv);\n";
8987     pr "  }\n";
8988     pr "}\n";
8989     pr "\n";
8990   in
8991
8992   List.iter (
8993     fun (typ, cols) ->
8994       let has_optpercent_col =
8995         List.exists (function (_, FOptPercent) -> true | _ -> false) cols in
8996
8997       pr "static CAMLprim value\n";
8998       pr "copy_%s (const struct guestfs_%s *%s)\n" typ typ typ;
8999       pr "{\n";
9000       pr "  CAMLparam0 ();\n";
9001       if has_optpercent_col then
9002         pr "  CAMLlocal3 (rv, v, v2);\n"
9003       else
9004         pr "  CAMLlocal2 (rv, v);\n";
9005       pr "\n";
9006       pr "  rv = caml_alloc (%d, 0);\n" (List.length cols);
9007       iteri (
9008         fun i col ->
9009           (match col with
9010            | name, FString ->
9011                pr "  v = caml_copy_string (%s->%s);\n" typ name
9012            | name, FBuffer ->
9013                pr "  v = caml_alloc_string (%s->%s_len);\n" typ name;
9014                pr "  memcpy (String_val (v), %s->%s, %s->%s_len);\n"
9015                  typ name typ name
9016            | name, FUUID ->
9017                pr "  v = caml_alloc_string (32);\n";
9018                pr "  memcpy (String_val (v), %s->%s, 32);\n" typ name
9019            | name, (FBytes|FInt64|FUInt64) ->
9020                pr "  v = caml_copy_int64 (%s->%s);\n" typ name
9021            | name, (FInt32|FUInt32) ->
9022                pr "  v = caml_copy_int32 (%s->%s);\n" typ name
9023            | name, FOptPercent ->
9024                pr "  if (%s->%s >= 0) { /* Some %s */\n" typ name name;
9025                pr "    v2 = caml_copy_double (%s->%s);\n" typ name;
9026                pr "    v = caml_alloc (1, 0);\n";
9027                pr "    Store_field (v, 0, v2);\n";
9028                pr "  } else /* None */\n";
9029                pr "    v = Val_int (0);\n";
9030            | name, FChar ->
9031                pr "  v = Val_int (%s->%s);\n" typ name
9032           );
9033           pr "  Store_field (rv, %d, v);\n" i
9034       ) cols;
9035       pr "  CAMLreturn (rv);\n";
9036       pr "}\n";
9037       pr "\n";
9038   ) structs;
9039
9040   (* Emit a copy_TYPE_list function definition only if that function is used. *)
9041   List.iter (
9042     function
9043     | typ, (RStructListOnly | RStructAndList) ->
9044         (* generate the function for typ *)
9045         emit_ocaml_copy_list_function typ
9046     | typ, _ -> () (* empty *)
9047   ) (rstructs_used_by all_functions);
9048
9049   (* The wrappers. *)
9050   List.iter (
9051     fun (name, style, _, _, _, _, _) ->
9052       pr "/* Automatically generated wrapper for function\n";
9053       pr " * ";
9054       generate_ocaml_prototype name style;
9055       pr " */\n";
9056       pr "\n";
9057
9058       let params =
9059         "gv" :: List.map (fun arg -> name_of_argt arg ^ "v") (snd style) in
9060
9061       let needs_extra_vs =
9062         match fst style with RConstOptString _ -> true | _ -> false in
9063
9064       pr "/* Emit prototype to appease gcc's -Wmissing-prototypes. */\n";
9065       pr "CAMLprim value ocaml_guestfs_%s (value %s" name (List.hd params);
9066       List.iter (pr ", value %s") (List.tl params); pr ");\n";
9067       pr "\n";
9068
9069       pr "CAMLprim value\n";
9070       pr "ocaml_guestfs_%s (value %s" name (List.hd params);
9071       List.iter (pr ", value %s") (List.tl params);
9072       pr ")\n";
9073       pr "{\n";
9074
9075       (match params with
9076        | [p1; p2; p3; p4; p5] ->
9077            pr "  CAMLparam5 (%s);\n" (String.concat ", " params)
9078        | p1 :: p2 :: p3 :: p4 :: p5 :: rest ->
9079            pr "  CAMLparam5 (%s);\n" (String.concat ", " [p1; p2; p3; p4; p5]);
9080            pr "  CAMLxparam%d (%s);\n"
9081              (List.length rest) (String.concat ", " rest)
9082        | ps ->
9083            pr "  CAMLparam%d (%s);\n" (List.length ps) (String.concat ", " ps)
9084       );
9085       if not needs_extra_vs then
9086         pr "  CAMLlocal1 (rv);\n"
9087       else
9088         pr "  CAMLlocal3 (rv, v, v2);\n";
9089       pr "\n";
9090
9091       pr "  guestfs_h *g = Guestfs_val (gv);\n";
9092       pr "  if (g == NULL)\n";
9093       pr "    ocaml_guestfs_raise_closed (\"%s\");\n" name;
9094       pr "\n";
9095
9096       List.iter (
9097         function
9098         | Pathname n
9099         | Device n | Dev_or_Path n
9100         | String n
9101         | FileIn n
9102         | FileOut n
9103         | Key n ->
9104             (* Copy strings in case the GC moves them: RHBZ#604691 *)
9105             pr "  char *%s = guestfs_safe_strdup (g, String_val (%sv));\n" n n
9106         | OptString n ->
9107             pr "  char *%s =\n" n;
9108             pr "    %sv != Val_int (0) ?" n;
9109             pr "      guestfs_safe_strdup (g, String_val (Field (%sv, 0))) : NULL;\n" n
9110         | BufferIn n ->
9111             pr "  size_t %s_size = caml_string_length (%sv);\n" n n;
9112             pr "  char *%s = guestfs_safe_memdup (g, String_val (%sv), %s_size);\n" n n n
9113         | StringList n | DeviceList n ->
9114             pr "  char **%s = ocaml_guestfs_strings_val (g, %sv);\n" n n
9115         | Bool n ->
9116             pr "  int %s = Bool_val (%sv);\n" n n
9117         | Int n ->
9118             pr "  int %s = Int_val (%sv);\n" n n
9119         | Int64 n ->
9120             pr "  int64_t %s = Int64_val (%sv);\n" n n
9121       ) (snd style);
9122       let error_code =
9123         match fst style with
9124         | RErr -> pr "  int r;\n"; "-1"
9125         | RInt _ -> pr "  int r;\n"; "-1"
9126         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
9127         | RBool _ -> pr "  int r;\n"; "-1"
9128         | RConstString _ | RConstOptString _ ->
9129             pr "  const char *r;\n"; "NULL"
9130         | RString _ -> pr "  char *r;\n"; "NULL"
9131         | RStringList _ ->
9132             pr "  size_t i;\n";
9133             pr "  char **r;\n";
9134             "NULL"
9135         | RStruct (_, typ) ->
9136             pr "  struct guestfs_%s *r;\n" typ; "NULL"
9137         | RStructList (_, typ) ->
9138             pr "  struct guestfs_%s_list *r;\n" typ; "NULL"
9139         | RHashtable _ ->
9140             pr "  size_t i;\n";
9141             pr "  char **r;\n";
9142             "NULL"
9143         | RBufferOut _ ->
9144             pr "  char *r;\n";
9145             pr "  size_t size;\n";
9146             "NULL" in
9147       pr "\n";
9148
9149       pr "  caml_enter_blocking_section ();\n";
9150       pr "  r = guestfs_%s " name;
9151       generate_c_call_args ~handle:"g" style;
9152       pr ";\n";
9153       pr "  caml_leave_blocking_section ();\n";
9154
9155       (* Free strings if we copied them above. *)
9156       List.iter (
9157         function
9158         | Pathname n | Device n | Dev_or_Path n | String n | OptString n
9159         | FileIn n | FileOut n | BufferIn n | Key n ->
9160             pr "  free (%s);\n" n
9161         | StringList n | DeviceList n ->
9162             pr "  ocaml_guestfs_free_strings (%s);\n" n;
9163         | Bool _ | Int _ | Int64 _ -> ()
9164       ) (snd style);
9165
9166       pr "  if (r == %s)\n" error_code;
9167       pr "    ocaml_guestfs_raise_error (g, \"%s\");\n" name;
9168       pr "\n";
9169
9170       (match fst style with
9171        | RErr -> pr "  rv = Val_unit;\n"
9172        | RInt _ -> pr "  rv = Val_int (r);\n"
9173        | RInt64 _ ->
9174            pr "  rv = caml_copy_int64 (r);\n"
9175        | RBool _ -> pr "  rv = Val_bool (r);\n"
9176        | RConstString _ ->
9177            pr "  rv = caml_copy_string (r);\n"
9178        | RConstOptString _ ->
9179            pr "  if (r) { /* Some string */\n";
9180            pr "    v = caml_alloc (1, 0);\n";
9181            pr "    v2 = caml_copy_string (r);\n";
9182            pr "    Store_field (v, 0, v2);\n";
9183            pr "  } else /* None */\n";
9184            pr "    v = Val_int (0);\n";
9185        | RString _ ->
9186            pr "  rv = caml_copy_string (r);\n";
9187            pr "  free (r);\n"
9188        | RStringList _ ->
9189            pr "  rv = caml_copy_string_array ((const char **) r);\n";
9190            pr "  for (i = 0; r[i] != NULL; ++i) free (r[i]);\n";
9191            pr "  free (r);\n"
9192        | RStruct (_, typ) ->
9193            pr "  rv = copy_%s (r);\n" typ;
9194            pr "  guestfs_free_%s (r);\n" typ;
9195        | RStructList (_, typ) ->
9196            pr "  rv = copy_%s_list (r);\n" typ;
9197            pr "  guestfs_free_%s_list (r);\n" typ;
9198        | RHashtable _ ->
9199            pr "  rv = copy_table (r);\n";
9200            pr "  for (i = 0; r[i] != NULL; ++i) free (r[i]);\n";
9201            pr "  free (r);\n";
9202        | RBufferOut _ ->
9203            pr "  rv = caml_alloc_string (size);\n";
9204            pr "  memcpy (String_val (rv), r, size);\n";
9205       );
9206
9207       pr "  CAMLreturn (rv);\n";
9208       pr "}\n";
9209       pr "\n";
9210
9211       if List.length params > 5 then (
9212         pr "/* Emit prototype to appease gcc's -Wmissing-prototypes. */\n";
9213         pr "CAMLprim value ";
9214         pr "ocaml_guestfs_%s_byte (value *argv, int argn);\n" name;
9215         pr "CAMLprim value\n";
9216         pr "ocaml_guestfs_%s_byte (value *argv, int argn)\n" name;
9217         pr "{\n";
9218         pr "  return ocaml_guestfs_%s (argv[0]" name;
9219         iteri (fun i _ -> pr ", argv[%d]" i) (List.tl params);
9220         pr ");\n";
9221         pr "}\n";
9222         pr "\n"
9223       )
9224   ) all_functions_sorted
9225
9226 and generate_ocaml_structure_decls () =
9227   List.iter (
9228     fun (typ, cols) ->
9229       pr "type %s = {\n" typ;
9230       List.iter (
9231         function
9232         | name, FString -> pr "  %s : string;\n" name
9233         | name, FBuffer -> pr "  %s : string;\n" name
9234         | name, FUUID -> pr "  %s : string;\n" name
9235         | name, (FBytes|FInt64|FUInt64) -> pr "  %s : int64;\n" name
9236         | name, (FInt32|FUInt32) -> pr "  %s : int32;\n" name
9237         | name, FChar -> pr "  %s : char;\n" name
9238         | name, FOptPercent -> pr "  %s : float option;\n" name
9239       ) cols;
9240       pr "}\n";
9241       pr "\n"
9242   ) structs
9243
9244 and generate_ocaml_prototype ?(is_external = false) name style =
9245   if is_external then pr "external " else pr "val ";
9246   pr "%s : t -> " name;
9247   List.iter (
9248     function
9249     | Pathname _ | Device _ | Dev_or_Path _ | String _ | FileIn _ | FileOut _
9250     | BufferIn _ | Key _ -> pr "string -> "
9251     | OptString _ -> pr "string option -> "
9252     | StringList _ | DeviceList _ -> pr "string array -> "
9253     | Bool _ -> pr "bool -> "
9254     | Int _ -> pr "int -> "
9255     | Int64 _ -> pr "int64 -> "
9256   ) (snd style);
9257   (match fst style with
9258    | RErr -> pr "unit" (* all errors are turned into exceptions *)
9259    | RInt _ -> pr "int"
9260    | RInt64 _ -> pr "int64"
9261    | RBool _ -> pr "bool"
9262    | RConstString _ -> pr "string"
9263    | RConstOptString _ -> pr "string option"
9264    | RString _ | RBufferOut _ -> pr "string"
9265    | RStringList _ -> pr "string array"
9266    | RStruct (_, typ) -> pr "%s" typ
9267    | RStructList (_, typ) -> pr "%s array" typ
9268    | RHashtable _ -> pr "(string * string) list"
9269   );
9270   if is_external then (
9271     pr " = ";
9272     if List.length (snd style) + 1 > 5 then
9273       pr "\"ocaml_guestfs_%s_byte\" " name;
9274     pr "\"ocaml_guestfs_%s\"" name
9275   );
9276   pr "\n"
9277
9278 (* Generate Perl xs code, a sort of crazy variation of C with macros. *)
9279 and generate_perl_xs () =
9280   generate_header CStyle LGPLv2plus;
9281
9282   pr "\
9283 #include \"EXTERN.h\"
9284 #include \"perl.h\"
9285 #include \"XSUB.h\"
9286
9287 #include <guestfs.h>
9288
9289 #ifndef PRId64
9290 #define PRId64 \"lld\"
9291 #endif
9292
9293 static SV *
9294 my_newSVll(long long val) {
9295 #ifdef USE_64_BIT_ALL
9296   return newSViv(val);
9297 #else
9298   char buf[100];
9299   int len;
9300   len = snprintf(buf, 100, \"%%\" PRId64, val);
9301   return newSVpv(buf, len);
9302 #endif
9303 }
9304
9305 #ifndef PRIu64
9306 #define PRIu64 \"llu\"
9307 #endif
9308
9309 static SV *
9310 my_newSVull(unsigned long long val) {
9311 #ifdef USE_64_BIT_ALL
9312   return newSVuv(val);
9313 #else
9314   char buf[100];
9315   int len;
9316   len = snprintf(buf, 100, \"%%\" PRIu64, val);
9317   return newSVpv(buf, len);
9318 #endif
9319 }
9320
9321 /* http://www.perlmonks.org/?node_id=680842 */
9322 static char **
9323 XS_unpack_charPtrPtr (SV *arg) {
9324   char **ret;
9325   AV *av;
9326   I32 i;
9327
9328   if (!arg || !SvOK (arg) || !SvROK (arg) || SvTYPE (SvRV (arg)) != SVt_PVAV)
9329     croak (\"array reference expected\");
9330
9331   av = (AV *)SvRV (arg);
9332   ret = malloc ((av_len (av) + 1 + 1) * sizeof (char *));
9333   if (!ret)
9334     croak (\"malloc failed\");
9335
9336   for (i = 0; i <= av_len (av); i++) {
9337     SV **elem = av_fetch (av, i, 0);
9338
9339     if (!elem || !*elem)
9340       croak (\"missing element in list\");
9341
9342     ret[i] = SvPV_nolen (*elem);
9343   }
9344
9345   ret[i] = NULL;
9346
9347   return ret;
9348 }
9349
9350 MODULE = Sys::Guestfs  PACKAGE = Sys::Guestfs
9351
9352 PROTOTYPES: ENABLE
9353
9354 guestfs_h *
9355 _create ()
9356    CODE:
9357       RETVAL = guestfs_create ();
9358       if (!RETVAL)
9359         croak (\"could not create guestfs handle\");
9360       guestfs_set_error_handler (RETVAL, NULL, NULL);
9361  OUTPUT:
9362       RETVAL
9363
9364 void
9365 DESTROY (sv)
9366       SV *sv;
9367  PPCODE:
9368       /* For the 'g' argument above we do the conversion explicitly and
9369        * don't rely on the typemap, because if the handle has been
9370        * explicitly closed we don't want the typemap conversion to
9371        * display an error.
9372        */
9373       HV *hv = (HV *) SvRV (sv);
9374       SV **svp = hv_fetch (hv, \"_g\", 2, 0);
9375       if (svp != NULL) {
9376         guestfs_h *g = (guestfs_h *) SvIV (*svp);
9377         assert (g != NULL);
9378         guestfs_close (g);
9379       }
9380
9381 void
9382 close (g)
9383       guestfs_h *g;
9384  PPCODE:
9385       guestfs_close (g);
9386       /* Avoid double-free in DESTROY method. */
9387       HV *hv = (HV *) SvRV (ST(0));
9388       (void) hv_delete (hv, \"_g\", 2, G_DISCARD);
9389
9390 ";
9391
9392   List.iter (
9393     fun (name, style, _, _, _, _, _) ->
9394       (match fst style with
9395        | RErr -> pr "void\n"
9396        | RInt _ -> pr "SV *\n"
9397        | RInt64 _ -> pr "SV *\n"
9398        | RBool _ -> pr "SV *\n"
9399        | RConstString _ -> pr "SV *\n"
9400        | RConstOptString _ -> pr "SV *\n"
9401        | RString _ -> pr "SV *\n"
9402        | RBufferOut _ -> pr "SV *\n"
9403        | RStringList _
9404        | RStruct _ | RStructList _
9405        | RHashtable _ ->
9406            pr "void\n" (* all lists returned implictly on the stack *)
9407       );
9408       (* Call and arguments. *)
9409       pr "%s (g" name;
9410       List.iter (
9411         fun arg -> pr ", %s" (name_of_argt arg)
9412       ) (snd style);
9413       pr ")\n";
9414       pr "      guestfs_h *g;\n";
9415       iteri (
9416         fun i ->
9417           function
9418           | Pathname n | Device n | Dev_or_Path n | String n
9419           | FileIn n | FileOut n | Key n ->
9420               pr "      char *%s;\n" n
9421           | BufferIn n ->
9422               pr "      char *%s;\n" n;
9423               pr "      size_t %s_size = SvCUR (ST(%d));\n" n (i+1)
9424           | OptString n ->
9425               (* http://www.perlmonks.org/?node_id=554277
9426                * Note that the implicit handle argument means we have
9427                * to add 1 to the ST(x) operator.
9428                *)
9429               pr "      char *%s = SvOK(ST(%d)) ? SvPV_nolen(ST(%d)) : NULL;\n" n (i+1) (i+1)
9430           | StringList n | DeviceList n -> pr "      char **%s;\n" n
9431           | Bool n -> pr "      int %s;\n" n
9432           | Int n -> pr "      int %s;\n" n
9433           | Int64 n -> pr "      int64_t %s;\n" n
9434       ) (snd style);
9435
9436       let do_cleanups () =
9437         List.iter (
9438           function
9439           | Pathname _ | Device _ | Dev_or_Path _ | String _ | OptString _
9440           | Bool _ | Int _ | Int64 _
9441           | FileIn _ | FileOut _
9442           | BufferIn _ | Key _ -> ()
9443           | StringList n | DeviceList n -> pr "      free (%s);\n" n
9444         ) (snd style)
9445       in
9446
9447       (* Code. *)
9448       (match fst style with
9449        | RErr ->
9450            pr "PREINIT:\n";
9451            pr "      int r;\n";
9452            pr " PPCODE:\n";
9453            pr "      r = guestfs_%s " name;
9454            generate_c_call_args ~handle:"g" style;
9455            pr ";\n";
9456            do_cleanups ();
9457            pr "      if (r == -1)\n";
9458            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9459        | RInt n
9460        | RBool n ->
9461            pr "PREINIT:\n";
9462            pr "      int %s;\n" n;
9463            pr "   CODE:\n";
9464            pr "      %s = guestfs_%s " n name;
9465            generate_c_call_args ~handle:"g" style;
9466            pr ";\n";
9467            do_cleanups ();
9468            pr "      if (%s == -1)\n" n;
9469            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9470            pr "      RETVAL = newSViv (%s);\n" n;
9471            pr " OUTPUT:\n";
9472            pr "      RETVAL\n"
9473        | RInt64 n ->
9474            pr "PREINIT:\n";
9475            pr "      int64_t %s;\n" n;
9476            pr "   CODE:\n";
9477            pr "      %s = guestfs_%s " n name;
9478            generate_c_call_args ~handle:"g" style;
9479            pr ";\n";
9480            do_cleanups ();
9481            pr "      if (%s == -1)\n" n;
9482            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9483            pr "      RETVAL = my_newSVll (%s);\n" n;
9484            pr " OUTPUT:\n";
9485            pr "      RETVAL\n"
9486        | RConstString n ->
9487            pr "PREINIT:\n";
9488            pr "      const char *%s;\n" n;
9489            pr "   CODE:\n";
9490            pr "      %s = guestfs_%s " n name;
9491            generate_c_call_args ~handle:"g" style;
9492            pr ";\n";
9493            do_cleanups ();
9494            pr "      if (%s == NULL)\n" n;
9495            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9496            pr "      RETVAL = newSVpv (%s, 0);\n" n;
9497            pr " OUTPUT:\n";
9498            pr "      RETVAL\n"
9499        | RConstOptString n ->
9500            pr "PREINIT:\n";
9501            pr "      const char *%s;\n" n;
9502            pr "   CODE:\n";
9503            pr "      %s = guestfs_%s " n name;
9504            generate_c_call_args ~handle:"g" style;
9505            pr ";\n";
9506            do_cleanups ();
9507            pr "      if (%s == NULL)\n" n;
9508            pr "        RETVAL = &PL_sv_undef;\n";
9509            pr "      else\n";
9510            pr "        RETVAL = newSVpv (%s, 0);\n" n;
9511            pr " OUTPUT:\n";
9512            pr "      RETVAL\n"
9513        | RString n ->
9514            pr "PREINIT:\n";
9515            pr "      char *%s;\n" n;
9516            pr "   CODE:\n";
9517            pr "      %s = guestfs_%s " n name;
9518            generate_c_call_args ~handle:"g" style;
9519            pr ";\n";
9520            do_cleanups ();
9521            pr "      if (%s == NULL)\n" n;
9522            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9523            pr "      RETVAL = newSVpv (%s, 0);\n" n;
9524            pr "      free (%s);\n" n;
9525            pr " OUTPUT:\n";
9526            pr "      RETVAL\n"
9527        | RStringList n | RHashtable n ->
9528            pr "PREINIT:\n";
9529            pr "      char **%s;\n" n;
9530            pr "      size_t i, n;\n";
9531            pr " PPCODE:\n";
9532            pr "      %s = guestfs_%s " n name;
9533            generate_c_call_args ~handle:"g" style;
9534            pr ";\n";
9535            do_cleanups ();
9536            pr "      if (%s == NULL)\n" n;
9537            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9538            pr "      for (n = 0; %s[n] != NULL; ++n) /**/;\n" n;
9539            pr "      EXTEND (SP, n);\n";
9540            pr "      for (i = 0; i < n; ++i) {\n";
9541            pr "        PUSHs (sv_2mortal (newSVpv (%s[i], 0)));\n" n;
9542            pr "        free (%s[i]);\n" n;
9543            pr "      }\n";
9544            pr "      free (%s);\n" n;
9545        | RStruct (n, typ) ->
9546            let cols = cols_of_struct typ in
9547            generate_perl_struct_code typ cols name style n do_cleanups
9548        | RStructList (n, typ) ->
9549            let cols = cols_of_struct typ in
9550            generate_perl_struct_list_code typ cols name style n do_cleanups
9551        | RBufferOut n ->
9552            pr "PREINIT:\n";
9553            pr "      char *%s;\n" n;
9554            pr "      size_t size;\n";
9555            pr "   CODE:\n";
9556            pr "      %s = guestfs_%s " n name;
9557            generate_c_call_args ~handle:"g" style;
9558            pr ";\n";
9559            do_cleanups ();
9560            pr "      if (%s == NULL)\n" n;
9561            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9562            pr "      RETVAL = newSVpvn (%s, size);\n" n;
9563            pr "      free (%s);\n" n;
9564            pr " OUTPUT:\n";
9565            pr "      RETVAL\n"
9566       );
9567
9568       pr "\n"
9569   ) all_functions
9570
9571 and generate_perl_struct_list_code typ cols name style n do_cleanups =
9572   pr "PREINIT:\n";
9573   pr "      struct guestfs_%s_list *%s;\n" typ n;
9574   pr "      size_t i;\n";
9575   pr "      HV *hv;\n";
9576   pr " PPCODE:\n";
9577   pr "      %s = guestfs_%s " n name;
9578   generate_c_call_args ~handle:"g" style;
9579   pr ";\n";
9580   do_cleanups ();
9581   pr "      if (%s == NULL)\n" n;
9582   pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9583   pr "      EXTEND (SP, %s->len);\n" n;
9584   pr "      for (i = 0; i < %s->len; ++i) {\n" n;
9585   pr "        hv = newHV ();\n";
9586   List.iter (
9587     function
9588     | name, FString ->
9589         pr "        (void) hv_store (hv, \"%s\", %d, newSVpv (%s->val[i].%s, 0), 0);\n"
9590           name (String.length name) n name
9591     | name, FUUID ->
9592         pr "        (void) hv_store (hv, \"%s\", %d, newSVpv (%s->val[i].%s, 32), 0);\n"
9593           name (String.length name) n name
9594     | name, FBuffer ->
9595         pr "        (void) hv_store (hv, \"%s\", %d, newSVpvn (%s->val[i].%s, %s->val[i].%s_len), 0);\n"
9596           name (String.length name) n name n name
9597     | name, (FBytes|FUInt64) ->
9598         pr "        (void) hv_store (hv, \"%s\", %d, my_newSVull (%s->val[i].%s), 0);\n"
9599           name (String.length name) n name
9600     | name, FInt64 ->
9601         pr "        (void) hv_store (hv, \"%s\", %d, my_newSVll (%s->val[i].%s), 0);\n"
9602           name (String.length name) n name
9603     | name, (FInt32|FUInt32) ->
9604         pr "        (void) hv_store (hv, \"%s\", %d, newSVnv (%s->val[i].%s), 0);\n"
9605           name (String.length name) n name
9606     | name, FChar ->
9607         pr "        (void) hv_store (hv, \"%s\", %d, newSVpv (&%s->val[i].%s, 1), 0);\n"
9608           name (String.length name) n name
9609     | name, FOptPercent ->
9610         pr "        (void) hv_store (hv, \"%s\", %d, newSVnv (%s->val[i].%s), 0);\n"
9611           name (String.length name) n name
9612   ) cols;
9613   pr "        PUSHs (sv_2mortal (newRV ((SV *) hv)));\n";
9614   pr "      }\n";
9615   pr "      guestfs_free_%s_list (%s);\n" typ n
9616
9617 and generate_perl_struct_code typ cols name style n do_cleanups =
9618   pr "PREINIT:\n";
9619   pr "      struct guestfs_%s *%s;\n" typ n;
9620   pr " PPCODE:\n";
9621   pr "      %s = guestfs_%s " n name;
9622   generate_c_call_args ~handle:"g" style;
9623   pr ";\n";
9624   do_cleanups ();
9625   pr "      if (%s == NULL)\n" n;
9626   pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9627   pr "      EXTEND (SP, 2 * %d);\n" (List.length cols);
9628   List.iter (
9629     fun ((name, _) as col) ->
9630       pr "      PUSHs (sv_2mortal (newSVpv (\"%s\", 0)));\n" name;
9631
9632       match col with
9633       | name, FString ->
9634           pr "      PUSHs (sv_2mortal (newSVpv (%s->%s, 0)));\n"
9635             n name
9636       | name, FBuffer ->
9637           pr "      PUSHs (sv_2mortal (newSVpvn (%s->%s, %s->%s_len)));\n"
9638             n name n name
9639       | name, FUUID ->
9640           pr "      PUSHs (sv_2mortal (newSVpv (%s->%s, 32)));\n"
9641             n name
9642       | name, (FBytes|FUInt64) ->
9643           pr "      PUSHs (sv_2mortal (my_newSVull (%s->%s)));\n"
9644             n name
9645       | name, FInt64 ->
9646           pr "      PUSHs (sv_2mortal (my_newSVll (%s->%s)));\n"
9647             n name
9648       | name, (FInt32|FUInt32) ->
9649           pr "      PUSHs (sv_2mortal (newSVnv (%s->%s)));\n"
9650             n name
9651       | name, FChar ->
9652           pr "      PUSHs (sv_2mortal (newSVpv (&%s->%s, 1)));\n"
9653             n name
9654       | name, FOptPercent ->
9655           pr "      PUSHs (sv_2mortal (newSVnv (%s->%s)));\n"
9656             n name
9657   ) cols;
9658   pr "      free (%s);\n" n
9659
9660 (* Generate Sys/Guestfs.pm. *)
9661 and generate_perl_pm () =
9662   generate_header HashStyle LGPLv2plus;
9663
9664   pr "\
9665 =pod
9666
9667 =head1 NAME
9668
9669 Sys::Guestfs - Perl bindings for libguestfs
9670
9671 =head1 SYNOPSIS
9672
9673  use Sys::Guestfs;
9674
9675  my $h = Sys::Guestfs->new ();
9676  $h->add_drive ('guest.img');
9677  $h->launch ();
9678  $h->mount ('/dev/sda1', '/');
9679  $h->touch ('/hello');
9680  $h->sync ();
9681
9682 =head1 DESCRIPTION
9683
9684 The C<Sys::Guestfs> module provides a Perl XS binding to the
9685 libguestfs API for examining and modifying virtual machine
9686 disk images.
9687
9688 Amongst the things this is good for: making batch configuration
9689 changes to guests, getting disk used/free statistics (see also:
9690 virt-df), migrating between virtualization systems (see also:
9691 virt-p2v), performing partial backups, performing partial guest
9692 clones, cloning guests and changing registry/UUID/hostname info, and
9693 much else besides.
9694
9695 Libguestfs uses Linux kernel and qemu code, and can access any type of
9696 guest filesystem that Linux and qemu can, including but not limited
9697 to: ext2/3/4, btrfs, FAT and NTFS, LVM, many different disk partition
9698 schemes, qcow, qcow2, vmdk.
9699
9700 Libguestfs provides ways to enumerate guest storage (eg. partitions,
9701 LVs, what filesystem is in each LV, etc.).  It can also run commands
9702 in the context of the guest.  Also you can access filesystems over
9703 FUSE.
9704
9705 See also L<Sys::Guestfs::Lib(3)> for a set of useful library
9706 functions for using libguestfs from Perl, including integration
9707 with libvirt.
9708
9709 =head1 ERRORS
9710
9711 All errors turn into calls to C<croak> (see L<Carp(3)>).
9712
9713 =head1 METHODS
9714
9715 =over 4
9716
9717 =cut
9718
9719 package Sys::Guestfs;
9720
9721 use strict;
9722 use warnings;
9723
9724 # This version number changes whenever a new function
9725 # is added to the libguestfs API.  It is not directly
9726 # related to the libguestfs version number.
9727 use vars qw($VERSION);
9728 $VERSION = '0.%d';
9729
9730 require XSLoader;
9731 XSLoader::load ('Sys::Guestfs');
9732
9733 =item $h = Sys::Guestfs->new ();
9734
9735 Create a new guestfs handle.
9736
9737 =cut
9738
9739 sub new {
9740   my $proto = shift;
9741   my $class = ref ($proto) || $proto;
9742
9743   my $g = Sys::Guestfs::_create ();
9744   my $self = { _g => $g };
9745   bless $self, $class;
9746   return $self;
9747 }
9748
9749 =item $h->close ();
9750
9751 Explicitly close the guestfs handle.
9752
9753 B<Note:> You should not usually call this function.  The handle will
9754 be closed implicitly when its reference count goes to zero (eg.
9755 when it goes out of scope or the program ends).  This call is
9756 only required in some exceptional cases, such as where the program
9757 may contain cached references to the handle 'somewhere' and you
9758 really have to have the close happen right away.  After calling
9759 C<close> the program must not call any method (including C<close>)
9760 on the handle (but the implicit call to C<DESTROY> that happens
9761 when the final reference is cleaned up is OK).
9762
9763 =cut
9764
9765 " max_proc_nr;
9766
9767   (* Actions.  We only need to print documentation for these as
9768    * they are pulled in from the XS code automatically.
9769    *)
9770   List.iter (
9771     fun (name, style, _, flags, _, _, longdesc) ->
9772       if not (List.mem NotInDocs flags) then (
9773         let longdesc = replace_str longdesc "C<guestfs_" "C<$h-E<gt>" in
9774         pr "=item ";
9775         generate_perl_prototype name style;
9776         pr "\n\n";
9777         pr "%s\n\n" longdesc;
9778         if List.mem ProtocolLimitWarning flags then
9779           pr "%s\n\n" protocol_limit_warning;
9780         if List.mem DangerWillRobinson flags then
9781           pr "%s\n\n" danger_will_robinson;
9782         match deprecation_notice flags with
9783         | None -> ()
9784         | Some txt -> pr "%s\n\n" txt
9785       )
9786   ) all_functions_sorted;
9787
9788   (* End of file. *)
9789   pr "\
9790 =cut
9791
9792 1;
9793
9794 =back
9795
9796 =head1 COPYRIGHT
9797
9798 Copyright (C) %s Red Hat Inc.
9799
9800 =head1 LICENSE
9801
9802 Please see the file COPYING.LIB for the full license.
9803
9804 =head1 SEE ALSO
9805
9806 L<guestfs(3)>,
9807 L<guestfish(1)>,
9808 L<http://libguestfs.org>,
9809 L<Sys::Guestfs::Lib(3)>.
9810
9811 =cut
9812 " copyright_years
9813
9814 and generate_perl_prototype name style =
9815   (match fst style with
9816    | RErr -> ()
9817    | RBool n
9818    | RInt n
9819    | RInt64 n
9820    | RConstString n
9821    | RConstOptString n
9822    | RString n
9823    | RBufferOut n -> pr "$%s = " n
9824    | RStruct (n,_)
9825    | RHashtable n -> pr "%%%s = " n
9826    | RStringList n
9827    | RStructList (n,_) -> pr "@%s = " n
9828   );
9829   pr "$h->%s (" name;
9830   let comma = ref false in
9831   List.iter (
9832     fun arg ->
9833       if !comma then pr ", ";
9834       comma := true;
9835       match arg with
9836       | Pathname n | Device n | Dev_or_Path n | String n
9837       | OptString n | Bool n | Int n | Int64 n | FileIn n | FileOut n
9838       | BufferIn n | Key n ->
9839           pr "$%s" n
9840       | StringList n | DeviceList n ->
9841           pr "\\@%s" n
9842   ) (snd style);
9843   pr ");"
9844
9845 (* Generate Python C module. *)
9846 and generate_python_c () =
9847   generate_header CStyle LGPLv2plus;
9848
9849   pr "\
9850 #define PY_SSIZE_T_CLEAN 1
9851 #include <Python.h>
9852
9853 #if PY_VERSION_HEX < 0x02050000
9854 typedef int Py_ssize_t;
9855 #define PY_SSIZE_T_MAX INT_MAX
9856 #define PY_SSIZE_T_MIN INT_MIN
9857 #endif
9858
9859 #include <stdio.h>
9860 #include <stdlib.h>
9861 #include <assert.h>
9862
9863 #include \"guestfs.h\"
9864
9865 #ifndef HAVE_PYCAPSULE_NEW
9866 typedef struct {
9867   PyObject_HEAD
9868   guestfs_h *g;
9869 } Pyguestfs_Object;
9870 #endif
9871
9872 static guestfs_h *
9873 get_handle (PyObject *obj)
9874 {
9875   assert (obj);
9876   assert (obj != Py_None);
9877 #ifndef HAVE_PYCAPSULE_NEW
9878   return ((Pyguestfs_Object *) obj)->g;
9879 #else
9880   return (guestfs_h*) PyCapsule_GetPointer(obj, \"guestfs_h\");
9881 #endif
9882 }
9883
9884 static PyObject *
9885 put_handle (guestfs_h *g)
9886 {
9887   assert (g);
9888 #ifndef HAVE_PYCAPSULE_NEW
9889   return
9890     PyCObject_FromVoidPtrAndDesc ((void *) g, (char *) \"guestfs_h\", NULL);
9891 #else
9892   return PyCapsule_New ((void *) g, \"guestfs_h\", NULL);
9893 #endif
9894 }
9895
9896 /* This list should be freed (but not the strings) after use. */
9897 static char **
9898 get_string_list (PyObject *obj)
9899 {
9900   size_t i, len;
9901   char **r;
9902
9903   assert (obj);
9904
9905   if (!PyList_Check (obj)) {
9906     PyErr_SetString (PyExc_RuntimeError, \"expecting a list parameter\");
9907     return NULL;
9908   }
9909
9910   Py_ssize_t slen = PyList_Size (obj);
9911   if (slen == -1) {
9912     PyErr_SetString (PyExc_RuntimeError, \"get_string_list: PyList_Size failure\");
9913     return NULL;
9914   }
9915   len = (size_t) slen;
9916   r = malloc (sizeof (char *) * (len+1));
9917   if (r == NULL) {
9918     PyErr_SetString (PyExc_RuntimeError, \"get_string_list: out of memory\");
9919     return NULL;
9920   }
9921
9922   for (i = 0; i < len; ++i)
9923     r[i] = PyString_AsString (PyList_GetItem (obj, i));
9924   r[len] = NULL;
9925
9926   return r;
9927 }
9928
9929 static PyObject *
9930 put_string_list (char * const * const argv)
9931 {
9932   PyObject *list;
9933   int argc, i;
9934
9935   for (argc = 0; argv[argc] != NULL; ++argc)
9936     ;
9937
9938   list = PyList_New (argc);
9939   for (i = 0; i < argc; ++i)
9940     PyList_SetItem (list, i, PyString_FromString (argv[i]));
9941
9942   return list;
9943 }
9944
9945 static PyObject *
9946 put_table (char * const * const argv)
9947 {
9948   PyObject *list, *item;
9949   int argc, i;
9950
9951   for (argc = 0; argv[argc] != NULL; ++argc)
9952     ;
9953
9954   list = PyList_New (argc >> 1);
9955   for (i = 0; i < argc; i += 2) {
9956     item = PyTuple_New (2);
9957     PyTuple_SetItem (item, 0, PyString_FromString (argv[i]));
9958     PyTuple_SetItem (item, 1, PyString_FromString (argv[i+1]));
9959     PyList_SetItem (list, i >> 1, item);
9960   }
9961
9962   return list;
9963 }
9964
9965 static void
9966 free_strings (char **argv)
9967 {
9968   int argc;
9969
9970   for (argc = 0; argv[argc] != NULL; ++argc)
9971     free (argv[argc]);
9972   free (argv);
9973 }
9974
9975 static PyObject *
9976 py_guestfs_create (PyObject *self, PyObject *args)
9977 {
9978   guestfs_h *g;
9979
9980   g = guestfs_create ();
9981   if (g == NULL) {
9982     PyErr_SetString (PyExc_RuntimeError,
9983                      \"guestfs.create: failed to allocate handle\");
9984     return NULL;
9985   }
9986   guestfs_set_error_handler (g, NULL, NULL);
9987   /* This can return NULL, but in that case put_handle will have
9988    * set the Python error string.
9989    */
9990   return put_handle (g);
9991 }
9992
9993 static PyObject *
9994 py_guestfs_close (PyObject *self, PyObject *args)
9995 {
9996   PyObject *py_g;
9997   guestfs_h *g;
9998
9999   if (!PyArg_ParseTuple (args, (char *) \"O:guestfs_close\", &py_g))
10000     return NULL;
10001   g = get_handle (py_g);
10002
10003   guestfs_close (g);
10004
10005   Py_INCREF (Py_None);
10006   return Py_None;
10007 }
10008
10009 ";
10010
10011   let emit_put_list_function typ =
10012     pr "static PyObject *\n";
10013     pr "put_%s_list (struct guestfs_%s_list *%ss)\n" typ typ typ;
10014     pr "{\n";
10015     pr "  PyObject *list;\n";
10016     pr "  size_t i;\n";
10017     pr "\n";
10018     pr "  list = PyList_New (%ss->len);\n" typ;
10019     pr "  for (i = 0; i < %ss->len; ++i)\n" typ;
10020     pr "    PyList_SetItem (list, i, put_%s (&%ss->val[i]));\n" typ typ;
10021     pr "  return list;\n";
10022     pr "};\n";
10023     pr "\n"
10024   in
10025
10026   (* Structures, turned into Python dictionaries. *)
10027   List.iter (
10028     fun (typ, cols) ->
10029       pr "static PyObject *\n";
10030       pr "put_%s (struct guestfs_%s *%s)\n" typ typ typ;
10031       pr "{\n";
10032       pr "  PyObject *dict;\n";
10033       pr "\n";
10034       pr "  dict = PyDict_New ();\n";
10035       List.iter (
10036         function
10037         | name, FString ->
10038             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
10039             pr "                        PyString_FromString (%s->%s));\n"
10040               typ name
10041         | name, FBuffer ->
10042             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
10043             pr "                        PyString_FromStringAndSize (%s->%s, %s->%s_len));\n"
10044               typ name typ name
10045         | name, FUUID ->
10046             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
10047             pr "                        PyString_FromStringAndSize (%s->%s, 32));\n"
10048               typ name
10049         | name, (FBytes|FUInt64) ->
10050             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
10051             pr "                        PyLong_FromUnsignedLongLong (%s->%s));\n"
10052               typ name
10053         | name, FInt64 ->
10054             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
10055             pr "                        PyLong_FromLongLong (%s->%s));\n"
10056               typ name
10057         | name, FUInt32 ->
10058             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
10059             pr "                        PyLong_FromUnsignedLong (%s->%s));\n"
10060               typ name
10061         | name, FInt32 ->
10062             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
10063             pr "                        PyLong_FromLong (%s->%s));\n"
10064               typ name
10065         | name, FOptPercent ->
10066             pr "  if (%s->%s >= 0)\n" typ name;
10067             pr "    PyDict_SetItemString (dict, \"%s\",\n" name;
10068             pr "                          PyFloat_FromDouble ((double) %s->%s));\n"
10069               typ name;
10070             pr "  else {\n";
10071             pr "    Py_INCREF (Py_None);\n";
10072             pr "    PyDict_SetItemString (dict, \"%s\", Py_None);\n" name;
10073             pr "  }\n"
10074         | name, FChar ->
10075             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
10076             pr "                        PyString_FromStringAndSize (&dirent->%s, 1));\n" name
10077       ) cols;
10078       pr "  return dict;\n";
10079       pr "};\n";
10080       pr "\n";
10081
10082   ) structs;
10083
10084   (* Emit a put_TYPE_list function definition only if that function is used. *)
10085   List.iter (
10086     function
10087     | typ, (RStructListOnly | RStructAndList) ->
10088         (* generate the function for typ *)
10089         emit_put_list_function typ
10090     | typ, _ -> () (* empty *)
10091   ) (rstructs_used_by all_functions);
10092
10093   (* Python wrapper functions. *)
10094   List.iter (
10095     fun (name, style, _, _, _, _, _) ->
10096       pr "static PyObject *\n";
10097       pr "py_guestfs_%s (PyObject *self, PyObject *args)\n" name;
10098       pr "{\n";
10099
10100       pr "  PyObject *py_g;\n";
10101       pr "  guestfs_h *g;\n";
10102       pr "  PyObject *py_r;\n";
10103
10104       let error_code =
10105         match fst style with
10106         | RErr | RInt _ | RBool _ -> pr "  int r;\n"; "-1"
10107         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
10108         | RConstString _ | RConstOptString _ ->
10109             pr "  const char *r;\n"; "NULL"
10110         | RString _ -> pr "  char *r;\n"; "NULL"
10111         | RStringList _ | RHashtable _ -> pr "  char **r;\n"; "NULL"
10112         | RStruct (_, typ) -> pr "  struct guestfs_%s *r;\n" typ; "NULL"
10113         | RStructList (_, typ) ->
10114             pr "  struct guestfs_%s_list *r;\n" typ; "NULL"
10115         | RBufferOut _ ->
10116             pr "  char *r;\n";
10117             pr "  size_t size;\n";
10118             "NULL" in
10119
10120       List.iter (
10121         function
10122         | Pathname n | Device n | Dev_or_Path n | String n | Key n
10123         | FileIn n | FileOut n ->
10124             pr "  const char *%s;\n" n
10125         | OptString n -> pr "  const char *%s;\n" n
10126         | BufferIn n ->
10127             pr "  const char *%s;\n" n;
10128             pr "  Py_ssize_t %s_size;\n" n
10129         | StringList n | DeviceList n ->
10130             pr "  PyObject *py_%s;\n" n;
10131             pr "  char **%s;\n" n
10132         | Bool n -> pr "  int %s;\n" n
10133         | Int n -> pr "  int %s;\n" n
10134         | Int64 n -> pr "  long long %s;\n" n
10135       ) (snd style);
10136
10137       pr "\n";
10138
10139       (* Convert the parameters. *)
10140       pr "  if (!PyArg_ParseTuple (args, (char *) \"O";
10141       List.iter (
10142         function
10143         | Pathname _ | Device _ | Dev_or_Path _ | String _ | Key _
10144         | FileIn _ | FileOut _ -> pr "s"
10145         | OptString _ -> pr "z"
10146         | StringList _ | DeviceList _ -> pr "O"
10147         | Bool _ -> pr "i" (* XXX Python has booleans? *)
10148         | Int _ -> pr "i"
10149         | Int64 _ -> pr "L" (* XXX Whoever thought it was a good idea to
10150                              * emulate C's int/long/long long in Python?
10151                              *)
10152         | BufferIn _ -> pr "s#"
10153       ) (snd style);
10154       pr ":guestfs_%s\",\n" name;
10155       pr "                         &py_g";
10156       List.iter (
10157         function
10158         | Pathname n | Device n | Dev_or_Path n | String n | Key n
10159         | FileIn n | FileOut n -> pr ", &%s" n
10160         | OptString n -> pr ", &%s" n
10161         | StringList n | DeviceList n -> pr ", &py_%s" n
10162         | Bool n -> pr ", &%s" n
10163         | Int n -> pr ", &%s" n
10164         | Int64 n -> pr ", &%s" n
10165         | BufferIn n -> pr ", &%s, &%s_size" n n
10166       ) (snd style);
10167
10168       pr "))\n";
10169       pr "    return NULL;\n";
10170
10171       pr "  g = get_handle (py_g);\n";
10172       List.iter (
10173         function
10174         | Pathname _ | Device _ | Dev_or_Path _ | String _ | Key _
10175         | FileIn _ | FileOut _ | OptString _ | Bool _ | Int _ | Int64 _
10176         | BufferIn _ -> ()
10177         | StringList n | DeviceList n ->
10178             pr "  %s = get_string_list (py_%s);\n" n n;
10179             pr "  if (!%s) return NULL;\n" n
10180       ) (snd style);
10181
10182       pr "\n";
10183
10184       pr "  r = guestfs_%s " name;
10185       generate_c_call_args ~handle:"g" style;
10186       pr ";\n";
10187
10188       List.iter (
10189         function
10190         | Pathname _ | Device _ | Dev_or_Path _ | String _ | Key _
10191         | FileIn _ | FileOut _ | OptString _ | Bool _ | Int _ | Int64 _
10192         | BufferIn _ -> ()
10193         | StringList n | DeviceList n ->
10194             pr "  free (%s);\n" n
10195       ) (snd style);
10196
10197       pr "  if (r == %s) {\n" error_code;
10198       pr "    PyErr_SetString (PyExc_RuntimeError, guestfs_last_error (g));\n";
10199       pr "    return NULL;\n";
10200       pr "  }\n";
10201       pr "\n";
10202
10203       (match fst style with
10204        | RErr ->
10205            pr "  Py_INCREF (Py_None);\n";
10206            pr "  py_r = Py_None;\n"
10207        | RInt _
10208        | RBool _ -> pr "  py_r = PyInt_FromLong ((long) r);\n"
10209        | RInt64 _ -> pr "  py_r = PyLong_FromLongLong (r);\n"
10210        | RConstString _ -> pr "  py_r = PyString_FromString (r);\n"
10211        | RConstOptString _ ->
10212            pr "  if (r)\n";
10213            pr "    py_r = PyString_FromString (r);\n";
10214            pr "  else {\n";
10215            pr "    Py_INCREF (Py_None);\n";
10216            pr "    py_r = Py_None;\n";
10217            pr "  }\n"
10218        | RString _ ->
10219            pr "  py_r = PyString_FromString (r);\n";
10220            pr "  free (r);\n"
10221        | RStringList _ ->
10222            pr "  py_r = put_string_list (r);\n";
10223            pr "  free_strings (r);\n"
10224        | RStruct (_, typ) ->
10225            pr "  py_r = put_%s (r);\n" typ;
10226            pr "  guestfs_free_%s (r);\n" typ
10227        | RStructList (_, typ) ->
10228            pr "  py_r = put_%s_list (r);\n" typ;
10229            pr "  guestfs_free_%s_list (r);\n" typ
10230        | RHashtable n ->
10231            pr "  py_r = put_table (r);\n";
10232            pr "  free_strings (r);\n"
10233        | RBufferOut _ ->
10234            pr "  py_r = PyString_FromStringAndSize (r, size);\n";
10235            pr "  free (r);\n"
10236       );
10237
10238       pr "  return py_r;\n";
10239       pr "}\n";
10240       pr "\n"
10241   ) all_functions;
10242
10243   (* Table of functions. *)
10244   pr "static PyMethodDef methods[] = {\n";
10245   pr "  { (char *) \"create\", py_guestfs_create, METH_VARARGS, NULL },\n";
10246   pr "  { (char *) \"close\", py_guestfs_close, METH_VARARGS, NULL },\n";
10247   List.iter (
10248     fun (name, _, _, _, _, _, _) ->
10249       pr "  { (char *) \"%s\", py_guestfs_%s, METH_VARARGS, NULL },\n"
10250         name name
10251   ) all_functions;
10252   pr "  { NULL, NULL, 0, NULL }\n";
10253   pr "};\n";
10254   pr "\n";
10255
10256   (* Init function. *)
10257   pr "\
10258 void
10259 initlibguestfsmod (void)
10260 {
10261   static int initialized = 0;
10262
10263   if (initialized) return;
10264   Py_InitModule ((char *) \"libguestfsmod\", methods);
10265   initialized = 1;
10266 }
10267 "
10268
10269 (* Generate Python module. *)
10270 and generate_python_py () =
10271   generate_header HashStyle LGPLv2plus;
10272
10273   pr "\
10274 u\"\"\"Python bindings for libguestfs
10275
10276 import guestfs
10277 g = guestfs.GuestFS ()
10278 g.add_drive (\"guest.img\")
10279 g.launch ()
10280 parts = g.list_partitions ()
10281
10282 The guestfs module provides a Python binding to the libguestfs API
10283 for examining and modifying virtual machine disk images.
10284
10285 Amongst the things this is good for: making batch configuration
10286 changes to guests, getting disk used/free statistics (see also:
10287 virt-df), migrating between virtualization systems (see also:
10288 virt-p2v), performing partial backups, performing partial guest
10289 clones, cloning guests and changing registry/UUID/hostname info, and
10290 much else besides.
10291
10292 Libguestfs uses Linux kernel and qemu code, and can access any type of
10293 guest filesystem that Linux and qemu can, including but not limited
10294 to: ext2/3/4, btrfs, FAT and NTFS, LVM, many different disk partition
10295 schemes, qcow, qcow2, vmdk.
10296
10297 Libguestfs provides ways to enumerate guest storage (eg. partitions,
10298 LVs, what filesystem is in each LV, etc.).  It can also run commands
10299 in the context of the guest.  Also you can access filesystems over
10300 FUSE.
10301
10302 Errors which happen while using the API are turned into Python
10303 RuntimeError exceptions.
10304
10305 To create a guestfs handle you usually have to perform the following
10306 sequence of calls:
10307
10308 # Create the handle, call add_drive at least once, and possibly
10309 # several times if the guest has multiple block devices:
10310 g = guestfs.GuestFS ()
10311 g.add_drive (\"guest.img\")
10312
10313 # Launch the qemu subprocess and wait for it to become ready:
10314 g.launch ()
10315
10316 # Now you can issue commands, for example:
10317 logvols = g.lvs ()
10318
10319 \"\"\"
10320
10321 import libguestfsmod
10322
10323 class GuestFS:
10324     \"\"\"Instances of this class are libguestfs API handles.\"\"\"
10325
10326     def __init__ (self):
10327         \"\"\"Create a new libguestfs handle.\"\"\"
10328         self._o = libguestfsmod.create ()
10329
10330     def __del__ (self):
10331         libguestfsmod.close (self._o)
10332
10333 ";
10334
10335   List.iter (
10336     fun (name, style, _, flags, _, _, longdesc) ->
10337       pr "    def %s " name;
10338       generate_py_call_args ~handle:"self" (snd style);
10339       pr ":\n";
10340
10341       if not (List.mem NotInDocs flags) then (
10342         let doc = replace_str longdesc "C<guestfs_" "C<g." in
10343         let doc =
10344           match fst style with
10345           | RErr | RInt _ | RInt64 _ | RBool _
10346           | RConstOptString _ | RConstString _
10347           | RString _ | RBufferOut _ -> doc
10348           | RStringList _ ->
10349               doc ^ "\n\nThis function returns a list of strings."
10350           | RStruct (_, typ) ->
10351               doc ^ sprintf "\n\nThis function returns a dictionary, with keys matching the various fields in the guestfs_%s structure." typ
10352           | RStructList (_, typ) ->
10353               doc ^ sprintf "\n\nThis function returns a list of %ss.  Each %s is represented as a dictionary." typ typ
10354           | RHashtable _ ->
10355               doc ^ "\n\nThis function returns a dictionary." in
10356         let doc =
10357           if List.mem ProtocolLimitWarning flags then
10358             doc ^ "\n\n" ^ protocol_limit_warning
10359           else doc in
10360         let doc =
10361           if List.mem DangerWillRobinson flags then
10362             doc ^ "\n\n" ^ danger_will_robinson
10363           else doc in
10364         let doc =
10365           match deprecation_notice flags with
10366           | None -> doc
10367           | Some txt -> doc ^ "\n\n" ^ txt in
10368         let doc = pod2text ~width:60 name doc in
10369         let doc = List.map (fun line -> replace_str line "\\" "\\\\") doc in
10370         let doc = String.concat "\n        " doc in
10371         pr "        u\"\"\"%s\"\"\"\n" doc;
10372       );
10373       pr "        return libguestfsmod.%s " name;
10374       generate_py_call_args ~handle:"self._o" (snd style);
10375       pr "\n";
10376       pr "\n";
10377   ) all_functions
10378
10379 (* Generate Python call arguments, eg "(handle, foo, bar)" *)
10380 and generate_py_call_args ~handle args =
10381   pr "(%s" handle;
10382   List.iter (fun arg -> pr ", %s" (name_of_argt arg)) args;
10383   pr ")"
10384
10385 (* Useful if you need the longdesc POD text as plain text.  Returns a
10386  * list of lines.
10387  *
10388  * Because this is very slow (the slowest part of autogeneration),
10389  * we memoize the results.
10390  *)
10391 and pod2text ~width name longdesc =
10392   let key = width, name, longdesc in
10393   try Hashtbl.find pod2text_memo key
10394   with Not_found ->
10395     let filename, chan = Filename.open_temp_file "gen" ".tmp" in
10396     fprintf chan "=head1 %s\n\n%s\n" name longdesc;
10397     close_out chan;
10398     let cmd = sprintf "pod2text -w %d %s" width (Filename.quote filename) in
10399     let chan = open_process_in cmd in
10400     let lines = ref [] in
10401     let rec loop i =
10402       let line = input_line chan in
10403       if i = 1 then             (* discard the first line of output *)
10404         loop (i+1)
10405       else (
10406         let line = triml line in
10407         lines := line :: !lines;
10408         loop (i+1)
10409       ) in
10410     let lines = try loop 1 with End_of_file -> List.rev !lines in
10411     unlink filename;
10412     (match close_process_in chan with
10413      | WEXITED 0 -> ()
10414      | WEXITED i ->
10415          failwithf "pod2text: process exited with non-zero status (%d)" i
10416      | WSIGNALED i | WSTOPPED i ->
10417          failwithf "pod2text: process signalled or stopped by signal %d" i
10418     );
10419     Hashtbl.add pod2text_memo key lines;
10420     pod2text_memo_updated ();
10421     lines
10422
10423 (* Generate ruby bindings. *)
10424 and generate_ruby_c () =
10425   generate_header CStyle LGPLv2plus;
10426
10427   pr "\
10428 #include <stdio.h>
10429 #include <stdlib.h>
10430
10431 #include <ruby.h>
10432
10433 #include \"guestfs.h\"
10434
10435 #include \"extconf.h\"
10436
10437 /* For Ruby < 1.9 */
10438 #ifndef RARRAY_LEN
10439 #define RARRAY_LEN(r) (RARRAY((r))->len)
10440 #endif
10441
10442 static VALUE m_guestfs;                 /* guestfs module */
10443 static VALUE c_guestfs;                 /* guestfs_h handle */
10444 static VALUE e_Error;                   /* used for all errors */
10445
10446 static void ruby_guestfs_free (void *p)
10447 {
10448   if (!p) return;
10449   guestfs_close ((guestfs_h *) p);
10450 }
10451
10452 static VALUE ruby_guestfs_create (VALUE m)
10453 {
10454   guestfs_h *g;
10455
10456   g = guestfs_create ();
10457   if (!g)
10458     rb_raise (e_Error, \"failed to create guestfs handle\");
10459
10460   /* Don't print error messages to stderr by default. */
10461   guestfs_set_error_handler (g, NULL, NULL);
10462
10463   /* Wrap it, and make sure the close function is called when the
10464    * handle goes away.
10465    */
10466   return Data_Wrap_Struct (c_guestfs, NULL, ruby_guestfs_free, g);
10467 }
10468
10469 static VALUE ruby_guestfs_close (VALUE gv)
10470 {
10471   guestfs_h *g;
10472   Data_Get_Struct (gv, guestfs_h, g);
10473
10474   ruby_guestfs_free (g);
10475   DATA_PTR (gv) = NULL;
10476
10477   return Qnil;
10478 }
10479
10480 ";
10481
10482   List.iter (
10483     fun (name, style, _, _, _, _, _) ->
10484       pr "static VALUE ruby_guestfs_%s (VALUE gv" name;
10485       List.iter (fun arg -> pr ", VALUE %sv" (name_of_argt arg)) (snd style);
10486       pr ")\n";
10487       pr "{\n";
10488       pr "  guestfs_h *g;\n";
10489       pr "  Data_Get_Struct (gv, guestfs_h, g);\n";
10490       pr "  if (!g)\n";
10491       pr "    rb_raise (rb_eArgError, \"%%s: used handle after closing it\", \"%s\");\n"
10492         name;
10493       pr "\n";
10494
10495       List.iter (
10496         function
10497         | Pathname n | Device n | Dev_or_Path n | String n | Key n
10498         | FileIn n | FileOut n ->
10499             pr "  Check_Type (%sv, T_STRING);\n" n;
10500             pr "  const char *%s = StringValueCStr (%sv);\n" n n;
10501             pr "  if (!%s)\n" n;
10502             pr "    rb_raise (rb_eTypeError, \"expected string for parameter %%s of %%s\",\n";
10503             pr "              \"%s\", \"%s\");\n" n name
10504         | BufferIn n ->
10505             pr "  Check_Type (%sv, T_STRING);\n" n;
10506             pr "  const char *%s = RSTRING (%sv)->ptr;\n" n n;
10507             pr "  if (!%s)\n" n;
10508             pr "    rb_raise (rb_eTypeError, \"expected string for parameter %%s of %%s\",\n";
10509             pr "              \"%s\", \"%s\");\n" n name;
10510             pr "  size_t %s_size = RSTRING (%sv)->len;\n" n n
10511         | OptString n ->
10512             pr "  const char *%s = !NIL_P (%sv) ? StringValueCStr (%sv) : NULL;\n" n n n
10513         | StringList n | DeviceList n ->
10514             pr "  char **%s;\n" n;
10515             pr "  Check_Type (%sv, T_ARRAY);\n" n;
10516             pr "  {\n";
10517             pr "    size_t i, len;\n";
10518             pr "    len = RARRAY_LEN (%sv);\n" n;
10519             pr "    %s = guestfs_safe_malloc (g, sizeof (char *) * (len+1));\n"
10520               n;
10521             pr "    for (i = 0; i < len; ++i) {\n";
10522             pr "      VALUE v = rb_ary_entry (%sv, i);\n" n;
10523             pr "      %s[i] = StringValueCStr (v);\n" n;
10524             pr "    }\n";
10525             pr "    %s[len] = NULL;\n" n;
10526             pr "  }\n";
10527         | Bool n ->
10528             pr "  int %s = RTEST (%sv);\n" n n
10529         | Int n ->
10530             pr "  int %s = NUM2INT (%sv);\n" n n
10531         | Int64 n ->
10532             pr "  long long %s = NUM2LL (%sv);\n" n n
10533       ) (snd style);
10534       pr "\n";
10535
10536       let error_code =
10537         match fst style with
10538         | RErr | RInt _ | RBool _ -> pr "  int r;\n"; "-1"
10539         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
10540         | RConstString _ | RConstOptString _ ->
10541             pr "  const char *r;\n"; "NULL"
10542         | RString _ -> pr "  char *r;\n"; "NULL"
10543         | RStringList _ | RHashtable _ -> pr "  char **r;\n"; "NULL"
10544         | RStruct (_, typ) -> pr "  struct guestfs_%s *r;\n" typ; "NULL"
10545         | RStructList (_, typ) ->
10546             pr "  struct guestfs_%s_list *r;\n" typ; "NULL"
10547         | RBufferOut _ ->
10548             pr "  char *r;\n";
10549             pr "  size_t size;\n";
10550             "NULL" in
10551       pr "\n";
10552
10553       pr "  r = guestfs_%s " name;
10554       generate_c_call_args ~handle:"g" style;
10555       pr ";\n";
10556
10557       List.iter (
10558         function
10559         | Pathname _ | Device _ | Dev_or_Path _ | String _ | Key _
10560         | FileIn _ | FileOut _ | OptString _ | Bool _ | Int _ | Int64 _
10561         | BufferIn _ -> ()
10562         | StringList n | DeviceList n ->
10563             pr "  free (%s);\n" n
10564       ) (snd style);
10565
10566       pr "  if (r == %s)\n" error_code;
10567       pr "    rb_raise (e_Error, \"%%s\", guestfs_last_error (g));\n";
10568       pr "\n";
10569
10570       (match fst style with
10571        | RErr ->
10572            pr "  return Qnil;\n"
10573        | RInt _ | RBool _ ->
10574            pr "  return INT2NUM (r);\n"
10575        | RInt64 _ ->
10576            pr "  return ULL2NUM (r);\n"
10577        | RConstString _ ->
10578            pr "  return rb_str_new2 (r);\n";
10579        | RConstOptString _ ->
10580            pr "  if (r)\n";
10581            pr "    return rb_str_new2 (r);\n";
10582            pr "  else\n";
10583            pr "    return Qnil;\n";
10584        | RString _ ->
10585            pr "  VALUE rv = rb_str_new2 (r);\n";
10586            pr "  free (r);\n";
10587            pr "  return rv;\n";
10588        | RStringList _ ->
10589            pr "  size_t i, len = 0;\n";
10590            pr "  for (i = 0; r[i] != NULL; ++i) len++;\n";
10591            pr "  VALUE rv = rb_ary_new2 (len);\n";
10592            pr "  for (i = 0; r[i] != NULL; ++i) {\n";
10593            pr "    rb_ary_push (rv, rb_str_new2 (r[i]));\n";
10594            pr "    free (r[i]);\n";
10595            pr "  }\n";
10596            pr "  free (r);\n";
10597            pr "  return rv;\n"
10598        | RStruct (_, typ) ->
10599            let cols = cols_of_struct typ in
10600            generate_ruby_struct_code typ cols
10601        | RStructList (_, typ) ->
10602            let cols = cols_of_struct typ in
10603            generate_ruby_struct_list_code typ cols
10604        | RHashtable _ ->
10605            pr "  VALUE rv = rb_hash_new ();\n";
10606            pr "  size_t i;\n";
10607            pr "  for (i = 0; r[i] != NULL; i+=2) {\n";
10608            pr "    rb_hash_aset (rv, rb_str_new2 (r[i]), rb_str_new2 (r[i+1]));\n";
10609            pr "    free (r[i]);\n";
10610            pr "    free (r[i+1]);\n";
10611            pr "  }\n";
10612            pr "  free (r);\n";
10613            pr "  return rv;\n"
10614        | RBufferOut _ ->
10615            pr "  VALUE rv = rb_str_new (r, size);\n";
10616            pr "  free (r);\n";
10617            pr "  return rv;\n";
10618       );
10619
10620       pr "}\n";
10621       pr "\n"
10622   ) all_functions;
10623
10624   pr "\
10625 /* Initialize the module. */
10626 void Init__guestfs ()
10627 {
10628   m_guestfs = rb_define_module (\"Guestfs\");
10629   c_guestfs = rb_define_class_under (m_guestfs, \"Guestfs\", rb_cObject);
10630   e_Error = rb_define_class_under (m_guestfs, \"Error\", rb_eStandardError);
10631
10632   rb_define_module_function (m_guestfs, \"create\", ruby_guestfs_create, 0);
10633   rb_define_method (c_guestfs, \"close\", ruby_guestfs_close, 0);
10634
10635 ";
10636   (* Define the rest of the methods. *)
10637   List.iter (
10638     fun (name, style, _, _, _, _, _) ->
10639       pr "  rb_define_method (c_guestfs, \"%s\",\n" name;
10640       pr "        ruby_guestfs_%s, %d);\n" name (List.length (snd style))
10641   ) all_functions;
10642
10643   pr "}\n"
10644
10645 (* Ruby code to return a struct. *)
10646 and generate_ruby_struct_code typ cols =
10647   pr "  VALUE rv = rb_hash_new ();\n";
10648   List.iter (
10649     function
10650     | name, FString ->
10651         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_str_new2 (r->%s));\n" name name
10652     | name, FBuffer ->
10653         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_str_new (r->%s, r->%s_len));\n" name name name
10654     | name, FUUID ->
10655         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_str_new (r->%s, 32));\n" name name
10656     | name, (FBytes|FUInt64) ->
10657         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), ULL2NUM (r->%s));\n" name name
10658     | name, FInt64 ->
10659         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), LL2NUM (r->%s));\n" name name
10660     | name, FUInt32 ->
10661         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), UINT2NUM (r->%s));\n" name name
10662     | name, FInt32 ->
10663         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), INT2NUM (r->%s));\n" name name
10664     | name, FOptPercent ->
10665         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_dbl2big (r->%s));\n" name name
10666     | name, FChar -> (* XXX wrong? *)
10667         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), ULL2NUM (r->%s));\n" name name
10668   ) cols;
10669   pr "  guestfs_free_%s (r);\n" typ;
10670   pr "  return rv;\n"
10671
10672 (* Ruby code to return a struct list. *)
10673 and generate_ruby_struct_list_code typ cols =
10674   pr "  VALUE rv = rb_ary_new2 (r->len);\n";
10675   pr "  size_t i;\n";
10676   pr "  for (i = 0; i < r->len; ++i) {\n";
10677   pr "    VALUE hv = rb_hash_new ();\n";
10678   List.iter (
10679     function
10680     | name, FString ->
10681         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_str_new2 (r->val[i].%s));\n" name name
10682     | name, FBuffer ->
10683         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_str_new (r->val[i].%s, r->val[i].%s_len));\n" name name name
10684     | name, FUUID ->
10685         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_str_new (r->val[i].%s, 32));\n" name name
10686     | name, (FBytes|FUInt64) ->
10687         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), ULL2NUM (r->val[i].%s));\n" name name
10688     | name, FInt64 ->
10689         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), LL2NUM (r->val[i].%s));\n" name name
10690     | name, FUInt32 ->
10691         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), UINT2NUM (r->val[i].%s));\n" name name
10692     | name, FInt32 ->
10693         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), INT2NUM (r->val[i].%s));\n" name name
10694     | name, FOptPercent ->
10695         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_dbl2big (r->val[i].%s));\n" name name
10696     | name, FChar -> (* XXX wrong? *)
10697         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), ULL2NUM (r->val[i].%s));\n" name name
10698   ) cols;
10699   pr "    rb_ary_push (rv, hv);\n";
10700   pr "  }\n";
10701   pr "  guestfs_free_%s_list (r);\n" typ;
10702   pr "  return rv;\n"
10703
10704 (* Generate Java bindings GuestFS.java file. *)
10705 and generate_java_java () =
10706   generate_header CStyle LGPLv2plus;
10707
10708   pr "\
10709 package com.redhat.et.libguestfs;
10710
10711 import java.util.HashMap;
10712 import com.redhat.et.libguestfs.LibGuestFSException;
10713 import com.redhat.et.libguestfs.PV;
10714 import com.redhat.et.libguestfs.VG;
10715 import com.redhat.et.libguestfs.LV;
10716 import com.redhat.et.libguestfs.Stat;
10717 import com.redhat.et.libguestfs.StatVFS;
10718 import com.redhat.et.libguestfs.IntBool;
10719 import com.redhat.et.libguestfs.Dirent;
10720
10721 /**
10722  * The GuestFS object is a libguestfs handle.
10723  *
10724  * @author rjones
10725  */
10726 public class GuestFS {
10727   // Load the native code.
10728   static {
10729     System.loadLibrary (\"guestfs_jni\");
10730   }
10731
10732   /**
10733    * The native guestfs_h pointer.
10734    */
10735   long g;
10736
10737   /**
10738    * Create a libguestfs handle.
10739    *
10740    * @throws LibGuestFSException
10741    */
10742   public GuestFS () throws LibGuestFSException
10743   {
10744     g = _create ();
10745   }
10746   private native long _create () throws LibGuestFSException;
10747
10748   /**
10749    * Close a libguestfs handle.
10750    *
10751    * You can also leave handles to be collected by the garbage
10752    * collector, but this method ensures that the resources used
10753    * by the handle are freed up immediately.  If you call any
10754    * other methods after closing the handle, you will get an
10755    * exception.
10756    *
10757    * @throws LibGuestFSException
10758    */
10759   public void close () throws LibGuestFSException
10760   {
10761     if (g != 0)
10762       _close (g);
10763     g = 0;
10764   }
10765   private native void _close (long g) throws LibGuestFSException;
10766
10767   public void finalize () throws LibGuestFSException
10768   {
10769     close ();
10770   }
10771
10772 ";
10773
10774   List.iter (
10775     fun (name, style, _, flags, _, shortdesc, longdesc) ->
10776       if not (List.mem NotInDocs flags); then (
10777         let doc = replace_str longdesc "C<guestfs_" "C<g." in
10778         let doc =
10779           if List.mem ProtocolLimitWarning flags then
10780             doc ^ "\n\n" ^ protocol_limit_warning
10781           else doc in
10782         let doc =
10783           if List.mem DangerWillRobinson flags then
10784             doc ^ "\n\n" ^ danger_will_robinson
10785           else doc in
10786         let doc =
10787           match deprecation_notice flags with
10788           | None -> doc
10789           | Some txt -> doc ^ "\n\n" ^ txt in
10790         let doc = pod2text ~width:60 name doc in
10791         let doc = List.map (            (* RHBZ#501883 *)
10792           function
10793           | "" -> "<p>"
10794           | nonempty -> nonempty
10795         ) doc in
10796         let doc = String.concat "\n   * " doc in
10797
10798         pr "  /**\n";
10799         pr "   * %s\n" shortdesc;
10800         pr "   * <p>\n";
10801         pr "   * %s\n" doc;
10802         pr "   * @throws LibGuestFSException\n";
10803         pr "   */\n";
10804         pr "  ";
10805       );
10806       generate_java_prototype ~public:true ~semicolon:false name style;
10807       pr "\n";
10808       pr "  {\n";
10809       pr "    if (g == 0)\n";
10810       pr "      throw new LibGuestFSException (\"%s: handle is closed\");\n"
10811         name;
10812       pr "    ";
10813       if fst style <> RErr then pr "return ";
10814       pr "_%s " name;
10815       generate_java_call_args ~handle:"g" (snd style);
10816       pr ";\n";
10817       pr "  }\n";
10818       pr "  ";
10819       generate_java_prototype ~privat:true ~native:true name style;
10820       pr "\n";
10821       pr "\n";
10822   ) all_functions;
10823
10824   pr "}\n"
10825
10826 (* Generate Java call arguments, eg "(handle, foo, bar)" *)
10827 and generate_java_call_args ~handle args =
10828   pr "(%s" handle;
10829   List.iter (fun arg -> pr ", %s" (name_of_argt arg)) args;
10830   pr ")"
10831
10832 and generate_java_prototype ?(public=false) ?(privat=false) ?(native=false)
10833     ?(semicolon=true) name style =
10834   if privat then pr "private ";
10835   if public then pr "public ";
10836   if native then pr "native ";
10837
10838   (* return type *)
10839   (match fst style with
10840    | RErr -> pr "void ";
10841    | RInt _ -> pr "int ";
10842    | RInt64 _ -> pr "long ";
10843    | RBool _ -> pr "boolean ";
10844    | RConstString _ | RConstOptString _ | RString _
10845    | RBufferOut _ -> pr "String ";
10846    | RStringList _ -> pr "String[] ";
10847    | RStruct (_, typ) ->
10848        let name = java_name_of_struct typ in
10849        pr "%s " name;
10850    | RStructList (_, typ) ->
10851        let name = java_name_of_struct typ in
10852        pr "%s[] " name;
10853    | RHashtable _ -> pr "HashMap<String,String> ";
10854   );
10855
10856   if native then pr "_%s " name else pr "%s " name;
10857   pr "(";
10858   let needs_comma = ref false in
10859   if native then (
10860     pr "long g";
10861     needs_comma := true
10862   );
10863
10864   (* args *)
10865   List.iter (
10866     fun arg ->
10867       if !needs_comma then pr ", ";
10868       needs_comma := true;
10869
10870       match arg with
10871       | Pathname n
10872       | Device n | Dev_or_Path n
10873       | String n
10874       | OptString n
10875       | FileIn n
10876       | FileOut n
10877       | Key n ->
10878           pr "String %s" n
10879       | BufferIn n ->
10880           pr "byte[] %s" n
10881       | StringList n | DeviceList n ->
10882           pr "String[] %s" n
10883       | Bool n ->
10884           pr "boolean %s" n
10885       | Int n ->
10886           pr "int %s" n
10887       | Int64 n ->
10888           pr "long %s" n
10889   ) (snd style);
10890
10891   pr ")\n";
10892   pr "    throws LibGuestFSException";
10893   if semicolon then pr ";"
10894
10895 and generate_java_struct jtyp cols () =
10896   generate_header CStyle LGPLv2plus;
10897
10898   pr "\
10899 package com.redhat.et.libguestfs;
10900
10901 /**
10902  * Libguestfs %s structure.
10903  *
10904  * @author rjones
10905  * @see GuestFS
10906  */
10907 public class %s {
10908 " jtyp jtyp;
10909
10910   List.iter (
10911     function
10912     | name, FString
10913     | name, FUUID
10914     | name, FBuffer -> pr "  public String %s;\n" name
10915     | name, (FBytes|FUInt64|FInt64) -> pr "  public long %s;\n" name
10916     | name, (FUInt32|FInt32) -> pr "  public int %s;\n" name
10917     | name, FChar -> pr "  public char %s;\n" name
10918     | name, FOptPercent ->
10919         pr "  /* The next field is [0..100] or -1 meaning 'not present': */\n";
10920         pr "  public float %s;\n" name
10921   ) cols;
10922
10923   pr "}\n"
10924
10925 and generate_java_c () =
10926   generate_header CStyle LGPLv2plus;
10927
10928   pr "\
10929 #include <stdio.h>
10930 #include <stdlib.h>
10931 #include <string.h>
10932
10933 #include \"com_redhat_et_libguestfs_GuestFS.h\"
10934 #include \"guestfs.h\"
10935
10936 /* Note that this function returns.  The exception is not thrown
10937  * until after the wrapper function returns.
10938  */
10939 static void
10940 throw_exception (JNIEnv *env, const char *msg)
10941 {
10942   jclass cl;
10943   cl = (*env)->FindClass (env,
10944                           \"com/redhat/et/libguestfs/LibGuestFSException\");
10945   (*env)->ThrowNew (env, cl, msg);
10946 }
10947
10948 JNIEXPORT jlong JNICALL
10949 Java_com_redhat_et_libguestfs_GuestFS__1create
10950   (JNIEnv *env, jobject obj)
10951 {
10952   guestfs_h *g;
10953
10954   g = guestfs_create ();
10955   if (g == NULL) {
10956     throw_exception (env, \"GuestFS.create: failed to allocate handle\");
10957     return 0;
10958   }
10959   guestfs_set_error_handler (g, NULL, NULL);
10960   return (jlong) (long) g;
10961 }
10962
10963 JNIEXPORT void JNICALL
10964 Java_com_redhat_et_libguestfs_GuestFS__1close
10965   (JNIEnv *env, jobject obj, jlong jg)
10966 {
10967   guestfs_h *g = (guestfs_h *) (long) jg;
10968   guestfs_close (g);
10969 }
10970
10971 ";
10972
10973   List.iter (
10974     fun (name, style, _, _, _, _, _) ->
10975       pr "JNIEXPORT ";
10976       (match fst style with
10977        | RErr -> pr "void ";
10978        | RInt _ -> pr "jint ";
10979        | RInt64 _ -> pr "jlong ";
10980        | RBool _ -> pr "jboolean ";
10981        | RConstString _ | RConstOptString _ | RString _
10982        | RBufferOut _ -> pr "jstring ";
10983        | RStruct _ | RHashtable _ ->
10984            pr "jobject ";
10985        | RStringList _ | RStructList _ ->
10986            pr "jobjectArray ";
10987       );
10988       pr "JNICALL\n";
10989       pr "Java_com_redhat_et_libguestfs_GuestFS_";
10990       pr "%s" (replace_str ("_" ^ name) "_" "_1");
10991       pr "\n";
10992       pr "  (JNIEnv *env, jobject obj, jlong jg";
10993       List.iter (
10994         function
10995         | Pathname n
10996         | Device n | Dev_or_Path n
10997         | String n
10998         | OptString n
10999         | FileIn n
11000         | FileOut n
11001         | Key n ->
11002             pr ", jstring j%s" n
11003         | BufferIn n ->
11004             pr ", jbyteArray j%s" n
11005         | StringList n | DeviceList n ->
11006             pr ", jobjectArray j%s" n
11007         | Bool n ->
11008             pr ", jboolean j%s" n
11009         | Int n ->
11010             pr ", jint j%s" n
11011         | Int64 n ->
11012             pr ", jlong j%s" n
11013       ) (snd style);
11014       pr ")\n";
11015       pr "{\n";
11016       pr "  guestfs_h *g = (guestfs_h *) (long) jg;\n";
11017       let error_code, no_ret =
11018         match fst style with
11019         | RErr -> pr "  int r;\n"; "-1", ""
11020         | RBool _
11021         | RInt _ -> pr "  int r;\n"; "-1", "0"
11022         | RInt64 _ -> pr "  int64_t r;\n"; "-1", "0"
11023         | RConstString _ -> pr "  const char *r;\n"; "NULL", "NULL"
11024         | RConstOptString _ -> pr "  const char *r;\n"; "NULL", "NULL"
11025         | RString _ ->
11026             pr "  jstring jr;\n";
11027             pr "  char *r;\n"; "NULL", "NULL"
11028         | RStringList _ ->
11029             pr "  jobjectArray jr;\n";
11030             pr "  int r_len;\n";
11031             pr "  jclass cl;\n";
11032             pr "  jstring jstr;\n";
11033             pr "  char **r;\n"; "NULL", "NULL"
11034         | RStruct (_, typ) ->
11035             pr "  jobject jr;\n";
11036             pr "  jclass cl;\n";
11037             pr "  jfieldID fl;\n";
11038             pr "  struct guestfs_%s *r;\n" typ; "NULL", "NULL"
11039         | RStructList (_, typ) ->
11040             pr "  jobjectArray jr;\n";
11041             pr "  jclass cl;\n";
11042             pr "  jfieldID fl;\n";
11043             pr "  jobject jfl;\n";
11044             pr "  struct guestfs_%s_list *r;\n" typ; "NULL", "NULL"
11045         | RHashtable _ -> pr "  char **r;\n"; "NULL", "NULL"
11046         | RBufferOut _ ->
11047             pr "  jstring jr;\n";
11048             pr "  char *r;\n";
11049             pr "  size_t size;\n";
11050             "NULL", "NULL" in
11051       List.iter (
11052         function
11053         | Pathname n
11054         | Device n | Dev_or_Path n
11055         | String n
11056         | OptString n
11057         | FileIn n
11058         | FileOut n
11059         | Key n ->
11060             pr "  const char *%s;\n" n
11061         | BufferIn n ->
11062             pr "  jbyte *%s;\n" n;
11063             pr "  size_t %s_size;\n" n
11064         | StringList n | DeviceList n ->
11065             pr "  int %s_len;\n" n;
11066             pr "  const char **%s;\n" n
11067         | Bool n
11068         | Int n ->
11069             pr "  int %s;\n" n
11070         | Int64 n ->
11071             pr "  int64_t %s;\n" n
11072       ) (snd style);
11073
11074       let needs_i =
11075         (match fst style with
11076          | RStringList _ | RStructList _ -> true
11077          | RErr | RBool _ | RInt _ | RInt64 _ | RConstString _
11078          | RConstOptString _
11079          | RString _ | RBufferOut _ | RStruct _ | RHashtable _ -> false) ||
11080           List.exists (function
11081                        | StringList _ -> true
11082                        | DeviceList _ -> true
11083                        | _ -> false) (snd style) in
11084       if needs_i then
11085         pr "  size_t i;\n";
11086
11087       pr "\n";
11088
11089       (* Get the parameters. *)
11090       List.iter (
11091         function
11092         | Pathname n
11093         | Device n | Dev_or_Path n
11094         | String n
11095         | FileIn n
11096         | FileOut n
11097         | Key n ->
11098             pr "  %s = (*env)->GetStringUTFChars (env, j%s, NULL);\n" n n
11099         | OptString n ->
11100             (* This is completely undocumented, but Java null becomes
11101              * a NULL parameter.
11102              *)
11103             pr "  %s = j%s ? (*env)->GetStringUTFChars (env, j%s, NULL) : NULL;\n" n n n
11104         | BufferIn n ->
11105             pr "  %s = (*env)->GetByteArrayElements (env, j%s, NULL);\n" n n;
11106             pr "  %s_size = (*env)->GetArrayLength (env, j%s);\n" n n
11107         | StringList n | DeviceList n ->
11108             pr "  %s_len = (*env)->GetArrayLength (env, j%s);\n" n n;
11109             pr "  %s = guestfs_safe_malloc (g, sizeof (char *) * (%s_len+1));\n" n n;
11110             pr "  for (i = 0; i < %s_len; ++i) {\n" n;
11111             pr "    jobject o = (*env)->GetObjectArrayElement (env, j%s, i);\n"
11112               n;
11113             pr "    %s[i] = (*env)->GetStringUTFChars (env, o, NULL);\n" n;
11114             pr "  }\n";
11115             pr "  %s[%s_len] = NULL;\n" n n;
11116         | Bool n
11117         | Int n
11118         | Int64 n ->
11119             pr "  %s = j%s;\n" n n
11120       ) (snd style);
11121
11122       (* Make the call. *)
11123       pr "  r = guestfs_%s " name;
11124       generate_c_call_args ~handle:"g" style;
11125       pr ";\n";
11126
11127       (* Release the parameters. *)
11128       List.iter (
11129         function
11130         | Pathname n
11131         | Device n | Dev_or_Path n
11132         | String n
11133         | FileIn n
11134         | FileOut n
11135         | Key n ->
11136             pr "  (*env)->ReleaseStringUTFChars (env, j%s, %s);\n" n n
11137         | OptString n ->
11138             pr "  if (j%s)\n" n;
11139             pr "    (*env)->ReleaseStringUTFChars (env, j%s, %s);\n" n n
11140         | BufferIn n ->
11141             pr "  (*env)->ReleaseByteArrayElements (env, j%s, %s, 0);\n" n n
11142         | StringList n | DeviceList n ->
11143             pr "  for (i = 0; i < %s_len; ++i) {\n" n;
11144             pr "    jobject o = (*env)->GetObjectArrayElement (env, j%s, i);\n"
11145               n;
11146             pr "    (*env)->ReleaseStringUTFChars (env, o, %s[i]);\n" n;
11147             pr "  }\n";
11148             pr "  free (%s);\n" n
11149         | Bool n
11150         | Int n
11151         | Int64 n -> ()
11152       ) (snd style);
11153
11154       (* Check for errors. *)
11155       pr "  if (r == %s) {\n" error_code;
11156       pr "    throw_exception (env, guestfs_last_error (g));\n";
11157       pr "    return %s;\n" no_ret;
11158       pr "  }\n";
11159
11160       (* Return value. *)
11161       (match fst style with
11162        | RErr -> ()
11163        | RInt _ -> pr "  return (jint) r;\n"
11164        | RBool _ -> pr "  return (jboolean) r;\n"
11165        | RInt64 _ -> pr "  return (jlong) r;\n"
11166        | RConstString _ -> pr "  return (*env)->NewStringUTF (env, r);\n"
11167        | RConstOptString _ ->
11168            pr "  return (*env)->NewStringUTF (env, r); /* XXX r NULL? */\n"
11169        | RString _ ->
11170            pr "  jr = (*env)->NewStringUTF (env, r);\n";
11171            pr "  free (r);\n";
11172            pr "  return jr;\n"
11173        | RStringList _ ->
11174            pr "  for (r_len = 0; r[r_len] != NULL; ++r_len) ;\n";
11175            pr "  cl = (*env)->FindClass (env, \"java/lang/String\");\n";
11176            pr "  jstr = (*env)->NewStringUTF (env, \"\");\n";
11177            pr "  jr = (*env)->NewObjectArray (env, r_len, cl, jstr);\n";
11178            pr "  for (i = 0; i < r_len; ++i) {\n";
11179            pr "    jstr = (*env)->NewStringUTF (env, r[i]);\n";
11180            pr "    (*env)->SetObjectArrayElement (env, jr, i, jstr);\n";
11181            pr "    free (r[i]);\n";
11182            pr "  }\n";
11183            pr "  free (r);\n";
11184            pr "  return jr;\n"
11185        | RStruct (_, typ) ->
11186            let jtyp = java_name_of_struct typ in
11187            let cols = cols_of_struct typ in
11188            generate_java_struct_return typ jtyp cols
11189        | RStructList (_, typ) ->
11190            let jtyp = java_name_of_struct typ in
11191            let cols = cols_of_struct typ in
11192            generate_java_struct_list_return typ jtyp cols
11193        | RHashtable _ ->
11194            (* XXX *)
11195            pr "  throw_exception (env, \"%s: internal error: please let us know how to make a Java HashMap from JNI bindings!\");\n" name;
11196            pr "  return NULL;\n"
11197        | RBufferOut _ ->
11198            pr "  jr = (*env)->NewStringUTF (env, r); /* XXX size */\n";
11199            pr "  free (r);\n";
11200            pr "  return jr;\n"
11201       );
11202
11203       pr "}\n";
11204       pr "\n"
11205   ) all_functions
11206
11207 and generate_java_struct_return typ jtyp cols =
11208   pr "  cl = (*env)->FindClass (env, \"com/redhat/et/libguestfs/%s\");\n" jtyp;
11209   pr "  jr = (*env)->AllocObject (env, cl);\n";
11210   List.iter (
11211     function
11212     | name, FString ->
11213         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
11214         pr "  (*env)->SetObjectField (env, jr, fl, (*env)->NewStringUTF (env, r->%s));\n" name;
11215     | name, FUUID ->
11216         pr "  {\n";
11217         pr "    char s[33];\n";
11218         pr "    memcpy (s, r->%s, 32);\n" name;
11219         pr "    s[32] = 0;\n";
11220         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
11221         pr "    (*env)->SetObjectField (env, jr, fl, (*env)->NewStringUTF (env, s));\n";
11222         pr "  }\n";
11223     | name, FBuffer ->
11224         pr "  {\n";
11225         pr "    int len = r->%s_len;\n" name;
11226         pr "    char s[len+1];\n";
11227         pr "    memcpy (s, r->%s, len);\n" name;
11228         pr "    s[len] = 0;\n";
11229         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
11230         pr "    (*env)->SetObjectField (env, jr, fl, (*env)->NewStringUTF (env, s));\n";
11231         pr "  }\n";
11232     | name, (FBytes|FUInt64|FInt64) ->
11233         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"J\");\n" name;
11234         pr "  (*env)->SetLongField (env, jr, fl, r->%s);\n" name;
11235     | name, (FUInt32|FInt32) ->
11236         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"I\");\n" name;
11237         pr "  (*env)->SetLongField (env, jr, fl, r->%s);\n" name;
11238     | name, FOptPercent ->
11239         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"F\");\n" name;
11240         pr "  (*env)->SetFloatField (env, jr, fl, r->%s);\n" name;
11241     | name, FChar ->
11242         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"C\");\n" name;
11243         pr "  (*env)->SetLongField (env, jr, fl, r->%s);\n" name;
11244   ) cols;
11245   pr "  free (r);\n";
11246   pr "  return jr;\n"
11247
11248 and generate_java_struct_list_return typ jtyp cols =
11249   pr "  cl = (*env)->FindClass (env, \"com/redhat/et/libguestfs/%s\");\n" jtyp;
11250   pr "  jr = (*env)->NewObjectArray (env, r->len, cl, NULL);\n";
11251   pr "  for (i = 0; i < r->len; ++i) {\n";
11252   pr "    jfl = (*env)->AllocObject (env, cl);\n";
11253   List.iter (
11254     function
11255     | name, FString ->
11256         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
11257         pr "    (*env)->SetObjectField (env, jfl, fl, (*env)->NewStringUTF (env, r->val[i].%s));\n" name;
11258     | name, FUUID ->
11259         pr "    {\n";
11260         pr "      char s[33];\n";
11261         pr "      memcpy (s, r->val[i].%s, 32);\n" name;
11262         pr "      s[32] = 0;\n";
11263         pr "      fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
11264         pr "      (*env)->SetObjectField (env, jfl, fl, (*env)->NewStringUTF (env, s));\n";
11265         pr "    }\n";
11266     | name, FBuffer ->
11267         pr "    {\n";
11268         pr "      int len = r->val[i].%s_len;\n" name;
11269         pr "      char s[len+1];\n";
11270         pr "      memcpy (s, r->val[i].%s, len);\n" name;
11271         pr "      s[len] = 0;\n";
11272         pr "      fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
11273         pr "      (*env)->SetObjectField (env, jfl, fl, (*env)->NewStringUTF (env, s));\n";
11274         pr "    }\n";
11275     | name, (FBytes|FUInt64|FInt64) ->
11276         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"J\");\n" name;
11277         pr "    (*env)->SetLongField (env, jfl, fl, r->val[i].%s);\n" name;
11278     | name, (FUInt32|FInt32) ->
11279         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"I\");\n" name;
11280         pr "    (*env)->SetLongField (env, jfl, fl, r->val[i].%s);\n" name;
11281     | name, FOptPercent ->
11282         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"F\");\n" name;
11283         pr "    (*env)->SetFloatField (env, jfl, fl, r->val[i].%s);\n" name;
11284     | name, FChar ->
11285         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"C\");\n" name;
11286         pr "    (*env)->SetLongField (env, jfl, fl, r->val[i].%s);\n" name;
11287   ) cols;
11288   pr "    (*env)->SetObjectArrayElement (env, jfl, i, jfl);\n";
11289   pr "  }\n";
11290   pr "  guestfs_free_%s_list (r);\n" typ;
11291   pr "  return jr;\n"
11292
11293 and generate_java_makefile_inc () =
11294   generate_header HashStyle GPLv2plus;
11295
11296   pr "java_built_sources = \\\n";
11297   List.iter (
11298     fun (typ, jtyp) ->
11299         pr "\tcom/redhat/et/libguestfs/%s.java \\\n" jtyp;
11300   ) java_structs;
11301   pr "\tcom/redhat/et/libguestfs/GuestFS.java\n"
11302
11303 and generate_haskell_hs () =
11304   generate_header HaskellStyle LGPLv2plus;
11305
11306   (* XXX We only know how to generate partial FFI for Haskell
11307    * at the moment.  Please help out!
11308    *)
11309   let can_generate style =
11310     match style with
11311     | RErr, _
11312     | RInt _, _
11313     | RInt64 _, _ -> true
11314     | RBool _, _
11315     | RConstString _, _
11316     | RConstOptString _, _
11317     | RString _, _
11318     | RStringList _, _
11319     | RStruct _, _
11320     | RStructList _, _
11321     | RHashtable _, _
11322     | RBufferOut _, _ -> false in
11323
11324   pr "\
11325 {-# INCLUDE <guestfs.h> #-}
11326 {-# LANGUAGE ForeignFunctionInterface #-}
11327
11328 module Guestfs (
11329   create";
11330
11331   (* List out the names of the actions we want to export. *)
11332   List.iter (
11333     fun (name, style, _, _, _, _, _) ->
11334       if can_generate style then pr ",\n  %s" name
11335   ) all_functions;
11336
11337   pr "
11338   ) where
11339
11340 -- Unfortunately some symbols duplicate ones already present
11341 -- in Prelude.  We don't know which, so we hard-code a list
11342 -- here.
11343 import Prelude hiding (truncate)
11344
11345 import Foreign
11346 import Foreign.C
11347 import Foreign.C.Types
11348 import IO
11349 import Control.Exception
11350 import Data.Typeable
11351
11352 data GuestfsS = GuestfsS            -- represents the opaque C struct
11353 type GuestfsP = Ptr GuestfsS        -- guestfs_h *
11354 type GuestfsH = ForeignPtr GuestfsS -- guestfs_h * with attached finalizer
11355
11356 -- XXX define properly later XXX
11357 data PV = PV
11358 data VG = VG
11359 data LV = LV
11360 data IntBool = IntBool
11361 data Stat = Stat
11362 data StatVFS = StatVFS
11363 data Hashtable = Hashtable
11364
11365 foreign import ccall unsafe \"guestfs_create\" c_create
11366   :: IO GuestfsP
11367 foreign import ccall unsafe \"&guestfs_close\" c_close
11368   :: FunPtr (GuestfsP -> IO ())
11369 foreign import ccall unsafe \"guestfs_set_error_handler\" c_set_error_handler
11370   :: GuestfsP -> Ptr CInt -> Ptr CInt -> IO ()
11371
11372 create :: IO GuestfsH
11373 create = do
11374   p <- c_create
11375   c_set_error_handler p nullPtr nullPtr
11376   h <- newForeignPtr c_close p
11377   return h
11378
11379 foreign import ccall unsafe \"guestfs_last_error\" c_last_error
11380   :: GuestfsP -> IO CString
11381
11382 -- last_error :: GuestfsH -> IO (Maybe String)
11383 -- last_error h = do
11384 --   str <- withForeignPtr h (\\p -> c_last_error p)
11385 --   maybePeek peekCString str
11386
11387 last_error :: GuestfsH -> IO (String)
11388 last_error h = do
11389   str <- withForeignPtr h (\\p -> c_last_error p)
11390   if (str == nullPtr)
11391     then return \"no error\"
11392     else peekCString str
11393
11394 ";
11395
11396   (* Generate wrappers for each foreign function. *)
11397   List.iter (
11398     fun (name, style, _, _, _, _, _) ->
11399       if can_generate style then (
11400         pr "foreign import ccall unsafe \"guestfs_%s\" c_%s\n" name name;
11401         pr "  :: ";
11402         generate_haskell_prototype ~handle:"GuestfsP" style;
11403         pr "\n";
11404         pr "\n";
11405         pr "%s :: " name;
11406         generate_haskell_prototype ~handle:"GuestfsH" ~hs:true style;
11407         pr "\n";
11408         pr "%s %s = do\n" name
11409           (String.concat " " ("h" :: List.map name_of_argt (snd style)));
11410         pr "  r <- ";
11411         (* Convert pointer arguments using with* functions. *)
11412         List.iter (
11413           function
11414           | FileIn n
11415           | FileOut n
11416           | Pathname n | Device n | Dev_or_Path n | String n | Key n ->
11417               pr "withCString %s $ \\%s -> " n n
11418           | BufferIn n ->
11419               pr "withCStringLen %s $ \\(%s, %s_size) -> " n n n
11420           | OptString n -> pr "maybeWith withCString %s $ \\%s -> " n n
11421           | StringList n | DeviceList n -> pr "withMany withCString %s $ \\%s -> withArray0 nullPtr %s $ \\%s -> " n n n n
11422           | Bool _ | Int _ | Int64 _ -> ()
11423         ) (snd style);
11424         (* Convert integer arguments. *)
11425         let args =
11426           List.map (
11427             function
11428             | Bool n -> sprintf "(fromBool %s)" n
11429             | Int n -> sprintf "(fromIntegral %s)" n
11430             | Int64 n -> sprintf "(fromIntegral %s)" n
11431             | FileIn n | FileOut n
11432             | Pathname n | Device n | Dev_or_Path n
11433             | String n | OptString n
11434             | StringList n | DeviceList n
11435             | Key n -> n
11436             | BufferIn n -> sprintf "%s (fromIntegral %s_size)" n n
11437           ) (snd style) in
11438         pr "withForeignPtr h (\\p -> c_%s %s)\n" name
11439           (String.concat " " ("p" :: args));
11440         (match fst style with
11441          | RErr | RInt _ | RInt64 _ | RBool _ ->
11442              pr "  if (r == -1)\n";
11443              pr "    then do\n";
11444              pr "      err <- last_error h\n";
11445              pr "      fail err\n";
11446          | RConstString _ | RConstOptString _ | RString _
11447          | RStringList _ | RStruct _
11448          | RStructList _ | RHashtable _ | RBufferOut _ ->
11449              pr "  if (r == nullPtr)\n";
11450              pr "    then do\n";
11451              pr "      err <- last_error h\n";
11452              pr "      fail err\n";
11453         );
11454         (match fst style with
11455          | RErr ->
11456              pr "    else return ()\n"
11457          | RInt _ ->
11458              pr "    else return (fromIntegral r)\n"
11459          | RInt64 _ ->
11460              pr "    else return (fromIntegral r)\n"
11461          | RBool _ ->
11462              pr "    else return (toBool r)\n"
11463          | RConstString _
11464          | RConstOptString _
11465          | RString _
11466          | RStringList _
11467          | RStruct _
11468          | RStructList _
11469          | RHashtable _
11470          | RBufferOut _ ->
11471              pr "    else return ()\n" (* XXXXXXXXXXXXXXXXXXXX *)
11472         );
11473         pr "\n";
11474       )
11475   ) all_functions
11476
11477 and generate_haskell_prototype ~handle ?(hs = false) style =
11478   pr "%s -> " handle;
11479   let string = if hs then "String" else "CString" in
11480   let int = if hs then "Int" else "CInt" in
11481   let bool = if hs then "Bool" else "CInt" in
11482   let int64 = if hs then "Integer" else "Int64" in
11483   List.iter (
11484     fun arg ->
11485       (match arg with
11486        | Pathname _ | Device _ | Dev_or_Path _ | String _ | Key _ ->
11487            pr "%s" string
11488        | BufferIn _ ->
11489            if hs then pr "String"
11490            else pr "CString -> CInt"
11491        | OptString _ -> if hs then pr "Maybe String" else pr "CString"
11492        | StringList _ | DeviceList _ -> if hs then pr "[String]" else pr "Ptr CString"
11493        | Bool _ -> pr "%s" bool
11494        | Int _ -> pr "%s" int
11495        | Int64 _ -> pr "%s" int
11496        | FileIn _ -> pr "%s" string
11497        | FileOut _ -> pr "%s" string
11498       );
11499       pr " -> ";
11500   ) (snd style);
11501   pr "IO (";
11502   (match fst style with
11503    | RErr -> if not hs then pr "CInt"
11504    | RInt _ -> pr "%s" int
11505    | RInt64 _ -> pr "%s" int64
11506    | RBool _ -> pr "%s" bool
11507    | RConstString _ -> pr "%s" string
11508    | RConstOptString _ -> pr "Maybe %s" string
11509    | RString _ -> pr "%s" string
11510    | RStringList _ -> pr "[%s]" string
11511    | RStruct (_, typ) ->
11512        let name = java_name_of_struct typ in
11513        pr "%s" name
11514    | RStructList (_, typ) ->
11515        let name = java_name_of_struct typ in
11516        pr "[%s]" name
11517    | RHashtable _ -> pr "Hashtable"
11518    | RBufferOut _ -> pr "%s" string
11519   );
11520   pr ")"
11521
11522 and generate_csharp () =
11523   generate_header CPlusPlusStyle LGPLv2plus;
11524
11525   (* XXX Make this configurable by the C# assembly users. *)
11526   let library = "libguestfs.so.0" in
11527
11528   pr "\
11529 // These C# bindings are highly experimental at present.
11530 //
11531 // Firstly they only work on Linux (ie. Mono).  In order to get them
11532 // to work on Windows (ie. .Net) you would need to port the library
11533 // itself to Windows first.
11534 //
11535 // The second issue is that some calls are known to be incorrect and
11536 // can cause Mono to segfault.  Particularly: calls which pass or
11537 // return string[], or return any structure value.  This is because
11538 // we haven't worked out the correct way to do this from C#.
11539 //
11540 // The third issue is that when compiling you get a lot of warnings.
11541 // We are not sure whether the warnings are important or not.
11542 //
11543 // Fourthly we do not routinely build or test these bindings as part
11544 // of the make && make check cycle, which means that regressions might
11545 // go unnoticed.
11546 //
11547 // Suggestions and patches are welcome.
11548
11549 // To compile:
11550 //
11551 // gmcs Libguestfs.cs
11552 // mono Libguestfs.exe
11553 //
11554 // (You'll probably want to add a Test class / static main function
11555 // otherwise this won't do anything useful).
11556
11557 using System;
11558 using System.IO;
11559 using System.Runtime.InteropServices;
11560 using System.Runtime.Serialization;
11561 using System.Collections;
11562
11563 namespace Guestfs
11564 {
11565   class Error : System.ApplicationException
11566   {
11567     public Error (string message) : base (message) {}
11568     protected Error (SerializationInfo info, StreamingContext context) {}
11569   }
11570
11571   class Guestfs
11572   {
11573     IntPtr _handle;
11574
11575     [DllImport (\"%s\")]
11576     static extern IntPtr guestfs_create ();
11577
11578     public Guestfs ()
11579     {
11580       _handle = guestfs_create ();
11581       if (_handle == IntPtr.Zero)
11582         throw new Error (\"could not create guestfs handle\");
11583     }
11584
11585     [DllImport (\"%s\")]
11586     static extern void guestfs_close (IntPtr h);
11587
11588     ~Guestfs ()
11589     {
11590       guestfs_close (_handle);
11591     }
11592
11593     [DllImport (\"%s\")]
11594     static extern string guestfs_last_error (IntPtr h);
11595
11596 " library library library;
11597
11598   (* Generate C# structure bindings.  We prefix struct names with
11599    * underscore because C# cannot have conflicting struct names and
11600    * method names (eg. "class stat" and "stat").
11601    *)
11602   List.iter (
11603     fun (typ, cols) ->
11604       pr "    [StructLayout (LayoutKind.Sequential)]\n";
11605       pr "    public class _%s {\n" typ;
11606       List.iter (
11607         function
11608         | name, FChar -> pr "      char %s;\n" name
11609         | name, FString -> pr "      string %s;\n" name
11610         | name, FBuffer ->
11611             pr "      uint %s_len;\n" name;
11612             pr "      string %s;\n" name
11613         | name, FUUID ->
11614             pr "      [MarshalAs (UnmanagedType.ByValTStr, SizeConst=16)]\n";
11615             pr "      string %s;\n" name
11616         | name, FUInt32 -> pr "      uint %s;\n" name
11617         | name, FInt32 -> pr "      int %s;\n" name
11618         | name, (FUInt64|FBytes) -> pr "      ulong %s;\n" name
11619         | name, FInt64 -> pr "      long %s;\n" name
11620         | name, FOptPercent -> pr "      float %s; /* [0..100] or -1 */\n" name
11621       ) cols;
11622       pr "    }\n";
11623       pr "\n"
11624   ) structs;
11625
11626   (* Generate C# function bindings. *)
11627   List.iter (
11628     fun (name, style, _, _, _, shortdesc, _) ->
11629       let rec csharp_return_type () =
11630         match fst style with
11631         | RErr -> "void"
11632         | RBool n -> "bool"
11633         | RInt n -> "int"
11634         | RInt64 n -> "long"
11635         | RConstString n
11636         | RConstOptString n
11637         | RString n
11638         | RBufferOut n -> "string"
11639         | RStruct (_,n) -> "_" ^ n
11640         | RHashtable n -> "Hashtable"
11641         | RStringList n -> "string[]"
11642         | RStructList (_,n) -> sprintf "_%s[]" n
11643
11644       and c_return_type () =
11645         match fst style with
11646         | RErr
11647         | RBool _
11648         | RInt _ -> "int"
11649         | RInt64 _ -> "long"
11650         | RConstString _
11651         | RConstOptString _
11652         | RString _
11653         | RBufferOut _ -> "string"
11654         | RStruct (_,n) -> "_" ^ n
11655         | RHashtable _
11656         | RStringList _ -> "string[]"
11657         | RStructList (_,n) -> sprintf "_%s[]" n
11658
11659       and c_error_comparison () =
11660         match fst style with
11661         | RErr
11662         | RBool _
11663         | RInt _
11664         | RInt64 _ -> "== -1"
11665         | RConstString _
11666         | RConstOptString _
11667         | RString _
11668         | RBufferOut _
11669         | RStruct (_,_)
11670         | RHashtable _
11671         | RStringList _
11672         | RStructList (_,_) -> "== null"
11673
11674       and generate_extern_prototype () =
11675         pr "    static extern %s guestfs_%s (IntPtr h"
11676           (c_return_type ()) name;
11677         List.iter (
11678           function
11679           | Pathname n | Device n | Dev_or_Path n | String n | OptString n
11680           | FileIn n | FileOut n
11681           | Key n
11682           | BufferIn n ->
11683               pr ", [In] string %s" n
11684           | StringList n | DeviceList n ->
11685               pr ", [In] string[] %s" n
11686           | Bool n ->
11687               pr ", bool %s" n
11688           | Int n ->
11689               pr ", int %s" n
11690           | Int64 n ->
11691               pr ", long %s" n
11692         ) (snd style);
11693         pr ");\n"
11694
11695       and generate_public_prototype () =
11696         pr "    public %s %s (" (csharp_return_type ()) name;
11697         let comma = ref false in
11698         let next () =
11699           if !comma then pr ", ";
11700           comma := true
11701         in
11702         List.iter (
11703           function
11704           | Pathname n | Device n | Dev_or_Path n | String n | OptString n
11705           | FileIn n | FileOut n
11706           | Key n
11707           | BufferIn n ->
11708               next (); pr "string %s" n
11709           | StringList n | DeviceList n ->
11710               next (); pr "string[] %s" n
11711           | Bool n ->
11712               next (); pr "bool %s" n
11713           | Int n ->
11714               next (); pr "int %s" n
11715           | Int64 n ->
11716               next (); pr "long %s" n
11717         ) (snd style);
11718         pr ")\n"
11719
11720       and generate_call () =
11721         pr "guestfs_%s (_handle" name;
11722         List.iter (fun arg -> pr ", %s" (name_of_argt arg)) (snd style);
11723         pr ");\n";
11724       in
11725
11726       pr "    [DllImport (\"%s\")]\n" library;
11727       generate_extern_prototype ();
11728       pr "\n";
11729       pr "    /// <summary>\n";
11730       pr "    /// %s\n" shortdesc;
11731       pr "    /// </summary>\n";
11732       generate_public_prototype ();
11733       pr "    {\n";
11734       pr "      %s r;\n" (c_return_type ());
11735       pr "      r = ";
11736       generate_call ();
11737       pr "      if (r %s)\n" (c_error_comparison ());
11738       pr "        throw new Error (guestfs_last_error (_handle));\n";
11739       (match fst style with
11740        | RErr -> ()
11741        | RBool _ ->
11742            pr "      return r != 0 ? true : false;\n"
11743        | RHashtable _ ->
11744            pr "      Hashtable rr = new Hashtable ();\n";
11745            pr "      for (size_t i = 0; i < r.Length; i += 2)\n";
11746            pr "        rr.Add (r[i], r[i+1]);\n";
11747            pr "      return rr;\n"
11748        | RInt _ | RInt64 _ | RConstString _ | RConstOptString _
11749        | RString _ | RBufferOut _ | RStruct _ | RStringList _
11750        | RStructList _ ->
11751            pr "      return r;\n"
11752       );
11753       pr "    }\n";
11754       pr "\n";
11755   ) all_functions_sorted;
11756
11757   pr "  }
11758 }
11759 "
11760
11761 and generate_bindtests () =
11762   generate_header CStyle LGPLv2plus;
11763
11764   pr "\
11765 #include <stdio.h>
11766 #include <stdlib.h>
11767 #include <inttypes.h>
11768 #include <string.h>
11769
11770 #include \"guestfs.h\"
11771 #include \"guestfs-internal.h\"
11772 #include \"guestfs-internal-actions.h\"
11773 #include \"guestfs_protocol.h\"
11774
11775 #define error guestfs_error
11776 #define safe_calloc guestfs_safe_calloc
11777 #define safe_malloc guestfs_safe_malloc
11778
11779 static void
11780 print_strings (char *const *argv)
11781 {
11782   size_t argc;
11783
11784   printf (\"[\");
11785   for (argc = 0; argv[argc] != NULL; ++argc) {
11786     if (argc > 0) printf (\", \");
11787     printf (\"\\\"%%s\\\"\", argv[argc]);
11788   }
11789   printf (\"]\\n\");
11790 }
11791
11792 /* The test0 function prints its parameters to stdout. */
11793 ";
11794
11795   let test0, tests =
11796     match test_functions with
11797     | [] -> assert false
11798     | test0 :: tests -> test0, tests in
11799
11800   let () =
11801     let (name, style, _, _, _, _, _) = test0 in
11802     generate_prototype ~extern:false ~semicolon:false ~newline:true
11803       ~handle:"g" ~prefix:"guestfs__" name style;
11804     pr "{\n";
11805     List.iter (
11806       function
11807       | Pathname n
11808       | Device n | Dev_or_Path n
11809       | String n
11810       | FileIn n
11811       | FileOut n
11812       | Key n -> pr "  printf (\"%%s\\n\", %s);\n" n
11813       | BufferIn n ->
11814           pr "  {\n";
11815           pr "    size_t i;\n";
11816           pr "    for (i = 0; i < %s_size; ++i)\n" n;
11817           pr "      printf (\"<%%02x>\", %s[i]);\n" n;
11818           pr "    printf (\"\\n\");\n";
11819           pr "  }\n";
11820       | OptString n -> pr "  printf (\"%%s\\n\", %s ? %s : \"null\");\n" n n
11821       | StringList n | DeviceList n -> pr "  print_strings (%s);\n" n
11822       | Bool n -> pr "  printf (\"%%s\\n\", %s ? \"true\" : \"false\");\n" n
11823       | Int n -> pr "  printf (\"%%d\\n\", %s);\n" n
11824       | Int64 n -> pr "  printf (\"%%\" PRIi64 \"\\n\", %s);\n" n
11825     ) (snd style);
11826     pr "  /* Java changes stdout line buffering so we need this: */\n";
11827     pr "  fflush (stdout);\n";
11828     pr "  return 0;\n";
11829     pr "}\n";
11830     pr "\n" in
11831
11832   List.iter (
11833     fun (name, style, _, _, _, _, _) ->
11834       if String.sub name (String.length name - 3) 3 <> "err" then (
11835         pr "/* Test normal return. */\n";
11836         generate_prototype ~extern:false ~semicolon:false ~newline:true
11837           ~handle:"g" ~prefix:"guestfs__" name style;
11838         pr "{\n";
11839         (match fst style with
11840          | RErr ->
11841              pr "  return 0;\n"
11842          | RInt _ ->
11843              pr "  int r;\n";
11844              pr "  sscanf (val, \"%%d\", &r);\n";
11845              pr "  return r;\n"
11846          | RInt64 _ ->
11847              pr "  int64_t r;\n";
11848              pr "  sscanf (val, \"%%\" SCNi64, &r);\n";
11849              pr "  return r;\n"
11850          | RBool _ ->
11851              pr "  return STREQ (val, \"true\");\n"
11852          | RConstString _
11853          | RConstOptString _ ->
11854              (* Can't return the input string here.  Return a static
11855               * string so we ensure we get a segfault if the caller
11856               * tries to free it.
11857               *)
11858              pr "  return \"static string\";\n"
11859          | RString _ ->
11860              pr "  return strdup (val);\n"
11861          | RStringList _ ->
11862              pr "  char **strs;\n";
11863              pr "  int n, i;\n";
11864              pr "  sscanf (val, \"%%d\", &n);\n";
11865              pr "  strs = safe_malloc (g, (n+1) * sizeof (char *));\n";
11866              pr "  for (i = 0; i < n; ++i) {\n";
11867              pr "    strs[i] = safe_malloc (g, 16);\n";
11868              pr "    snprintf (strs[i], 16, \"%%d\", i);\n";
11869              pr "  }\n";
11870              pr "  strs[n] = NULL;\n";
11871              pr "  return strs;\n"
11872          | RStruct (_, typ) ->
11873              pr "  struct guestfs_%s *r;\n" typ;
11874              pr "  r = safe_calloc (g, sizeof *r, 1);\n";
11875              pr "  return r;\n"
11876          | RStructList (_, typ) ->
11877              pr "  struct guestfs_%s_list *r;\n" typ;
11878              pr "  r = safe_calloc (g, sizeof *r, 1);\n";
11879              pr "  sscanf (val, \"%%d\", &r->len);\n";
11880              pr "  r->val = safe_calloc (g, r->len, sizeof *r->val);\n";
11881              pr "  return r;\n"
11882          | RHashtable _ ->
11883              pr "  char **strs;\n";
11884              pr "  int n, i;\n";
11885              pr "  sscanf (val, \"%%d\", &n);\n";
11886              pr "  strs = safe_malloc (g, (n*2+1) * sizeof (*strs));\n";
11887              pr "  for (i = 0; i < n; ++i) {\n";
11888              pr "    strs[i*2] = safe_malloc (g, 16);\n";
11889              pr "    strs[i*2+1] = safe_malloc (g, 16);\n";
11890              pr "    snprintf (strs[i*2], 16, \"%%d\", i);\n";
11891              pr "    snprintf (strs[i*2+1], 16, \"%%d\", i);\n";
11892              pr "  }\n";
11893              pr "  strs[n*2] = NULL;\n";
11894              pr "  return strs;\n"
11895          | RBufferOut _ ->
11896              pr "  return strdup (val);\n"
11897         );
11898         pr "}\n";
11899         pr "\n"
11900       ) else (
11901         pr "/* Test error return. */\n";
11902         generate_prototype ~extern:false ~semicolon:false ~newline:true
11903           ~handle:"g" ~prefix:"guestfs__" name style;
11904         pr "{\n";
11905         pr "  error (g, \"error\");\n";
11906         (match fst style with
11907          | RErr | RInt _ | RInt64 _ | RBool _ ->
11908              pr "  return -1;\n"
11909          | RConstString _ | RConstOptString _
11910          | RString _ | RStringList _ | RStruct _
11911          | RStructList _
11912          | RHashtable _
11913          | RBufferOut _ ->
11914              pr "  return NULL;\n"
11915         );
11916         pr "}\n";
11917         pr "\n"
11918       )
11919   ) tests
11920
11921 and generate_ocaml_bindtests () =
11922   generate_header OCamlStyle GPLv2plus;
11923
11924   pr "\
11925 let () =
11926   let g = Guestfs.create () in
11927 ";
11928
11929   let mkargs args =
11930     String.concat " " (
11931       List.map (
11932         function
11933         | CallString s -> "\"" ^ s ^ "\""
11934         | CallOptString None -> "None"
11935         | CallOptString (Some s) -> sprintf "(Some \"%s\")" s
11936         | CallStringList xs ->
11937             "[|" ^ String.concat ";" (List.map (sprintf "\"%s\"") xs) ^ "|]"
11938         | CallInt i when i >= 0 -> string_of_int i
11939         | CallInt i (* when i < 0 *) -> "(" ^ string_of_int i ^ ")"
11940         | CallInt64 i when i >= 0L -> Int64.to_string i ^ "L"
11941         | CallInt64 i (* when i < 0L *) -> "(" ^ Int64.to_string i ^ "L)"
11942         | CallBool b -> string_of_bool b
11943         | CallBuffer s -> sprintf "%S" s
11944       ) args
11945     )
11946   in
11947
11948   generate_lang_bindtests (
11949     fun f args -> pr "  Guestfs.%s g %s;\n" f (mkargs args)
11950   );
11951
11952   pr "print_endline \"EOF\"\n"
11953
11954 and generate_perl_bindtests () =
11955   pr "#!/usr/bin/perl -w\n";
11956   generate_header HashStyle GPLv2plus;
11957
11958   pr "\
11959 use strict;
11960
11961 use Sys::Guestfs;
11962
11963 my $g = Sys::Guestfs->new ();
11964 ";
11965
11966   let mkargs args =
11967     String.concat ", " (
11968       List.map (
11969         function
11970         | CallString s -> "\"" ^ s ^ "\""
11971         | CallOptString None -> "undef"
11972         | CallOptString (Some s) -> sprintf "\"%s\"" s
11973         | CallStringList xs ->
11974             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
11975         | CallInt i -> string_of_int i
11976         | CallInt64 i -> Int64.to_string i
11977         | CallBool b -> if b then "1" else "0"
11978         | CallBuffer s -> "\"" ^ c_quote s ^ "\""
11979       ) args
11980     )
11981   in
11982
11983   generate_lang_bindtests (
11984     fun f args -> pr "$g->%s (%s);\n" f (mkargs args)
11985   );
11986
11987   pr "print \"EOF\\n\"\n"
11988
11989 and generate_python_bindtests () =
11990   generate_header HashStyle GPLv2plus;
11991
11992   pr "\
11993 import guestfs
11994
11995 g = guestfs.GuestFS ()
11996 ";
11997
11998   let mkargs args =
11999     String.concat ", " (
12000       List.map (
12001         function
12002         | CallString s -> "\"" ^ s ^ "\""
12003         | CallOptString None -> "None"
12004         | CallOptString (Some s) -> sprintf "\"%s\"" s
12005         | CallStringList xs ->
12006             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
12007         | CallInt i -> string_of_int i
12008         | CallInt64 i -> Int64.to_string i
12009         | CallBool b -> if b then "1" else "0"
12010         | CallBuffer s -> "\"" ^ c_quote s ^ "\""
12011       ) args
12012     )
12013   in
12014
12015   generate_lang_bindtests (
12016     fun f args -> pr "g.%s (%s)\n" f (mkargs args)
12017   );
12018
12019   pr "print \"EOF\"\n"
12020
12021 and generate_ruby_bindtests () =
12022   generate_header HashStyle GPLv2plus;
12023
12024   pr "\
12025 require 'guestfs'
12026
12027 g = Guestfs::create()
12028 ";
12029
12030   let mkargs args =
12031     String.concat ", " (
12032       List.map (
12033         function
12034         | CallString s -> "\"" ^ s ^ "\""
12035         | CallOptString None -> "nil"
12036         | CallOptString (Some s) -> sprintf "\"%s\"" s
12037         | CallStringList xs ->
12038             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
12039         | CallInt i -> string_of_int i
12040         | CallInt64 i -> Int64.to_string i
12041         | CallBool b -> string_of_bool b
12042         | CallBuffer s -> "\"" ^ c_quote s ^ "\""
12043       ) args
12044     )
12045   in
12046
12047   generate_lang_bindtests (
12048     fun f args -> pr "g.%s(%s)\n" f (mkargs args)
12049   );
12050
12051   pr "print \"EOF\\n\"\n"
12052
12053 and generate_java_bindtests () =
12054   generate_header CStyle GPLv2plus;
12055
12056   pr "\
12057 import com.redhat.et.libguestfs.*;
12058
12059 public class Bindtests {
12060     public static void main (String[] argv)
12061     {
12062         try {
12063             GuestFS g = new GuestFS ();
12064 ";
12065
12066   let mkargs args =
12067     String.concat ", " (
12068       List.map (
12069         function
12070         | CallString s -> "\"" ^ s ^ "\""
12071         | CallOptString None -> "null"
12072         | CallOptString (Some s) -> sprintf "\"%s\"" s
12073         | CallStringList xs ->
12074             "new String[]{" ^
12075               String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "}"
12076         | CallInt i -> string_of_int i
12077         | CallInt64 i -> Int64.to_string i
12078         | CallBool b -> string_of_bool b
12079         | CallBuffer s ->
12080             "new byte[] { " ^ String.concat "," (
12081               map_chars (fun c -> string_of_int (Char.code c)) s
12082             ) ^ " }"
12083       ) args
12084     )
12085   in
12086
12087   generate_lang_bindtests (
12088     fun f args -> pr "            g.%s (%s);\n" f (mkargs args)
12089   );
12090
12091   pr "
12092             System.out.println (\"EOF\");
12093         }
12094         catch (Exception exn) {
12095             System.err.println (exn);
12096             System.exit (1);
12097         }
12098     }
12099 }
12100 "
12101
12102 and generate_haskell_bindtests () =
12103   generate_header HaskellStyle GPLv2plus;
12104
12105   pr "\
12106 module Bindtests where
12107 import qualified Guestfs
12108
12109 main = do
12110   g <- Guestfs.create
12111 ";
12112
12113   let mkargs args =
12114     String.concat " " (
12115       List.map (
12116         function
12117         | CallString s -> "\"" ^ s ^ "\""
12118         | CallOptString None -> "Nothing"
12119         | CallOptString (Some s) -> sprintf "(Just \"%s\")" s
12120         | CallStringList xs ->
12121             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
12122         | CallInt i when i < 0 -> "(" ^ string_of_int i ^ ")"
12123         | CallInt i -> string_of_int i
12124         | CallInt64 i when i < 0L -> "(" ^ Int64.to_string i ^ ")"
12125         | CallInt64 i -> Int64.to_string i
12126         | CallBool true -> "True"
12127         | CallBool false -> "False"
12128         | CallBuffer s -> "\"" ^ c_quote s ^ "\""
12129       ) args
12130     )
12131   in
12132
12133   generate_lang_bindtests (
12134     fun f args -> pr "  Guestfs.%s g %s\n" f (mkargs args)
12135   );
12136
12137   pr "  putStrLn \"EOF\"\n"
12138
12139 (* Language-independent bindings tests - we do it this way to
12140  * ensure there is parity in testing bindings across all languages.
12141  *)
12142 and generate_lang_bindtests call =
12143   call "test0" [CallString "abc"; CallOptString (Some "def");
12144                 CallStringList []; CallBool false;
12145                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
12146                 CallBuffer "abc\000abc"];
12147   call "test0" [CallString "abc"; CallOptString None;
12148                 CallStringList []; CallBool false;
12149                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
12150                 CallBuffer "abc\000abc"];
12151   call "test0" [CallString ""; CallOptString (Some "def");
12152                 CallStringList []; CallBool false;
12153                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
12154                 CallBuffer "abc\000abc"];
12155   call "test0" [CallString ""; CallOptString (Some "");
12156                 CallStringList []; CallBool false;
12157                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
12158                 CallBuffer "abc\000abc"];
12159   call "test0" [CallString "abc"; CallOptString (Some "def");
12160                 CallStringList ["1"]; CallBool false;
12161                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
12162                 CallBuffer "abc\000abc"];
12163   call "test0" [CallString "abc"; CallOptString (Some "def");
12164                 CallStringList ["1"; "2"]; CallBool false;
12165                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
12166                 CallBuffer "abc\000abc"];
12167   call "test0" [CallString "abc"; CallOptString (Some "def");
12168                 CallStringList ["1"]; CallBool true;
12169                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
12170                 CallBuffer "abc\000abc"];
12171   call "test0" [CallString "abc"; CallOptString (Some "def");
12172                 CallStringList ["1"]; CallBool false;
12173                 CallInt (-1); CallInt64 (-1L); CallString "123"; CallString "456";
12174                 CallBuffer "abc\000abc"];
12175   call "test0" [CallString "abc"; CallOptString (Some "def");
12176                 CallStringList ["1"]; CallBool false;
12177                 CallInt (-2); CallInt64 (-2L); CallString "123"; CallString "456";
12178                 CallBuffer "abc\000abc"];
12179   call "test0" [CallString "abc"; CallOptString (Some "def");
12180                 CallStringList ["1"]; CallBool false;
12181                 CallInt 1; CallInt64 1L; CallString "123"; CallString "456";
12182                 CallBuffer "abc\000abc"];
12183   call "test0" [CallString "abc"; CallOptString (Some "def");
12184                 CallStringList ["1"]; CallBool false;
12185                 CallInt 2; CallInt64 2L; CallString "123"; CallString "456";
12186                 CallBuffer "abc\000abc"];
12187   call "test0" [CallString "abc"; CallOptString (Some "def");
12188                 CallStringList ["1"]; CallBool false;
12189                 CallInt 4095; CallInt64 4095L; CallString "123"; CallString "456";
12190                 CallBuffer "abc\000abc"];
12191   call "test0" [CallString "abc"; CallOptString (Some "def");
12192                 CallStringList ["1"]; CallBool false;
12193                 CallInt 0; CallInt64 0L; CallString ""; CallString "";
12194                 CallBuffer "abc\000abc"]
12195
12196 (* XXX Add here tests of the return and error functions. *)
12197
12198 and generate_max_proc_nr () =
12199   pr "%d\n" max_proc_nr
12200
12201 let output_to filename k =
12202   let filename_new = filename ^ ".new" in
12203   chan := open_out filename_new;
12204   k ();
12205   close_out !chan;
12206   chan := Pervasives.stdout;
12207
12208   (* Is the new file different from the current file? *)
12209   if Sys.file_exists filename && files_equal filename filename_new then
12210     unlink filename_new                 (* same, so skip it *)
12211   else (
12212     (* different, overwrite old one *)
12213     (try chmod filename 0o644 with Unix_error _ -> ());
12214     rename filename_new filename;
12215     chmod filename 0o444;
12216     printf "written %s\n%!" filename;
12217   )
12218
12219 let perror msg = function
12220   | Unix_error (err, _, _) ->
12221       eprintf "%s: %s\n" msg (error_message err)
12222   | exn ->
12223       eprintf "%s: %s\n" msg (Printexc.to_string exn)
12224
12225 (* Main program. *)
12226 let () =
12227   let lock_fd =
12228     try openfile "HACKING" [O_RDWR] 0
12229     with
12230     | Unix_error (ENOENT, _, _) ->
12231         eprintf "\
12232 You are probably running this from the wrong directory.
12233 Run it from the top source directory using the command
12234   src/generator.ml
12235 ";
12236         exit 1
12237     | exn ->
12238         perror "open: HACKING" exn;
12239         exit 1 in
12240
12241   (* Acquire a lock so parallel builds won't try to run the generator
12242    * twice at the same time.  Subsequent builds will wait for the first
12243    * one to finish.  Note the lock is released implicitly when the
12244    * program exits.
12245    *)
12246   (try lockf lock_fd F_LOCK 1
12247    with exn ->
12248      perror "lock: HACKING" exn;
12249      exit 1);
12250
12251   check_functions ();
12252
12253   output_to "src/guestfs_protocol.x" generate_xdr;
12254   output_to "src/guestfs-structs.h" generate_structs_h;
12255   output_to "src/guestfs-actions.h" generate_actions_h;
12256   output_to "src/guestfs-internal-actions.h" generate_internal_actions_h;
12257   output_to "src/actions.c" generate_client_actions;
12258   output_to "src/bindtests.c" generate_bindtests;
12259   output_to "src/guestfs-structs.pod" generate_structs_pod;
12260   output_to "src/guestfs-actions.pod" generate_actions_pod;
12261   output_to "src/guestfs-availability.pod" generate_availability_pod;
12262   output_to "src/MAX_PROC_NR" generate_max_proc_nr;
12263   output_to "src/libguestfs.syms" generate_linker_script;
12264   output_to "daemon/actions.h" generate_daemon_actions_h;
12265   output_to "daemon/stubs.c" generate_daemon_actions;
12266   output_to "daemon/names.c" generate_daemon_names;
12267   output_to "daemon/optgroups.c" generate_daemon_optgroups_c;
12268   output_to "daemon/optgroups.h" generate_daemon_optgroups_h;
12269   output_to "capitests/tests.c" generate_tests;
12270   output_to "fish/cmds.c" generate_fish_cmds;
12271   output_to "fish/completion.c" generate_fish_completion;
12272   output_to "fish/guestfish-actions.pod" generate_fish_actions_pod;
12273   output_to "ocaml/guestfs.mli" generate_ocaml_mli;
12274   output_to "ocaml/guestfs.ml" generate_ocaml_ml;
12275   output_to "ocaml/guestfs_c_actions.c" generate_ocaml_c;
12276   output_to "ocaml/bindtests.ml" generate_ocaml_bindtests;
12277   output_to "perl/Guestfs.xs" generate_perl_xs;
12278   output_to "perl/lib/Sys/Guestfs.pm" generate_perl_pm;
12279   output_to "perl/bindtests.pl" generate_perl_bindtests;
12280   output_to "python/guestfs-py.c" generate_python_c;
12281   output_to "python/guestfs.py" generate_python_py;
12282   output_to "python/bindtests.py" generate_python_bindtests;
12283   output_to "ruby/ext/guestfs/_guestfs.c" generate_ruby_c;
12284   output_to "ruby/bindtests.rb" generate_ruby_bindtests;
12285   output_to "java/com/redhat/et/libguestfs/GuestFS.java" generate_java_java;
12286
12287   List.iter (
12288     fun (typ, jtyp) ->
12289       let cols = cols_of_struct typ in
12290       let filename = sprintf "java/com/redhat/et/libguestfs/%s.java" jtyp in
12291       output_to filename (generate_java_struct jtyp cols);
12292   ) java_structs;
12293
12294   output_to "java/Makefile.inc" generate_java_makefile_inc;
12295   output_to "java/com_redhat_et_libguestfs_GuestFS.c" generate_java_c;
12296   output_to "java/Bindtests.java" generate_java_bindtests;
12297   output_to "haskell/Guestfs.hs" generate_haskell_hs;
12298   output_to "haskell/Bindtests.hs" generate_haskell_bindtests;
12299   output_to "csharp/Libguestfs.cs" generate_csharp;
12300
12301   (* Always generate this file last, and unconditionally.  It's used
12302    * by the Makefile to know when we must re-run the generator.
12303    *)
12304   let chan = open_out "src/stamp-generator" in
12305   fprintf chan "1\n";
12306   close_out chan;
12307
12308   printf "generated %d lines of code\n" !lines