Raise error message max size to 64K.
[libguestfs.git] / src / generator.ml
1 #!/usr/bin/env ocaml
2 (* libguestfs
3  * Copyright (C) 2009-2010 Red Hat Inc.
4  *
5  * This program is free software; you can redistribute it and/or modify
6  * it under the terms of the GNU General Public License as published by
7  * the Free Software Foundation; either version 2 of the License, or
8  * (at your option) any later version.
9  *
10  * This program is distributed in the hope that it will be useful,
11  * but WITHOUT ANY WARRANTY; without even the implied warranty of
12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
13  * GNU General Public License for more details.
14  *
15  * You should have received a copy of the GNU General Public License
16  * along with this program; if not, write to the Free Software
17  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
18  *)
19
20 (* This script generates a large amount of code and documentation for
21  * all the daemon actions.
22  *
23  * To add a new action there are only two files you need to change,
24  * this one to describe the interface (see the big table of
25  * 'daemon_functions' below), and daemon/<somefile>.c to write the
26  * implementation.
27  *
28  * After editing this file, run it (./src/generator.ml) to regenerate
29  * all the output files.  'make' will rerun this automatically when
30  * necessary.  Note that if you are using a separate build directory
31  * you must run generator.ml from the _source_ directory.
32  *
33  * IMPORTANT: This script should NOT print any warnings.  If it prints
34  * warnings, you should treat them as errors.
35  *
36  * OCaml tips:
37  * (1) In emacs, install tuareg-mode to display and format OCaml code
38  * correctly.  'vim' comes with a good OCaml editing mode by default.
39  * (2) Read the resources at http://ocaml-tutorial.org/
40  *)
41
42 #load "unix.cma";;
43 #load "str.cma";;
44 #directory "+xml-light";;
45 #directory "+../pkg-lib/xml-light";; (* for GODI users *)
46 #load "xml-light.cma";;
47
48 open Unix
49 open Printf
50
51 type style = ret * args
52 and ret =
53     (* "RErr" as a return value means an int used as a simple error
54      * indication, ie. 0 or -1.
55      *)
56   | RErr
57
58     (* "RInt" as a return value means an int which is -1 for error
59      * or any value >= 0 on success.  Only use this for smallish
60      * positive ints (0 <= i < 2^30).
61      *)
62   | RInt of string
63
64     (* "RInt64" is the same as RInt, but is guaranteed to be able
65      * to return a full 64 bit value, _except_ that -1 means error
66      * (so -1 cannot be a valid, non-error return value).
67      *)
68   | RInt64 of string
69
70     (* "RBool" is a bool return value which can be true/false or
71      * -1 for error.
72      *)
73   | RBool of string
74
75     (* "RConstString" is a string that refers to a constant value.
76      * The return value must NOT be NULL (since NULL indicates
77      * an error).
78      *
79      * Try to avoid using this.  In particular you cannot use this
80      * for values returned from the daemon, because there is no
81      * thread-safe way to return them in the C API.
82      *)
83   | RConstString of string
84
85     (* "RConstOptString" is an even more broken version of
86      * "RConstString".  The returned string may be NULL and there
87      * is no way to return an error indication.  Avoid using this!
88      *)
89   | RConstOptString of string
90
91     (* "RString" is a returned string.  It must NOT be NULL, since
92      * a NULL return indicates an error.  The caller frees this.
93      *)
94   | RString of string
95
96     (* "RStringList" is a list of strings.  No string in the list
97      * can be NULL.  The caller frees the strings and the array.
98      *)
99   | RStringList of string
100
101     (* "RStruct" is a function which returns a single named structure
102      * or an error indication (in C, a struct, and in other languages
103      * with varying representations, but usually very efficient).  See
104      * after the function list below for the structures.
105      *)
106   | RStruct of string * string          (* name of retval, name of struct *)
107
108     (* "RStructList" is a function which returns either a list/array
109      * of structures (could be zero-length), or an error indication.
110      *)
111   | RStructList of string * string      (* name of retval, name of struct *)
112
113     (* Key-value pairs of untyped strings.  Turns into a hashtable or
114      * dictionary in languages which support it.  DON'T use this as a
115      * general "bucket" for results.  Prefer a stronger typed return
116      * value if one is available, or write a custom struct.  Don't use
117      * this if the list could potentially be very long, since it is
118      * inefficient.  Keys should be unique.  NULLs are not permitted.
119      *)
120   | RHashtable of string
121
122     (* "RBufferOut" is handled almost exactly like RString, but
123      * it allows the string to contain arbitrary 8 bit data including
124      * ASCII NUL.  In the C API this causes an implicit extra parameter
125      * to be added of type <size_t *size_r>.  The extra parameter
126      * returns the actual size of the return buffer in bytes.
127      *
128      * Other programming languages support strings with arbitrary 8 bit
129      * data.
130      *
131      * At the RPC layer we have to use the opaque<> type instead of
132      * string<>.  Returned data is still limited to the max message
133      * size (ie. ~ 2 MB).
134      *)
135   | RBufferOut of string
136
137 and args = argt list    (* Function parameters, guestfs handle is implicit. *)
138
139     (* Note in future we should allow a "variable args" parameter as
140      * the final parameter, to allow commands like
141      *   chmod mode file [file(s)...]
142      * This is not implemented yet, but many commands (such as chmod)
143      * are currently defined with the argument order keeping this future
144      * possibility in mind.
145      *)
146 and argt =
147   | String of string    (* const char *name, cannot be NULL *)
148   | Device of string    (* /dev device name, cannot be NULL *)
149   | Pathname of string  (* file name, cannot be NULL *)
150   | Dev_or_Path of string (* /dev device name or Pathname, cannot be NULL *)
151   | OptString of string (* const char *name, may be NULL *)
152   | StringList of string(* list of strings (each string cannot be NULL) *)
153   | DeviceList of string(* list of Device names (each cannot be NULL) *)
154   | Bool of string      (* boolean *)
155   | Int of string       (* int (smallish ints, signed, <= 31 bits) *)
156   | Int64 of string     (* any 64 bit int *)
157     (* These are treated as filenames (simple string parameters) in
158      * the C API and bindings.  But in the RPC protocol, we transfer
159      * the actual file content up to or down from the daemon.
160      * FileIn: local machine -> daemon (in request)
161      * FileOut: daemon -> local machine (in reply)
162      * In guestfish (only), the special name "-" means read from
163      * stdin or write to stdout.
164      *)
165   | FileIn of string
166   | FileOut of string
167     (* Opaque buffer which can contain arbitrary 8 bit data.
168      * In the C API, this is expressed as <const char *, size_t> pair.
169      * Most other languages have a string type which can contain
170      * ASCII NUL.  We use whatever type is appropriate for each
171      * language.
172      * Buffers are limited by the total message size.  To transfer
173      * large blocks of data, use FileIn/FileOut parameters instead.
174      * To return an arbitrary buffer, use RBufferOut.
175      *)
176   | BufferIn of string
177     (* Key material / passphrase.  Eventually we should treat this
178      * as sensitive and mlock it into physical RAM.  However this
179      * is highly complex because of all the places that XDR-encoded
180      * strings can end up.  So currently the only difference from
181      * 'String' is the way that guestfish requests these parameters
182      * from the user.
183      *)
184   | Key of string
185
186 type flags =
187   | ProtocolLimitWarning  (* display warning about protocol size limits *)
188   | DangerWillRobinson    (* flags particularly dangerous commands *)
189   | FishAlias of string   (* provide an alias for this cmd in guestfish *)
190   | FishOutput of fish_output_t (* how to display output in guestfish *)
191   | NotInFish             (* do not export via guestfish *)
192   | NotInDocs             (* do not add this function to documentation *)
193   | DeprecatedBy of string (* function is deprecated, use .. instead *)
194   | Optional of string    (* function is part of an optional group *)
195
196 and fish_output_t =
197   | FishOutputOctal       (* for int return, print in octal *)
198   | FishOutputHexadecimal (* for int return, print in hex *)
199
200 (* You can supply zero or as many tests as you want per API call.
201  *
202  * Note that the test environment has 3 block devices, of size 500MB,
203  * 50MB and 10MB (respectively /dev/sda, /dev/sdb, /dev/sdc), and
204  * a fourth ISO block device with some known files on it (/dev/sdd).
205  *
206  * Note for partitioning purposes, the 500MB device has 1015 cylinders.
207  * Number of cylinders was 63 for IDE emulated disks with precisely
208  * the same size.  How exactly this is calculated is a mystery.
209  *
210  * The ISO block device (/dev/sdd) comes from images/test.iso.
211  *
212  * To be able to run the tests in a reasonable amount of time,
213  * the virtual machine and block devices are reused between tests.
214  * So don't try testing kill_subprocess :-x
215  *
216  * Between each test we blockdev-setrw, umount-all, lvm-remove-all.
217  *
218  * Don't assume anything about the previous contents of the block
219  * devices.  Use 'Init*' to create some initial scenarios.
220  *
221  * You can add a prerequisite clause to any individual test.  This
222  * is a run-time check, which, if it fails, causes the test to be
223  * skipped.  Useful if testing a command which might not work on
224  * all variations of libguestfs builds.  A test that has prerequisite
225  * of 'Always' is run unconditionally.
226  *
227  * In addition, packagers can skip individual tests by setting the
228  * environment variables:     eg:
229  *   SKIP_TEST_<CMD>_<NUM>=1  SKIP_TEST_COMMAND_3=1  (skips test #3 of command)
230  *   SKIP_TEST_<CMD>=1        SKIP_TEST_ZEROFREE=1   (skips all zerofree tests)
231  *)
232 type tests = (test_init * test_prereq * test) list
233 and test =
234     (* Run the command sequence and just expect nothing to fail. *)
235   | TestRun of seq
236
237     (* Run the command sequence and expect the output of the final
238      * command to be the string.
239      *)
240   | TestOutput of seq * string
241
242     (* Run the command sequence and expect the output of the final
243      * command to be the list of strings.
244      *)
245   | TestOutputList of seq * string list
246
247     (* Run the command sequence and expect the output of the final
248      * command to be the list of block devices (could be either
249      * "/dev/sd.." or "/dev/hd.." form - we don't check the 5th
250      * character of each string).
251      *)
252   | TestOutputListOfDevices of seq * string list
253
254     (* Run the command sequence and expect the output of the final
255      * command to be the integer.
256      *)
257   | TestOutputInt of seq * int
258
259     (* Run the command sequence and expect the output of the final
260      * command to be <op> <int>, eg. ">=", "1".
261      *)
262   | TestOutputIntOp of seq * string * int
263
264     (* Run the command sequence and expect the output of the final
265      * command to be a true value (!= 0 or != NULL).
266      *)
267   | TestOutputTrue of seq
268
269     (* Run the command sequence and expect the output of the final
270      * command to be a false value (== 0 or == NULL, but not an error).
271      *)
272   | TestOutputFalse of seq
273
274     (* Run the command sequence and expect the output of the final
275      * command to be a list of the given length (but don't care about
276      * content).
277      *)
278   | TestOutputLength of seq * int
279
280     (* Run the command sequence and expect the output of the final
281      * command to be a buffer (RBufferOut), ie. string + size.
282      *)
283   | TestOutputBuffer of seq * string
284
285     (* Run the command sequence and expect the output of the final
286      * command to be a structure.
287      *)
288   | TestOutputStruct of seq * test_field_compare list
289
290     (* Run the command sequence and expect the final command (only)
291      * to fail.
292      *)
293   | TestLastFail of seq
294
295 and test_field_compare =
296   | CompareWithInt of string * int
297   | CompareWithIntOp of string * string * int
298   | CompareWithString of string * string
299   | CompareFieldsIntEq of string * string
300   | CompareFieldsStrEq of string * string
301
302 (* Test prerequisites. *)
303 and test_prereq =
304     (* Test always runs. *)
305   | Always
306
307     (* Test is currently disabled - eg. it fails, or it tests some
308      * unimplemented feature.
309      *)
310   | Disabled
311
312     (* 'string' is some C code (a function body) that should return
313      * true or false.  The test will run if the code returns true.
314      *)
315   | If of string
316
317     (* As for 'If' but the test runs _unless_ the code returns true. *)
318   | Unless of string
319
320     (* Run the test only if 'string' is available in the daemon. *)
321   | IfAvailable of string
322
323 (* Some initial scenarios for testing. *)
324 and test_init =
325     (* Do nothing, block devices could contain random stuff including
326      * LVM PVs, and some filesystems might be mounted.  This is usually
327      * a bad idea.
328      *)
329   | InitNone
330
331     (* Block devices are empty and no filesystems are mounted. *)
332   | InitEmpty
333
334     (* /dev/sda contains a single partition /dev/sda1, with random
335      * content.  /dev/sdb and /dev/sdc may have random content.
336      * No LVM.
337      *)
338   | InitPartition
339
340     (* /dev/sda contains a single partition /dev/sda1, which is formatted
341      * as ext2, empty [except for lost+found] and mounted on /.
342      * /dev/sdb and /dev/sdc may have random content.
343      * No LVM.
344      *)
345   | InitBasicFS
346
347     (* /dev/sda:
348      *   /dev/sda1 (is a PV):
349      *     /dev/VG/LV (size 8MB):
350      *       formatted as ext2, empty [except for lost+found], mounted on /
351      * /dev/sdb and /dev/sdc may have random content.
352      *)
353   | InitBasicFSonLVM
354
355     (* /dev/sdd (the ISO, see images/ directory in source)
356      * is mounted on /
357      *)
358   | InitISOFS
359
360 (* Sequence of commands for testing. *)
361 and seq = cmd list
362 and cmd = string list
363
364 (* Note about long descriptions: When referring to another
365  * action, use the format C<guestfs_other> (ie. the full name of
366  * the C function).  This will be replaced as appropriate in other
367  * language bindings.
368  *
369  * Apart from that, long descriptions are just perldoc paragraphs.
370  *)
371
372 (* Generate a random UUID (used in tests). *)
373 let uuidgen () =
374   let chan = open_process_in "uuidgen" in
375   let uuid = input_line chan in
376   (match close_process_in chan with
377    | WEXITED 0 -> ()
378    | WEXITED _ ->
379        failwith "uuidgen: process exited with non-zero status"
380    | WSIGNALED _ | WSTOPPED _ ->
381        failwith "uuidgen: process signalled or stopped by signal"
382   );
383   uuid
384
385 (* These test functions are used in the language binding tests. *)
386
387 let test_all_args = [
388   String "str";
389   OptString "optstr";
390   StringList "strlist";
391   Bool "b";
392   Int "integer";
393   Int64 "integer64";
394   FileIn "filein";
395   FileOut "fileout";
396   BufferIn "bufferin";
397 ]
398
399 let test_all_rets = [
400   (* except for RErr, which is tested thoroughly elsewhere *)
401   "test0rint",         RInt "valout";
402   "test0rint64",       RInt64 "valout";
403   "test0rbool",        RBool "valout";
404   "test0rconststring", RConstString "valout";
405   "test0rconstoptstring", RConstOptString "valout";
406   "test0rstring",      RString "valout";
407   "test0rstringlist",  RStringList "valout";
408   "test0rstruct",      RStruct ("valout", "lvm_pv");
409   "test0rstructlist",  RStructList ("valout", "lvm_pv");
410   "test0rhashtable",   RHashtable "valout";
411 ]
412
413 let test_functions = [
414   ("test0", (RErr, test_all_args), -1, [NotInFish; NotInDocs],
415    [],
416    "internal test function - do not use",
417    "\
418 This is an internal test function which is used to test whether
419 the automatically generated bindings can handle every possible
420 parameter type correctly.
421
422 It echos the contents of each parameter to stdout.
423
424 You probably don't want to call this function.");
425 ] @ List.flatten (
426   List.map (
427     fun (name, ret) ->
428       [(name, (ret, [String "val"]), -1, [NotInFish; NotInDocs],
429         [],
430         "internal test function - do not use",
431         "\
432 This is an internal test function which is used to test whether
433 the automatically generated bindings can handle every possible
434 return type correctly.
435
436 It converts string C<val> to the return type.
437
438 You probably don't want to call this function.");
439        (name ^ "err", (ret, []), -1, [NotInFish; NotInDocs],
440         [],
441         "internal test function - do not use",
442         "\
443 This is an internal test function which is used to test whether
444 the automatically generated bindings can handle every possible
445 return type correctly.
446
447 This function always returns an error.
448
449 You probably don't want to call this function.")]
450   ) test_all_rets
451 )
452
453 (* non_daemon_functions are any functions which don't get processed
454  * in the daemon, eg. functions for setting and getting local
455  * configuration values.
456  *)
457
458 let non_daemon_functions = test_functions @ [
459   ("launch", (RErr, []), -1, [FishAlias "run"],
460    [],
461    "launch the qemu subprocess",
462    "\
463 Internally libguestfs is implemented by running a virtual machine
464 using L<qemu(1)>.
465
466 You should call this after configuring the handle
467 (eg. adding drives) but before performing any actions.");
468
469   ("wait_ready", (RErr, []), -1, [NotInFish],
470    [],
471    "wait until the qemu subprocess launches (no op)",
472    "\
473 This function is a no op.
474
475 In versions of the API E<lt> 1.0.71 you had to call this function
476 just after calling C<guestfs_launch> to wait for the launch
477 to complete.  However this is no longer necessary because
478 C<guestfs_launch> now does the waiting.
479
480 If you see any calls to this function in code then you can just
481 remove them, unless you want to retain compatibility with older
482 versions of the API.");
483
484   ("kill_subprocess", (RErr, []), -1, [],
485    [],
486    "kill the qemu subprocess",
487    "\
488 This kills the qemu subprocess.  You should never need to call this.");
489
490   ("add_drive", (RErr, [String "filename"]), -1, [FishAlias "add"],
491    [],
492    "add an image to examine or modify",
493    "\
494 This function adds a virtual machine disk image C<filename> to the
495 guest.  The first time you call this function, the disk appears as IDE
496 disk 0 (C</dev/sda>) in the guest, the second time as C</dev/sdb>, and
497 so on.
498
499 You don't necessarily need to be root when using libguestfs.  However
500 you obviously do need sufficient permissions to access the filename
501 for whatever operations you want to perform (ie. read access if you
502 just want to read the image or write access if you want to modify the
503 image).
504
505 This is equivalent to the qemu parameter
506 C<-drive file=filename,cache=off,if=...>.
507
508 C<cache=off> is omitted in cases where it is not supported by
509 the underlying filesystem.
510
511 C<if=...> is set at compile time by the configuration option
512 C<./configure --with-drive-if=...>.  In the rare case where you
513 might need to change this at run time, use C<guestfs_add_drive_with_if>
514 or C<guestfs_add_drive_ro_with_if>.
515
516 Note that this call checks for the existence of C<filename>.  This
517 stops you from specifying other types of drive which are supported
518 by qemu such as C<nbd:> and C<http:> URLs.  To specify those, use
519 the general C<guestfs_config> call instead.");
520
521   ("add_cdrom", (RErr, [String "filename"]), -1, [FishAlias "cdrom"],
522    [],
523    "add a CD-ROM disk image to examine",
524    "\
525 This function adds a virtual CD-ROM disk image to the guest.
526
527 This is equivalent to the qemu parameter C<-cdrom filename>.
528
529 Notes:
530
531 =over 4
532
533 =item *
534
535 This call checks for the existence of C<filename>.  This
536 stops you from specifying other types of drive which are supported
537 by qemu such as C<nbd:> and C<http:> URLs.  To specify those, use
538 the general C<guestfs_config> call instead.
539
540 =item *
541
542 If you just want to add an ISO file (often you use this as an
543 efficient way to transfer large files into the guest), then you
544 should probably use C<guestfs_add_drive_ro> instead.
545
546 =back");
547
548   ("add_drive_ro", (RErr, [String "filename"]), -1, [FishAlias "add-ro"],
549    [],
550    "add a drive in snapshot mode (read-only)",
551    "\
552 This adds a drive in snapshot mode, making it effectively
553 read-only.
554
555 Note that writes to the device are allowed, and will be seen for
556 the duration of the guestfs handle, but they are written
557 to a temporary file which is discarded as soon as the guestfs
558 handle is closed.  We don't currently have any method to enable
559 changes to be committed, although qemu can support this.
560
561 This is equivalent to the qemu parameter
562 C<-drive file=filename,snapshot=on,if=...>.
563
564 C<if=...> is set at compile time by the configuration option
565 C<./configure --with-drive-if=...>.  In the rare case where you
566 might need to change this at run time, use C<guestfs_add_drive_with_if>
567 or C<guestfs_add_drive_ro_with_if>.
568
569 Note that this call checks for the existence of C<filename>.  This
570 stops you from specifying other types of drive which are supported
571 by qemu such as C<nbd:> and C<http:> URLs.  To specify those, use
572 the general C<guestfs_config> call instead.");
573
574   ("config", (RErr, [String "qemuparam"; OptString "qemuvalue"]), -1, [],
575    [],
576    "add qemu parameters",
577    "\
578 This can be used to add arbitrary qemu command line parameters
579 of the form C<-param value>.  Actually it's not quite arbitrary - we
580 prevent you from setting some parameters which would interfere with
581 parameters that we use.
582
583 The first character of C<param> string must be a C<-> (dash).
584
585 C<value> can be NULL.");
586
587   ("set_qemu", (RErr, [OptString "qemu"]), -1, [FishAlias "qemu"],
588    [],
589    "set the qemu binary",
590    "\
591 Set the qemu binary that we will use.
592
593 The default is chosen when the library was compiled by the
594 configure script.
595
596 You can also override this by setting the C<LIBGUESTFS_QEMU>
597 environment variable.
598
599 Setting C<qemu> to C<NULL> restores the default qemu binary.
600
601 Note that you should call this function as early as possible
602 after creating the handle.  This is because some pre-launch
603 operations depend on testing qemu features (by running C<qemu -help>).
604 If the qemu binary changes, we don't retest features, and
605 so you might see inconsistent results.  Using the environment
606 variable C<LIBGUESTFS_QEMU> is safest of all since that picks
607 the qemu binary at the same time as the handle is created.");
608
609   ("get_qemu", (RConstString "qemu", []), -1, [],
610    [InitNone, Always, TestRun (
611       [["get_qemu"]])],
612    "get the qemu binary",
613    "\
614 Return the current qemu binary.
615
616 This is always non-NULL.  If it wasn't set already, then this will
617 return the default qemu binary name.");
618
619   ("set_path", (RErr, [OptString "searchpath"]), -1, [FishAlias "path"],
620    [],
621    "set the search path",
622    "\
623 Set the path that libguestfs searches for kernel and initrd.img.
624
625 The default is C<$libdir/guestfs> unless overridden by setting
626 C<LIBGUESTFS_PATH> environment variable.
627
628 Setting C<path> to C<NULL> restores the default path.");
629
630   ("get_path", (RConstString "path", []), -1, [],
631    [InitNone, Always, TestRun (
632       [["get_path"]])],
633    "get the search path",
634    "\
635 Return the current search path.
636
637 This is always non-NULL.  If it wasn't set already, then this will
638 return the default path.");
639
640   ("set_append", (RErr, [OptString "append"]), -1, [FishAlias "append"],
641    [],
642    "add options to kernel command line",
643    "\
644 This function is used to add additional options to the
645 guest kernel command line.
646
647 The default is C<NULL> unless overridden by setting
648 C<LIBGUESTFS_APPEND> environment variable.
649
650 Setting C<append> to C<NULL> means I<no> additional options
651 are passed (libguestfs always adds a few of its own).");
652
653   ("get_append", (RConstOptString "append", []), -1, [],
654    (* This cannot be tested with the current framework.  The
655     * function can return NULL in normal operations, which the
656     * test framework interprets as an error.
657     *)
658    [],
659    "get the additional kernel options",
660    "\
661 Return the additional kernel options which are added to the
662 guest kernel command line.
663
664 If C<NULL> then no options are added.");
665
666   ("set_autosync", (RErr, [Bool "autosync"]), -1, [FishAlias "autosync"],
667    [],
668    "set autosync mode",
669    "\
670 If C<autosync> is true, this enables autosync.  Libguestfs will make a
671 best effort attempt to run C<guestfs_umount_all> followed by
672 C<guestfs_sync> when the handle is closed
673 (also if the program exits without closing handles).
674
675 This is disabled by default (except in guestfish where it is
676 enabled by default).");
677
678   ("get_autosync", (RBool "autosync", []), -1, [],
679    [InitNone, Always, TestRun (
680       [["get_autosync"]])],
681    "get autosync mode",
682    "\
683 Get the autosync flag.");
684
685   ("set_verbose", (RErr, [Bool "verbose"]), -1, [FishAlias "verbose"],
686    [],
687    "set verbose mode",
688    "\
689 If C<verbose> is true, this turns on verbose messages (to C<stderr>).
690
691 Verbose messages are disabled unless the environment variable
692 C<LIBGUESTFS_DEBUG> is defined and set to C<1>.");
693
694   ("get_verbose", (RBool "verbose", []), -1, [],
695    [],
696    "get verbose mode",
697    "\
698 This returns the verbose messages flag.");
699
700   ("is_ready", (RBool "ready", []), -1, [],
701    [InitNone, Always, TestOutputTrue (
702       [["is_ready"]])],
703    "is ready to accept commands",
704    "\
705 This returns true iff this handle is ready to accept commands
706 (in the C<READY> state).
707
708 For more information on states, see L<guestfs(3)>.");
709
710   ("is_config", (RBool "config", []), -1, [],
711    [InitNone, Always, TestOutputFalse (
712       [["is_config"]])],
713    "is in configuration state",
714    "\
715 This returns true iff this handle is being configured
716 (in the C<CONFIG> state).
717
718 For more information on states, see L<guestfs(3)>.");
719
720   ("is_launching", (RBool "launching", []), -1, [],
721    [InitNone, Always, TestOutputFalse (
722       [["is_launching"]])],
723    "is launching subprocess",
724    "\
725 This returns true iff this handle is launching the subprocess
726 (in the C<LAUNCHING> state).
727
728 For more information on states, see L<guestfs(3)>.");
729
730   ("is_busy", (RBool "busy", []), -1, [],
731    [InitNone, Always, TestOutputFalse (
732       [["is_busy"]])],
733    "is busy processing a command",
734    "\
735 This returns true iff this handle is busy processing a command
736 (in the C<BUSY> state).
737
738 For more information on states, see L<guestfs(3)>.");
739
740   ("get_state", (RInt "state", []), -1, [],
741    [],
742    "get the current state",
743    "\
744 This returns the current state as an opaque integer.  This is
745 only useful for printing debug and internal error messages.
746
747 For more information on states, see L<guestfs(3)>.");
748
749   ("set_memsize", (RErr, [Int "memsize"]), -1, [FishAlias "memsize"],
750    [InitNone, Always, TestOutputInt (
751       [["set_memsize"; "500"];
752        ["get_memsize"]], 500)],
753    "set memory allocated to the qemu subprocess",
754    "\
755 This sets the memory size in megabytes allocated to the
756 qemu subprocess.  This only has any effect if called before
757 C<guestfs_launch>.
758
759 You can also change this by setting the environment
760 variable C<LIBGUESTFS_MEMSIZE> before the handle is
761 created.
762
763 For more information on the architecture of libguestfs,
764 see L<guestfs(3)>.");
765
766   ("get_memsize", (RInt "memsize", []), -1, [],
767    [InitNone, Always, TestOutputIntOp (
768       [["get_memsize"]], ">=", 256)],
769    "get memory allocated to the qemu subprocess",
770    "\
771 This gets the memory size in megabytes allocated to the
772 qemu subprocess.
773
774 If C<guestfs_set_memsize> was not called
775 on this handle, and if C<LIBGUESTFS_MEMSIZE> was not set,
776 then this returns the compiled-in default value for memsize.
777
778 For more information on the architecture of libguestfs,
779 see L<guestfs(3)>.");
780
781   ("get_pid", (RInt "pid", []), -1, [FishAlias "pid"],
782    [InitNone, Always, TestOutputIntOp (
783       [["get_pid"]], ">=", 1)],
784    "get PID of qemu subprocess",
785    "\
786 Return the process ID of the qemu subprocess.  If there is no
787 qemu subprocess, then this will return an error.
788
789 This is an internal call used for debugging and testing.");
790
791   ("version", (RStruct ("version", "version"), []), -1, [],
792    [InitNone, Always, TestOutputStruct (
793       [["version"]], [CompareWithInt ("major", 1)])],
794    "get the library version number",
795    "\
796 Return the libguestfs version number that the program is linked
797 against.
798
799 Note that because of dynamic linking this is not necessarily
800 the version of libguestfs that you compiled against.  You can
801 compile the program, and then at runtime dynamically link
802 against a completely different C<libguestfs.so> library.
803
804 This call was added in version C<1.0.58>.  In previous
805 versions of libguestfs there was no way to get the version
806 number.  From C code you can use dynamic linker functions
807 to find out if this symbol exists (if it doesn't, then
808 it's an earlier version).
809
810 The call returns a structure with four elements.  The first
811 three (C<major>, C<minor> and C<release>) are numbers and
812 correspond to the usual version triplet.  The fourth element
813 (C<extra>) is a string and is normally empty, but may be
814 used for distro-specific information.
815
816 To construct the original version string:
817 C<$major.$minor.$release$extra>
818
819 See also: L<guestfs(3)/LIBGUESTFS VERSION NUMBERS>.
820
821 I<Note:> Don't use this call to test for availability
822 of features.  In enterprise distributions we backport
823 features from later versions into earlier versions,
824 making this an unreliable way to test for features.
825 Use C<guestfs_available> instead.");
826
827   ("set_selinux", (RErr, [Bool "selinux"]), -1, [FishAlias "selinux"],
828    [InitNone, Always, TestOutputTrue (
829       [["set_selinux"; "true"];
830        ["get_selinux"]])],
831    "set SELinux enabled or disabled at appliance boot",
832    "\
833 This sets the selinux flag that is passed to the appliance
834 at boot time.  The default is C<selinux=0> (disabled).
835
836 Note that if SELinux is enabled, it is always in
837 Permissive mode (C<enforcing=0>).
838
839 For more information on the architecture of libguestfs,
840 see L<guestfs(3)>.");
841
842   ("get_selinux", (RBool "selinux", []), -1, [],
843    [],
844    "get SELinux enabled flag",
845    "\
846 This returns the current setting of the selinux flag which
847 is passed to the appliance at boot time.  See C<guestfs_set_selinux>.
848
849 For more information on the architecture of libguestfs,
850 see L<guestfs(3)>.");
851
852   ("set_trace", (RErr, [Bool "trace"]), -1, [FishAlias "trace"],
853    [InitNone, Always, TestOutputFalse (
854       [["set_trace"; "false"];
855        ["get_trace"]])],
856    "enable or disable command traces",
857    "\
858 If the command trace flag is set to 1, then commands are
859 printed on stderr before they are executed in a format
860 which is very similar to the one used by guestfish.  In
861 other words, you can run a program with this enabled, and
862 you will get out a script which you can feed to guestfish
863 to perform the same set of actions.
864
865 If you want to trace C API calls into libguestfs (and
866 other libraries) then possibly a better way is to use
867 the external ltrace(1) command.
868
869 Command traces are disabled unless the environment variable
870 C<LIBGUESTFS_TRACE> is defined and set to C<1>.");
871
872   ("get_trace", (RBool "trace", []), -1, [],
873    [],
874    "get command trace enabled flag",
875    "\
876 Return the command trace flag.");
877
878   ("set_direct", (RErr, [Bool "direct"]), -1, [FishAlias "direct"],
879    [InitNone, Always, TestOutputFalse (
880       [["set_direct"; "false"];
881        ["get_direct"]])],
882    "enable or disable direct appliance mode",
883    "\
884 If the direct appliance mode flag is enabled, then stdin and
885 stdout are passed directly through to the appliance once it
886 is launched.
887
888 One consequence of this is that log messages aren't caught
889 by the library and handled by C<guestfs_set_log_message_callback>,
890 but go straight to stdout.
891
892 You probably don't want to use this unless you know what you
893 are doing.
894
895 The default is disabled.");
896
897   ("get_direct", (RBool "direct", []), -1, [],
898    [],
899    "get direct appliance mode flag",
900    "\
901 Return the direct appliance mode flag.");
902
903   ("set_recovery_proc", (RErr, [Bool "recoveryproc"]), -1, [FishAlias "recovery-proc"],
904    [InitNone, Always, TestOutputTrue (
905       [["set_recovery_proc"; "true"];
906        ["get_recovery_proc"]])],
907    "enable or disable the recovery process",
908    "\
909 If this is called with the parameter C<false> then
910 C<guestfs_launch> does not create a recovery process.  The
911 purpose of the recovery process is to stop runaway qemu
912 processes in the case where the main program aborts abruptly.
913
914 This only has any effect if called before C<guestfs_launch>,
915 and the default is true.
916
917 About the only time when you would want to disable this is
918 if the main process will fork itself into the background
919 (\"daemonize\" itself).  In this case the recovery process
920 thinks that the main program has disappeared and so kills
921 qemu, which is not very helpful.");
922
923   ("get_recovery_proc", (RBool "recoveryproc", []), -1, [],
924    [],
925    "get recovery process enabled flag",
926    "\
927 Return the recovery process enabled flag.");
928
929   ("add_drive_with_if", (RErr, [String "filename"; String "iface"]), -1, [],
930    [],
931    "add a drive specifying the QEMU block emulation to use",
932    "\
933 This is the same as C<guestfs_add_drive> but it allows you
934 to specify the QEMU interface emulation to use at run time.");
935
936   ("add_drive_ro_with_if", (RErr, [String "filename"; String "iface"]), -1, [],
937    [],
938    "add a drive read-only specifying the QEMU block emulation to use",
939    "\
940 This is the same as C<guestfs_add_drive_ro> but it allows you
941 to specify the QEMU interface emulation to use at run time.");
942
943   ("file_architecture", (RString "arch", [Pathname "filename"]), -1, [],
944    [InitISOFS, Always, TestOutput (
945       [["file_architecture"; "/bin-i586-dynamic"]], "i386");
946     InitISOFS, Always, TestOutput (
947       [["file_architecture"; "/bin-sparc-dynamic"]], "sparc");
948     InitISOFS, Always, TestOutput (
949       [["file_architecture"; "/bin-win32.exe"]], "i386");
950     InitISOFS, Always, TestOutput (
951       [["file_architecture"; "/bin-win64.exe"]], "x86_64");
952     InitISOFS, Always, TestOutput (
953       [["file_architecture"; "/bin-x86_64-dynamic"]], "x86_64");
954     InitISOFS, Always, TestOutput (
955       [["file_architecture"; "/lib-i586.so"]], "i386");
956     InitISOFS, Always, TestOutput (
957       [["file_architecture"; "/lib-sparc.so"]], "sparc");
958     InitISOFS, Always, TestOutput (
959       [["file_architecture"; "/lib-win32.dll"]], "i386");
960     InitISOFS, Always, TestOutput (
961       [["file_architecture"; "/lib-win64.dll"]], "x86_64");
962     InitISOFS, Always, TestOutput (
963       [["file_architecture"; "/lib-x86_64.so"]], "x86_64");
964     InitISOFS, Always, TestOutput (
965       [["file_architecture"; "/initrd-x86_64.img"]], "x86_64");
966     InitISOFS, Always, TestOutput (
967       [["file_architecture"; "/initrd-x86_64.img.gz"]], "x86_64");],
968    "detect the architecture of a binary file",
969    "\
970 This detects the architecture of the binary C<filename>,
971 and returns it if known.
972
973 Currently defined architectures are:
974
975 =over 4
976
977 =item \"i386\"
978
979 This string is returned for all 32 bit i386, i486, i586, i686 binaries
980 irrespective of the precise processor requirements of the binary.
981
982 =item \"x86_64\"
983
984 64 bit x86-64.
985
986 =item \"sparc\"
987
988 32 bit SPARC.
989
990 =item \"sparc64\"
991
992 64 bit SPARC V9 and above.
993
994 =item \"ia64\"
995
996 Intel Itanium.
997
998 =item \"ppc\"
999
1000 32 bit Power PC.
1001
1002 =item \"ppc64\"
1003
1004 64 bit Power PC.
1005
1006 =back
1007
1008 Libguestfs may return other architecture strings in future.
1009
1010 The function works on at least the following types of files:
1011
1012 =over 4
1013
1014 =item *
1015
1016 many types of Un*x and Linux binary
1017
1018 =item *
1019
1020 many types of Un*x and Linux shared library
1021
1022 =item *
1023
1024 Windows Win32 and Win64 binaries
1025
1026 =item *
1027
1028 Windows Win32 and Win64 DLLs
1029
1030 Win32 binaries and DLLs return C<i386>.
1031
1032 Win64 binaries and DLLs return C<x86_64>.
1033
1034 =item *
1035
1036 Linux kernel modules
1037
1038 =item *
1039
1040 Linux new-style initrd images
1041
1042 =item *
1043
1044 some non-x86 Linux vmlinuz kernels
1045
1046 =back
1047
1048 What it can't do currently:
1049
1050 =over 4
1051
1052 =item *
1053
1054 static libraries (libfoo.a)
1055
1056 =item *
1057
1058 Linux old-style initrd as compressed ext2 filesystem (RHEL 3)
1059
1060 =item *
1061
1062 x86 Linux vmlinuz kernels
1063
1064 x86 vmlinuz images (bzImage format) consist of a mix of 16-, 32- and
1065 compressed code, and are horribly hard to unpack.  If you want to find
1066 the architecture of a kernel, use the architecture of the associated
1067 initrd or kernel module(s) instead.
1068
1069 =back");
1070
1071   ("inspect_os", (RStringList "roots", []), -1, [],
1072    [],
1073    "inspect disk and return list of operating systems found",
1074    "\
1075 This function uses other libguestfs functions and certain
1076 heuristics to inspect the disk(s) (usually disks belonging to
1077 a virtual machine), looking for operating systems.
1078
1079 The list returned is empty if no operating systems were found.
1080
1081 If one operating system was found, then this returns a list with
1082 a single element, which is the name of the root filesystem of
1083 this operating system.  It is also possible for this function
1084 to return a list containing more than one element, indicating
1085 a dual-boot or multi-boot virtual machine, with each element being
1086 the root filesystem of one of the operating systems.
1087
1088 You can pass the root string(s) returned to other
1089 C<guestfs_inspect_get_*> functions in order to query further
1090 information about each operating system, such as the name
1091 and version.
1092
1093 This function uses other libguestfs features such as
1094 C<guestfs_mount_ro> and C<guestfs_umount_all> in order to mount
1095 and unmount filesystems and look at the contents.  This should
1096 be called with no disks currently mounted.  The function may also
1097 use Augeas, so any existing Augeas handle will be closed.
1098
1099 This function cannot decrypt encrypted disks.  The caller
1100 must do that first (supplying the necessary keys) if the
1101 disk is encrypted.
1102
1103 Please read L<guestfs(3)/INSPECTION> for more details.");
1104
1105   ("inspect_get_type", (RString "name", [Device "root"]), -1, [],
1106    [],
1107    "get type of inspected operating system",
1108    "\
1109 This function should only be called with a root device string
1110 as returned by C<guestfs_inspect_os>.
1111
1112 This returns the type of the inspected operating system.
1113 Currently defined types are:
1114
1115 =over 4
1116
1117 =item \"linux\"
1118
1119 Any Linux-based operating system.
1120
1121 =item \"windows\"
1122
1123 Any Microsoft Windows operating system.
1124
1125 =item \"unknown\"
1126
1127 The operating system type could not be determined.
1128
1129 =back
1130
1131 Future versions of libguestfs may return other strings here.
1132 The caller should be prepared to handle any string.
1133
1134 Please read L<guestfs(3)/INSPECTION> for more details.");
1135
1136   ("inspect_get_arch", (RString "arch", [Device "root"]), -1, [],
1137    [],
1138    "get architecture of inspected operating system",
1139    "\
1140 This function should only be called with a root device string
1141 as returned by C<guestfs_inspect_os>.
1142
1143 This returns the architecture of the inspected operating system.
1144 The possible return values are listed under
1145 C<guestfs_file_architecture>.
1146
1147 If the architecture could not be determined, then the
1148 string C<unknown> is returned.
1149
1150 Please read L<guestfs(3)/INSPECTION> for more details.");
1151
1152   ("inspect_get_distro", (RString "distro", [Device "root"]), -1, [],
1153    [],
1154    "get distro of inspected operating system",
1155    "\
1156 This function should only be called with a root device string
1157 as returned by C<guestfs_inspect_os>.
1158
1159 This returns the distro (distribution) of the inspected operating
1160 system.
1161
1162 Currently defined distros are:
1163
1164 =over 4
1165
1166 =item \"debian\"
1167
1168 Debian or a Debian-derived distro such as Ubuntu.
1169
1170 =item \"fedora\"
1171
1172 Fedora.
1173
1174 =item \"redhat-based\"
1175
1176 Some Red Hat-derived distro.
1177
1178 =item \"rhel\"
1179
1180 Red Hat Enterprise Linux and some derivatives.
1181
1182 =item \"windows\"
1183
1184 Windows does not have distributions.  This string is
1185 returned if the OS type is Windows.
1186
1187 =item \"unknown\"
1188
1189 The distro could not be determined.
1190
1191 =back
1192
1193 Future versions of libguestfs may return other strings here.
1194 The caller should be prepared to handle any string.
1195
1196 Please read L<guestfs(3)/INSPECTION> for more details.");
1197
1198   ("inspect_get_major_version", (RInt "major", [Device "root"]), -1, [],
1199    [],
1200    "get major version of inspected operating system",
1201    "\
1202 This function should only be called with a root device string
1203 as returned by C<guestfs_inspect_os>.
1204
1205 This returns the major version number of the inspected operating
1206 system.
1207
1208 Windows uses a consistent versioning scheme which is I<not>
1209 reflected in the popular public names used by the operating system.
1210 Notably the operating system known as \"Windows 7\" is really
1211 version 6.1 (ie. major = 6, minor = 1).  You can find out the
1212 real versions corresponding to releases of Windows by consulting
1213 Wikipedia or MSDN.
1214
1215 If the version could not be determined, then C<0> is returned.
1216
1217 Please read L<guestfs(3)/INSPECTION> for more details.");
1218
1219   ("inspect_get_minor_version", (RInt "minor", [Device "root"]), -1, [],
1220    [],
1221    "get minor version of inspected operating system",
1222    "\
1223 This function should only be called with a root device string
1224 as returned by C<guestfs_inspect_os>.
1225
1226 This returns the minor version number of the inspected operating
1227 system.
1228
1229 If the version could not be determined, then C<0> is returned.
1230
1231 Please read L<guestfs(3)/INSPECTION> for more details.
1232 See also C<guestfs_inspect_get_major_version>.");
1233
1234   ("inspect_get_product_name", (RString "product", [Device "root"]), -1, [],
1235    [],
1236    "get product name of inspected operating system",
1237    "\
1238 This function should only be called with a root device string
1239 as returned by C<guestfs_inspect_os>.
1240
1241 This returns the product name of the inspected operating
1242 system.  The product name is generally some freeform string
1243 which can be displayed to the user, but should not be
1244 parsed by programs.
1245
1246 If the product name could not be determined, then the
1247 string C<unknown> is returned.
1248
1249 Please read L<guestfs(3)/INSPECTION> for more details.");
1250
1251   ("inspect_get_mountpoints", (RHashtable "mountpoints", [Device "root"]), -1, [],
1252    [],
1253    "get mountpoints of inspected operating system",
1254    "\
1255 This function should only be called with a root device string
1256 as returned by C<guestfs_inspect_os>.
1257
1258 This returns a hash of where we think the filesystems
1259 associated with this operating system should be mounted.
1260 Callers should note that this is at best an educated guess
1261 made by reading configuration files such as C</etc/fstab>.
1262
1263 Each element in the returned hashtable has a key which
1264 is the path of the mountpoint (eg. C</boot>) and a value
1265 which is the filesystem that would be mounted there
1266 (eg. C</dev/sda1>).
1267
1268 Non-mounted devices such as swap devices are I<not>
1269 returned in this list.
1270
1271 Please read L<guestfs(3)/INSPECTION> for more details.
1272 See also C<guestfs_inspect_get_filesystems>.");
1273
1274   ("inspect_get_filesystems", (RStringList "filesystems", [Device "root"]), -1, [],
1275    [],
1276    "get filesystems associated with inspected operating system",
1277    "\
1278 This function should only be called with a root device string
1279 as returned by C<guestfs_inspect_os>.
1280
1281 This returns a list of all the filesystems that we think
1282 are associated with this operating system.  This includes
1283 the root filesystem, other ordinary filesystems, and
1284 non-mounted devices like swap partitions.
1285
1286 In the case of a multi-boot virtual machine, it is possible
1287 for a filesystem to be shared between operating systems.
1288
1289 Please read L<guestfs(3)/INSPECTION> for more details.
1290 See also C<guestfs_inspect_get_mountpoints>.");
1291
1292 ]
1293
1294 (* daemon_functions are any functions which cause some action
1295  * to take place in the daemon.
1296  *)
1297
1298 let daemon_functions = [
1299   ("mount", (RErr, [Device "device"; String "mountpoint"]), 1, [],
1300    [InitEmpty, Always, TestOutput (
1301       [["part_disk"; "/dev/sda"; "mbr"];
1302        ["mkfs"; "ext2"; "/dev/sda1"];
1303        ["mount"; "/dev/sda1"; "/"];
1304        ["write"; "/new"; "new file contents"];
1305        ["cat"; "/new"]], "new file contents")],
1306    "mount a guest disk at a position in the filesystem",
1307    "\
1308 Mount a guest disk at a position in the filesystem.  Block devices
1309 are named C</dev/sda>, C</dev/sdb> and so on, as they were added to
1310 the guest.  If those block devices contain partitions, they will have
1311 the usual names (eg. C</dev/sda1>).  Also LVM C</dev/VG/LV>-style
1312 names can be used.
1313
1314 The rules are the same as for L<mount(2)>:  A filesystem must
1315 first be mounted on C</> before others can be mounted.  Other
1316 filesystems can only be mounted on directories which already
1317 exist.
1318
1319 The mounted filesystem is writable, if we have sufficient permissions
1320 on the underlying device.
1321
1322 B<Important note:>
1323 When you use this call, the filesystem options C<sync> and C<noatime>
1324 are set implicitly.  This was originally done because we thought it
1325 would improve reliability, but it turns out that I<-o sync> has a
1326 very large negative performance impact and negligible effect on
1327 reliability.  Therefore we recommend that you avoid using
1328 C<guestfs_mount> in any code that needs performance, and instead
1329 use C<guestfs_mount_options> (use an empty string for the first
1330 parameter if you don't want any options).");
1331
1332   ("sync", (RErr, []), 2, [],
1333    [ InitEmpty, Always, TestRun [["sync"]]],
1334    "sync disks, writes are flushed through to the disk image",
1335    "\
1336 This syncs the disk, so that any writes are flushed through to the
1337 underlying disk image.
1338
1339 You should always call this if you have modified a disk image, before
1340 closing the handle.");
1341
1342   ("touch", (RErr, [Pathname "path"]), 3, [],
1343    [InitBasicFS, Always, TestOutputTrue (
1344       [["touch"; "/new"];
1345        ["exists"; "/new"]])],
1346    "update file timestamps or create a new file",
1347    "\
1348 Touch acts like the L<touch(1)> command.  It can be used to
1349 update the timestamps on a file, or, if the file does not exist,
1350 to create a new zero-length file.
1351
1352 This command only works on regular files, and will fail on other
1353 file types such as directories, symbolic links, block special etc.");
1354
1355   ("cat", (RString "content", [Pathname "path"]), 4, [ProtocolLimitWarning],
1356    [InitISOFS, Always, TestOutput (
1357       [["cat"; "/known-2"]], "abcdef\n")],
1358    "list the contents of a file",
1359    "\
1360 Return the contents of the file named C<path>.
1361
1362 Note that this function cannot correctly handle binary files
1363 (specifically, files containing C<\\0> character which is treated
1364 as end of string).  For those you need to use the C<guestfs_read_file>
1365 or C<guestfs_download> functions which have a more complex interface.");
1366
1367   ("ll", (RString "listing", [Pathname "directory"]), 5, [],
1368    [], (* XXX Tricky to test because it depends on the exact format
1369         * of the 'ls -l' command, which changes between F10 and F11.
1370         *)
1371    "list the files in a directory (long format)",
1372    "\
1373 List the files in C<directory> (relative to the root directory,
1374 there is no cwd) in the format of 'ls -la'.
1375
1376 This command is mostly useful for interactive sessions.  It
1377 is I<not> intended that you try to parse the output string.");
1378
1379   ("ls", (RStringList "listing", [Pathname "directory"]), 6, [],
1380    [InitBasicFS, Always, TestOutputList (
1381       [["touch"; "/new"];
1382        ["touch"; "/newer"];
1383        ["touch"; "/newest"];
1384        ["ls"; "/"]], ["lost+found"; "new"; "newer"; "newest"])],
1385    "list the files in a directory",
1386    "\
1387 List the files in C<directory> (relative to the root directory,
1388 there is no cwd).  The '.' and '..' entries are not returned, but
1389 hidden files are shown.
1390
1391 This command is mostly useful for interactive sessions.  Programs
1392 should probably use C<guestfs_readdir> instead.");
1393
1394   ("list_devices", (RStringList "devices", []), 7, [],
1395    [InitEmpty, Always, TestOutputListOfDevices (
1396       [["list_devices"]], ["/dev/sda"; "/dev/sdb"; "/dev/sdc"; "/dev/sdd"])],
1397    "list the block devices",
1398    "\
1399 List all the block devices.
1400
1401 The full block device names are returned, eg. C</dev/sda>");
1402
1403   ("list_partitions", (RStringList "partitions", []), 8, [],
1404    [InitBasicFS, Always, TestOutputListOfDevices (
1405       [["list_partitions"]], ["/dev/sda1"]);
1406     InitEmpty, Always, TestOutputListOfDevices (
1407       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1408        ["list_partitions"]], ["/dev/sda1"; "/dev/sda2"; "/dev/sda3"])],
1409    "list the partitions",
1410    "\
1411 List all the partitions detected on all block devices.
1412
1413 The full partition device names are returned, eg. C</dev/sda1>
1414
1415 This does not return logical volumes.  For that you will need to
1416 call C<guestfs_lvs>.");
1417
1418   ("pvs", (RStringList "physvols", []), 9, [Optional "lvm2"],
1419    [InitBasicFSonLVM, Always, TestOutputListOfDevices (
1420       [["pvs"]], ["/dev/sda1"]);
1421     InitEmpty, Always, TestOutputListOfDevices (
1422       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1423        ["pvcreate"; "/dev/sda1"];
1424        ["pvcreate"; "/dev/sda2"];
1425        ["pvcreate"; "/dev/sda3"];
1426        ["pvs"]], ["/dev/sda1"; "/dev/sda2"; "/dev/sda3"])],
1427    "list the LVM physical volumes (PVs)",
1428    "\
1429 List all the physical volumes detected.  This is the equivalent
1430 of the L<pvs(8)> command.
1431
1432 This returns a list of just the device names that contain
1433 PVs (eg. C</dev/sda2>).
1434
1435 See also C<guestfs_pvs_full>.");
1436
1437   ("vgs", (RStringList "volgroups", []), 10, [Optional "lvm2"],
1438    [InitBasicFSonLVM, Always, TestOutputList (
1439       [["vgs"]], ["VG"]);
1440     InitEmpty, Always, TestOutputList (
1441       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1442        ["pvcreate"; "/dev/sda1"];
1443        ["pvcreate"; "/dev/sda2"];
1444        ["pvcreate"; "/dev/sda3"];
1445        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1446        ["vgcreate"; "VG2"; "/dev/sda3"];
1447        ["vgs"]], ["VG1"; "VG2"])],
1448    "list the LVM volume groups (VGs)",
1449    "\
1450 List all the volumes groups detected.  This is the equivalent
1451 of the L<vgs(8)> command.
1452
1453 This returns a list of just the volume group names that were
1454 detected (eg. C<VolGroup00>).
1455
1456 See also C<guestfs_vgs_full>.");
1457
1458   ("lvs", (RStringList "logvols", []), 11, [Optional "lvm2"],
1459    [InitBasicFSonLVM, Always, TestOutputList (
1460       [["lvs"]], ["/dev/VG/LV"]);
1461     InitEmpty, Always, TestOutputList (
1462       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1463        ["pvcreate"; "/dev/sda1"];
1464        ["pvcreate"; "/dev/sda2"];
1465        ["pvcreate"; "/dev/sda3"];
1466        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1467        ["vgcreate"; "VG2"; "/dev/sda3"];
1468        ["lvcreate"; "LV1"; "VG1"; "50"];
1469        ["lvcreate"; "LV2"; "VG1"; "50"];
1470        ["lvcreate"; "LV3"; "VG2"; "50"];
1471        ["lvs"]], ["/dev/VG1/LV1"; "/dev/VG1/LV2"; "/dev/VG2/LV3"])],
1472    "list the LVM logical volumes (LVs)",
1473    "\
1474 List all the logical volumes detected.  This is the equivalent
1475 of the L<lvs(8)> command.
1476
1477 This returns a list of the logical volume device names
1478 (eg. C</dev/VolGroup00/LogVol00>).
1479
1480 See also C<guestfs_lvs_full>.");
1481
1482   ("pvs_full", (RStructList ("physvols", "lvm_pv"), []), 12, [Optional "lvm2"],
1483    [], (* XXX how to test? *)
1484    "list the LVM physical volumes (PVs)",
1485    "\
1486 List all the physical volumes detected.  This is the equivalent
1487 of the L<pvs(8)> command.  The \"full\" version includes all fields.");
1488
1489   ("vgs_full", (RStructList ("volgroups", "lvm_vg"), []), 13, [Optional "lvm2"],
1490    [], (* XXX how to test? *)
1491    "list the LVM volume groups (VGs)",
1492    "\
1493 List all the volumes groups detected.  This is the equivalent
1494 of the L<vgs(8)> command.  The \"full\" version includes all fields.");
1495
1496   ("lvs_full", (RStructList ("logvols", "lvm_lv"), []), 14, [Optional "lvm2"],
1497    [], (* XXX how to test? *)
1498    "list the LVM logical volumes (LVs)",
1499    "\
1500 List all the logical volumes detected.  This is the equivalent
1501 of the L<lvs(8)> command.  The \"full\" version includes all fields.");
1502
1503   ("read_lines", (RStringList "lines", [Pathname "path"]), 15, [],
1504    [InitISOFS, Always, TestOutputList (
1505       [["read_lines"; "/known-4"]], ["abc"; "def"; "ghi"]);
1506     InitISOFS, Always, TestOutputList (
1507       [["read_lines"; "/empty"]], [])],
1508    "read file as lines",
1509    "\
1510 Return the contents of the file named C<path>.
1511
1512 The file contents are returned as a list of lines.  Trailing
1513 C<LF> and C<CRLF> character sequences are I<not> returned.
1514
1515 Note that this function cannot correctly handle binary files
1516 (specifically, files containing C<\\0> character which is treated
1517 as end of line).  For those you need to use the C<guestfs_read_file>
1518 function which has a more complex interface.");
1519
1520   ("aug_init", (RErr, [Pathname "root"; Int "flags"]), 16, [Optional "augeas"],
1521    [], (* XXX Augeas code needs tests. *)
1522    "create a new Augeas handle",
1523    "\
1524 Create a new Augeas handle for editing configuration files.
1525 If there was any previous Augeas handle associated with this
1526 guestfs session, then it is closed.
1527
1528 You must call this before using any other C<guestfs_aug_*>
1529 commands.
1530
1531 C<root> is the filesystem root.  C<root> must not be NULL,
1532 use C</> instead.
1533
1534 The flags are the same as the flags defined in
1535 E<lt>augeas.hE<gt>, the logical I<or> of the following
1536 integers:
1537
1538 =over 4
1539
1540 =item C<AUG_SAVE_BACKUP> = 1
1541
1542 Keep the original file with a C<.augsave> extension.
1543
1544 =item C<AUG_SAVE_NEWFILE> = 2
1545
1546 Save changes into a file with extension C<.augnew>, and
1547 do not overwrite original.  Overrides C<AUG_SAVE_BACKUP>.
1548
1549 =item C<AUG_TYPE_CHECK> = 4
1550
1551 Typecheck lenses (can be expensive).
1552
1553 =item C<AUG_NO_STDINC> = 8
1554
1555 Do not use standard load path for modules.
1556
1557 =item C<AUG_SAVE_NOOP> = 16
1558
1559 Make save a no-op, just record what would have been changed.
1560
1561 =item C<AUG_NO_LOAD> = 32
1562
1563 Do not load the tree in C<guestfs_aug_init>.
1564
1565 =back
1566
1567 To close the handle, you can call C<guestfs_aug_close>.
1568
1569 To find out more about Augeas, see L<http://augeas.net/>.");
1570
1571   ("aug_close", (RErr, []), 26, [Optional "augeas"],
1572    [], (* XXX Augeas code needs tests. *)
1573    "close the current Augeas handle",
1574    "\
1575 Close the current Augeas handle and free up any resources
1576 used by it.  After calling this, you have to call
1577 C<guestfs_aug_init> again before you can use any other
1578 Augeas functions.");
1579
1580   ("aug_defvar", (RInt "nrnodes", [String "name"; OptString "expr"]), 17, [Optional "augeas"],
1581    [], (* XXX Augeas code needs tests. *)
1582    "define an Augeas variable",
1583    "\
1584 Defines an Augeas variable C<name> whose value is the result
1585 of evaluating C<expr>.  If C<expr> is NULL, then C<name> is
1586 undefined.
1587
1588 On success this returns the number of nodes in C<expr>, or
1589 C<0> if C<expr> evaluates to something which is not a nodeset.");
1590
1591   ("aug_defnode", (RStruct ("nrnodescreated", "int_bool"), [String "name"; String "expr"; String "val"]), 18, [Optional "augeas"],
1592    [], (* XXX Augeas code needs tests. *)
1593    "define an Augeas node",
1594    "\
1595 Defines a variable C<name> whose value is the result of
1596 evaluating C<expr>.
1597
1598 If C<expr> evaluates to an empty nodeset, a node is created,
1599 equivalent to calling C<guestfs_aug_set> C<expr>, C<value>.
1600 C<name> will be the nodeset containing that single node.
1601
1602 On success this returns a pair containing the
1603 number of nodes in the nodeset, and a boolean flag
1604 if a node was created.");
1605
1606   ("aug_get", (RString "val", [String "augpath"]), 19, [Optional "augeas"],
1607    [], (* XXX Augeas code needs tests. *)
1608    "look up the value of an Augeas path",
1609    "\
1610 Look up the value associated with C<path>.  If C<path>
1611 matches exactly one node, the C<value> is returned.");
1612
1613   ("aug_set", (RErr, [String "augpath"; String "val"]), 20, [Optional "augeas"],
1614    [], (* XXX Augeas code needs tests. *)
1615    "set Augeas path to value",
1616    "\
1617 Set the value associated with C<path> to C<val>.
1618
1619 In the Augeas API, it is possible to clear a node by setting
1620 the value to NULL.  Due to an oversight in the libguestfs API
1621 you cannot do that with this call.  Instead you must use the
1622 C<guestfs_aug_clear> call.");
1623
1624   ("aug_insert", (RErr, [String "augpath"; String "label"; Bool "before"]), 21, [Optional "augeas"],
1625    [], (* XXX Augeas code needs tests. *)
1626    "insert a sibling Augeas node",
1627    "\
1628 Create a new sibling C<label> for C<path>, inserting it into
1629 the tree before or after C<path> (depending on the boolean
1630 flag C<before>).
1631
1632 C<path> must match exactly one existing node in the tree, and
1633 C<label> must be a label, ie. not contain C</>, C<*> or end
1634 with a bracketed index C<[N]>.");
1635
1636   ("aug_rm", (RInt "nrnodes", [String "augpath"]), 22, [Optional "augeas"],
1637    [], (* XXX Augeas code needs tests. *)
1638    "remove an Augeas path",
1639    "\
1640 Remove C<path> and all of its children.
1641
1642 On success this returns the number of entries which were removed.");
1643
1644   ("aug_mv", (RErr, [String "src"; String "dest"]), 23, [Optional "augeas"],
1645    [], (* XXX Augeas code needs tests. *)
1646    "move Augeas node",
1647    "\
1648 Move the node C<src> to C<dest>.  C<src> must match exactly
1649 one node.  C<dest> is overwritten if it exists.");
1650
1651   ("aug_match", (RStringList "matches", [String "augpath"]), 24, [Optional "augeas"],
1652    [], (* XXX Augeas code needs tests. *)
1653    "return Augeas nodes which match augpath",
1654    "\
1655 Returns a list of paths which match the path expression C<path>.
1656 The returned paths are sufficiently qualified so that they match
1657 exactly one node in the current tree.");
1658
1659   ("aug_save", (RErr, []), 25, [Optional "augeas"],
1660    [], (* XXX Augeas code needs tests. *)
1661    "write all pending Augeas changes to disk",
1662    "\
1663 This writes all pending changes to disk.
1664
1665 The flags which were passed to C<guestfs_aug_init> affect exactly
1666 how files are saved.");
1667
1668   ("aug_load", (RErr, []), 27, [Optional "augeas"],
1669    [], (* XXX Augeas code needs tests. *)
1670    "load files into the tree",
1671    "\
1672 Load files into the tree.
1673
1674 See C<aug_load> in the Augeas documentation for the full gory
1675 details.");
1676
1677   ("aug_ls", (RStringList "matches", [String "augpath"]), 28, [Optional "augeas"],
1678    [], (* XXX Augeas code needs tests. *)
1679    "list Augeas nodes under augpath",
1680    "\
1681 This is just a shortcut for listing C<guestfs_aug_match>
1682 C<path/*> and sorting the resulting nodes into alphabetical order.");
1683
1684   ("rm", (RErr, [Pathname "path"]), 29, [],
1685    [InitBasicFS, Always, TestRun
1686       [["touch"; "/new"];
1687        ["rm"; "/new"]];
1688     InitBasicFS, Always, TestLastFail
1689       [["rm"; "/new"]];
1690     InitBasicFS, Always, TestLastFail
1691       [["mkdir"; "/new"];
1692        ["rm"; "/new"]]],
1693    "remove a file",
1694    "\
1695 Remove the single file C<path>.");
1696
1697   ("rmdir", (RErr, [Pathname "path"]), 30, [],
1698    [InitBasicFS, Always, TestRun
1699       [["mkdir"; "/new"];
1700        ["rmdir"; "/new"]];
1701     InitBasicFS, Always, TestLastFail
1702       [["rmdir"; "/new"]];
1703     InitBasicFS, Always, TestLastFail
1704       [["touch"; "/new"];
1705        ["rmdir"; "/new"]]],
1706    "remove a directory",
1707    "\
1708 Remove the single directory C<path>.");
1709
1710   ("rm_rf", (RErr, [Pathname "path"]), 31, [],
1711    [InitBasicFS, Always, TestOutputFalse
1712       [["mkdir"; "/new"];
1713        ["mkdir"; "/new/foo"];
1714        ["touch"; "/new/foo/bar"];
1715        ["rm_rf"; "/new"];
1716        ["exists"; "/new"]]],
1717    "remove a file or directory recursively",
1718    "\
1719 Remove the file or directory C<path>, recursively removing the
1720 contents if its a directory.  This is like the C<rm -rf> shell
1721 command.");
1722
1723   ("mkdir", (RErr, [Pathname "path"]), 32, [],
1724    [InitBasicFS, Always, TestOutputTrue
1725       [["mkdir"; "/new"];
1726        ["is_dir"; "/new"]];
1727     InitBasicFS, Always, TestLastFail
1728       [["mkdir"; "/new/foo/bar"]]],
1729    "create a directory",
1730    "\
1731 Create a directory named C<path>.");
1732
1733   ("mkdir_p", (RErr, [Pathname "path"]), 33, [],
1734    [InitBasicFS, Always, TestOutputTrue
1735       [["mkdir_p"; "/new/foo/bar"];
1736        ["is_dir"; "/new/foo/bar"]];
1737     InitBasicFS, Always, TestOutputTrue
1738       [["mkdir_p"; "/new/foo/bar"];
1739        ["is_dir"; "/new/foo"]];
1740     InitBasicFS, Always, TestOutputTrue
1741       [["mkdir_p"; "/new/foo/bar"];
1742        ["is_dir"; "/new"]];
1743     (* Regression tests for RHBZ#503133: *)
1744     InitBasicFS, Always, TestRun
1745       [["mkdir"; "/new"];
1746        ["mkdir_p"; "/new"]];
1747     InitBasicFS, Always, TestLastFail
1748       [["touch"; "/new"];
1749        ["mkdir_p"; "/new"]]],
1750    "create a directory and parents",
1751    "\
1752 Create a directory named C<path>, creating any parent directories
1753 as necessary.  This is like the C<mkdir -p> shell command.");
1754
1755   ("chmod", (RErr, [Int "mode"; Pathname "path"]), 34, [],
1756    [], (* XXX Need stat command to test *)
1757    "change file mode",
1758    "\
1759 Change the mode (permissions) of C<path> to C<mode>.  Only
1760 numeric modes are supported.
1761
1762 I<Note>: When using this command from guestfish, C<mode>
1763 by default would be decimal, unless you prefix it with
1764 C<0> to get octal, ie. use C<0700> not C<700>.
1765
1766 The mode actually set is affected by the umask.");
1767
1768   ("chown", (RErr, [Int "owner"; Int "group"; Pathname "path"]), 35, [],
1769    [], (* XXX Need stat command to test *)
1770    "change file owner and group",
1771    "\
1772 Change the file owner to C<owner> and group to C<group>.
1773
1774 Only numeric uid and gid are supported.  If you want to use
1775 names, you will need to locate and parse the password file
1776 yourself (Augeas support makes this relatively easy).");
1777
1778   ("exists", (RBool "existsflag", [Pathname "path"]), 36, [],
1779    [InitISOFS, Always, TestOutputTrue (
1780       [["exists"; "/empty"]]);
1781     InitISOFS, Always, TestOutputTrue (
1782       [["exists"; "/directory"]])],
1783    "test if file or directory exists",
1784    "\
1785 This returns C<true> if and only if there is a file, directory
1786 (or anything) with the given C<path> name.
1787
1788 See also C<guestfs_is_file>, C<guestfs_is_dir>, C<guestfs_stat>.");
1789
1790   ("is_file", (RBool "fileflag", [Pathname "path"]), 37, [],
1791    [InitISOFS, Always, TestOutputTrue (
1792       [["is_file"; "/known-1"]]);
1793     InitISOFS, Always, TestOutputFalse (
1794       [["is_file"; "/directory"]])],
1795    "test if file exists",
1796    "\
1797 This returns C<true> if and only if there is a file
1798 with the given C<path> name.  Note that it returns false for
1799 other objects like directories.
1800
1801 See also C<guestfs_stat>.");
1802
1803   ("is_dir", (RBool "dirflag", [Pathname "path"]), 38, [],
1804    [InitISOFS, Always, TestOutputFalse (
1805       [["is_dir"; "/known-3"]]);
1806     InitISOFS, Always, TestOutputTrue (
1807       [["is_dir"; "/directory"]])],
1808    "test if file exists",
1809    "\
1810 This returns C<true> if and only if there is a directory
1811 with the given C<path> name.  Note that it returns false for
1812 other objects like files.
1813
1814 See also C<guestfs_stat>.");
1815
1816   ("pvcreate", (RErr, [Device "device"]), 39, [Optional "lvm2"],
1817    [InitEmpty, Always, TestOutputListOfDevices (
1818       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1819        ["pvcreate"; "/dev/sda1"];
1820        ["pvcreate"; "/dev/sda2"];
1821        ["pvcreate"; "/dev/sda3"];
1822        ["pvs"]], ["/dev/sda1"; "/dev/sda2"; "/dev/sda3"])],
1823    "create an LVM physical volume",
1824    "\
1825 This creates an LVM physical volume on the named C<device>,
1826 where C<device> should usually be a partition name such
1827 as C</dev/sda1>.");
1828
1829   ("vgcreate", (RErr, [String "volgroup"; DeviceList "physvols"]), 40, [Optional "lvm2"],
1830    [InitEmpty, Always, TestOutputList (
1831       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1832        ["pvcreate"; "/dev/sda1"];
1833        ["pvcreate"; "/dev/sda2"];
1834        ["pvcreate"; "/dev/sda3"];
1835        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1836        ["vgcreate"; "VG2"; "/dev/sda3"];
1837        ["vgs"]], ["VG1"; "VG2"])],
1838    "create an LVM volume group",
1839    "\
1840 This creates an LVM volume group called C<volgroup>
1841 from the non-empty list of physical volumes C<physvols>.");
1842
1843   ("lvcreate", (RErr, [String "logvol"; String "volgroup"; Int "mbytes"]), 41, [Optional "lvm2"],
1844    [InitEmpty, Always, TestOutputList (
1845       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1846        ["pvcreate"; "/dev/sda1"];
1847        ["pvcreate"; "/dev/sda2"];
1848        ["pvcreate"; "/dev/sda3"];
1849        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1850        ["vgcreate"; "VG2"; "/dev/sda3"];
1851        ["lvcreate"; "LV1"; "VG1"; "50"];
1852        ["lvcreate"; "LV2"; "VG1"; "50"];
1853        ["lvcreate"; "LV3"; "VG2"; "50"];
1854        ["lvcreate"; "LV4"; "VG2"; "50"];
1855        ["lvcreate"; "LV5"; "VG2"; "50"];
1856        ["lvs"]],
1857       ["/dev/VG1/LV1"; "/dev/VG1/LV2";
1858        "/dev/VG2/LV3"; "/dev/VG2/LV4"; "/dev/VG2/LV5"])],
1859    "create an LVM logical volume",
1860    "\
1861 This creates an LVM logical volume called C<logvol>
1862 on the volume group C<volgroup>, with C<size> megabytes.");
1863
1864   ("mkfs", (RErr, [String "fstype"; Device "device"]), 42, [],
1865    [InitEmpty, Always, TestOutput (
1866       [["part_disk"; "/dev/sda"; "mbr"];
1867        ["mkfs"; "ext2"; "/dev/sda1"];
1868        ["mount_options"; ""; "/dev/sda1"; "/"];
1869        ["write"; "/new"; "new file contents"];
1870        ["cat"; "/new"]], "new file contents")],
1871    "make a filesystem",
1872    "\
1873 This creates a filesystem on C<device> (usually a partition
1874 or LVM logical volume).  The filesystem type is C<fstype>, for
1875 example C<ext3>.");
1876
1877   ("sfdisk", (RErr, [Device "device";
1878                      Int "cyls"; Int "heads"; Int "sectors";
1879                      StringList "lines"]), 43, [DangerWillRobinson],
1880    [],
1881    "create partitions on a block device",
1882    "\
1883 This is a direct interface to the L<sfdisk(8)> program for creating
1884 partitions on block devices.
1885
1886 C<device> should be a block device, for example C</dev/sda>.
1887
1888 C<cyls>, C<heads> and C<sectors> are the number of cylinders, heads
1889 and sectors on the device, which are passed directly to sfdisk as
1890 the I<-C>, I<-H> and I<-S> parameters.  If you pass C<0> for any
1891 of these, then the corresponding parameter is omitted.  Usually for
1892 'large' disks, you can just pass C<0> for these, but for small
1893 (floppy-sized) disks, sfdisk (or rather, the kernel) cannot work
1894 out the right geometry and you will need to tell it.
1895
1896 C<lines> is a list of lines that we feed to C<sfdisk>.  For more
1897 information refer to the L<sfdisk(8)> manpage.
1898
1899 To create a single partition occupying the whole disk, you would
1900 pass C<lines> as a single element list, when the single element being
1901 the string C<,> (comma).
1902
1903 See also: C<guestfs_sfdisk_l>, C<guestfs_sfdisk_N>,
1904 C<guestfs_part_init>");
1905
1906   ("write_file", (RErr, [Pathname "path"; String "content"; Int "size"]), 44, [ProtocolLimitWarning; DeprecatedBy "write"],
1907    (* Regression test for RHBZ#597135. *)
1908    [InitBasicFS, Always, TestLastFail
1909       [["write_file"; "/new"; "abc"; "10000"]]],
1910    "create a file",
1911    "\
1912 This call creates a file called C<path>.  The contents of the
1913 file is the string C<content> (which can contain any 8 bit data),
1914 with length C<size>.
1915
1916 As a special case, if C<size> is C<0>
1917 then the length is calculated using C<strlen> (so in this case
1918 the content cannot contain embedded ASCII NULs).
1919
1920 I<NB.> Owing to a bug, writing content containing ASCII NUL
1921 characters does I<not> work, even if the length is specified.");
1922
1923   ("umount", (RErr, [String "pathordevice"]), 45, [FishAlias "unmount"],
1924    [InitEmpty, Always, TestOutputListOfDevices (
1925       [["part_disk"; "/dev/sda"; "mbr"];
1926        ["mkfs"; "ext2"; "/dev/sda1"];
1927        ["mount_options"; ""; "/dev/sda1"; "/"];
1928        ["mounts"]], ["/dev/sda1"]);
1929     InitEmpty, Always, TestOutputList (
1930       [["part_disk"; "/dev/sda"; "mbr"];
1931        ["mkfs"; "ext2"; "/dev/sda1"];
1932        ["mount_options"; ""; "/dev/sda1"; "/"];
1933        ["umount"; "/"];
1934        ["mounts"]], [])],
1935    "unmount a filesystem",
1936    "\
1937 This unmounts the given filesystem.  The filesystem may be
1938 specified either by its mountpoint (path) or the device which
1939 contains the filesystem.");
1940
1941   ("mounts", (RStringList "devices", []), 46, [],
1942    [InitBasicFS, Always, TestOutputListOfDevices (
1943       [["mounts"]], ["/dev/sda1"])],
1944    "show mounted filesystems",
1945    "\
1946 This returns the list of currently mounted filesystems.  It returns
1947 the list of devices (eg. C</dev/sda1>, C</dev/VG/LV>).
1948
1949 Some internal mounts are not shown.
1950
1951 See also: C<guestfs_mountpoints>");
1952
1953   ("umount_all", (RErr, []), 47, [FishAlias "unmount-all"],
1954    [InitBasicFS, Always, TestOutputList (
1955       [["umount_all"];
1956        ["mounts"]], []);
1957     (* check that umount_all can unmount nested mounts correctly: *)
1958     InitEmpty, Always, TestOutputList (
1959       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1960        ["mkfs"; "ext2"; "/dev/sda1"];
1961        ["mkfs"; "ext2"; "/dev/sda2"];
1962        ["mkfs"; "ext2"; "/dev/sda3"];
1963        ["mount_options"; ""; "/dev/sda1"; "/"];
1964        ["mkdir"; "/mp1"];
1965        ["mount_options"; ""; "/dev/sda2"; "/mp1"];
1966        ["mkdir"; "/mp1/mp2"];
1967        ["mount_options"; ""; "/dev/sda3"; "/mp1/mp2"];
1968        ["mkdir"; "/mp1/mp2/mp3"];
1969        ["umount_all"];
1970        ["mounts"]], [])],
1971    "unmount all filesystems",
1972    "\
1973 This unmounts all mounted filesystems.
1974
1975 Some internal mounts are not unmounted by this call.");
1976
1977   ("lvm_remove_all", (RErr, []), 48, [DangerWillRobinson; Optional "lvm2"],
1978    [],
1979    "remove all LVM LVs, VGs and PVs",
1980    "\
1981 This command removes all LVM logical volumes, volume groups
1982 and physical volumes.");
1983
1984   ("file", (RString "description", [Dev_or_Path "path"]), 49, [],
1985    [InitISOFS, Always, TestOutput (
1986       [["file"; "/empty"]], "empty");
1987     InitISOFS, Always, TestOutput (
1988       [["file"; "/known-1"]], "ASCII text");
1989     InitISOFS, Always, TestLastFail (
1990       [["file"; "/notexists"]]);
1991     InitISOFS, Always, TestOutput (
1992       [["file"; "/abssymlink"]], "symbolic link");
1993     InitISOFS, Always, TestOutput (
1994       [["file"; "/directory"]], "directory")],
1995    "determine file type",
1996    "\
1997 This call uses the standard L<file(1)> command to determine
1998 the type or contents of the file.
1999
2000 This call will also transparently look inside various types
2001 of compressed file.
2002
2003 The exact command which runs is C<file -zb path>.  Note in
2004 particular that the filename is not prepended to the output
2005 (the C<-b> option).
2006
2007 This command can also be used on C</dev/> devices
2008 (and partitions, LV names).  You can for example use this
2009 to determine if a device contains a filesystem, although
2010 it's usually better to use C<guestfs_vfs_type>.
2011
2012 If the C<path> does not begin with C</dev/> then
2013 this command only works for the content of regular files.
2014 For other file types (directory, symbolic link etc) it
2015 will just return the string C<directory> etc.");
2016
2017   ("command", (RString "output", [StringList "arguments"]), 50, [ProtocolLimitWarning],
2018    [InitBasicFS, Always, TestOutput (
2019       [["upload"; "test-command"; "/test-command"];
2020        ["chmod"; "0o755"; "/test-command"];
2021        ["command"; "/test-command 1"]], "Result1");
2022     InitBasicFS, Always, TestOutput (
2023       [["upload"; "test-command"; "/test-command"];
2024        ["chmod"; "0o755"; "/test-command"];
2025        ["command"; "/test-command 2"]], "Result2\n");
2026     InitBasicFS, Always, TestOutput (
2027       [["upload"; "test-command"; "/test-command"];
2028        ["chmod"; "0o755"; "/test-command"];
2029        ["command"; "/test-command 3"]], "\nResult3");
2030     InitBasicFS, Always, TestOutput (
2031       [["upload"; "test-command"; "/test-command"];
2032        ["chmod"; "0o755"; "/test-command"];
2033        ["command"; "/test-command 4"]], "\nResult4\n");
2034     InitBasicFS, Always, TestOutput (
2035       [["upload"; "test-command"; "/test-command"];
2036        ["chmod"; "0o755"; "/test-command"];
2037        ["command"; "/test-command 5"]], "\nResult5\n\n");
2038     InitBasicFS, Always, TestOutput (
2039       [["upload"; "test-command"; "/test-command"];
2040        ["chmod"; "0o755"; "/test-command"];
2041        ["command"; "/test-command 6"]], "\n\nResult6\n\n");
2042     InitBasicFS, Always, TestOutput (
2043       [["upload"; "test-command"; "/test-command"];
2044        ["chmod"; "0o755"; "/test-command"];
2045        ["command"; "/test-command 7"]], "");
2046     InitBasicFS, Always, TestOutput (
2047       [["upload"; "test-command"; "/test-command"];
2048        ["chmod"; "0o755"; "/test-command"];
2049        ["command"; "/test-command 8"]], "\n");
2050     InitBasicFS, Always, TestOutput (
2051       [["upload"; "test-command"; "/test-command"];
2052        ["chmod"; "0o755"; "/test-command"];
2053        ["command"; "/test-command 9"]], "\n\n");
2054     InitBasicFS, Always, TestOutput (
2055       [["upload"; "test-command"; "/test-command"];
2056        ["chmod"; "0o755"; "/test-command"];
2057        ["command"; "/test-command 10"]], "Result10-1\nResult10-2\n");
2058     InitBasicFS, Always, TestOutput (
2059       [["upload"; "test-command"; "/test-command"];
2060        ["chmod"; "0o755"; "/test-command"];
2061        ["command"; "/test-command 11"]], "Result11-1\nResult11-2");
2062     InitBasicFS, Always, TestLastFail (
2063       [["upload"; "test-command"; "/test-command"];
2064        ["chmod"; "0o755"; "/test-command"];
2065        ["command"; "/test-command"]])],
2066    "run a command from the guest filesystem",
2067    "\
2068 This call runs a command from the guest filesystem.  The
2069 filesystem must be mounted, and must contain a compatible
2070 operating system (ie. something Linux, with the same
2071 or compatible processor architecture).
2072
2073 The single parameter is an argv-style list of arguments.
2074 The first element is the name of the program to run.
2075 Subsequent elements are parameters.  The list must be
2076 non-empty (ie. must contain a program name).  Note that
2077 the command runs directly, and is I<not> invoked via
2078 the shell (see C<guestfs_sh>).
2079
2080 The return value is anything printed to I<stdout> by
2081 the command.
2082
2083 If the command returns a non-zero exit status, then
2084 this function returns an error message.  The error message
2085 string is the content of I<stderr> from the command.
2086
2087 The C<$PATH> environment variable will contain at least
2088 C</usr/bin> and C</bin>.  If you require a program from
2089 another location, you should provide the full path in the
2090 first parameter.
2091
2092 Shared libraries and data files required by the program
2093 must be available on filesystems which are mounted in the
2094 correct places.  It is the caller's responsibility to ensure
2095 all filesystems that are needed are mounted at the right
2096 locations.");
2097
2098   ("command_lines", (RStringList "lines", [StringList "arguments"]), 51, [ProtocolLimitWarning],
2099    [InitBasicFS, Always, TestOutputList (
2100       [["upload"; "test-command"; "/test-command"];
2101        ["chmod"; "0o755"; "/test-command"];
2102        ["command_lines"; "/test-command 1"]], ["Result1"]);
2103     InitBasicFS, Always, TestOutputList (
2104       [["upload"; "test-command"; "/test-command"];
2105        ["chmod"; "0o755"; "/test-command"];
2106        ["command_lines"; "/test-command 2"]], ["Result2"]);
2107     InitBasicFS, Always, TestOutputList (
2108       [["upload"; "test-command"; "/test-command"];
2109        ["chmod"; "0o755"; "/test-command"];
2110        ["command_lines"; "/test-command 3"]], ["";"Result3"]);
2111     InitBasicFS, Always, TestOutputList (
2112       [["upload"; "test-command"; "/test-command"];
2113        ["chmod"; "0o755"; "/test-command"];
2114        ["command_lines"; "/test-command 4"]], ["";"Result4"]);
2115     InitBasicFS, Always, TestOutputList (
2116       [["upload"; "test-command"; "/test-command"];
2117        ["chmod"; "0o755"; "/test-command"];
2118        ["command_lines"; "/test-command 5"]], ["";"Result5";""]);
2119     InitBasicFS, Always, TestOutputList (
2120       [["upload"; "test-command"; "/test-command"];
2121        ["chmod"; "0o755"; "/test-command"];
2122        ["command_lines"; "/test-command 6"]], ["";"";"Result6";""]);
2123     InitBasicFS, Always, TestOutputList (
2124       [["upload"; "test-command"; "/test-command"];
2125        ["chmod"; "0o755"; "/test-command"];
2126        ["command_lines"; "/test-command 7"]], []);
2127     InitBasicFS, Always, TestOutputList (
2128       [["upload"; "test-command"; "/test-command"];
2129        ["chmod"; "0o755"; "/test-command"];
2130        ["command_lines"; "/test-command 8"]], [""]);
2131     InitBasicFS, Always, TestOutputList (
2132       [["upload"; "test-command"; "/test-command"];
2133        ["chmod"; "0o755"; "/test-command"];
2134        ["command_lines"; "/test-command 9"]], ["";""]);
2135     InitBasicFS, Always, TestOutputList (
2136       [["upload"; "test-command"; "/test-command"];
2137        ["chmod"; "0o755"; "/test-command"];
2138        ["command_lines"; "/test-command 10"]], ["Result10-1";"Result10-2"]);
2139     InitBasicFS, Always, TestOutputList (
2140       [["upload"; "test-command"; "/test-command"];
2141        ["chmod"; "0o755"; "/test-command"];
2142        ["command_lines"; "/test-command 11"]], ["Result11-1";"Result11-2"])],
2143    "run a command, returning lines",
2144    "\
2145 This is the same as C<guestfs_command>, but splits the
2146 result into a list of lines.
2147
2148 See also: C<guestfs_sh_lines>");
2149
2150   ("stat", (RStruct ("statbuf", "stat"), [Pathname "path"]), 52, [],
2151    [InitISOFS, Always, TestOutputStruct (
2152       [["stat"; "/empty"]], [CompareWithInt ("size", 0)])],
2153    "get file information",
2154    "\
2155 Returns file information for the given C<path>.
2156
2157 This is the same as the C<stat(2)> system call.");
2158
2159   ("lstat", (RStruct ("statbuf", "stat"), [Pathname "path"]), 53, [],
2160    [InitISOFS, Always, TestOutputStruct (
2161       [["lstat"; "/empty"]], [CompareWithInt ("size", 0)])],
2162    "get file information for a symbolic link",
2163    "\
2164 Returns file information for the given C<path>.
2165
2166 This is the same as C<guestfs_stat> except that if C<path>
2167 is a symbolic link, then the link is stat-ed, not the file it
2168 refers to.
2169
2170 This is the same as the C<lstat(2)> system call.");
2171
2172   ("statvfs", (RStruct ("statbuf", "statvfs"), [Pathname "path"]), 54, [],
2173    [InitISOFS, Always, TestOutputStruct (
2174       [["statvfs"; "/"]], [CompareWithInt ("namemax", 255)])],
2175    "get file system statistics",
2176    "\
2177 Returns file system statistics for any mounted file system.
2178 C<path> should be a file or directory in the mounted file system
2179 (typically it is the mount point itself, but it doesn't need to be).
2180
2181 This is the same as the C<statvfs(2)> system call.");
2182
2183   ("tune2fs_l", (RHashtable "superblock", [Device "device"]), 55, [],
2184    [], (* XXX test *)
2185    "get ext2/ext3/ext4 superblock details",
2186    "\
2187 This returns the contents of the ext2, ext3 or ext4 filesystem
2188 superblock on C<device>.
2189
2190 It is the same as running C<tune2fs -l device>.  See L<tune2fs(8)>
2191 manpage for more details.  The list of fields returned isn't
2192 clearly defined, and depends on both the version of C<tune2fs>
2193 that libguestfs was built against, and the filesystem itself.");
2194
2195   ("blockdev_setro", (RErr, [Device "device"]), 56, [],
2196    [InitEmpty, Always, TestOutputTrue (
2197       [["blockdev_setro"; "/dev/sda"];
2198        ["blockdev_getro"; "/dev/sda"]])],
2199    "set block device to read-only",
2200    "\
2201 Sets the block device named C<device> to read-only.
2202
2203 This uses the L<blockdev(8)> command.");
2204
2205   ("blockdev_setrw", (RErr, [Device "device"]), 57, [],
2206    [InitEmpty, Always, TestOutputFalse (
2207       [["blockdev_setrw"; "/dev/sda"];
2208        ["blockdev_getro"; "/dev/sda"]])],
2209    "set block device to read-write",
2210    "\
2211 Sets the block device named C<device> to read-write.
2212
2213 This uses the L<blockdev(8)> command.");
2214
2215   ("blockdev_getro", (RBool "ro", [Device "device"]), 58, [],
2216    [InitEmpty, Always, TestOutputTrue (
2217       [["blockdev_setro"; "/dev/sda"];
2218        ["blockdev_getro"; "/dev/sda"]])],
2219    "is block device set to read-only",
2220    "\
2221 Returns a boolean indicating if the block device is read-only
2222 (true if read-only, false if not).
2223
2224 This uses the L<blockdev(8)> command.");
2225
2226   ("blockdev_getss", (RInt "sectorsize", [Device "device"]), 59, [],
2227    [InitEmpty, Always, TestOutputInt (
2228       [["blockdev_getss"; "/dev/sda"]], 512)],
2229    "get sectorsize of block device",
2230    "\
2231 This returns the size of sectors on a block device.
2232 Usually 512, but can be larger for modern devices.
2233
2234 (Note, this is not the size in sectors, use C<guestfs_blockdev_getsz>
2235 for that).
2236
2237 This uses the L<blockdev(8)> command.");
2238
2239   ("blockdev_getbsz", (RInt "blocksize", [Device "device"]), 60, [],
2240    [InitEmpty, Always, TestOutputInt (
2241       [["blockdev_getbsz"; "/dev/sda"]], 4096)],
2242    "get blocksize of block device",
2243    "\
2244 This returns the block size of a device.
2245
2246 (Note this is different from both I<size in blocks> and
2247 I<filesystem block size>).
2248
2249 This uses the L<blockdev(8)> command.");
2250
2251   ("blockdev_setbsz", (RErr, [Device "device"; Int "blocksize"]), 61, [],
2252    [], (* XXX test *)
2253    "set blocksize of block device",
2254    "\
2255 This sets the block size of a device.
2256
2257 (Note this is different from both I<size in blocks> and
2258 I<filesystem block size>).
2259
2260 This uses the L<blockdev(8)> command.");
2261
2262   ("blockdev_getsz", (RInt64 "sizeinsectors", [Device "device"]), 62, [],
2263    [InitEmpty, Always, TestOutputInt (
2264       [["blockdev_getsz"; "/dev/sda"]], 1024000)],
2265    "get total size of device in 512-byte sectors",
2266    "\
2267 This returns the size of the device in units of 512-byte sectors
2268 (even if the sectorsize isn't 512 bytes ... weird).
2269
2270 See also C<guestfs_blockdev_getss> for the real sector size of
2271 the device, and C<guestfs_blockdev_getsize64> for the more
2272 useful I<size in bytes>.
2273
2274 This uses the L<blockdev(8)> command.");
2275
2276   ("blockdev_getsize64", (RInt64 "sizeinbytes", [Device "device"]), 63, [],
2277    [InitEmpty, Always, TestOutputInt (
2278       [["blockdev_getsize64"; "/dev/sda"]], 524288000)],
2279    "get total size of device in bytes",
2280    "\
2281 This returns the size of the device in bytes.
2282
2283 See also C<guestfs_blockdev_getsz>.
2284
2285 This uses the L<blockdev(8)> command.");
2286
2287   ("blockdev_flushbufs", (RErr, [Device "device"]), 64, [],
2288    [InitEmpty, Always, TestRun
2289       [["blockdev_flushbufs"; "/dev/sda"]]],
2290    "flush device buffers",
2291    "\
2292 This tells the kernel to flush internal buffers associated
2293 with C<device>.
2294
2295 This uses the L<blockdev(8)> command.");
2296
2297   ("blockdev_rereadpt", (RErr, [Device "device"]), 65, [],
2298    [InitEmpty, Always, TestRun
2299       [["blockdev_rereadpt"; "/dev/sda"]]],
2300    "reread partition table",
2301    "\
2302 Reread the partition table on C<device>.
2303
2304 This uses the L<blockdev(8)> command.");
2305
2306   ("upload", (RErr, [FileIn "filename"; Dev_or_Path "remotefilename"]), 66, [],
2307    [InitBasicFS, Always, TestOutput (
2308       (* Pick a file from cwd which isn't likely to change. *)
2309       [["upload"; "../COPYING.LIB"; "/COPYING.LIB"];
2310        ["checksum"; "md5"; "/COPYING.LIB"]],
2311       Digest.to_hex (Digest.file "COPYING.LIB"))],
2312    "upload a file from the local machine",
2313    "\
2314 Upload local file C<filename> to C<remotefilename> on the
2315 filesystem.
2316
2317 C<filename> can also be a named pipe.
2318
2319 See also C<guestfs_download>.");
2320
2321   ("download", (RErr, [Dev_or_Path "remotefilename"; FileOut "filename"]), 67, [],
2322    [InitBasicFS, Always, TestOutput (
2323       (* Pick a file from cwd which isn't likely to change. *)
2324       [["upload"; "../COPYING.LIB"; "/COPYING.LIB"];
2325        ["download"; "/COPYING.LIB"; "testdownload.tmp"];
2326        ["upload"; "testdownload.tmp"; "/upload"];
2327        ["checksum"; "md5"; "/upload"]],
2328       Digest.to_hex (Digest.file "COPYING.LIB"))],
2329    "download a file to the local machine",
2330    "\
2331 Download file C<remotefilename> and save it as C<filename>
2332 on the local machine.
2333
2334 C<filename> can also be a named pipe.
2335
2336 See also C<guestfs_upload>, C<guestfs_cat>.");
2337
2338   ("checksum", (RString "checksum", [String "csumtype"; Pathname "path"]), 68, [],
2339    [InitISOFS, Always, TestOutput (
2340       [["checksum"; "crc"; "/known-3"]], "2891671662");
2341     InitISOFS, Always, TestLastFail (
2342       [["checksum"; "crc"; "/notexists"]]);
2343     InitISOFS, Always, TestOutput (
2344       [["checksum"; "md5"; "/known-3"]], "46d6ca27ee07cdc6fa99c2e138cc522c");
2345     InitISOFS, Always, TestOutput (
2346       [["checksum"; "sha1"; "/known-3"]], "b7ebccc3ee418311091c3eda0a45b83c0a770f15");
2347     InitISOFS, Always, TestOutput (
2348       [["checksum"; "sha224"; "/known-3"]], "d2cd1774b28f3659c14116be0a6dc2bb5c4b350ce9cd5defac707741");
2349     InitISOFS, Always, TestOutput (
2350       [["checksum"; "sha256"; "/known-3"]], "75bb71b90cd20cb13f86d2bea8dad63ac7194e7517c3b52b8d06ff52d3487d30");
2351     InitISOFS, Always, TestOutput (
2352       [["checksum"; "sha384"; "/known-3"]], "5fa7883430f357b5d7b7271d3a1d2872b51d73cba72731de6863d3dea55f30646af2799bef44d5ea776a5ec7941ac640");
2353     InitISOFS, Always, TestOutput (
2354       [["checksum"; "sha512"; "/known-3"]], "2794062c328c6b216dca90443b7f7134c5f40e56bd0ed7853123275a09982a6f992e6ca682f9d2fba34a4c5e870d8fe077694ff831e3032a004ee077e00603f6");
2355     (* Test for RHBZ#579608, absolute symbolic links. *)
2356     InitISOFS, Always, TestOutput (
2357       [["checksum"; "sha512"; "/abssymlink"]], "5f57d0639bc95081c53afc63a449403883818edc64da48930ad6b1a4fb49be90404686877743fbcd7c99811f3def7df7bc22635c885c6a8cf79c806b43451c1a")],
2358    "compute MD5, SHAx or CRC checksum of file",
2359    "\
2360 This call computes the MD5, SHAx or CRC checksum of the
2361 file named C<path>.
2362
2363 The type of checksum to compute is given by the C<csumtype>
2364 parameter which must have one of the following values:
2365
2366 =over 4
2367
2368 =item C<crc>
2369
2370 Compute the cyclic redundancy check (CRC) specified by POSIX
2371 for the C<cksum> command.
2372
2373 =item C<md5>
2374
2375 Compute the MD5 hash (using the C<md5sum> program).
2376
2377 =item C<sha1>
2378
2379 Compute the SHA1 hash (using the C<sha1sum> program).
2380
2381 =item C<sha224>
2382
2383 Compute the SHA224 hash (using the C<sha224sum> program).
2384
2385 =item C<sha256>
2386
2387 Compute the SHA256 hash (using the C<sha256sum> program).
2388
2389 =item C<sha384>
2390
2391 Compute the SHA384 hash (using the C<sha384sum> program).
2392
2393 =item C<sha512>
2394
2395 Compute the SHA512 hash (using the C<sha512sum> program).
2396
2397 =back
2398
2399 The checksum is returned as a printable string.
2400
2401 To get the checksum for a device, use C<guestfs_checksum_device>.
2402
2403 To get the checksums for many files, use C<guestfs_checksums_out>.");
2404
2405   ("tar_in", (RErr, [FileIn "tarfile"; Pathname "directory"]), 69, [],
2406    [InitBasicFS, Always, TestOutput (
2407       [["tar_in"; "../images/helloworld.tar"; "/"];
2408        ["cat"; "/hello"]], "hello\n")],
2409    "unpack tarfile to directory",
2410    "\
2411 This command uploads and unpacks local file C<tarfile> (an
2412 I<uncompressed> tar file) into C<directory>.
2413
2414 To upload a compressed tarball, use C<guestfs_tgz_in>
2415 or C<guestfs_txz_in>.");
2416
2417   ("tar_out", (RErr, [String "directory"; FileOut "tarfile"]), 70, [],
2418    [],
2419    "pack directory into tarfile",
2420    "\
2421 This command packs the contents of C<directory> and downloads
2422 it to local file C<tarfile>.
2423
2424 To download a compressed tarball, use C<guestfs_tgz_out>
2425 or C<guestfs_txz_out>.");
2426
2427   ("tgz_in", (RErr, [FileIn "tarball"; Pathname "directory"]), 71, [],
2428    [InitBasicFS, Always, TestOutput (
2429       [["tgz_in"; "../images/helloworld.tar.gz"; "/"];
2430        ["cat"; "/hello"]], "hello\n")],
2431    "unpack compressed tarball to directory",
2432    "\
2433 This command uploads and unpacks local file C<tarball> (a
2434 I<gzip compressed> tar file) into C<directory>.
2435
2436 To upload an uncompressed tarball, use C<guestfs_tar_in>.");
2437
2438   ("tgz_out", (RErr, [Pathname "directory"; FileOut "tarball"]), 72, [],
2439    [],
2440    "pack directory into compressed tarball",
2441    "\
2442 This command packs the contents of C<directory> and downloads
2443 it to local file C<tarball>.
2444
2445 To download an uncompressed tarball, use C<guestfs_tar_out>.");
2446
2447   ("mount_ro", (RErr, [Device "device"; String "mountpoint"]), 73, [],
2448    [InitBasicFS, Always, TestLastFail (
2449       [["umount"; "/"];
2450        ["mount_ro"; "/dev/sda1"; "/"];
2451        ["touch"; "/new"]]);
2452     InitBasicFS, Always, TestOutput (
2453       [["write"; "/new"; "data"];
2454        ["umount"; "/"];
2455        ["mount_ro"; "/dev/sda1"; "/"];
2456        ["cat"; "/new"]], "data")],
2457    "mount a guest disk, read-only",
2458    "\
2459 This is the same as the C<guestfs_mount> command, but it
2460 mounts the filesystem with the read-only (I<-o ro>) flag.");
2461
2462   ("mount_options", (RErr, [String "options"; Device "device"; String "mountpoint"]), 74, [],
2463    [],
2464    "mount a guest disk with mount options",
2465    "\
2466 This is the same as the C<guestfs_mount> command, but it
2467 allows you to set the mount options as for the
2468 L<mount(8)> I<-o> flag.
2469
2470 If the C<options> parameter is an empty string, then
2471 no options are passed (all options default to whatever
2472 the filesystem uses).");
2473
2474   ("mount_vfs", (RErr, [String "options"; String "vfstype"; Device "device"; String "mountpoint"]), 75, [],
2475    [],
2476    "mount a guest disk with mount options and vfstype",
2477    "\
2478 This is the same as the C<guestfs_mount> command, but it
2479 allows you to set both the mount options and the vfstype
2480 as for the L<mount(8)> I<-o> and I<-t> flags.");
2481
2482   ("debug", (RString "result", [String "subcmd"; StringList "extraargs"]), 76, [],
2483    [],
2484    "debugging and internals",
2485    "\
2486 The C<guestfs_debug> command exposes some internals of
2487 C<guestfsd> (the guestfs daemon) that runs inside the
2488 qemu subprocess.
2489
2490 There is no comprehensive help for this command.  You have
2491 to look at the file C<daemon/debug.c> in the libguestfs source
2492 to find out what you can do.");
2493
2494   ("lvremove", (RErr, [Device "device"]), 77, [Optional "lvm2"],
2495    [InitEmpty, Always, TestOutputList (
2496       [["part_disk"; "/dev/sda"; "mbr"];
2497        ["pvcreate"; "/dev/sda1"];
2498        ["vgcreate"; "VG"; "/dev/sda1"];
2499        ["lvcreate"; "LV1"; "VG"; "50"];
2500        ["lvcreate"; "LV2"; "VG"; "50"];
2501        ["lvremove"; "/dev/VG/LV1"];
2502        ["lvs"]], ["/dev/VG/LV2"]);
2503     InitEmpty, Always, TestOutputList (
2504       [["part_disk"; "/dev/sda"; "mbr"];
2505        ["pvcreate"; "/dev/sda1"];
2506        ["vgcreate"; "VG"; "/dev/sda1"];
2507        ["lvcreate"; "LV1"; "VG"; "50"];
2508        ["lvcreate"; "LV2"; "VG"; "50"];
2509        ["lvremove"; "/dev/VG"];
2510        ["lvs"]], []);
2511     InitEmpty, Always, TestOutputList (
2512       [["part_disk"; "/dev/sda"; "mbr"];
2513        ["pvcreate"; "/dev/sda1"];
2514        ["vgcreate"; "VG"; "/dev/sda1"];
2515        ["lvcreate"; "LV1"; "VG"; "50"];
2516        ["lvcreate"; "LV2"; "VG"; "50"];
2517        ["lvremove"; "/dev/VG"];
2518        ["vgs"]], ["VG"])],
2519    "remove an LVM logical volume",
2520    "\
2521 Remove an LVM logical volume C<device>, where C<device> is
2522 the path to the LV, such as C</dev/VG/LV>.
2523
2524 You can also remove all LVs in a volume group by specifying
2525 the VG name, C</dev/VG>.");
2526
2527   ("vgremove", (RErr, [String "vgname"]), 78, [Optional "lvm2"],
2528    [InitEmpty, Always, TestOutputList (
2529       [["part_disk"; "/dev/sda"; "mbr"];
2530        ["pvcreate"; "/dev/sda1"];
2531        ["vgcreate"; "VG"; "/dev/sda1"];
2532        ["lvcreate"; "LV1"; "VG"; "50"];
2533        ["lvcreate"; "LV2"; "VG"; "50"];
2534        ["vgremove"; "VG"];
2535        ["lvs"]], []);
2536     InitEmpty, Always, TestOutputList (
2537       [["part_disk"; "/dev/sda"; "mbr"];
2538        ["pvcreate"; "/dev/sda1"];
2539        ["vgcreate"; "VG"; "/dev/sda1"];
2540        ["lvcreate"; "LV1"; "VG"; "50"];
2541        ["lvcreate"; "LV2"; "VG"; "50"];
2542        ["vgremove"; "VG"];
2543        ["vgs"]], [])],
2544    "remove an LVM volume group",
2545    "\
2546 Remove an LVM volume group C<vgname>, (for example C<VG>).
2547
2548 This also forcibly removes all logical volumes in the volume
2549 group (if any).");
2550
2551   ("pvremove", (RErr, [Device "device"]), 79, [Optional "lvm2"],
2552    [InitEmpty, Always, TestOutputListOfDevices (
2553       [["part_disk"; "/dev/sda"; "mbr"];
2554        ["pvcreate"; "/dev/sda1"];
2555        ["vgcreate"; "VG"; "/dev/sda1"];
2556        ["lvcreate"; "LV1"; "VG"; "50"];
2557        ["lvcreate"; "LV2"; "VG"; "50"];
2558        ["vgremove"; "VG"];
2559        ["pvremove"; "/dev/sda1"];
2560        ["lvs"]], []);
2561     InitEmpty, Always, TestOutputListOfDevices (
2562       [["part_disk"; "/dev/sda"; "mbr"];
2563        ["pvcreate"; "/dev/sda1"];
2564        ["vgcreate"; "VG"; "/dev/sda1"];
2565        ["lvcreate"; "LV1"; "VG"; "50"];
2566        ["lvcreate"; "LV2"; "VG"; "50"];
2567        ["vgremove"; "VG"];
2568        ["pvremove"; "/dev/sda1"];
2569        ["vgs"]], []);
2570     InitEmpty, Always, TestOutputListOfDevices (
2571       [["part_disk"; "/dev/sda"; "mbr"];
2572        ["pvcreate"; "/dev/sda1"];
2573        ["vgcreate"; "VG"; "/dev/sda1"];
2574        ["lvcreate"; "LV1"; "VG"; "50"];
2575        ["lvcreate"; "LV2"; "VG"; "50"];
2576        ["vgremove"; "VG"];
2577        ["pvremove"; "/dev/sda1"];
2578        ["pvs"]], [])],
2579    "remove an LVM physical volume",
2580    "\
2581 This wipes a physical volume C<device> so that LVM will no longer
2582 recognise it.
2583
2584 The implementation uses the C<pvremove> command which refuses to
2585 wipe physical volumes that contain any volume groups, so you have
2586 to remove those first.");
2587
2588   ("set_e2label", (RErr, [Device "device"; String "label"]), 80, [],
2589    [InitBasicFS, Always, TestOutput (
2590       [["set_e2label"; "/dev/sda1"; "testlabel"];
2591        ["get_e2label"; "/dev/sda1"]], "testlabel")],
2592    "set the ext2/3/4 filesystem label",
2593    "\
2594 This sets the ext2/3/4 filesystem label of the filesystem on
2595 C<device> to C<label>.  Filesystem labels are limited to
2596 16 characters.
2597
2598 You can use either C<guestfs_tune2fs_l> or C<guestfs_get_e2label>
2599 to return the existing label on a filesystem.");
2600
2601   ("get_e2label", (RString "label", [Device "device"]), 81, [DeprecatedBy "vfs_label"],
2602    [],
2603    "get the ext2/3/4 filesystem label",
2604    "\
2605 This returns the ext2/3/4 filesystem label of the filesystem on
2606 C<device>.");
2607
2608   ("set_e2uuid", (RErr, [Device "device"; String "uuid"]), 82, [],
2609    (let uuid = uuidgen () in
2610     [InitBasicFS, Always, TestOutput (
2611        [["set_e2uuid"; "/dev/sda1"; uuid];
2612         ["get_e2uuid"; "/dev/sda1"]], uuid);
2613      InitBasicFS, Always, TestOutput (
2614        [["set_e2uuid"; "/dev/sda1"; "clear"];
2615         ["get_e2uuid"; "/dev/sda1"]], "");
2616      (* We can't predict what UUIDs will be, so just check the commands run. *)
2617      InitBasicFS, Always, TestRun (
2618        [["set_e2uuid"; "/dev/sda1"; "random"]]);
2619      InitBasicFS, Always, TestRun (
2620        [["set_e2uuid"; "/dev/sda1"; "time"]])]),
2621    "set the ext2/3/4 filesystem UUID",
2622    "\
2623 This sets the ext2/3/4 filesystem UUID of the filesystem on
2624 C<device> to C<uuid>.  The format of the UUID and alternatives
2625 such as C<clear>, C<random> and C<time> are described in the
2626 L<tune2fs(8)> manpage.
2627
2628 You can use either C<guestfs_tune2fs_l> or C<guestfs_get_e2uuid>
2629 to return the existing UUID of a filesystem.");
2630
2631   ("get_e2uuid", (RString "uuid", [Device "device"]), 83, [DeprecatedBy "vfs_uuid"],
2632    (* Regression test for RHBZ#597112. *)
2633    (let uuid = uuidgen () in
2634     [InitBasicFS, Always, TestOutput (
2635        [["mke2journal"; "1024"; "/dev/sdb"];
2636         ["set_e2uuid"; "/dev/sdb"; uuid];
2637         ["get_e2uuid"; "/dev/sdb"]], uuid)]),
2638    "get the ext2/3/4 filesystem UUID",
2639    "\
2640 This returns the ext2/3/4 filesystem UUID of the filesystem on
2641 C<device>.");
2642
2643   ("fsck", (RInt "status", [String "fstype"; Device "device"]), 84, [FishOutput FishOutputHexadecimal],
2644    [InitBasicFS, Always, TestOutputInt (
2645       [["umount"; "/dev/sda1"];
2646        ["fsck"; "ext2"; "/dev/sda1"]], 0);
2647     InitBasicFS, Always, TestOutputInt (
2648       [["umount"; "/dev/sda1"];
2649        ["zero"; "/dev/sda1"];
2650        ["fsck"; "ext2"; "/dev/sda1"]], 8)],
2651    "run the filesystem checker",
2652    "\
2653 This runs the filesystem checker (fsck) on C<device> which
2654 should have filesystem type C<fstype>.
2655
2656 The returned integer is the status.  See L<fsck(8)> for the
2657 list of status codes from C<fsck>.
2658
2659 Notes:
2660
2661 =over 4
2662
2663 =item *
2664
2665 Multiple status codes can be summed together.
2666
2667 =item *
2668
2669 A non-zero return code can mean \"success\", for example if
2670 errors have been corrected on the filesystem.
2671
2672 =item *
2673
2674 Checking or repairing NTFS volumes is not supported
2675 (by linux-ntfs).
2676
2677 =back
2678
2679 This command is entirely equivalent to running C<fsck -a -t fstype device>.");
2680
2681   ("zero", (RErr, [Device "device"]), 85, [],
2682    [InitBasicFS, Always, TestOutput (
2683       [["umount"; "/dev/sda1"];
2684        ["zero"; "/dev/sda1"];
2685        ["file"; "/dev/sda1"]], "data")],
2686    "write zeroes to the device",
2687    "\
2688 This command writes zeroes over the first few blocks of C<device>.
2689
2690 How many blocks are zeroed isn't specified (but it's I<not> enough
2691 to securely wipe the device).  It should be sufficient to remove
2692 any partition tables, filesystem superblocks and so on.
2693
2694 See also: C<guestfs_zero_device>, C<guestfs_scrub_device>.");
2695
2696   ("grub_install", (RErr, [Pathname "root"; Device "device"]), 86, [],
2697    (* See:
2698     * https://bugzilla.redhat.com/show_bug.cgi?id=484986
2699     * https://bugzilla.redhat.com/show_bug.cgi?id=479760
2700     *)
2701    [InitBasicFS, Always, TestOutputTrue (
2702       [["mkdir_p"; "/boot/grub"];
2703        ["write"; "/boot/grub/device.map"; "(hd0) /dev/vda"];
2704        ["grub_install"; "/"; "/dev/vda"];
2705        ["is_dir"; "/boot"]])],
2706    "install GRUB",
2707    "\
2708 This command installs GRUB (the Grand Unified Bootloader) on
2709 C<device>, with the root directory being C<root>.
2710
2711 Note: If grub-install reports the error
2712 \"No suitable drive was found in the generated device map.\"
2713 it may be that you need to create a C</boot/grub/device.map>
2714 file first that contains the mapping between grub device names
2715 and Linux device names.  It is usually sufficient to create
2716 a file containing:
2717
2718  (hd0) /dev/vda
2719
2720 replacing C</dev/vda> with the name of the installation device.");
2721
2722   ("cp", (RErr, [Pathname "src"; Pathname "dest"]), 87, [],
2723    [InitBasicFS, Always, TestOutput (
2724       [["write"; "/old"; "file content"];
2725        ["cp"; "/old"; "/new"];
2726        ["cat"; "/new"]], "file content");
2727     InitBasicFS, Always, TestOutputTrue (
2728       [["write"; "/old"; "file content"];
2729        ["cp"; "/old"; "/new"];
2730        ["is_file"; "/old"]]);
2731     InitBasicFS, Always, TestOutput (
2732       [["write"; "/old"; "file content"];
2733        ["mkdir"; "/dir"];
2734        ["cp"; "/old"; "/dir/new"];
2735        ["cat"; "/dir/new"]], "file content")],
2736    "copy a file",
2737    "\
2738 This copies a file from C<src> to C<dest> where C<dest> is
2739 either a destination filename or destination directory.");
2740
2741   ("cp_a", (RErr, [Pathname "src"; Pathname "dest"]), 88, [],
2742    [InitBasicFS, Always, TestOutput (
2743       [["mkdir"; "/olddir"];
2744        ["mkdir"; "/newdir"];
2745        ["write"; "/olddir/file"; "file content"];
2746        ["cp_a"; "/olddir"; "/newdir"];
2747        ["cat"; "/newdir/olddir/file"]], "file content")],
2748    "copy a file or directory recursively",
2749    "\
2750 This copies a file or directory from C<src> to C<dest>
2751 recursively using the C<cp -a> command.");
2752
2753   ("mv", (RErr, [Pathname "src"; Pathname "dest"]), 89, [],
2754    [InitBasicFS, Always, TestOutput (
2755       [["write"; "/old"; "file content"];
2756        ["mv"; "/old"; "/new"];
2757        ["cat"; "/new"]], "file content");
2758     InitBasicFS, Always, TestOutputFalse (
2759       [["write"; "/old"; "file content"];
2760        ["mv"; "/old"; "/new"];
2761        ["is_file"; "/old"]])],
2762    "move a file",
2763    "\
2764 This moves a file from C<src> to C<dest> where C<dest> is
2765 either a destination filename or destination directory.");
2766
2767   ("drop_caches", (RErr, [Int "whattodrop"]), 90, [],
2768    [InitEmpty, Always, TestRun (
2769       [["drop_caches"; "3"]])],
2770    "drop kernel page cache, dentries and inodes",
2771    "\
2772 This instructs the guest kernel to drop its page cache,
2773 and/or dentries and inode caches.  The parameter C<whattodrop>
2774 tells the kernel what precisely to drop, see
2775 L<http://linux-mm.org/Drop_Caches>
2776
2777 Setting C<whattodrop> to 3 should drop everything.
2778
2779 This automatically calls L<sync(2)> before the operation,
2780 so that the maximum guest memory is freed.");
2781
2782   ("dmesg", (RString "kmsgs", []), 91, [],
2783    [InitEmpty, Always, TestRun (
2784       [["dmesg"]])],
2785    "return kernel messages",
2786    "\
2787 This returns the kernel messages (C<dmesg> output) from
2788 the guest kernel.  This is sometimes useful for extended
2789 debugging of problems.
2790
2791 Another way to get the same information is to enable
2792 verbose messages with C<guestfs_set_verbose> or by setting
2793 the environment variable C<LIBGUESTFS_DEBUG=1> before
2794 running the program.");
2795
2796   ("ping_daemon", (RErr, []), 92, [],
2797    [InitEmpty, Always, TestRun (
2798       [["ping_daemon"]])],
2799    "ping the guest daemon",
2800    "\
2801 This is a test probe into the guestfs daemon running inside
2802 the qemu subprocess.  Calling this function checks that the
2803 daemon responds to the ping message, without affecting the daemon
2804 or attached block device(s) in any other way.");
2805
2806   ("equal", (RBool "equality", [Pathname "file1"; Pathname "file2"]), 93, [],
2807    [InitBasicFS, Always, TestOutputTrue (
2808       [["write"; "/file1"; "contents of a file"];
2809        ["cp"; "/file1"; "/file2"];
2810        ["equal"; "/file1"; "/file2"]]);
2811     InitBasicFS, Always, TestOutputFalse (
2812       [["write"; "/file1"; "contents of a file"];
2813        ["write"; "/file2"; "contents of another file"];
2814        ["equal"; "/file1"; "/file2"]]);
2815     InitBasicFS, Always, TestLastFail (
2816       [["equal"; "/file1"; "/file2"]])],
2817    "test if two files have equal contents",
2818    "\
2819 This compares the two files C<file1> and C<file2> and returns
2820 true if their content is exactly equal, or false otherwise.
2821
2822 The external L<cmp(1)> program is used for the comparison.");
2823
2824   ("strings", (RStringList "stringsout", [Pathname "path"]), 94, [ProtocolLimitWarning],
2825    [InitISOFS, Always, TestOutputList (
2826       [["strings"; "/known-5"]], ["abcdefghi"; "jklmnopqr"]);
2827     InitISOFS, Always, TestOutputList (
2828       [["strings"; "/empty"]], []);
2829     (* Test for RHBZ#579608, absolute symbolic links. *)
2830     InitISOFS, Always, TestRun (
2831       [["strings"; "/abssymlink"]])],
2832    "print the printable strings in a file",
2833    "\
2834 This runs the L<strings(1)> command on a file and returns
2835 the list of printable strings found.");
2836
2837   ("strings_e", (RStringList "stringsout", [String "encoding"; Pathname "path"]), 95, [ProtocolLimitWarning],
2838    [InitISOFS, Always, TestOutputList (
2839       [["strings_e"; "b"; "/known-5"]], []);
2840     InitBasicFS, Always, TestOutputList (
2841       [["write"; "/new"; "\000h\000e\000l\000l\000o\000\n\000w\000o\000r\000l\000d\000\n"];
2842        ["strings_e"; "b"; "/new"]], ["hello"; "world"])],
2843    "print the printable strings in a file",
2844    "\
2845 This is like the C<guestfs_strings> command, but allows you to
2846 specify the encoding of strings that are looked for in
2847 the source file C<path>.
2848
2849 Allowed encodings are:
2850
2851 =over 4
2852
2853 =item s
2854
2855 Single 7-bit-byte characters like ASCII and the ASCII-compatible
2856 parts of ISO-8859-X (this is what C<guestfs_strings> uses).
2857
2858 =item S
2859
2860 Single 8-bit-byte characters.
2861
2862 =item b
2863
2864 16-bit big endian strings such as those encoded in
2865 UTF-16BE or UCS-2BE.
2866
2867 =item l (lower case letter L)
2868
2869 16-bit little endian such as UTF-16LE and UCS-2LE.
2870 This is useful for examining binaries in Windows guests.
2871
2872 =item B
2873
2874 32-bit big endian such as UCS-4BE.
2875
2876 =item L
2877
2878 32-bit little endian such as UCS-4LE.
2879
2880 =back
2881
2882 The returned strings are transcoded to UTF-8.");
2883
2884   ("hexdump", (RString "dump", [Pathname "path"]), 96, [ProtocolLimitWarning],
2885    [InitISOFS, Always, TestOutput (
2886       [["hexdump"; "/known-4"]], "00000000  61 62 63 0a 64 65 66 0a  67 68 69                 |abc.def.ghi|\n0000000b\n");
2887     (* Test for RHBZ#501888c2 regression which caused large hexdump
2888      * commands to segfault.
2889      *)
2890     InitISOFS, Always, TestRun (
2891       [["hexdump"; "/100krandom"]]);
2892     (* Test for RHBZ#579608, absolute symbolic links. *)
2893     InitISOFS, Always, TestRun (
2894       [["hexdump"; "/abssymlink"]])],
2895    "dump a file in hexadecimal",
2896    "\
2897 This runs C<hexdump -C> on the given C<path>.  The result is
2898 the human-readable, canonical hex dump of the file.");
2899
2900   ("zerofree", (RErr, [Device "device"]), 97, [Optional "zerofree"],
2901    [InitNone, Always, TestOutput (
2902       [["part_disk"; "/dev/sda"; "mbr"];
2903        ["mkfs"; "ext3"; "/dev/sda1"];
2904        ["mount_options"; ""; "/dev/sda1"; "/"];
2905        ["write"; "/new"; "test file"];
2906        ["umount"; "/dev/sda1"];
2907        ["zerofree"; "/dev/sda1"];
2908        ["mount_options"; ""; "/dev/sda1"; "/"];
2909        ["cat"; "/new"]], "test file")],
2910    "zero unused inodes and disk blocks on ext2/3 filesystem",
2911    "\
2912 This runs the I<zerofree> program on C<device>.  This program
2913 claims to zero unused inodes and disk blocks on an ext2/3
2914 filesystem, thus making it possible to compress the filesystem
2915 more effectively.
2916
2917 You should B<not> run this program if the filesystem is
2918 mounted.
2919
2920 It is possible that using this program can damage the filesystem
2921 or data on the filesystem.");
2922
2923   ("pvresize", (RErr, [Device "device"]), 98, [Optional "lvm2"],
2924    [],
2925    "resize an LVM physical volume",
2926    "\
2927 This resizes (expands or shrinks) an existing LVM physical
2928 volume to match the new size of the underlying device.");
2929
2930   ("sfdisk_N", (RErr, [Device "device"; Int "partnum";
2931                        Int "cyls"; Int "heads"; Int "sectors";
2932                        String "line"]), 99, [DangerWillRobinson],
2933    [],
2934    "modify a single partition on a block device",
2935    "\
2936 This runs L<sfdisk(8)> option to modify just the single
2937 partition C<n> (note: C<n> counts from 1).
2938
2939 For other parameters, see C<guestfs_sfdisk>.  You should usually
2940 pass C<0> for the cyls/heads/sectors parameters.
2941
2942 See also: C<guestfs_part_add>");
2943
2944   ("sfdisk_l", (RString "partitions", [Device "device"]), 100, [],
2945    [],
2946    "display the partition table",
2947    "\
2948 This displays the partition table on C<device>, in the
2949 human-readable output of the L<sfdisk(8)> command.  It is
2950 not intended to be parsed.
2951
2952 See also: C<guestfs_part_list>");
2953
2954   ("sfdisk_kernel_geometry", (RString "partitions", [Device "device"]), 101, [],
2955    [],
2956    "display the kernel geometry",
2957    "\
2958 This displays the kernel's idea of the geometry of C<device>.
2959
2960 The result is in human-readable format, and not designed to
2961 be parsed.");
2962
2963   ("sfdisk_disk_geometry", (RString "partitions", [Device "device"]), 102, [],
2964    [],
2965    "display the disk geometry from the partition table",
2966    "\
2967 This displays the disk geometry of C<device> read from the
2968 partition table.  Especially in the case where the underlying
2969 block device has been resized, this can be different from the
2970 kernel's idea of the geometry (see C<guestfs_sfdisk_kernel_geometry>).
2971
2972 The result is in human-readable format, and not designed to
2973 be parsed.");
2974
2975   ("vg_activate_all", (RErr, [Bool "activate"]), 103, [Optional "lvm2"],
2976    [],
2977    "activate or deactivate all volume groups",
2978    "\
2979 This command activates or (if C<activate> is false) deactivates
2980 all logical volumes in all volume groups.
2981 If activated, then they are made known to the
2982 kernel, ie. they appear as C</dev/mapper> devices.  If deactivated,
2983 then those devices disappear.
2984
2985 This command is the same as running C<vgchange -a y|n>");
2986
2987   ("vg_activate", (RErr, [Bool "activate"; StringList "volgroups"]), 104, [Optional "lvm2"],
2988    [],
2989    "activate or deactivate some volume groups",
2990    "\
2991 This command activates or (if C<activate> is false) deactivates
2992 all logical volumes in the listed volume groups C<volgroups>.
2993 If activated, then they are made known to the
2994 kernel, ie. they appear as C</dev/mapper> devices.  If deactivated,
2995 then those devices disappear.
2996
2997 This command is the same as running C<vgchange -a y|n volgroups...>
2998
2999 Note that if C<volgroups> is an empty list then B<all> volume groups
3000 are activated or deactivated.");
3001
3002   ("lvresize", (RErr, [Device "device"; Int "mbytes"]), 105, [Optional "lvm2"],
3003    [InitNone, Always, TestOutput (
3004       [["part_disk"; "/dev/sda"; "mbr"];
3005        ["pvcreate"; "/dev/sda1"];
3006        ["vgcreate"; "VG"; "/dev/sda1"];
3007        ["lvcreate"; "LV"; "VG"; "10"];
3008        ["mkfs"; "ext2"; "/dev/VG/LV"];
3009        ["mount_options"; ""; "/dev/VG/LV"; "/"];
3010        ["write"; "/new"; "test content"];
3011        ["umount"; "/"];
3012        ["lvresize"; "/dev/VG/LV"; "20"];
3013        ["e2fsck_f"; "/dev/VG/LV"];
3014        ["resize2fs"; "/dev/VG/LV"];
3015        ["mount_options"; ""; "/dev/VG/LV"; "/"];
3016        ["cat"; "/new"]], "test content");
3017     InitNone, Always, TestRun (
3018       (* Make an LV smaller to test RHBZ#587484. *)
3019       [["part_disk"; "/dev/sda"; "mbr"];
3020        ["pvcreate"; "/dev/sda1"];
3021        ["vgcreate"; "VG"; "/dev/sda1"];
3022        ["lvcreate"; "LV"; "VG"; "20"];
3023        ["lvresize"; "/dev/VG/LV"; "10"]])],
3024    "resize an LVM logical volume",
3025    "\
3026 This resizes (expands or shrinks) an existing LVM logical
3027 volume to C<mbytes>.  When reducing, data in the reduced part
3028 is lost.");
3029
3030   ("resize2fs", (RErr, [Device "device"]), 106, [],
3031    [], (* lvresize tests this *)
3032    "resize an ext2, ext3 or ext4 filesystem",
3033    "\
3034 This resizes an ext2, ext3 or ext4 filesystem to match the size of
3035 the underlying device.
3036
3037 I<Note:> It is sometimes required that you run C<guestfs_e2fsck_f>
3038 on the C<device> before calling this command.  For unknown reasons
3039 C<resize2fs> sometimes gives an error about this and sometimes not.
3040 In any case, it is always safe to call C<guestfs_e2fsck_f> before
3041 calling this function.");
3042
3043   ("find", (RStringList "names", [Pathname "directory"]), 107, [ProtocolLimitWarning],
3044    [InitBasicFS, Always, TestOutputList (
3045       [["find"; "/"]], ["lost+found"]);
3046     InitBasicFS, Always, TestOutputList (
3047       [["touch"; "/a"];
3048        ["mkdir"; "/b"];
3049        ["touch"; "/b/c"];
3050        ["find"; "/"]], ["a"; "b"; "b/c"; "lost+found"]);
3051     InitBasicFS, Always, TestOutputList (
3052       [["mkdir_p"; "/a/b/c"];
3053        ["touch"; "/a/b/c/d"];
3054        ["find"; "/a/b/"]], ["c"; "c/d"])],
3055    "find all files and directories",
3056    "\
3057 This command lists out all files and directories, recursively,
3058 starting at C<directory>.  It is essentially equivalent to
3059 running the shell command C<find directory -print> but some
3060 post-processing happens on the output, described below.
3061
3062 This returns a list of strings I<without any prefix>.  Thus
3063 if the directory structure was:
3064
3065  /tmp/a
3066  /tmp/b
3067  /tmp/c/d
3068
3069 then the returned list from C<guestfs_find> C</tmp> would be
3070 4 elements:
3071
3072  a
3073  b
3074  c
3075  c/d
3076
3077 If C<directory> is not a directory, then this command returns
3078 an error.
3079
3080 The returned list is sorted.
3081
3082 See also C<guestfs_find0>.");
3083
3084   ("e2fsck_f", (RErr, [Device "device"]), 108, [],
3085    [], (* lvresize tests this *)
3086    "check an ext2/ext3 filesystem",
3087    "\
3088 This runs C<e2fsck -p -f device>, ie. runs the ext2/ext3
3089 filesystem checker on C<device>, noninteractively (C<-p>),
3090 even if the filesystem appears to be clean (C<-f>).
3091
3092 This command is only needed because of C<guestfs_resize2fs>
3093 (q.v.).  Normally you should use C<guestfs_fsck>.");
3094
3095   ("sleep", (RErr, [Int "secs"]), 109, [],
3096    [InitNone, Always, TestRun (
3097       [["sleep"; "1"]])],
3098    "sleep for some seconds",
3099    "\
3100 Sleep for C<secs> seconds.");
3101
3102   ("ntfs_3g_probe", (RInt "status", [Bool "rw"; Device "device"]), 110, [Optional "ntfs3g"],
3103    [InitNone, Always, TestOutputInt (
3104       [["part_disk"; "/dev/sda"; "mbr"];
3105        ["mkfs"; "ntfs"; "/dev/sda1"];
3106        ["ntfs_3g_probe"; "true"; "/dev/sda1"]], 0);
3107     InitNone, Always, TestOutputInt (
3108       [["part_disk"; "/dev/sda"; "mbr"];
3109        ["mkfs"; "ext2"; "/dev/sda1"];
3110        ["ntfs_3g_probe"; "true"; "/dev/sda1"]], 12)],
3111    "probe NTFS volume",
3112    "\
3113 This command runs the L<ntfs-3g.probe(8)> command which probes
3114 an NTFS C<device> for mountability.  (Not all NTFS volumes can
3115 be mounted read-write, and some cannot be mounted at all).
3116
3117 C<rw> is a boolean flag.  Set it to true if you want to test
3118 if the volume can be mounted read-write.  Set it to false if
3119 you want to test if the volume can be mounted read-only.
3120
3121 The return value is an integer which C<0> if the operation
3122 would succeed, or some non-zero value documented in the
3123 L<ntfs-3g.probe(8)> manual page.");
3124
3125   ("sh", (RString "output", [String "command"]), 111, [],
3126    [], (* XXX needs tests *)
3127    "run a command via the shell",
3128    "\
3129 This call runs a command from the guest filesystem via the
3130 guest's C</bin/sh>.
3131
3132 This is like C<guestfs_command>, but passes the command to:
3133
3134  /bin/sh -c \"command\"
3135
3136 Depending on the guest's shell, this usually results in
3137 wildcards being expanded, shell expressions being interpolated
3138 and so on.
3139
3140 All the provisos about C<guestfs_command> apply to this call.");
3141
3142   ("sh_lines", (RStringList "lines", [String "command"]), 112, [],
3143    [], (* XXX needs tests *)
3144    "run a command via the shell returning lines",
3145    "\
3146 This is the same as C<guestfs_sh>, but splits the result
3147 into a list of lines.
3148
3149 See also: C<guestfs_command_lines>");
3150
3151   ("glob_expand", (RStringList "paths", [Pathname "pattern"]), 113, [],
3152    (* Use Pathname here, and hence ABS_PATH (pattern,... in generated
3153     * code in stubs.c, since all valid glob patterns must start with "/".
3154     * There is no concept of "cwd" in libguestfs, hence no "."-relative names.
3155     *)
3156    [InitBasicFS, Always, TestOutputList (
3157       [["mkdir_p"; "/a/b/c"];
3158        ["touch"; "/a/b/c/d"];
3159        ["touch"; "/a/b/c/e"];
3160        ["glob_expand"; "/a/b/c/*"]], ["/a/b/c/d"; "/a/b/c/e"]);
3161     InitBasicFS, Always, TestOutputList (
3162       [["mkdir_p"; "/a/b/c"];
3163        ["touch"; "/a/b/c/d"];
3164        ["touch"; "/a/b/c/e"];
3165        ["glob_expand"; "/a/*/c/*"]], ["/a/b/c/d"; "/a/b/c/e"]);
3166     InitBasicFS, Always, TestOutputList (
3167       [["mkdir_p"; "/a/b/c"];
3168        ["touch"; "/a/b/c/d"];
3169        ["touch"; "/a/b/c/e"];
3170        ["glob_expand"; "/a/*/x/*"]], [])],
3171    "expand a wildcard path",
3172    "\
3173 This command searches for all the pathnames matching
3174 C<pattern> according to the wildcard expansion rules
3175 used by the shell.
3176
3177 If no paths match, then this returns an empty list
3178 (note: not an error).
3179
3180 It is just a wrapper around the C L<glob(3)> function
3181 with flags C<GLOB_MARK|GLOB_BRACE>.
3182 See that manual page for more details.");
3183
3184   ("scrub_device", (RErr, [Device "device"]), 114, [DangerWillRobinson; Optional "scrub"],
3185    [InitNone, Always, TestRun ( (* use /dev/sdc because it's smaller *)
3186       [["scrub_device"; "/dev/sdc"]])],
3187    "scrub (securely wipe) a device",
3188    "\
3189 This command writes patterns over C<device> to make data retrieval
3190 more difficult.
3191
3192 It is an interface to the L<scrub(1)> program.  See that
3193 manual page for more details.");
3194
3195   ("scrub_file", (RErr, [Pathname "file"]), 115, [Optional "scrub"],
3196    [InitBasicFS, Always, TestRun (
3197       [["write"; "/file"; "content"];
3198        ["scrub_file"; "/file"]])],
3199    "scrub (securely wipe) a file",
3200    "\
3201 This command writes patterns over a file to make data retrieval
3202 more difficult.
3203
3204 The file is I<removed> after scrubbing.
3205
3206 It is an interface to the L<scrub(1)> program.  See that
3207 manual page for more details.");
3208
3209   ("scrub_freespace", (RErr, [Pathname "dir"]), 116, [Optional "scrub"],
3210    [], (* XXX needs testing *)
3211    "scrub (securely wipe) free space",
3212    "\
3213 This command creates the directory C<dir> and then fills it
3214 with files until the filesystem is full, and scrubs the files
3215 as for C<guestfs_scrub_file>, and deletes them.
3216 The intention is to scrub any free space on the partition
3217 containing C<dir>.
3218
3219 It is an interface to the L<scrub(1)> program.  See that
3220 manual page for more details.");
3221
3222   ("mkdtemp", (RString "dir", [Pathname "template"]), 117, [],
3223    [InitBasicFS, Always, TestRun (
3224       [["mkdir"; "/tmp"];
3225        ["mkdtemp"; "/tmp/tmpXXXXXX"]])],
3226    "create a temporary directory",
3227    "\
3228 This command creates a temporary directory.  The
3229 C<template> parameter should be a full pathname for the
3230 temporary directory name with the final six characters being
3231 \"XXXXXX\".
3232
3233 For example: \"/tmp/myprogXXXXXX\" or \"/Temp/myprogXXXXXX\",
3234 the second one being suitable for Windows filesystems.
3235
3236 The name of the temporary directory that was created
3237 is returned.
3238
3239 The temporary directory is created with mode 0700
3240 and is owned by root.
3241
3242 The caller is responsible for deleting the temporary
3243 directory and its contents after use.
3244
3245 See also: L<mkdtemp(3)>");
3246
3247   ("wc_l", (RInt "lines", [Pathname "path"]), 118, [],
3248    [InitISOFS, Always, TestOutputInt (
3249       [["wc_l"; "/10klines"]], 10000);
3250     (* Test for RHBZ#579608, absolute symbolic links. *)
3251     InitISOFS, Always, TestOutputInt (
3252       [["wc_l"; "/abssymlink"]], 10000)],
3253    "count lines in a file",
3254    "\
3255 This command counts the lines in a file, using the
3256 C<wc -l> external command.");
3257
3258   ("wc_w", (RInt "words", [Pathname "path"]), 119, [],
3259    [InitISOFS, Always, TestOutputInt (
3260       [["wc_w"; "/10klines"]], 10000)],
3261    "count words in a file",
3262    "\
3263 This command counts the words in a file, using the
3264 C<wc -w> external command.");
3265
3266   ("wc_c", (RInt "chars", [Pathname "path"]), 120, [],
3267    [InitISOFS, Always, TestOutputInt (
3268       [["wc_c"; "/100kallspaces"]], 102400)],
3269    "count characters in a file",
3270    "\
3271 This command counts the characters in a file, using the
3272 C<wc -c> external command.");
3273
3274   ("head", (RStringList "lines", [Pathname "path"]), 121, [ProtocolLimitWarning],
3275    [InitISOFS, Always, TestOutputList (
3276       [["head"; "/10klines"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz";"3abcdefghijklmnopqrstuvwxyz";"4abcdefghijklmnopqrstuvwxyz";"5abcdefghijklmnopqrstuvwxyz";"6abcdefghijklmnopqrstuvwxyz";"7abcdefghijklmnopqrstuvwxyz";"8abcdefghijklmnopqrstuvwxyz";"9abcdefghijklmnopqrstuvwxyz"]);
3277     (* Test for RHBZ#579608, absolute symbolic links. *)
3278     InitISOFS, Always, TestOutputList (
3279       [["head"; "/abssymlink"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz";"3abcdefghijklmnopqrstuvwxyz";"4abcdefghijklmnopqrstuvwxyz";"5abcdefghijklmnopqrstuvwxyz";"6abcdefghijklmnopqrstuvwxyz";"7abcdefghijklmnopqrstuvwxyz";"8abcdefghijklmnopqrstuvwxyz";"9abcdefghijklmnopqrstuvwxyz"])],
3280    "return first 10 lines of a file",
3281    "\
3282 This command returns up to the first 10 lines of a file as
3283 a list of strings.");
3284
3285   ("head_n", (RStringList "lines", [Int "nrlines"; Pathname "path"]), 122, [ProtocolLimitWarning],
3286    [InitISOFS, Always, TestOutputList (
3287       [["head_n"; "3"; "/10klines"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz"]);
3288     InitISOFS, Always, TestOutputList (
3289       [["head_n"; "-9997"; "/10klines"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz"]);
3290     InitISOFS, Always, TestOutputList (
3291       [["head_n"; "0"; "/10klines"]], [])],
3292    "return first N lines of a file",
3293    "\
3294 If the parameter C<nrlines> is a positive number, this returns the first
3295 C<nrlines> lines of the file C<path>.
3296
3297 If the parameter C<nrlines> is a negative number, this returns lines
3298 from the file C<path>, excluding the last C<nrlines> lines.
3299
3300 If the parameter C<nrlines> is zero, this returns an empty list.");
3301
3302   ("tail", (RStringList "lines", [Pathname "path"]), 123, [ProtocolLimitWarning],
3303    [InitISOFS, Always, TestOutputList (
3304       [["tail"; "/10klines"]], ["9990abcdefghijklmnopqrstuvwxyz";"9991abcdefghijklmnopqrstuvwxyz";"9992abcdefghijklmnopqrstuvwxyz";"9993abcdefghijklmnopqrstuvwxyz";"9994abcdefghijklmnopqrstuvwxyz";"9995abcdefghijklmnopqrstuvwxyz";"9996abcdefghijklmnopqrstuvwxyz";"9997abcdefghijklmnopqrstuvwxyz";"9998abcdefghijklmnopqrstuvwxyz";"9999abcdefghijklmnopqrstuvwxyz"])],
3305    "return last 10 lines of a file",
3306    "\
3307 This command returns up to the last 10 lines of a file as
3308 a list of strings.");
3309
3310   ("tail_n", (RStringList "lines", [Int "nrlines"; Pathname "path"]), 124, [ProtocolLimitWarning],
3311    [InitISOFS, Always, TestOutputList (
3312       [["tail_n"; "3"; "/10klines"]], ["9997abcdefghijklmnopqrstuvwxyz";"9998abcdefghijklmnopqrstuvwxyz";"9999abcdefghijklmnopqrstuvwxyz"]);
3313     InitISOFS, Always, TestOutputList (
3314       [["tail_n"; "-9998"; "/10klines"]], ["9997abcdefghijklmnopqrstuvwxyz";"9998abcdefghijklmnopqrstuvwxyz";"9999abcdefghijklmnopqrstuvwxyz"]);
3315     InitISOFS, Always, TestOutputList (
3316       [["tail_n"; "0"; "/10klines"]], [])],
3317    "return last N lines of a file",
3318    "\
3319 If the parameter C<nrlines> is a positive number, this returns the last
3320 C<nrlines> lines of the file C<path>.
3321
3322 If the parameter C<nrlines> is a negative number, this returns lines
3323 from the file C<path>, starting with the C<-nrlines>th line.
3324
3325 If the parameter C<nrlines> is zero, this returns an empty list.");
3326
3327   ("df", (RString "output", []), 125, [],
3328    [], (* XXX Tricky to test because it depends on the exact format
3329         * of the 'df' command and other imponderables.
3330         *)
3331    "report file system disk space usage",
3332    "\
3333 This command runs the C<df> command to report disk space used.
3334
3335 This command is mostly useful for interactive sessions.  It
3336 is I<not> intended that you try to parse the output string.
3337 Use C<statvfs> from programs.");
3338
3339   ("df_h", (RString "output", []), 126, [],
3340    [], (* XXX Tricky to test because it depends on the exact format
3341         * of the 'df' command and other imponderables.
3342         *)
3343    "report file system disk space usage (human readable)",
3344    "\
3345 This command runs the C<df -h> command to report disk space used
3346 in human-readable format.
3347
3348 This command is mostly useful for interactive sessions.  It
3349 is I<not> intended that you try to parse the output string.
3350 Use C<statvfs> from programs.");
3351
3352   ("du", (RInt64 "sizekb", [Pathname "path"]), 127, [],
3353    [InitISOFS, Always, TestOutputInt (
3354       [["du"; "/directory"]], 2 (* ISO fs blocksize is 2K *))],
3355    "estimate file space usage",
3356    "\
3357 This command runs the C<du -s> command to estimate file space
3358 usage for C<path>.
3359
3360 C<path> can be a file or a directory.  If C<path> is a directory
3361 then the estimate includes the contents of the directory and all
3362 subdirectories (recursively).
3363
3364 The result is the estimated size in I<kilobytes>
3365 (ie. units of 1024 bytes).");
3366
3367   ("initrd_list", (RStringList "filenames", [Pathname "path"]), 128, [],
3368    [InitISOFS, Always, TestOutputList (
3369       [["initrd_list"; "/initrd"]], ["empty";"known-1";"known-2";"known-3";"known-4"; "known-5"])],
3370    "list files in an initrd",
3371    "\
3372 This command lists out files contained in an initrd.
3373
3374 The files are listed without any initial C</> character.  The
3375 files are listed in the order they appear (not necessarily
3376 alphabetical).  Directory names are listed as separate items.
3377
3378 Old Linux kernels (2.4 and earlier) used a compressed ext2
3379 filesystem as initrd.  We I<only> support the newer initramfs
3380 format (compressed cpio files).");
3381
3382   ("mount_loop", (RErr, [Pathname "file"; Pathname "mountpoint"]), 129, [],
3383    [],
3384    "mount a file using the loop device",
3385    "\
3386 This command lets you mount C<file> (a filesystem image
3387 in a file) on a mount point.  It is entirely equivalent to
3388 the command C<mount -o loop file mountpoint>.");
3389
3390   ("mkswap", (RErr, [Device "device"]), 130, [],
3391    [InitEmpty, Always, TestRun (
3392       [["part_disk"; "/dev/sda"; "mbr"];
3393        ["mkswap"; "/dev/sda1"]])],
3394    "create a swap partition",
3395    "\
3396 Create a swap partition on C<device>.");
3397
3398   ("mkswap_L", (RErr, [String "label"; Device "device"]), 131, [],
3399    [InitEmpty, Always, TestRun (
3400       [["part_disk"; "/dev/sda"; "mbr"];
3401        ["mkswap_L"; "hello"; "/dev/sda1"]])],
3402    "create a swap partition with a label",
3403    "\
3404 Create a swap partition on C<device> with label C<label>.
3405
3406 Note that you cannot attach a swap label to a block device
3407 (eg. C</dev/sda>), just to a partition.  This appears to be
3408 a limitation of the kernel or swap tools.");
3409
3410   ("mkswap_U", (RErr, [String "uuid"; Device "device"]), 132, [Optional "linuxfsuuid"],
3411    (let uuid = uuidgen () in
3412     [InitEmpty, Always, TestRun (
3413        [["part_disk"; "/dev/sda"; "mbr"];
3414         ["mkswap_U"; uuid; "/dev/sda1"]])]),
3415    "create a swap partition with an explicit UUID",
3416    "\
3417 Create a swap partition on C<device> with UUID C<uuid>.");
3418
3419   ("mknod", (RErr, [Int "mode"; Int "devmajor"; Int "devminor"; Pathname "path"]), 133, [Optional "mknod"],
3420    [InitBasicFS, Always, TestOutputStruct (
3421       [["mknod"; "0o10777"; "0"; "0"; "/node"];
3422        (* NB: default umask 022 means 0777 -> 0755 in these tests *)
3423        ["stat"; "/node"]], [CompareWithInt ("mode", 0o10755)]);
3424     InitBasicFS, Always, TestOutputStruct (
3425       [["mknod"; "0o60777"; "66"; "99"; "/node"];
3426        ["stat"; "/node"]], [CompareWithInt ("mode", 0o60755)])],
3427    "make block, character or FIFO devices",
3428    "\
3429 This call creates block or character special devices, or
3430 named pipes (FIFOs).
3431
3432 The C<mode> parameter should be the mode, using the standard
3433 constants.  C<devmajor> and C<devminor> are the
3434 device major and minor numbers, only used when creating block
3435 and character special devices.
3436
3437 Note that, just like L<mknod(2)>, the mode must be bitwise
3438 OR'd with S_IFBLK, S_IFCHR, S_IFIFO or S_IFSOCK (otherwise this call
3439 just creates a regular file).  These constants are
3440 available in the standard Linux header files, or you can use
3441 C<guestfs_mknod_b>, C<guestfs_mknod_c> or C<guestfs_mkfifo>
3442 which are wrappers around this command which bitwise OR
3443 in the appropriate constant for you.
3444
3445 The mode actually set is affected by the umask.");
3446
3447   ("mkfifo", (RErr, [Int "mode"; Pathname "path"]), 134, [Optional "mknod"],
3448    [InitBasicFS, Always, TestOutputStruct (
3449       [["mkfifo"; "0o777"; "/node"];
3450        ["stat"; "/node"]], [CompareWithInt ("mode", 0o10755)])],
3451    "make FIFO (named pipe)",
3452    "\
3453 This call creates a FIFO (named pipe) called C<path> with
3454 mode C<mode>.  It is just a convenient wrapper around
3455 C<guestfs_mknod>.
3456
3457 The mode actually set is affected by the umask.");
3458
3459   ("mknod_b", (RErr, [Int "mode"; Int "devmajor"; Int "devminor"; Pathname "path"]), 135, [Optional "mknod"],
3460    [InitBasicFS, Always, TestOutputStruct (
3461       [["mknod_b"; "0o777"; "99"; "66"; "/node"];
3462        ["stat"; "/node"]], [CompareWithInt ("mode", 0o60755)])],
3463    "make block device node",
3464    "\
3465 This call creates a block device node called C<path> with
3466 mode C<mode> and device major/minor C<devmajor> and C<devminor>.
3467 It is just a convenient wrapper around C<guestfs_mknod>.
3468
3469 The mode actually set is affected by the umask.");
3470
3471   ("mknod_c", (RErr, [Int "mode"; Int "devmajor"; Int "devminor"; Pathname "path"]), 136, [Optional "mknod"],
3472    [InitBasicFS, Always, TestOutputStruct (
3473       [["mknod_c"; "0o777"; "99"; "66"; "/node"];
3474        ["stat"; "/node"]], [CompareWithInt ("mode", 0o20755)])],
3475    "make char device node",
3476    "\
3477 This call creates a char device node called C<path> with
3478 mode C<mode> and device major/minor C<devmajor> and C<devminor>.
3479 It is just a convenient wrapper around C<guestfs_mknod>.
3480
3481 The mode actually set is affected by the umask.");
3482
3483   ("umask", (RInt "oldmask", [Int "mask"]), 137, [FishOutput FishOutputOctal],
3484    [InitEmpty, Always, TestOutputInt (
3485       [["umask"; "0o22"]], 0o22)],
3486    "set file mode creation mask (umask)",
3487    "\
3488 This function sets the mask used for creating new files and
3489 device nodes to C<mask & 0777>.
3490
3491 Typical umask values would be C<022> which creates new files
3492 with permissions like \"-rw-r--r--\" or \"-rwxr-xr-x\", and
3493 C<002> which creates new files with permissions like
3494 \"-rw-rw-r--\" or \"-rwxrwxr-x\".
3495
3496 The default umask is C<022>.  This is important because it
3497 means that directories and device nodes will be created with
3498 C<0644> or C<0755> mode even if you specify C<0777>.
3499
3500 See also C<guestfs_get_umask>,
3501 L<umask(2)>, C<guestfs_mknod>, C<guestfs_mkdir>.
3502
3503 This call returns the previous umask.");
3504
3505   ("readdir", (RStructList ("entries", "dirent"), [Pathname "dir"]), 138, [],
3506    [],
3507    "read directories entries",
3508    "\
3509 This returns the list of directory entries in directory C<dir>.
3510
3511 All entries in the directory are returned, including C<.> and
3512 C<..>.  The entries are I<not> sorted, but returned in the same
3513 order as the underlying filesystem.
3514
3515 Also this call returns basic file type information about each
3516 file.  The C<ftyp> field will contain one of the following characters:
3517
3518 =over 4
3519
3520 =item 'b'
3521
3522 Block special
3523
3524 =item 'c'
3525
3526 Char special
3527
3528 =item 'd'
3529
3530 Directory
3531
3532 =item 'f'
3533
3534 FIFO (named pipe)
3535
3536 =item 'l'
3537
3538 Symbolic link
3539
3540 =item 'r'
3541
3542 Regular file
3543
3544 =item 's'
3545
3546 Socket
3547
3548 =item 'u'
3549
3550 Unknown file type
3551
3552 =item '?'
3553
3554 The L<readdir(3)> call returned a C<d_type> field with an
3555 unexpected value
3556
3557 =back
3558
3559 This function is primarily intended for use by programs.  To
3560 get a simple list of names, use C<guestfs_ls>.  To get a printable
3561 directory for human consumption, use C<guestfs_ll>.");
3562
3563   ("sfdiskM", (RErr, [Device "device"; StringList "lines"]), 139, [DangerWillRobinson],
3564    [],
3565    "create partitions on a block device",
3566    "\
3567 This is a simplified interface to the C<guestfs_sfdisk>
3568 command, where partition sizes are specified in megabytes
3569 only (rounded to the nearest cylinder) and you don't need
3570 to specify the cyls, heads and sectors parameters which
3571 were rarely if ever used anyway.
3572
3573 See also: C<guestfs_sfdisk>, the L<sfdisk(8)> manpage
3574 and C<guestfs_part_disk>");
3575
3576   ("zfile", (RString "description", [String "meth"; Pathname "path"]), 140, [DeprecatedBy "file"],
3577    [],
3578    "determine file type inside a compressed file",
3579    "\
3580 This command runs C<file> after first decompressing C<path>
3581 using C<method>.
3582
3583 C<method> must be one of C<gzip>, C<compress> or C<bzip2>.
3584
3585 Since 1.0.63, use C<guestfs_file> instead which can now
3586 process compressed files.");
3587
3588   ("getxattrs", (RStructList ("xattrs", "xattr"), [Pathname "path"]), 141, [Optional "linuxxattrs"],
3589    [],
3590    "list extended attributes of a file or directory",
3591    "\
3592 This call lists the extended attributes of the file or directory
3593 C<path>.
3594
3595 At the system call level, this is a combination of the
3596 L<listxattr(2)> and L<getxattr(2)> calls.
3597
3598 See also: C<guestfs_lgetxattrs>, L<attr(5)>.");
3599
3600   ("lgetxattrs", (RStructList ("xattrs", "xattr"), [Pathname "path"]), 142, [Optional "linuxxattrs"],
3601    [],
3602    "list extended attributes of a file or directory",
3603    "\
3604 This is the same as C<guestfs_getxattrs>, but if C<path>
3605 is a symbolic link, then it returns the extended attributes
3606 of the link itself.");
3607
3608   ("setxattr", (RErr, [String "xattr";
3609                        String "val"; Int "vallen"; (* will be BufferIn *)
3610                        Pathname "path"]), 143, [Optional "linuxxattrs"],
3611    [],
3612    "set extended attribute of a file or directory",
3613    "\
3614 This call sets the extended attribute named C<xattr>
3615 of the file C<path> to the value C<val> (of length C<vallen>).
3616 The value is arbitrary 8 bit data.
3617
3618 See also: C<guestfs_lsetxattr>, L<attr(5)>.");
3619
3620   ("lsetxattr", (RErr, [String "xattr";
3621                         String "val"; Int "vallen"; (* will be BufferIn *)
3622                         Pathname "path"]), 144, [Optional "linuxxattrs"],
3623    [],
3624    "set extended attribute of a file or directory",
3625    "\
3626 This is the same as C<guestfs_setxattr>, but if C<path>
3627 is a symbolic link, then it sets an extended attribute
3628 of the link itself.");
3629
3630   ("removexattr", (RErr, [String "xattr"; Pathname "path"]), 145, [Optional "linuxxattrs"],
3631    [],
3632    "remove extended attribute of a file or directory",
3633    "\
3634 This call removes the extended attribute named C<xattr>
3635 of the file C<path>.
3636
3637 See also: C<guestfs_lremovexattr>, L<attr(5)>.");
3638
3639   ("lremovexattr", (RErr, [String "xattr"; Pathname "path"]), 146, [Optional "linuxxattrs"],
3640    [],
3641    "remove extended attribute of a file or directory",
3642    "\
3643 This is the same as C<guestfs_removexattr>, but if C<path>
3644 is a symbolic link, then it removes an extended attribute
3645 of the link itself.");
3646
3647   ("mountpoints", (RHashtable "mps", []), 147, [],
3648    [],
3649    "show mountpoints",
3650    "\
3651 This call is similar to C<guestfs_mounts>.  That call returns
3652 a list of devices.  This one returns a hash table (map) of
3653 device name to directory where the device is mounted.");
3654
3655   ("mkmountpoint", (RErr, [String "exemptpath"]), 148, [],
3656    (* This is a special case: while you would expect a parameter
3657     * of type "Pathname", that doesn't work, because it implies
3658     * NEED_ROOT in the generated calling code in stubs.c, and
3659     * this function cannot use NEED_ROOT.
3660     *)
3661    [],
3662    "create a mountpoint",
3663    "\
3664 C<guestfs_mkmountpoint> and C<guestfs_rmmountpoint> are
3665 specialized calls that can be used to create extra mountpoints
3666 before mounting the first filesystem.
3667
3668 These calls are I<only> necessary in some very limited circumstances,
3669 mainly the case where you want to mount a mix of unrelated and/or
3670 read-only filesystems together.
3671
3672 For example, live CDs often contain a \"Russian doll\" nest of
3673 filesystems, an ISO outer layer, with a squashfs image inside, with
3674 an ext2/3 image inside that.  You can unpack this as follows
3675 in guestfish:
3676
3677  add-ro Fedora-11-i686-Live.iso
3678  run
3679  mkmountpoint /cd
3680  mkmountpoint /squash
3681  mkmountpoint /ext3
3682  mount /dev/sda /cd
3683  mount-loop /cd/LiveOS/squashfs.img /squash
3684  mount-loop /squash/LiveOS/ext3fs.img /ext3
3685
3686 The inner filesystem is now unpacked under the /ext3 mountpoint.");
3687
3688   ("rmmountpoint", (RErr, [String "exemptpath"]), 149, [],
3689    [],
3690    "remove a mountpoint",
3691    "\
3692 This calls removes a mountpoint that was previously created
3693 with C<guestfs_mkmountpoint>.  See C<guestfs_mkmountpoint>
3694 for full details.");
3695
3696   ("read_file", (RBufferOut "content", [Pathname "path"]), 150, [ProtocolLimitWarning],
3697    [InitISOFS, Always, TestOutputBuffer (
3698       [["read_file"; "/known-4"]], "abc\ndef\nghi");
3699     (* Test various near large, large and too large files (RHBZ#589039). *)
3700     InitBasicFS, Always, TestLastFail (
3701       [["touch"; "/a"];
3702        ["truncate_size"; "/a"; "4194303"]; (* GUESTFS_MESSAGE_MAX - 1 *)
3703        ["read_file"; "/a"]]);
3704     InitBasicFS, Always, TestLastFail (
3705       [["touch"; "/a"];
3706        ["truncate_size"; "/a"; "4194304"]; (* GUESTFS_MESSAGE_MAX *)
3707        ["read_file"; "/a"]]);
3708     InitBasicFS, Always, TestLastFail (
3709       [["touch"; "/a"];
3710        ["truncate_size"; "/a"; "41943040"]; (* GUESTFS_MESSAGE_MAX * 10 *)
3711        ["read_file"; "/a"]])],
3712    "read a file",
3713    "\
3714 This calls returns the contents of the file C<path> as a
3715 buffer.
3716
3717 Unlike C<guestfs_cat>, this function can correctly
3718 handle files that contain embedded ASCII NUL characters.
3719 However unlike C<guestfs_download>, this function is limited
3720 in the total size of file that can be handled.");
3721
3722   ("grep", (RStringList "lines", [String "regex"; Pathname "path"]), 151, [ProtocolLimitWarning],
3723    [InitISOFS, Always, TestOutputList (
3724       [["grep"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"]);
3725     InitISOFS, Always, TestOutputList (
3726       [["grep"; "nomatch"; "/test-grep.txt"]], []);
3727     (* Test for RHBZ#579608, absolute symbolic links. *)
3728     InitISOFS, Always, TestOutputList (
3729       [["grep"; "nomatch"; "/abssymlink"]], [])],
3730    "return lines matching a pattern",
3731    "\
3732 This calls the external C<grep> program and returns the
3733 matching lines.");
3734
3735   ("egrep", (RStringList "lines", [String "regex"; Pathname "path"]), 152, [ProtocolLimitWarning],
3736    [InitISOFS, Always, TestOutputList (
3737       [["egrep"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"])],
3738    "return lines matching a pattern",
3739    "\
3740 This calls the external C<egrep> program and returns the
3741 matching lines.");
3742
3743   ("fgrep", (RStringList "lines", [String "pattern"; Pathname "path"]), 153, [ProtocolLimitWarning],
3744    [InitISOFS, Always, TestOutputList (
3745       [["fgrep"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"])],
3746    "return lines matching a pattern",
3747    "\
3748 This calls the external C<fgrep> program and returns the
3749 matching lines.");
3750
3751   ("grepi", (RStringList "lines", [String "regex"; Pathname "path"]), 154, [ProtocolLimitWarning],
3752    [InitISOFS, Always, TestOutputList (
3753       [["grepi"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"; "ABC"])],
3754    "return lines matching a pattern",
3755    "\
3756 This calls the external C<grep -i> program and returns the
3757 matching lines.");
3758
3759   ("egrepi", (RStringList "lines", [String "regex"; Pathname "path"]), 155, [ProtocolLimitWarning],
3760    [InitISOFS, Always, TestOutputList (
3761       [["egrepi"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"; "ABC"])],
3762    "return lines matching a pattern",
3763    "\
3764 This calls the external C<egrep -i> program and returns the
3765 matching lines.");
3766
3767   ("fgrepi", (RStringList "lines", [String "pattern"; Pathname "path"]), 156, [ProtocolLimitWarning],
3768    [InitISOFS, Always, TestOutputList (
3769       [["fgrepi"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"; "ABC"])],
3770    "return lines matching a pattern",
3771    "\
3772 This calls the external C<fgrep -i> program and returns the
3773 matching lines.");
3774
3775   ("zgrep", (RStringList "lines", [String "regex"; Pathname "path"]), 157, [ProtocolLimitWarning],
3776    [InitISOFS, Always, TestOutputList (
3777       [["zgrep"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"])],
3778    "return lines matching a pattern",
3779    "\
3780 This calls the external C<zgrep> program and returns the
3781 matching lines.");
3782
3783   ("zegrep", (RStringList "lines", [String "regex"; Pathname "path"]), 158, [ProtocolLimitWarning],
3784    [InitISOFS, Always, TestOutputList (
3785       [["zegrep"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"])],
3786    "return lines matching a pattern",
3787    "\
3788 This calls the external C<zegrep> program and returns the
3789 matching lines.");
3790
3791   ("zfgrep", (RStringList "lines", [String "pattern"; Pathname "path"]), 159, [ProtocolLimitWarning],
3792    [InitISOFS, Always, TestOutputList (
3793       [["zfgrep"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"])],
3794    "return lines matching a pattern",
3795    "\
3796 This calls the external C<zfgrep> program and returns the
3797 matching lines.");
3798
3799   ("zgrepi", (RStringList "lines", [String "regex"; Pathname "path"]), 160, [ProtocolLimitWarning],
3800    [InitISOFS, Always, TestOutputList (
3801       [["zgrepi"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"; "ABC"])],
3802    "return lines matching a pattern",
3803    "\
3804 This calls the external C<zgrep -i> program and returns the
3805 matching lines.");
3806
3807   ("zegrepi", (RStringList "lines", [String "regex"; Pathname "path"]), 161, [ProtocolLimitWarning],
3808    [InitISOFS, Always, TestOutputList (
3809       [["zegrepi"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"; "ABC"])],
3810    "return lines matching a pattern",
3811    "\
3812 This calls the external C<zegrep -i> program and returns the
3813 matching lines.");
3814
3815   ("zfgrepi", (RStringList "lines", [String "pattern"; Pathname "path"]), 162, [ProtocolLimitWarning],
3816    [InitISOFS, Always, TestOutputList (
3817       [["zfgrepi"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"; "ABC"])],
3818    "return lines matching a pattern",
3819    "\
3820 This calls the external C<zfgrep -i> program and returns the
3821 matching lines.");
3822
3823   ("realpath", (RString "rpath", [Pathname "path"]), 163, [Optional "realpath"],
3824    [InitISOFS, Always, TestOutput (
3825       [["realpath"; "/../directory"]], "/directory")],
3826    "canonicalized absolute pathname",
3827    "\
3828 Return the canonicalized absolute pathname of C<path>.  The
3829 returned path has no C<.>, C<..> or symbolic link path elements.");
3830
3831   ("ln", (RErr, [String "target"; Pathname "linkname"]), 164, [],
3832    [InitBasicFS, Always, TestOutputStruct (
3833       [["touch"; "/a"];
3834        ["ln"; "/a"; "/b"];
3835        ["stat"; "/b"]], [CompareWithInt ("nlink", 2)])],
3836    "create a hard link",
3837    "\
3838 This command creates a hard link using the C<ln> command.");
3839
3840   ("ln_f", (RErr, [String "target"; Pathname "linkname"]), 165, [],
3841    [InitBasicFS, Always, TestOutputStruct (
3842       [["touch"; "/a"];
3843        ["touch"; "/b"];
3844        ["ln_f"; "/a"; "/b"];
3845        ["stat"; "/b"]], [CompareWithInt ("nlink", 2)])],
3846    "create a hard link",
3847    "\
3848 This command creates a hard link using the C<ln -f> command.
3849 The C<-f> option removes the link (C<linkname>) if it exists already.");
3850
3851   ("ln_s", (RErr, [String "target"; Pathname "linkname"]), 166, [],
3852    [InitBasicFS, Always, TestOutputStruct (
3853       [["touch"; "/a"];
3854        ["ln_s"; "a"; "/b"];
3855        ["lstat"; "/b"]], [CompareWithInt ("mode", 0o120777)])],
3856    "create a symbolic link",
3857    "\
3858 This command creates a symbolic link using the C<ln -s> command.");
3859
3860   ("ln_sf", (RErr, [String "target"; Pathname "linkname"]), 167, [],
3861    [InitBasicFS, Always, TestOutput (
3862       [["mkdir_p"; "/a/b"];
3863        ["touch"; "/a/b/c"];
3864        ["ln_sf"; "../d"; "/a/b/c"];
3865        ["readlink"; "/a/b/c"]], "../d")],
3866    "create a symbolic link",
3867    "\
3868 This command creates a symbolic link using the C<ln -sf> command,
3869 The C<-f> option removes the link (C<linkname>) if it exists already.");
3870
3871   ("readlink", (RString "link", [Pathname "path"]), 168, [],
3872    [] (* XXX tested above *),
3873    "read the target of a symbolic link",
3874    "\
3875 This command reads the target of a symbolic link.");
3876
3877   ("fallocate", (RErr, [Pathname "path"; Int "len"]), 169, [DeprecatedBy "fallocate64"],
3878    [InitBasicFS, Always, TestOutputStruct (
3879       [["fallocate"; "/a"; "1000000"];
3880        ["stat"; "/a"]], [CompareWithInt ("size", 1_000_000)])],
3881    "preallocate a file in the guest filesystem",
3882    "\
3883 This command preallocates a file (containing zero bytes) named
3884 C<path> of size C<len> bytes.  If the file exists already, it
3885 is overwritten.
3886
3887 Do not confuse this with the guestfish-specific
3888 C<alloc> command which allocates a file in the host and
3889 attaches it as a device.");
3890
3891   ("swapon_device", (RErr, [Device "device"]), 170, [],
3892    [InitPartition, Always, TestRun (
3893       [["mkswap"; "/dev/sda1"];
3894        ["swapon_device"; "/dev/sda1"];
3895        ["swapoff_device"; "/dev/sda1"]])],
3896    "enable swap on device",
3897    "\
3898 This command enables the libguestfs appliance to use the
3899 swap device or partition named C<device>.  The increased
3900 memory is made available for all commands, for example
3901 those run using C<guestfs_command> or C<guestfs_sh>.
3902
3903 Note that you should not swap to existing guest swap
3904 partitions unless you know what you are doing.  They may
3905 contain hibernation information, or other information that
3906 the guest doesn't want you to trash.  You also risk leaking
3907 information about the host to the guest this way.  Instead,
3908 attach a new host device to the guest and swap on that.");
3909
3910   ("swapoff_device", (RErr, [Device "device"]), 171, [],
3911    [], (* XXX tested by swapon_device *)
3912    "disable swap on device",
3913    "\
3914 This command disables the libguestfs appliance swap
3915 device or partition named C<device>.
3916 See C<guestfs_swapon_device>.");
3917
3918   ("swapon_file", (RErr, [Pathname "file"]), 172, [],
3919    [InitBasicFS, Always, TestRun (
3920       [["fallocate"; "/swap"; "8388608"];
3921        ["mkswap_file"; "/swap"];
3922        ["swapon_file"; "/swap"];
3923        ["swapoff_file"; "/swap"]])],
3924    "enable swap on file",
3925    "\
3926 This command enables swap to a file.
3927 See C<guestfs_swapon_device> for other notes.");
3928
3929   ("swapoff_file", (RErr, [Pathname "file"]), 173, [],
3930    [], (* XXX tested by swapon_file *)
3931    "disable swap on file",
3932    "\
3933 This command disables the libguestfs appliance swap on file.");
3934
3935   ("swapon_label", (RErr, [String "label"]), 174, [],
3936    [InitEmpty, Always, TestRun (
3937       [["part_disk"; "/dev/sdb"; "mbr"];
3938        ["mkswap_L"; "swapit"; "/dev/sdb1"];
3939        ["swapon_label"; "swapit"];
3940        ["swapoff_label"; "swapit"];
3941        ["zero"; "/dev/sdb"];
3942        ["blockdev_rereadpt"; "/dev/sdb"]])],
3943    "enable swap on labeled swap partition",
3944    "\
3945 This command enables swap to a labeled swap partition.
3946 See C<guestfs_swapon_device> for other notes.");
3947
3948   ("swapoff_label", (RErr, [String "label"]), 175, [],
3949    [], (* XXX tested by swapon_label *)
3950    "disable swap on labeled swap partition",
3951    "\
3952 This command disables the libguestfs appliance swap on
3953 labeled swap partition.");
3954
3955   ("swapon_uuid", (RErr, [String "uuid"]), 176, [Optional "linuxfsuuid"],
3956    (let uuid = uuidgen () in
3957     [InitEmpty, Always, TestRun (
3958        [["mkswap_U"; uuid; "/dev/sdb"];
3959         ["swapon_uuid"; uuid];
3960         ["swapoff_uuid"; uuid]])]),
3961    "enable swap on swap partition by UUID",
3962    "\
3963 This command enables swap to a swap partition with the given UUID.
3964 See C<guestfs_swapon_device> for other notes.");
3965
3966   ("swapoff_uuid", (RErr, [String "uuid"]), 177, [Optional "linuxfsuuid"],
3967    [], (* XXX tested by swapon_uuid *)
3968    "disable swap on swap partition by UUID",
3969    "\
3970 This command disables the libguestfs appliance swap partition
3971 with the given UUID.");
3972
3973   ("mkswap_file", (RErr, [Pathname "path"]), 178, [],
3974    [InitBasicFS, Always, TestRun (
3975       [["fallocate"; "/swap"; "8388608"];
3976        ["mkswap_file"; "/swap"]])],
3977    "create a swap file",
3978    "\
3979 Create a swap file.
3980
3981 This command just writes a swap file signature to an existing
3982 file.  To create the file itself, use something like C<guestfs_fallocate>.");
3983
3984   ("inotify_init", (RErr, [Int "maxevents"]), 179, [Optional "inotify"],
3985    [InitISOFS, Always, TestRun (
3986       [["inotify_init"; "0"]])],
3987    "create an inotify handle",
3988    "\
3989 This command creates a new inotify handle.
3990 The inotify subsystem can be used to notify events which happen to
3991 objects in the guest filesystem.
3992
3993 C<maxevents> is the maximum number of events which will be
3994 queued up between calls to C<guestfs_inotify_read> or
3995 C<guestfs_inotify_files>.
3996 If this is passed as C<0>, then the kernel (or previously set)
3997 default is used.  For Linux 2.6.29 the default was 16384 events.
3998 Beyond this limit, the kernel throws away events, but records
3999 the fact that it threw them away by setting a flag
4000 C<IN_Q_OVERFLOW> in the returned structure list (see
4001 C<guestfs_inotify_read>).
4002
4003 Before any events are generated, you have to add some
4004 watches to the internal watch list.  See:
4005 C<guestfs_inotify_add_watch>,
4006 C<guestfs_inotify_rm_watch> and
4007 C<guestfs_inotify_watch_all>.
4008
4009 Queued up events should be read periodically by calling
4010 C<guestfs_inotify_read>
4011 (or C<guestfs_inotify_files> which is just a helpful
4012 wrapper around C<guestfs_inotify_read>).  If you don't
4013 read the events out often enough then you risk the internal
4014 queue overflowing.
4015
4016 The handle should be closed after use by calling
4017 C<guestfs_inotify_close>.  This also removes any
4018 watches automatically.
4019
4020 See also L<inotify(7)> for an overview of the inotify interface
4021 as exposed by the Linux kernel, which is roughly what we expose
4022 via libguestfs.  Note that there is one global inotify handle
4023 per libguestfs instance.");
4024
4025   ("inotify_add_watch", (RInt64 "wd", [Pathname "path"; Int "mask"]), 180, [Optional "inotify"],
4026    [InitBasicFS, Always, TestOutputList (
4027       [["inotify_init"; "0"];
4028        ["inotify_add_watch"; "/"; "1073741823"];
4029        ["touch"; "/a"];
4030        ["touch"; "/b"];
4031        ["inotify_files"]], ["a"; "b"])],
4032    "add an inotify watch",
4033    "\
4034 Watch C<path> for the events listed in C<mask>.
4035
4036 Note that if C<path> is a directory then events within that
4037 directory are watched, but this does I<not> happen recursively
4038 (in subdirectories).
4039
4040 Note for non-C or non-Linux callers: the inotify events are
4041 defined by the Linux kernel ABI and are listed in
4042 C</usr/include/sys/inotify.h>.");
4043
4044   ("inotify_rm_watch", (RErr, [Int(*XXX64*) "wd"]), 181, [Optional "inotify"],
4045    [],
4046    "remove an inotify watch",
4047    "\
4048 Remove a previously defined inotify watch.
4049 See C<guestfs_inotify_add_watch>.");
4050
4051   ("inotify_read", (RStructList ("events", "inotify_event"), []), 182, [Optional "inotify"],
4052    [],
4053    "return list of inotify events",
4054    "\
4055 Return the complete queue of events that have happened
4056 since the previous read call.
4057
4058 If no events have happened, this returns an empty list.
4059
4060 I<Note>: In order to make sure that all events have been
4061 read, you must call this function repeatedly until it
4062 returns an empty list.  The reason is that the call will
4063 read events up to the maximum appliance-to-host message
4064 size and leave remaining events in the queue.");
4065
4066   ("inotify_files", (RStringList "paths", []), 183, [Optional "inotify"],
4067    [],
4068    "return list of watched files that had events",
4069    "\
4070 This function is a helpful wrapper around C<guestfs_inotify_read>
4071 which just returns a list of pathnames of objects that were
4072 touched.  The returned pathnames are sorted and deduplicated.");
4073
4074   ("inotify_close", (RErr, []), 184, [Optional "inotify"],
4075    [],
4076    "close the inotify handle",
4077    "\
4078 This closes the inotify handle which was previously
4079 opened by inotify_init.  It removes all watches, throws
4080 away any pending events, and deallocates all resources.");
4081
4082   ("setcon", (RErr, [String "context"]), 185, [Optional "selinux"],
4083    [],
4084    "set SELinux security context",
4085    "\
4086 This sets the SELinux security context of the daemon
4087 to the string C<context>.
4088
4089 See the documentation about SELINUX in L<guestfs(3)>.");
4090
4091   ("getcon", (RString "context", []), 186, [Optional "selinux"],
4092    [],
4093    "get SELinux security context",
4094    "\
4095 This gets the SELinux security context of the daemon.
4096
4097 See the documentation about SELINUX in L<guestfs(3)>,
4098 and C<guestfs_setcon>");
4099
4100   ("mkfs_b", (RErr, [String "fstype"; Int "blocksize"; Device "device"]), 187, [],
4101    [InitEmpty, Always, TestOutput (
4102       [["part_disk"; "/dev/sda"; "mbr"];
4103        ["mkfs_b"; "ext2"; "4096"; "/dev/sda1"];
4104        ["mount_options"; ""; "/dev/sda1"; "/"];
4105        ["write"; "/new"; "new file contents"];
4106        ["cat"; "/new"]], "new file contents");
4107     InitEmpty, Always, TestRun (
4108       [["part_disk"; "/dev/sda"; "mbr"];
4109        ["mkfs_b"; "vfat"; "32768"; "/dev/sda1"]]);
4110     InitEmpty, Always, TestLastFail (
4111       [["part_disk"; "/dev/sda"; "mbr"];
4112        ["mkfs_b"; "vfat"; "32769"; "/dev/sda1"]]);
4113     InitEmpty, Always, TestLastFail (
4114       [["part_disk"; "/dev/sda"; "mbr"];
4115        ["mkfs_b"; "vfat"; "33280"; "/dev/sda1"]]);
4116     InitEmpty, IfAvailable "ntfsprogs", TestRun (
4117       [["part_disk"; "/dev/sda"; "mbr"];
4118        ["mkfs_b"; "ntfs"; "32768"; "/dev/sda1"]])],
4119    "make a filesystem with block size",
4120    "\
4121 This call is similar to C<guestfs_mkfs>, but it allows you to
4122 control the block size of the resulting filesystem.  Supported
4123 block sizes depend on the filesystem type, but typically they
4124 are C<1024>, C<2048> or C<4096> only.
4125
4126 For VFAT and NTFS the C<blocksize> parameter is treated as
4127 the requested cluster size.");
4128
4129   ("mke2journal", (RErr, [Int "blocksize"; Device "device"]), 188, [],
4130    [InitEmpty, Always, TestOutput (
4131       [["sfdiskM"; "/dev/sda"; ",100 ,"];
4132        ["mke2journal"; "4096"; "/dev/sda1"];
4133        ["mke2fs_J"; "ext2"; "4096"; "/dev/sda2"; "/dev/sda1"];
4134        ["mount_options"; ""; "/dev/sda2"; "/"];
4135        ["write"; "/new"; "new file contents"];
4136        ["cat"; "/new"]], "new file contents")],
4137    "make ext2/3/4 external journal",
4138    "\
4139 This creates an ext2 external journal on C<device>.  It is equivalent
4140 to the command:
4141
4142  mke2fs -O journal_dev -b blocksize device");
4143
4144   ("mke2journal_L", (RErr, [Int "blocksize"; String "label"; Device "device"]), 189, [],
4145    [InitEmpty, Always, TestOutput (
4146       [["sfdiskM"; "/dev/sda"; ",100 ,"];
4147        ["mke2journal_L"; "4096"; "JOURNAL"; "/dev/sda1"];
4148        ["mke2fs_JL"; "ext2"; "4096"; "/dev/sda2"; "JOURNAL"];
4149        ["mount_options"; ""; "/dev/sda2"; "/"];
4150        ["write"; "/new"; "new file contents"];
4151        ["cat"; "/new"]], "new file contents")],
4152    "make ext2/3/4 external journal with label",
4153    "\
4154 This creates an ext2 external journal on C<device> with label C<label>.");
4155
4156   ("mke2journal_U", (RErr, [Int "blocksize"; String "uuid"; Device "device"]), 190, [Optional "linuxfsuuid"],
4157    (let uuid = uuidgen () in
4158     [InitEmpty, Always, TestOutput (
4159        [["sfdiskM"; "/dev/sda"; ",100 ,"];
4160         ["mke2journal_U"; "4096"; uuid; "/dev/sda1"];
4161         ["mke2fs_JU"; "ext2"; "4096"; "/dev/sda2"; uuid];
4162         ["mount_options"; ""; "/dev/sda2"; "/"];
4163         ["write"; "/new"; "new file contents"];
4164         ["cat"; "/new"]], "new file contents")]),
4165    "make ext2/3/4 external journal with UUID",
4166    "\
4167 This creates an ext2 external journal on C<device> with UUID C<uuid>.");
4168
4169   ("mke2fs_J", (RErr, [String "fstype"; Int "blocksize"; Device "device"; Device "journal"]), 191, [],
4170    [],
4171    "make ext2/3/4 filesystem with external journal",
4172    "\
4173 This creates an ext2/3/4 filesystem on C<device> with
4174 an external journal on C<journal>.  It is equivalent
4175 to the command:
4176
4177  mke2fs -t fstype -b blocksize -J device=<journal> <device>
4178
4179 See also C<guestfs_mke2journal>.");
4180
4181   ("mke2fs_JL", (RErr, [String "fstype"; Int "blocksize"; Device "device"; String "label"]), 192, [],
4182    [],
4183    "make ext2/3/4 filesystem with external journal",
4184    "\
4185 This creates an ext2/3/4 filesystem on C<device> with
4186 an external journal on the journal labeled C<label>.
4187
4188 See also C<guestfs_mke2journal_L>.");
4189
4190   ("mke2fs_JU", (RErr, [String "fstype"; Int "blocksize"; Device "device"; String "uuid"]), 193, [Optional "linuxfsuuid"],
4191    [],
4192    "make ext2/3/4 filesystem with external journal",
4193    "\
4194 This creates an ext2/3/4 filesystem on C<device> with
4195 an external journal on the journal with UUID C<uuid>.
4196
4197 See also C<guestfs_mke2journal_U>.");
4198
4199   ("modprobe", (RErr, [String "modulename"]), 194, [Optional "linuxmodules"],
4200    [InitNone, Always, TestRun [["modprobe"; "fat"]]],
4201    "load a kernel module",
4202    "\
4203 This loads a kernel module in the appliance.
4204
4205 The kernel module must have been whitelisted when libguestfs
4206 was built (see C<appliance/kmod.whitelist.in> in the source).");
4207
4208   ("echo_daemon", (RString "output", [StringList "words"]), 195, [],
4209    [InitNone, Always, TestOutput (
4210       [["echo_daemon"; "This is a test"]], "This is a test"
4211     )],
4212    "echo arguments back to the client",
4213    "\
4214 This command concatenates the list of C<words> passed with single spaces
4215 between them and returns the resulting string.
4216
4217 You can use this command to test the connection through to the daemon.
4218
4219 See also C<guestfs_ping_daemon>.");
4220
4221   ("find0", (RErr, [Pathname "directory"; FileOut "files"]), 196, [],
4222    [], (* There is a regression test for this. *)
4223    "find all files and directories, returning NUL-separated list",
4224    "\
4225 This command lists out all files and directories, recursively,
4226 starting at C<directory>, placing the resulting list in the
4227 external file called C<files>.
4228
4229 This command works the same way as C<guestfs_find> with the
4230 following exceptions:
4231
4232 =over 4
4233
4234 =item *
4235
4236 The resulting list is written to an external file.
4237
4238 =item *
4239
4240 Items (filenames) in the result are separated
4241 by C<\\0> characters.  See L<find(1)> option I<-print0>.
4242
4243 =item *
4244
4245 This command is not limited in the number of names that it
4246 can return.
4247
4248 =item *
4249
4250 The result list is not sorted.
4251
4252 =back");
4253
4254   ("case_sensitive_path", (RString "rpath", [Pathname "path"]), 197, [],
4255    [InitISOFS, Always, TestOutput (
4256       [["case_sensitive_path"; "/DIRECTORY"]], "/directory");
4257     InitISOFS, Always, TestOutput (
4258       [["case_sensitive_path"; "/DIRECTORY/"]], "/directory");
4259     InitISOFS, Always, TestOutput (
4260       [["case_sensitive_path"; "/Known-1"]], "/known-1");
4261     InitISOFS, Always, TestLastFail (
4262       [["case_sensitive_path"; "/Known-1/"]]);
4263     InitBasicFS, Always, TestOutput (
4264       [["mkdir"; "/a"];
4265        ["mkdir"; "/a/bbb"];
4266        ["touch"; "/a/bbb/c"];
4267        ["case_sensitive_path"; "/A/bbB/C"]], "/a/bbb/c");
4268     InitBasicFS, Always, TestOutput (
4269       [["mkdir"; "/a"];
4270        ["mkdir"; "/a/bbb"];
4271        ["touch"; "/a/bbb/c"];
4272        ["case_sensitive_path"; "/A////bbB/C"]], "/a/bbb/c");
4273     InitBasicFS, Always, TestLastFail (
4274       [["mkdir"; "/a"];
4275        ["mkdir"; "/a/bbb"];
4276        ["touch"; "/a/bbb/c"];
4277        ["case_sensitive_path"; "/A/bbb/../bbb/C"]])],
4278    "return true path on case-insensitive filesystem",
4279    "\
4280 This can be used to resolve case insensitive paths on
4281 a filesystem which is case sensitive.  The use case is
4282 to resolve paths which you have read from Windows configuration
4283 files or the Windows Registry, to the true path.
4284
4285 The command handles a peculiarity of the Linux ntfs-3g
4286 filesystem driver (and probably others), which is that although
4287 the underlying filesystem is case-insensitive, the driver
4288 exports the filesystem to Linux as case-sensitive.
4289
4290 One consequence of this is that special directories such
4291 as C<c:\\windows> may appear as C</WINDOWS> or C</windows>
4292 (or other things) depending on the precise details of how
4293 they were created.  In Windows itself this would not be
4294 a problem.
4295
4296 Bug or feature?  You decide:
4297 L<http://www.tuxera.com/community/ntfs-3g-faq/#posixfilenames1>
4298
4299 This function resolves the true case of each element in the
4300 path and returns the case-sensitive path.
4301
4302 Thus C<guestfs_case_sensitive_path> (\"/Windows/System32\")
4303 might return C<\"/WINDOWS/system32\"> (the exact return value
4304 would depend on details of how the directories were originally
4305 created under Windows).
4306
4307 I<Note>:
4308 This function does not handle drive names, backslashes etc.
4309
4310 See also C<guestfs_realpath>.");
4311
4312   ("vfs_type", (RString "fstype", [Device "device"]), 198, [],
4313    [InitBasicFS, Always, TestOutput (
4314       [["vfs_type"; "/dev/sda1"]], "ext2")],
4315    "get the Linux VFS type corresponding to a mounted device",
4316    "\
4317 This command gets the filesystem type corresponding to
4318 the filesystem on C<device>.
4319
4320 For most filesystems, the result is the name of the Linux
4321 VFS module which would be used to mount this filesystem
4322 if you mounted it without specifying the filesystem type.
4323 For example a string such as C<ext3> or C<ntfs>.");
4324
4325   ("truncate", (RErr, [Pathname "path"]), 199, [],
4326    [InitBasicFS, Always, TestOutputStruct (
4327       [["write"; "/test"; "some stuff so size is not zero"];
4328        ["truncate"; "/test"];
4329        ["stat"; "/test"]], [CompareWithInt ("size", 0)])],
4330    "truncate a file to zero size",
4331    "\
4332 This command truncates C<path> to a zero-length file.  The
4333 file must exist already.");
4334
4335   ("truncate_size", (RErr, [Pathname "path"; Int64 "size"]), 200, [],
4336    [InitBasicFS, Always, TestOutputStruct (
4337       [["touch"; "/test"];
4338        ["truncate_size"; "/test"; "1000"];
4339        ["stat"; "/test"]], [CompareWithInt ("size", 1000)])],
4340    "truncate a file to a particular size",
4341    "\
4342 This command truncates C<path> to size C<size> bytes.  The file
4343 must exist already.
4344
4345 If the current file size is less than C<size> then
4346 the file is extended to the required size with zero bytes.
4347 This creates a sparse file (ie. disk blocks are not allocated
4348 for the file until you write to it).  To create a non-sparse
4349 file of zeroes, use C<guestfs_fallocate64> instead.");
4350
4351   ("utimens", (RErr, [Pathname "path"; Int64 "atsecs"; Int64 "atnsecs"; Int64 "mtsecs"; Int64 "mtnsecs"]), 201, [],
4352    [InitBasicFS, Always, TestOutputStruct (
4353       [["touch"; "/test"];
4354        ["utimens"; "/test"; "12345"; "67890"; "9876"; "5432"];
4355        ["stat"; "/test"]], [CompareWithInt ("mtime", 9876)])],
4356    "set timestamp of a file with nanosecond precision",
4357    "\
4358 This command sets the timestamps of a file with nanosecond
4359 precision.
4360
4361 C<atsecs, atnsecs> are the last access time (atime) in secs and
4362 nanoseconds from the epoch.
4363
4364 C<mtsecs, mtnsecs> are the last modification time (mtime) in
4365 secs and nanoseconds from the epoch.
4366
4367 If the C<*nsecs> field contains the special value C<-1> then
4368 the corresponding timestamp is set to the current time.  (The
4369 C<*secs> field is ignored in this case).
4370
4371 If the C<*nsecs> field contains the special value C<-2> then
4372 the corresponding timestamp is left unchanged.  (The
4373 C<*secs> field is ignored in this case).");
4374
4375   ("mkdir_mode", (RErr, [Pathname "path"; Int "mode"]), 202, [],
4376    [InitBasicFS, Always, TestOutputStruct (
4377       [["mkdir_mode"; "/test"; "0o111"];
4378        ["stat"; "/test"]], [CompareWithInt ("mode", 0o40111)])],
4379    "create a directory with a particular mode",
4380    "\
4381 This command creates a directory, setting the initial permissions
4382 of the directory to C<mode>.
4383
4384 For common Linux filesystems, the actual mode which is set will
4385 be C<mode & ~umask & 01777>.  Non-native-Linux filesystems may
4386 interpret the mode in other ways.
4387
4388 See also C<guestfs_mkdir>, C<guestfs_umask>");
4389
4390   ("lchown", (RErr, [Int "owner"; Int "group"; Pathname "path"]), 203, [],
4391    [], (* XXX *)
4392    "change file owner and group",
4393    "\
4394 Change the file owner to C<owner> and group to C<group>.
4395 This is like C<guestfs_chown> but if C<path> is a symlink then
4396 the link itself is changed, not the target.
4397
4398 Only numeric uid and gid are supported.  If you want to use
4399 names, you will need to locate and parse the password file
4400 yourself (Augeas support makes this relatively easy).");
4401
4402   ("lstatlist", (RStructList ("statbufs", "stat"), [Pathname "path"; StringList "names"]), 204, [],
4403    [], (* XXX *)
4404    "lstat on multiple files",
4405    "\
4406 This call allows you to perform the C<guestfs_lstat> operation
4407 on multiple files, where all files are in the directory C<path>.
4408 C<names> is the list of files from this directory.
4409
4410 On return you get a list of stat structs, with a one-to-one
4411 correspondence to the C<names> list.  If any name did not exist
4412 or could not be lstat'd, then the C<ino> field of that structure
4413 is set to C<-1>.
4414
4415 This call is intended for programs that want to efficiently
4416 list a directory contents without making many round-trips.
4417 See also C<guestfs_lxattrlist> for a similarly efficient call
4418 for getting extended attributes.  Very long directory listings
4419 might cause the protocol message size to be exceeded, causing
4420 this call to fail.  The caller must split up such requests
4421 into smaller groups of names.");
4422
4423   ("lxattrlist", (RStructList ("xattrs", "xattr"), [Pathname "path"; StringList "names"]), 205, [Optional "linuxxattrs"],
4424    [], (* XXX *)
4425    "lgetxattr on multiple files",
4426    "\
4427 This call allows you to get the extended attributes
4428 of multiple files, where all files are in the directory C<path>.
4429 C<names> is the list of files from this directory.
4430
4431 On return you get a flat list of xattr structs which must be
4432 interpreted sequentially.  The first xattr struct always has a zero-length
4433 C<attrname>.  C<attrval> in this struct is zero-length
4434 to indicate there was an error doing C<lgetxattr> for this
4435 file, I<or> is a C string which is a decimal number
4436 (the number of following attributes for this file, which could
4437 be C<\"0\">).  Then after the first xattr struct are the
4438 zero or more attributes for the first named file.
4439 This repeats for the second and subsequent files.
4440
4441 This call is intended for programs that want to efficiently
4442 list a directory contents without making many round-trips.
4443 See also C<guestfs_lstatlist> for a similarly efficient call
4444 for getting standard stats.  Very long directory listings
4445 might cause the protocol message size to be exceeded, causing
4446 this call to fail.  The caller must split up such requests
4447 into smaller groups of names.");
4448
4449   ("readlinklist", (RStringList "links", [Pathname "path"; StringList "names"]), 206, [],
4450    [], (* XXX *)
4451    "readlink on multiple files",
4452    "\
4453 This call allows you to do a C<readlink> operation
4454 on multiple files, where all files are in the directory C<path>.
4455 C<names> is the list of files from this directory.
4456
4457 On return you get a list of strings, with a one-to-one
4458 correspondence to the C<names> list.  Each string is the
4459 value of the symbolic link.
4460
4461 If the C<readlink(2)> operation fails on any name, then
4462 the corresponding result string is the empty string C<\"\">.
4463 However the whole operation is completed even if there
4464 were C<readlink(2)> errors, and so you can call this
4465 function with names where you don't know if they are
4466 symbolic links already (albeit slightly less efficient).
4467
4468 This call is intended for programs that want to efficiently
4469 list a directory contents without making many round-trips.
4470 Very long directory listings might cause the protocol
4471 message size to be exceeded, causing
4472 this call to fail.  The caller must split up such requests
4473 into smaller groups of names.");
4474
4475   ("pread", (RBufferOut "content", [Pathname "path"; Int "count"; Int64 "offset"]), 207, [ProtocolLimitWarning],
4476    [InitISOFS, Always, TestOutputBuffer (
4477       [["pread"; "/known-4"; "1"; "3"]], "\n");
4478     InitISOFS, Always, TestOutputBuffer (
4479       [["pread"; "/empty"; "0"; "100"]], "")],
4480    "read part of a file",
4481    "\
4482 This command lets you read part of a file.  It reads C<count>
4483 bytes of the file, starting at C<offset>, from file C<path>.
4484
4485 This may read fewer bytes than requested.  For further details
4486 see the L<pread(2)> system call.
4487
4488 See also C<guestfs_pwrite>.");
4489
4490   ("part_init", (RErr, [Device "device"; String "parttype"]), 208, [],
4491    [InitEmpty, Always, TestRun (
4492       [["part_init"; "/dev/sda"; "gpt"]])],
4493    "create an empty partition table",
4494    "\
4495 This creates an empty partition table on C<device> of one of the
4496 partition types listed below.  Usually C<parttype> should be
4497 either C<msdos> or C<gpt> (for large disks).
4498
4499 Initially there are no partitions.  Following this, you should
4500 call C<guestfs_part_add> for each partition required.
4501
4502 Possible values for C<parttype> are:
4503
4504 =over 4
4505
4506 =item B<efi> | B<gpt>
4507
4508 Intel EFI / GPT partition table.
4509
4510 This is recommended for >= 2 TB partitions that will be accessed
4511 from Linux and Intel-based Mac OS X.  It also has limited backwards
4512 compatibility with the C<mbr> format.
4513
4514 =item B<mbr> | B<msdos>
4515
4516 The standard PC \"Master Boot Record\" (MBR) format used
4517 by MS-DOS and Windows.  This partition type will B<only> work
4518 for device sizes up to 2 TB.  For large disks we recommend
4519 using C<gpt>.
4520
4521 =back
4522
4523 Other partition table types that may work but are not
4524 supported include:
4525
4526 =over 4
4527
4528 =item B<aix>
4529
4530 AIX disk labels.
4531
4532 =item B<amiga> | B<rdb>
4533
4534 Amiga \"Rigid Disk Block\" format.
4535
4536 =item B<bsd>
4537
4538 BSD disk labels.
4539
4540 =item B<dasd>
4541
4542 DASD, used on IBM mainframes.
4543
4544 =item B<dvh>
4545
4546 MIPS/SGI volumes.
4547
4548 =item B<mac>
4549
4550 Old Mac partition format.  Modern Macs use C<gpt>.
4551
4552 =item B<pc98>
4553
4554 NEC PC-98 format, common in Japan apparently.
4555
4556 =item B<sun>
4557
4558 Sun disk labels.
4559
4560 =back");
4561
4562   ("part_add", (RErr, [Device "device"; String "prlogex"; Int64 "startsect"; Int64 "endsect"]), 209, [],
4563    [InitEmpty, Always, TestRun (
4564       [["part_init"; "/dev/sda"; "mbr"];
4565        ["part_add"; "/dev/sda"; "primary"; "1"; "-1"]]);
4566     InitEmpty, Always, TestRun (
4567       [["part_init"; "/dev/sda"; "gpt"];
4568        ["part_add"; "/dev/sda"; "primary"; "34"; "127"];
4569        ["part_add"; "/dev/sda"; "primary"; "128"; "-34"]]);
4570     InitEmpty, Always, TestRun (
4571       [["part_init"; "/dev/sda"; "mbr"];
4572        ["part_add"; "/dev/sda"; "primary"; "32"; "127"];
4573        ["part_add"; "/dev/sda"; "primary"; "128"; "255"];
4574        ["part_add"; "/dev/sda"; "primary"; "256"; "511"];
4575        ["part_add"; "/dev/sda"; "primary"; "512"; "-1"]])],
4576    "add a partition to the device",
4577    "\
4578 This command adds a partition to C<device>.  If there is no partition
4579 table on the device, call C<guestfs_part_init> first.
4580
4581 The C<prlogex> parameter is the type of partition.  Normally you
4582 should pass C<p> or C<primary> here, but MBR partition tables also
4583 support C<l> (or C<logical>) and C<e> (or C<extended>) partition
4584 types.
4585
4586 C<startsect> and C<endsect> are the start and end of the partition
4587 in I<sectors>.  C<endsect> may be negative, which means it counts
4588 backwards from the end of the disk (C<-1> is the last sector).
4589
4590 Creating a partition which covers the whole disk is not so easy.
4591 Use C<guestfs_part_disk> to do that.");
4592
4593   ("part_disk", (RErr, [Device "device"; String "parttype"]), 210, [DangerWillRobinson],
4594    [InitEmpty, Always, TestRun (
4595       [["part_disk"; "/dev/sda"; "mbr"]]);
4596     InitEmpty, Always, TestRun (
4597       [["part_disk"; "/dev/sda"; "gpt"]])],
4598    "partition whole disk with a single primary partition",
4599    "\
4600 This command is simply a combination of C<guestfs_part_init>
4601 followed by C<guestfs_part_add> to create a single primary partition
4602 covering the whole disk.
4603
4604 C<parttype> is the partition table type, usually C<mbr> or C<gpt>,
4605 but other possible values are described in C<guestfs_part_init>.");
4606
4607   ("part_set_bootable", (RErr, [Device "device"; Int "partnum"; Bool "bootable"]), 211, [],
4608    [InitEmpty, Always, TestRun (
4609       [["part_disk"; "/dev/sda"; "mbr"];
4610        ["part_set_bootable"; "/dev/sda"; "1"; "true"]])],
4611    "make a partition bootable",
4612    "\
4613 This sets the bootable flag on partition numbered C<partnum> on
4614 device C<device>.  Note that partitions are numbered from 1.
4615
4616 The bootable flag is used by some operating systems (notably
4617 Windows) to determine which partition to boot from.  It is by
4618 no means universally recognized.");
4619
4620   ("part_set_name", (RErr, [Device "device"; Int "partnum"; String "name"]), 212, [],
4621    [InitEmpty, Always, TestRun (
4622       [["part_disk"; "/dev/sda"; "gpt"];
4623        ["part_set_name"; "/dev/sda"; "1"; "thepartname"]])],
4624    "set partition name",
4625    "\
4626 This sets the partition name on partition numbered C<partnum> on
4627 device C<device>.  Note that partitions are numbered from 1.
4628
4629 The partition name can only be set on certain types of partition
4630 table.  This works on C<gpt> but not on C<mbr> partitions.");
4631
4632   ("part_list", (RStructList ("partitions", "partition"), [Device "device"]), 213, [],
4633    [], (* XXX Add a regression test for this. *)
4634    "list partitions on a device",
4635    "\
4636 This command parses the partition table on C<device> and
4637 returns the list of partitions found.
4638
4639 The fields in the returned structure are:
4640
4641 =over 4
4642
4643 =item B<part_num>
4644
4645 Partition number, counting from 1.
4646
4647 =item B<part_start>
4648
4649 Start of the partition I<in bytes>.  To get sectors you have to
4650 divide by the device's sector size, see C<guestfs_blockdev_getss>.
4651
4652 =item B<part_end>
4653
4654 End of the partition in bytes.
4655
4656 =item B<part_size>
4657
4658 Size of the partition in bytes.
4659
4660 =back");
4661
4662   ("part_get_parttype", (RString "parttype", [Device "device"]), 214, [],
4663    [InitEmpty, Always, TestOutput (
4664       [["part_disk"; "/dev/sda"; "gpt"];
4665        ["part_get_parttype"; "/dev/sda"]], "gpt")],
4666    "get the partition table type",
4667    "\
4668 This command examines the partition table on C<device> and
4669 returns the partition table type (format) being used.
4670
4671 Common return values include: C<msdos> (a DOS/Windows style MBR
4672 partition table), C<gpt> (a GPT/EFI-style partition table).  Other
4673 values are possible, although unusual.  See C<guestfs_part_init>
4674 for a full list.");
4675
4676   ("fill", (RErr, [Int "c"; Int "len"; Pathname "path"]), 215, [],
4677    [InitBasicFS, Always, TestOutputBuffer (
4678       [["fill"; "0x63"; "10"; "/test"];
4679        ["read_file"; "/test"]], "cccccccccc")],
4680    "fill a file with octets",
4681    "\
4682 This command creates a new file called C<path>.  The initial
4683 content of the file is C<len> octets of C<c>, where C<c>
4684 must be a number in the range C<[0..255]>.
4685
4686 To fill a file with zero bytes (sparsely), it is
4687 much more efficient to use C<guestfs_truncate_size>.
4688 To create a file with a pattern of repeating bytes
4689 use C<guestfs_fill_pattern>.");
4690
4691   ("available", (RErr, [StringList "groups"]), 216, [],
4692    [InitNone, Always, TestRun [["available"; ""]]],
4693    "test availability of some parts of the API",
4694    "\
4695 This command is used to check the availability of some
4696 groups of functionality in the appliance, which not all builds of
4697 the libguestfs appliance will be able to provide.
4698
4699 The libguestfs groups, and the functions that those
4700 groups correspond to, are listed in L<guestfs(3)/AVAILABILITY>.
4701 You can also fetch this list at runtime by calling
4702 C<guestfs_available_all_groups>.
4703
4704 The argument C<groups> is a list of group names, eg:
4705 C<[\"inotify\", \"augeas\"]> would check for the availability of
4706 the Linux inotify functions and Augeas (configuration file
4707 editing) functions.
4708
4709 The command returns no error if I<all> requested groups are available.
4710
4711 It fails with an error if one or more of the requested
4712 groups is unavailable in the appliance.
4713
4714 If an unknown group name is included in the
4715 list of groups then an error is always returned.
4716
4717 I<Notes:>
4718
4719 =over 4
4720
4721 =item *
4722
4723 You must call C<guestfs_launch> before calling this function.
4724
4725 The reason is because we don't know what groups are
4726 supported by the appliance/daemon until it is running and can
4727 be queried.
4728
4729 =item *
4730
4731 If a group of functions is available, this does not necessarily
4732 mean that they will work.  You still have to check for errors
4733 when calling individual API functions even if they are
4734 available.
4735
4736 =item *
4737
4738 It is usually the job of distro packagers to build
4739 complete functionality into the libguestfs appliance.
4740 Upstream libguestfs, if built from source with all
4741 requirements satisfied, will support everything.
4742
4743 =item *
4744
4745 This call was added in version C<1.0.80>.  In previous
4746 versions of libguestfs all you could do would be to speculatively
4747 execute a command to find out if the daemon implemented it.
4748 See also C<guestfs_version>.
4749
4750 =back");
4751
4752   ("dd", (RErr, [Dev_or_Path "src"; Dev_or_Path "dest"]), 217, [],
4753    [InitBasicFS, Always, TestOutputBuffer (
4754       [["write"; "/src"; "hello, world"];
4755        ["dd"; "/src"; "/dest"];
4756        ["read_file"; "/dest"]], "hello, world")],
4757    "copy from source to destination using dd",
4758    "\
4759 This command copies from one source device or file C<src>
4760 to another destination device or file C<dest>.  Normally you
4761 would use this to copy to or from a device or partition, for
4762 example to duplicate a filesystem.
4763
4764 If the destination is a device, it must be as large or larger
4765 than the source file or device, otherwise the copy will fail.
4766 This command cannot do partial copies (see C<guestfs_copy_size>).");
4767
4768   ("filesize", (RInt64 "size", [Pathname "file"]), 218, [],
4769    [InitBasicFS, Always, TestOutputInt (
4770       [["write"; "/file"; "hello, world"];
4771        ["filesize"; "/file"]], 12)],
4772    "return the size of the file in bytes",
4773    "\
4774 This command returns the size of C<file> in bytes.
4775
4776 To get other stats about a file, use C<guestfs_stat>, C<guestfs_lstat>,
4777 C<guestfs_is_dir>, C<guestfs_is_file> etc.
4778 To get the size of block devices, use C<guestfs_blockdev_getsize64>.");
4779
4780   ("lvrename", (RErr, [String "logvol"; String "newlogvol"]), 219, [],
4781    [InitBasicFSonLVM, Always, TestOutputList (
4782       [["lvrename"; "/dev/VG/LV"; "/dev/VG/LV2"];
4783        ["lvs"]], ["/dev/VG/LV2"])],
4784    "rename an LVM logical volume",
4785    "\
4786 Rename a logical volume C<logvol> with the new name C<newlogvol>.");
4787
4788   ("vgrename", (RErr, [String "volgroup"; String "newvolgroup"]), 220, [],
4789    [InitBasicFSonLVM, Always, TestOutputList (
4790       [["umount"; "/"];
4791        ["vg_activate"; "false"; "VG"];
4792        ["vgrename"; "VG"; "VG2"];
4793        ["vg_activate"; "true"; "VG2"];
4794        ["mount_options"; ""; "/dev/VG2/LV"; "/"];
4795        ["vgs"]], ["VG2"])],
4796    "rename an LVM volume group",
4797    "\
4798 Rename a volume group C<volgroup> with the new name C<newvolgroup>.");
4799
4800   ("initrd_cat", (RBufferOut "content", [Pathname "initrdpath"; String "filename"]), 221, [ProtocolLimitWarning],
4801    [InitISOFS, Always, TestOutputBuffer (
4802       [["initrd_cat"; "/initrd"; "known-4"]], "abc\ndef\nghi")],
4803    "list the contents of a single file in an initrd",
4804    "\
4805 This command unpacks the file C<filename> from the initrd file
4806 called C<initrdpath>.  The filename must be given I<without> the
4807 initial C</> character.
4808
4809 For example, in guestfish you could use the following command
4810 to examine the boot script (usually called C</init>)
4811 contained in a Linux initrd or initramfs image:
4812
4813  initrd-cat /boot/initrd-<version>.img init
4814
4815 See also C<guestfs_initrd_list>.");
4816
4817   ("pvuuid", (RString "uuid", [Device "device"]), 222, [],
4818    [],
4819    "get the UUID of a physical volume",
4820    "\
4821 This command returns the UUID of the LVM PV C<device>.");
4822
4823   ("vguuid", (RString "uuid", [String "vgname"]), 223, [],
4824    [],
4825    "get the UUID of a volume group",
4826    "\
4827 This command returns the UUID of the LVM VG named C<vgname>.");
4828
4829   ("lvuuid", (RString "uuid", [Device "device"]), 224, [],
4830    [],
4831    "get the UUID of a logical volume",
4832    "\
4833 This command returns the UUID of the LVM LV C<device>.");
4834
4835   ("vgpvuuids", (RStringList "uuids", [String "vgname"]), 225, [],
4836    [],
4837    "get the PV UUIDs containing the volume group",
4838    "\
4839 Given a VG called C<vgname>, this returns the UUIDs of all
4840 the physical volumes that this volume group resides on.
4841
4842 You can use this along with C<guestfs_pvs> and C<guestfs_pvuuid>
4843 calls to associate physical volumes and volume groups.
4844
4845 See also C<guestfs_vglvuuids>.");
4846
4847   ("vglvuuids", (RStringList "uuids", [String "vgname"]), 226, [],
4848    [],
4849    "get the LV UUIDs of all LVs in the volume group",
4850    "\
4851 Given a VG called C<vgname>, this returns the UUIDs of all
4852 the logical volumes created in this volume group.
4853
4854 You can use this along with C<guestfs_lvs> and C<guestfs_lvuuid>
4855 calls to associate logical volumes and volume groups.
4856
4857 See also C<guestfs_vgpvuuids>.");
4858
4859   ("copy_size", (RErr, [Dev_or_Path "src"; Dev_or_Path "dest"; Int64 "size"]), 227, [],
4860    [InitBasicFS, Always, TestOutputBuffer (
4861       [["write"; "/src"; "hello, world"];
4862        ["copy_size"; "/src"; "/dest"; "5"];
4863        ["read_file"; "/dest"]], "hello")],
4864    "copy size bytes from source to destination using dd",
4865    "\
4866 This command copies exactly C<size> bytes from one source device
4867 or file C<src> to another destination device or file C<dest>.
4868
4869 Note this will fail if the source is too short or if the destination
4870 is not large enough.");
4871
4872   ("zero_device", (RErr, [Device "device"]), 228, [DangerWillRobinson],
4873    [InitBasicFSonLVM, Always, TestRun (
4874       [["zero_device"; "/dev/VG/LV"]])],
4875    "write zeroes to an entire device",
4876    "\
4877 This command writes zeroes over the entire C<device>.  Compare
4878 with C<guestfs_zero> which just zeroes the first few blocks of
4879 a device.");
4880
4881   ("txz_in", (RErr, [FileIn "tarball"; Pathname "directory"]), 229, [Optional "xz"],
4882    [InitBasicFS, Always, TestOutput (
4883       [["txz_in"; "../images/helloworld.tar.xz"; "/"];
4884        ["cat"; "/hello"]], "hello\n")],
4885    "unpack compressed tarball to directory",
4886    "\
4887 This command uploads and unpacks local file C<tarball> (an
4888 I<xz compressed> tar file) into C<directory>.");
4889
4890   ("txz_out", (RErr, [Pathname "directory"; FileOut "tarball"]), 230, [Optional "xz"],
4891    [],
4892    "pack directory into compressed tarball",
4893    "\
4894 This command packs the contents of C<directory> and downloads
4895 it to local file C<tarball> (as an xz compressed tar archive).");
4896
4897   ("ntfsresize", (RErr, [Device "device"]), 231, [Optional "ntfsprogs"],
4898    [],
4899    "resize an NTFS filesystem",
4900    "\
4901 This command resizes an NTFS filesystem, expanding or
4902 shrinking it to the size of the underlying device.
4903 See also L<ntfsresize(8)>.");
4904
4905   ("vgscan", (RErr, []), 232, [],
4906    [InitEmpty, Always, TestRun (
4907       [["vgscan"]])],
4908    "rescan for LVM physical volumes, volume groups and logical volumes",
4909    "\
4910 This rescans all block devices and rebuilds the list of LVM
4911 physical volumes, volume groups and logical volumes.");
4912
4913   ("part_del", (RErr, [Device "device"; Int "partnum"]), 233, [],
4914    [InitEmpty, Always, TestRun (
4915       [["part_init"; "/dev/sda"; "mbr"];
4916        ["part_add"; "/dev/sda"; "primary"; "1"; "-1"];
4917        ["part_del"; "/dev/sda"; "1"]])],
4918    "delete a partition",
4919    "\
4920 This command deletes the partition numbered C<partnum> on C<device>.
4921
4922 Note that in the case of MBR partitioning, deleting an
4923 extended partition also deletes any logical partitions
4924 it contains.");
4925
4926   ("part_get_bootable", (RBool "bootable", [Device "device"; Int "partnum"]), 234, [],
4927    [InitEmpty, Always, TestOutputTrue (
4928       [["part_init"; "/dev/sda"; "mbr"];
4929        ["part_add"; "/dev/sda"; "primary"; "1"; "-1"];
4930        ["part_set_bootable"; "/dev/sda"; "1"; "true"];
4931        ["part_get_bootable"; "/dev/sda"; "1"]])],
4932    "return true if a partition is bootable",
4933    "\
4934 This command returns true if the partition C<partnum> on
4935 C<device> has the bootable flag set.
4936
4937 See also C<guestfs_part_set_bootable>.");
4938
4939   ("part_get_mbr_id", (RInt "idbyte", [Device "device"; Int "partnum"]), 235, [FishOutput FishOutputHexadecimal],
4940    [InitEmpty, Always, TestOutputInt (
4941       [["part_init"; "/dev/sda"; "mbr"];
4942        ["part_add"; "/dev/sda"; "primary"; "1"; "-1"];
4943        ["part_set_mbr_id"; "/dev/sda"; "1"; "0x7f"];
4944        ["part_get_mbr_id"; "/dev/sda"; "1"]], 0x7f)],
4945    "get the MBR type byte (ID byte) from a partition",
4946    "\
4947 Returns the MBR type byte (also known as the ID byte) from
4948 the numbered partition C<partnum>.
4949
4950 Note that only MBR (old DOS-style) partitions have type bytes.
4951 You will get undefined results for other partition table
4952 types (see C<guestfs_part_get_parttype>).");
4953
4954   ("part_set_mbr_id", (RErr, [Device "device"; Int "partnum"; Int "idbyte"]), 236, [],
4955    [], (* tested by part_get_mbr_id *)
4956    "set the MBR type byte (ID byte) of a partition",
4957    "\
4958 Sets the MBR type byte (also known as the ID byte) of
4959 the numbered partition C<partnum> to C<idbyte>.  Note
4960 that the type bytes quoted in most documentation are
4961 in fact hexadecimal numbers, but usually documented
4962 without any leading \"0x\" which might be confusing.
4963
4964 Note that only MBR (old DOS-style) partitions have type bytes.
4965 You will get undefined results for other partition table
4966 types (see C<guestfs_part_get_parttype>).");
4967
4968   ("checksum_device", (RString "checksum", [String "csumtype"; Device "device"]), 237, [],
4969    [InitISOFS, Always, TestOutput (
4970       [["checksum_device"; "md5"; "/dev/sdd"]],
4971       (Digest.to_hex (Digest.file "images/test.iso")))],
4972    "compute MD5, SHAx or CRC checksum of the contents of a device",
4973    "\
4974 This call computes the MD5, SHAx or CRC checksum of the
4975 contents of the device named C<device>.  For the types of
4976 checksums supported see the C<guestfs_checksum> command.");
4977
4978   ("lvresize_free", (RErr, [Device "lv"; Int "percent"]), 238, [Optional "lvm2"],
4979    [InitNone, Always, TestRun (
4980       [["part_disk"; "/dev/sda"; "mbr"];
4981        ["pvcreate"; "/dev/sda1"];
4982        ["vgcreate"; "VG"; "/dev/sda1"];
4983        ["lvcreate"; "LV"; "VG"; "10"];
4984        ["lvresize_free"; "/dev/VG/LV"; "100"]])],
4985    "expand an LV to fill free space",
4986    "\
4987 This expands an existing logical volume C<lv> so that it fills
4988 C<pc>% of the remaining free space in the volume group.  Commonly
4989 you would call this with pc = 100 which expands the logical volume
4990 as much as possible, using all remaining free space in the volume
4991 group.");
4992
4993   ("aug_clear", (RErr, [String "augpath"]), 239, [Optional "augeas"],
4994    [], (* XXX Augeas code needs tests. *)
4995    "clear Augeas path",
4996    "\
4997 Set the value associated with C<path> to C<NULL>.  This
4998 is the same as the L<augtool(1)> C<clear> command.");
4999
5000   ("get_umask", (RInt "mask", []), 240, [FishOutput FishOutputOctal],
5001    [InitEmpty, Always, TestOutputInt (
5002       [["get_umask"]], 0o22)],
5003    "get the current umask",
5004    "\
5005 Return the current umask.  By default the umask is C<022>
5006 unless it has been set by calling C<guestfs_umask>.");
5007
5008   ("debug_upload", (RErr, [FileIn "filename"; String "tmpname"; Int "mode"]), 241, [],
5009    [],
5010    "upload a file to the appliance (internal use only)",
5011    "\
5012 The C<guestfs_debug_upload> command uploads a file to
5013 the libguestfs appliance.
5014
5015 There is no comprehensive help for this command.  You have
5016 to look at the file C<daemon/debug.c> in the libguestfs source
5017 to find out what it is for.");
5018
5019   ("base64_in", (RErr, [FileIn "base64file"; Pathname "filename"]), 242, [],
5020    [InitBasicFS, Always, TestOutput (
5021       [["base64_in"; "../images/hello.b64"; "/hello"];
5022        ["cat"; "/hello"]], "hello\n")],
5023    "upload base64-encoded data to file",
5024    "\
5025 This command uploads base64-encoded data from C<base64file>
5026 to C<filename>.");
5027
5028   ("base64_out", (RErr, [Pathname "filename"; FileOut "base64file"]), 243, [],
5029    [],
5030    "download file and encode as base64",
5031    "\
5032 This command downloads the contents of C<filename>, writing
5033 it out to local file C<base64file> encoded as base64.");
5034
5035   ("checksums_out", (RErr, [String "csumtype"; Pathname "directory"; FileOut "sumsfile"]), 244, [],
5036    [],
5037    "compute MD5, SHAx or CRC checksum of files in a directory",
5038    "\
5039 This command computes the checksums of all regular files in
5040 C<directory> and then emits a list of those checksums to
5041 the local output file C<sumsfile>.
5042
5043 This can be used for verifying the integrity of a virtual
5044 machine.  However to be properly secure you should pay
5045 attention to the output of the checksum command (it uses
5046 the ones from GNU coreutils).  In particular when the
5047 filename is not printable, coreutils uses a special
5048 backslash syntax.  For more information, see the GNU
5049 coreutils info file.");
5050
5051   ("fill_pattern", (RErr, [String "pattern"; Int "len"; Pathname "path"]), 245, [],
5052    [InitBasicFS, Always, TestOutputBuffer (
5053       [["fill_pattern"; "abcdefghijklmnopqrstuvwxyz"; "28"; "/test"];
5054        ["read_file"; "/test"]], "abcdefghijklmnopqrstuvwxyzab")],
5055    "fill a file with a repeating pattern of bytes",
5056    "\
5057 This function is like C<guestfs_fill> except that it creates
5058 a new file of length C<len> containing the repeating pattern
5059 of bytes in C<pattern>.  The pattern is truncated if necessary
5060 to ensure the length of the file is exactly C<len> bytes.");
5061
5062   ("write", (RErr, [Pathname "path"; BufferIn "content"]), 246, [ProtocolLimitWarning],
5063    [InitBasicFS, Always, TestOutput (
5064       [["write"; "/new"; "new file contents"];
5065        ["cat"; "/new"]], "new file contents");
5066     InitBasicFS, Always, TestOutput (
5067       [["write"; "/new"; "\nnew file contents\n"];
5068        ["cat"; "/new"]], "\nnew file contents\n");
5069     InitBasicFS, Always, TestOutput (
5070       [["write"; "/new"; "\n\n"];
5071        ["cat"; "/new"]], "\n\n");
5072     InitBasicFS, Always, TestOutput (
5073       [["write"; "/new"; ""];
5074        ["cat"; "/new"]], "");
5075     InitBasicFS, Always, TestOutput (
5076       [["write"; "/new"; "\n\n\n"];
5077        ["cat"; "/new"]], "\n\n\n");
5078     InitBasicFS, Always, TestOutput (
5079       [["write"; "/new"; "\n"];
5080        ["cat"; "/new"]], "\n")],
5081    "create a new file",
5082    "\
5083 This call creates a file called C<path>.  The content of the
5084 file is the string C<content> (which can contain any 8 bit data).");
5085
5086   ("pwrite", (RInt "nbytes", [Pathname "path"; BufferIn "content"; Int64 "offset"]), 247, [ProtocolLimitWarning],
5087    [InitBasicFS, Always, TestOutput (
5088       [["write"; "/new"; "new file contents"];
5089        ["pwrite"; "/new"; "data"; "4"];
5090        ["cat"; "/new"]], "new data contents");
5091     InitBasicFS, Always, TestOutput (
5092       [["write"; "/new"; "new file contents"];
5093        ["pwrite"; "/new"; "is extended"; "9"];
5094        ["cat"; "/new"]], "new file is extended");
5095     InitBasicFS, Always, TestOutput (
5096       [["write"; "/new"; "new file contents"];
5097        ["pwrite"; "/new"; ""; "4"];
5098        ["cat"; "/new"]], "new file contents")],
5099    "write to part of a file",
5100    "\
5101 This command writes to part of a file.  It writes the data
5102 buffer C<content> to the file C<path> starting at offset C<offset>.
5103
5104 This command implements the L<pwrite(2)> system call, and like
5105 that system call it may not write the full data requested.  The
5106 return value is the number of bytes that were actually written
5107 to the file.  This could even be 0, although short writes are
5108 unlikely for regular files in ordinary circumstances.
5109
5110 See also C<guestfs_pread>.");
5111
5112   ("resize2fs_size", (RErr, [Device "device"; Int64 "size"]), 248, [],
5113    [],
5114    "resize an ext2, ext3 or ext4 filesystem (with size)",
5115    "\
5116 This command is the same as C<guestfs_resize2fs> except that it
5117 allows you to specify the new size (in bytes) explicitly.");
5118
5119   ("pvresize_size", (RErr, [Device "device"; Int64 "size"]), 249, [Optional "lvm2"],
5120    [],
5121    "resize an LVM physical volume (with size)",
5122    "\
5123 This command is the same as C<guestfs_pvresize> except that it
5124 allows you to specify the new size (in bytes) explicitly.");
5125
5126   ("ntfsresize_size", (RErr, [Device "device"; Int64 "size"]), 250, [Optional "ntfsprogs"],
5127    [],
5128    "resize an NTFS filesystem (with size)",
5129    "\
5130 This command is the same as C<guestfs_ntfsresize> except that it
5131 allows you to specify the new size (in bytes) explicitly.");
5132
5133   ("available_all_groups", (RStringList "groups", []), 251, [],
5134    [InitNone, Always, TestRun [["available_all_groups"]]],
5135    "return a list of all optional groups",
5136    "\
5137 This command returns a list of all optional groups that this
5138 daemon knows about.  Note this returns both supported and unsupported
5139 groups.  To find out which ones the daemon can actually support
5140 you have to call C<guestfs_available> on each member of the
5141 returned list.
5142
5143 See also C<guestfs_available> and L<guestfs(3)/AVAILABILITY>.");
5144
5145   ("fallocate64", (RErr, [Pathname "path"; Int64 "len"]), 252, [],
5146    [InitBasicFS, Always, TestOutputStruct (
5147       [["fallocate64"; "/a"; "1000000"];
5148        ["stat"; "/a"]], [CompareWithInt ("size", 1_000_000)])],
5149    "preallocate a file in the guest filesystem",
5150    "\
5151 This command preallocates a file (containing zero bytes) named
5152 C<path> of size C<len> bytes.  If the file exists already, it
5153 is overwritten.
5154
5155 Note that this call allocates disk blocks for the file.
5156 To create a sparse file use C<guestfs_truncate_size> instead.
5157
5158 The deprecated call C<guestfs_fallocate> does the same,
5159 but owing to an oversight it only allowed 30 bit lengths
5160 to be specified, effectively limiting the maximum size
5161 of files created through that call to 1GB.
5162
5163 Do not confuse this with the guestfish-specific
5164 C<alloc> and C<sparse> commands which create
5165 a file in the host and attach it as a device.");
5166
5167   ("vfs_label", (RString "label", [Device "device"]), 253, [],
5168    [InitBasicFS, Always, TestOutput (
5169        [["set_e2label"; "/dev/sda1"; "LTEST"];
5170         ["vfs_label"; "/dev/sda1"]], "LTEST")],
5171    "get the filesystem label",
5172    "\
5173 This returns the filesystem label of the filesystem on
5174 C<device>.
5175
5176 If the filesystem is unlabeled, this returns the empty string.
5177
5178 To find a filesystem from the label, use C<guestfs_findfs_label>.");
5179
5180   ("vfs_uuid", (RString "uuid", [Device "device"]), 254, [],
5181    (let uuid = uuidgen () in
5182     [InitBasicFS, Always, TestOutput (
5183        [["set_e2uuid"; "/dev/sda1"; uuid];
5184         ["vfs_uuid"; "/dev/sda1"]], uuid)]),
5185    "get the filesystem UUID",
5186    "\
5187 This returns the filesystem UUID of the filesystem on
5188 C<device>.
5189
5190 If the filesystem does not have a UUID, this returns the empty string.
5191
5192 To find a filesystem from the UUID, use C<guestfs_findfs_uuid>.");
5193
5194   ("lvm_set_filter", (RErr, [DeviceList "devices"]), 255, [Optional "lvm2"],
5195    (* Can't be tested with the current framework because
5196     * the VG is being used by the mounted filesystem, so
5197     * the vgchange -an command we do first will fail.
5198     *)
5199     [],
5200    "set LVM device filter",
5201    "\
5202 This sets the LVM device filter so that LVM will only be
5203 able to \"see\" the block devices in the list C<devices>,
5204 and will ignore all other attached block devices.
5205
5206 Where disk image(s) contain duplicate PVs or VGs, this
5207 command is useful to get LVM to ignore the duplicates, otherwise
5208 LVM can get confused.  Note also there are two types
5209 of duplication possible: either cloned PVs/VGs which have
5210 identical UUIDs; or VGs that are not cloned but just happen
5211 to have the same name.  In normal operation you cannot
5212 create this situation, but you can do it outside LVM, eg.
5213 by cloning disk images or by bit twiddling inside the LVM
5214 metadata.
5215
5216 This command also clears the LVM cache and performs a volume
5217 group scan.
5218
5219 You can filter whole block devices or individual partitions.
5220
5221 You cannot use this if any VG is currently in use (eg.
5222 contains a mounted filesystem), even if you are not
5223 filtering out that VG.");
5224
5225   ("lvm_clear_filter", (RErr, []), 256, [],
5226    [], (* see note on lvm_set_filter *)
5227    "clear LVM device filter",
5228    "\
5229 This undoes the effect of C<guestfs_lvm_set_filter>.  LVM
5230 will be able to see every block device.
5231
5232 This command also clears the LVM cache and performs a volume
5233 group scan.");
5234
5235   ("luks_open", (RErr, [Device "device"; Key "key"; String "mapname"]), 257, [Optional "luks"],
5236    [],
5237    "open a LUKS-encrypted block device",
5238    "\
5239 This command opens a block device which has been encrypted
5240 according to the Linux Unified Key Setup (LUKS) standard.
5241
5242 C<device> is the encrypted block device or partition.
5243
5244 The caller must supply one of the keys associated with the
5245 LUKS block device, in the C<key> parameter.
5246
5247 This creates a new block device called C</dev/mapper/mapname>.
5248 Reads and writes to this block device are decrypted from and
5249 encrypted to the underlying C<device> respectively.
5250
5251 If this block device contains LVM volume groups, then
5252 calling C<guestfs_vgscan> followed by C<guestfs_vg_activate_all>
5253 will make them visible.");
5254
5255   ("luks_open_ro", (RErr, [Device "device"; Key "key"; String "mapname"]), 258, [Optional "luks"],
5256    [],
5257    "open a LUKS-encrypted block device read-only",
5258    "\
5259 This is the same as C<guestfs_luks_open> except that a read-only
5260 mapping is created.");
5261
5262   ("luks_close", (RErr, [Device "device"]), 259, [Optional "luks"],
5263    [],
5264    "close a LUKS device",
5265    "\
5266 This closes a LUKS device that was created earlier by
5267 C<guestfs_luks_open> or C<guestfs_luks_open_ro>.  The
5268 C<device> parameter must be the name of the LUKS mapping
5269 device (ie. C</dev/mapper/mapname>) and I<not> the name
5270 of the underlying block device.");
5271
5272   ("luks_format", (RErr, [Device "device"; Key "key"; Int "keyslot"]), 260, [Optional "luks"; DangerWillRobinson],
5273    [],
5274    "format a block device as a LUKS encrypted device",
5275    "\
5276 This command erases existing data on C<device> and formats
5277 the device as a LUKS encrypted device.  C<key> is the
5278 initial key, which is added to key slot C<slot>.  (LUKS
5279 supports 8 key slots, numbered 0-7).");
5280
5281   ("luks_format_cipher", (RErr, [Device "device"; Key "key"; Int "keyslot"; String "cipher"]), 261, [Optional "luks"; DangerWillRobinson],
5282    [],
5283    "format a block device as a LUKS encrypted device",
5284    "\
5285 This command is the same as C<guestfs_luks_format> but
5286 it also allows you to set the C<cipher> used.");
5287
5288   ("luks_add_key", (RErr, [Device "device"; Key "key"; Key "newkey"; Int "keyslot"]), 262, [Optional "luks"],
5289    [],
5290    "add a key on a LUKS encrypted device",
5291    "\
5292 This command adds a new key on LUKS device C<device>.
5293 C<key> is any existing key, and is used to access the device.
5294 C<newkey> is the new key to add.  C<keyslot> is the key slot
5295 that will be replaced.
5296
5297 Note that if C<keyslot> already contains a key, then this
5298 command will fail.  You have to use C<guestfs_luks_kill_slot>
5299 first to remove that key.");
5300
5301   ("luks_kill_slot", (RErr, [Device "device"; Key "key"; Int "keyslot"]), 263, [Optional "luks"],
5302    [],
5303    "remove a key from a LUKS encrypted device",
5304    "\
5305 This command deletes the key in key slot C<keyslot> from the
5306 encrypted LUKS device C<device>.  C<key> must be one of the
5307 I<other> keys.");
5308
5309   ("is_lv", (RBool "lvflag", [Device "device"]), 264, [Optional "lvm2"],
5310    [InitBasicFSonLVM, IfAvailable "lvm2", TestOutputTrue (
5311       [["is_lv"; "/dev/VG/LV"]]);
5312     InitBasicFSonLVM, IfAvailable "lvm2", TestOutputFalse (
5313       [["is_lv"; "/dev/sda1"]])],
5314    "test if device is a logical volume",
5315    "\
5316 This command tests whether C<device> is a logical volume, and
5317 returns true iff this is the case.");
5318
5319   ("findfs_uuid", (RString "device", [String "uuid"]), 265, [],
5320    [],
5321    "find a filesystem by UUID",
5322    "\
5323 This command searches the filesystems and returns the one
5324 which has the given UUID.  An error is returned if no such
5325 filesystem can be found.
5326
5327 To find the UUID of a filesystem, use C<guestfs_vfs_uuid>.");
5328
5329   ("findfs_label", (RString "device", [String "label"]), 266, [],
5330    [],
5331    "find a filesystem by label",
5332    "\
5333 This command searches the filesystems and returns the one
5334 which has the given label.  An error is returned if no such
5335 filesystem can be found.
5336
5337 To find the label of a filesystem, use C<guestfs_vfs_label>.");
5338
5339 ]
5340
5341 let all_functions = non_daemon_functions @ daemon_functions
5342
5343 (* In some places we want the functions to be displayed sorted
5344  * alphabetically, so this is useful:
5345  *)
5346 let all_functions_sorted =
5347   List.sort (fun (n1,_,_,_,_,_,_) (n2,_,_,_,_,_,_) ->
5348                compare n1 n2) all_functions
5349
5350 (* This is used to generate the src/MAX_PROC_NR file which
5351  * contains the maximum procedure number, a surrogate for the
5352  * ABI version number.  See src/Makefile.am for the details.
5353  *)
5354 let max_proc_nr =
5355   let proc_nrs = List.map (
5356     fun (_, _, proc_nr, _, _, _, _) -> proc_nr
5357   ) daemon_functions in
5358   List.fold_left max 0 proc_nrs
5359
5360 (* Field types for structures. *)
5361 type field =
5362   | FChar                       (* C 'char' (really, a 7 bit byte). *)
5363   | FString                     (* nul-terminated ASCII string, NOT NULL. *)
5364   | FBuffer                     (* opaque buffer of bytes, (char *, int) pair *)
5365   | FUInt32
5366   | FInt32
5367   | FUInt64
5368   | FInt64
5369   | FBytes                      (* Any int measure that counts bytes. *)
5370   | FUUID                       (* 32 bytes long, NOT nul-terminated. *)
5371   | FOptPercent                 (* [0..100], or -1 meaning "not present". *)
5372
5373 (* Because we generate extra parsing code for LVM command line tools,
5374  * we have to pull out the LVM columns separately here.
5375  *)
5376 let lvm_pv_cols = [
5377   "pv_name", FString;
5378   "pv_uuid", FUUID;
5379   "pv_fmt", FString;
5380   "pv_size", FBytes;
5381   "dev_size", FBytes;
5382   "pv_free", FBytes;
5383   "pv_used", FBytes;
5384   "pv_attr", FString (* XXX *);
5385   "pv_pe_count", FInt64;
5386   "pv_pe_alloc_count", FInt64;
5387   "pv_tags", FString;
5388   "pe_start", FBytes;
5389   "pv_mda_count", FInt64;
5390   "pv_mda_free", FBytes;
5391   (* Not in Fedora 10:
5392      "pv_mda_size", FBytes;
5393   *)
5394 ]
5395 let lvm_vg_cols = [
5396   "vg_name", FString;
5397   "vg_uuid", FUUID;
5398   "vg_fmt", FString;
5399   "vg_attr", FString (* XXX *);
5400   "vg_size", FBytes;
5401   "vg_free", FBytes;
5402   "vg_sysid", FString;
5403   "vg_extent_size", FBytes;
5404   "vg_extent_count", FInt64;
5405   "vg_free_count", FInt64;
5406   "max_lv", FInt64;
5407   "max_pv", FInt64;
5408   "pv_count", FInt64;
5409   "lv_count", FInt64;
5410   "snap_count", FInt64;
5411   "vg_seqno", FInt64;
5412   "vg_tags", FString;
5413   "vg_mda_count", FInt64;
5414   "vg_mda_free", FBytes;
5415   (* Not in Fedora 10:
5416      "vg_mda_size", FBytes;
5417   *)
5418 ]
5419 let lvm_lv_cols = [
5420   "lv_name", FString;
5421   "lv_uuid", FUUID;
5422   "lv_attr", FString (* XXX *);
5423   "lv_major", FInt64;
5424   "lv_minor", FInt64;
5425   "lv_kernel_major", FInt64;
5426   "lv_kernel_minor", FInt64;
5427   "lv_size", FBytes;
5428   "seg_count", FInt64;
5429   "origin", FString;
5430   "snap_percent", FOptPercent;
5431   "copy_percent", FOptPercent;
5432   "move_pv", FString;
5433   "lv_tags", FString;
5434   "mirror_log", FString;
5435   "modules", FString;
5436 ]
5437
5438 (* Names and fields in all structures (in RStruct and RStructList)
5439  * that we support.
5440  *)
5441 let structs = [
5442   (* The old RIntBool return type, only ever used for aug_defnode.  Do
5443    * not use this struct in any new code.
5444    *)
5445   "int_bool", [
5446     "i", FInt32;                (* for historical compatibility *)
5447     "b", FInt32;                (* for historical compatibility *)
5448   ];
5449
5450   (* LVM PVs, VGs, LVs. *)
5451   "lvm_pv", lvm_pv_cols;
5452   "lvm_vg", lvm_vg_cols;
5453   "lvm_lv", lvm_lv_cols;
5454
5455   (* Column names and types from stat structures.
5456    * NB. Can't use things like 'st_atime' because glibc header files
5457    * define some of these as macros.  Ugh.
5458    *)
5459   "stat", [
5460     "dev", FInt64;
5461     "ino", FInt64;
5462     "mode", FInt64;
5463     "nlink", FInt64;
5464     "uid", FInt64;
5465     "gid", FInt64;
5466     "rdev", FInt64;
5467     "size", FInt64;
5468     "blksize", FInt64;
5469     "blocks", FInt64;
5470     "atime", FInt64;
5471     "mtime", FInt64;
5472     "ctime", FInt64;
5473   ];
5474   "statvfs", [
5475     "bsize", FInt64;
5476     "frsize", FInt64;
5477     "blocks", FInt64;
5478     "bfree", FInt64;
5479     "bavail", FInt64;
5480     "files", FInt64;
5481     "ffree", FInt64;
5482     "favail", FInt64;
5483     "fsid", FInt64;
5484     "flag", FInt64;
5485     "namemax", FInt64;
5486   ];
5487
5488   (* Column names in dirent structure. *)
5489   "dirent", [
5490     "ino", FInt64;
5491     (* 'b' 'c' 'd' 'f' (FIFO) 'l' 'r' (regular file) 's' 'u' '?' *)
5492     "ftyp", FChar;
5493     "name", FString;
5494   ];
5495
5496   (* Version numbers. *)
5497   "version", [
5498     "major", FInt64;
5499     "minor", FInt64;
5500     "release", FInt64;
5501     "extra", FString;
5502   ];
5503
5504   (* Extended attribute. *)
5505   "xattr", [
5506     "attrname", FString;
5507     "attrval", FBuffer;
5508   ];
5509
5510   (* Inotify events. *)
5511   "inotify_event", [
5512     "in_wd", FInt64;
5513     "in_mask", FUInt32;
5514     "in_cookie", FUInt32;
5515     "in_name", FString;
5516   ];
5517
5518   (* Partition table entry. *)
5519   "partition", [
5520     "part_num", FInt32;
5521     "part_start", FBytes;
5522     "part_end", FBytes;
5523     "part_size", FBytes;
5524   ];
5525 ] (* end of structs *)
5526
5527 (* Ugh, Java has to be different ..
5528  * These names are also used by the Haskell bindings.
5529  *)
5530 let java_structs = [
5531   "int_bool", "IntBool";
5532   "lvm_pv", "PV";
5533   "lvm_vg", "VG";
5534   "lvm_lv", "LV";
5535   "stat", "Stat";
5536   "statvfs", "StatVFS";
5537   "dirent", "Dirent";
5538   "version", "Version";
5539   "xattr", "XAttr";
5540   "inotify_event", "INotifyEvent";
5541   "partition", "Partition";
5542 ]
5543
5544 (* What structs are actually returned. *)
5545 type rstructs_used_t = RStructOnly | RStructListOnly | RStructAndList
5546
5547 (* Returns a list of RStruct/RStructList structs that are returned
5548  * by any function.  Each element of returned list is a pair:
5549  *
5550  * (structname, RStructOnly)
5551  *    == there exists function which returns RStruct (_, structname)
5552  * (structname, RStructListOnly)
5553  *    == there exists function which returns RStructList (_, structname)
5554  * (structname, RStructAndList)
5555  *    == there are functions returning both RStruct (_, structname)
5556  *                                      and RStructList (_, structname)
5557  *)
5558 let rstructs_used_by functions =
5559   (* ||| is a "logical OR" for rstructs_used_t *)
5560   let (|||) a b =
5561     match a, b with
5562     | RStructAndList, _
5563     | _, RStructAndList -> RStructAndList
5564     | RStructOnly, RStructListOnly
5565     | RStructListOnly, RStructOnly -> RStructAndList
5566     | RStructOnly, RStructOnly -> RStructOnly
5567     | RStructListOnly, RStructListOnly -> RStructListOnly
5568   in
5569
5570   let h = Hashtbl.create 13 in
5571
5572   (* if elem->oldv exists, update entry using ||| operator,
5573    * else just add elem->newv to the hash
5574    *)
5575   let update elem newv =
5576     try  let oldv = Hashtbl.find h elem in
5577          Hashtbl.replace h elem (newv ||| oldv)
5578     with Not_found -> Hashtbl.add h elem newv
5579   in
5580
5581   List.iter (
5582     fun (_, style, _, _, _, _, _) ->
5583       match fst style with
5584       | RStruct (_, structname) -> update structname RStructOnly
5585       | RStructList (_, structname) -> update structname RStructListOnly
5586       | _ -> ()
5587   ) functions;
5588
5589   (* return key->values as a list of (key,value) *)
5590   Hashtbl.fold (fun key value xs -> (key, value) :: xs) h []
5591
5592 (* Used for testing language bindings. *)
5593 type callt =
5594   | CallString of string
5595   | CallOptString of string option
5596   | CallStringList of string list
5597   | CallInt of int
5598   | CallInt64 of int64
5599   | CallBool of bool
5600   | CallBuffer of string
5601
5602 (* Used to memoize the result of pod2text. *)
5603 let pod2text_memo_filename = "src/.pod2text.data"
5604 let pod2text_memo : ((int * string * string), string list) Hashtbl.t =
5605   try
5606     let chan = open_in pod2text_memo_filename in
5607     let v = input_value chan in
5608     close_in chan;
5609     v
5610   with
5611     _ -> Hashtbl.create 13
5612 let pod2text_memo_updated () =
5613   let chan = open_out pod2text_memo_filename in
5614   output_value chan pod2text_memo;
5615   close_out chan
5616
5617 (* Useful functions.
5618  * Note we don't want to use any external OCaml libraries which
5619  * makes this a bit harder than it should be.
5620  *)
5621 module StringMap = Map.Make (String)
5622
5623 let failwithf fs = ksprintf failwith fs
5624
5625 let unique = let i = ref 0 in fun () -> incr i; !i
5626
5627 let replace_char s c1 c2 =
5628   let s2 = String.copy s in
5629   let r = ref false in
5630   for i = 0 to String.length s2 - 1 do
5631     if String.unsafe_get s2 i = c1 then (
5632       String.unsafe_set s2 i c2;
5633       r := true
5634     )
5635   done;
5636   if not !r then s else s2
5637
5638 let isspace c =
5639   c = ' '
5640   (* || c = '\f' *) || c = '\n' || c = '\r' || c = '\t' (* || c = '\v' *)
5641
5642 let triml ?(test = isspace) str =
5643   let i = ref 0 in
5644   let n = ref (String.length str) in
5645   while !n > 0 && test str.[!i]; do
5646     decr n;
5647     incr i
5648   done;
5649   if !i = 0 then str
5650   else String.sub str !i !n
5651
5652 let trimr ?(test = isspace) str =
5653   let n = ref (String.length str) in
5654   while !n > 0 && test str.[!n-1]; do
5655     decr n
5656   done;
5657   if !n = String.length str then str
5658   else String.sub str 0 !n
5659
5660 let trim ?(test = isspace) str =
5661   trimr ~test (triml ~test str)
5662
5663 let rec find s sub =
5664   let len = String.length s in
5665   let sublen = String.length sub in
5666   let rec loop i =
5667     if i <= len-sublen then (
5668       let rec loop2 j =
5669         if j < sublen then (
5670           if s.[i+j] = sub.[j] then loop2 (j+1)
5671           else -1
5672         ) else
5673           i (* found *)
5674       in
5675       let r = loop2 0 in
5676       if r = -1 then loop (i+1) else r
5677     ) else
5678       -1 (* not found *)
5679   in
5680   loop 0
5681
5682 let rec replace_str s s1 s2 =
5683   let len = String.length s in
5684   let sublen = String.length s1 in
5685   let i = find s s1 in
5686   if i = -1 then s
5687   else (
5688     let s' = String.sub s 0 i in
5689     let s'' = String.sub s (i+sublen) (len-i-sublen) in
5690     s' ^ s2 ^ replace_str s'' s1 s2
5691   )
5692
5693 let rec string_split sep str =
5694   let len = String.length str in
5695   let seplen = String.length sep in
5696   let i = find str sep in
5697   if i = -1 then [str]
5698   else (
5699     let s' = String.sub str 0 i in
5700     let s'' = String.sub str (i+seplen) (len-i-seplen) in
5701     s' :: string_split sep s''
5702   )
5703
5704 let files_equal n1 n2 =
5705   let cmd = sprintf "cmp -s %s %s" (Filename.quote n1) (Filename.quote n2) in
5706   match Sys.command cmd with
5707   | 0 -> true
5708   | 1 -> false
5709   | i -> failwithf "%s: failed with error code %d" cmd i
5710
5711 let rec filter_map f = function
5712   | [] -> []
5713   | x :: xs ->
5714       match f x with
5715       | Some y -> y :: filter_map f xs
5716       | None -> filter_map f xs
5717
5718 let rec find_map f = function
5719   | [] -> raise Not_found
5720   | x :: xs ->
5721       match f x with
5722       | Some y -> y
5723       | None -> find_map f xs
5724
5725 let iteri f xs =
5726   let rec loop i = function
5727     | [] -> ()
5728     | x :: xs -> f i x; loop (i+1) xs
5729   in
5730   loop 0 xs
5731
5732 let mapi f xs =
5733   let rec loop i = function
5734     | [] -> []
5735     | x :: xs -> let r = f i x in r :: loop (i+1) xs
5736   in
5737   loop 0 xs
5738
5739 let count_chars c str =
5740   let count = ref 0 in
5741   for i = 0 to String.length str - 1 do
5742     if c = String.unsafe_get str i then incr count
5743   done;
5744   !count
5745
5746 let explode str =
5747   let r = ref [] in
5748   for i = 0 to String.length str - 1 do
5749     let c = String.unsafe_get str i in
5750     r := c :: !r;
5751   done;
5752   List.rev !r
5753
5754 let map_chars f str =
5755   List.map f (explode str)
5756
5757 let name_of_argt = function
5758   | Pathname n | Device n | Dev_or_Path n | String n | OptString n
5759   | StringList n | DeviceList n | Bool n | Int n | Int64 n
5760   | FileIn n | FileOut n | BufferIn n | Key n -> n
5761
5762 let java_name_of_struct typ =
5763   try List.assoc typ java_structs
5764   with Not_found ->
5765     failwithf
5766       "java_name_of_struct: no java_structs entry corresponding to %s" typ
5767
5768 let cols_of_struct typ =
5769   try List.assoc typ structs
5770   with Not_found ->
5771     failwithf "cols_of_struct: unknown struct %s" typ
5772
5773 let seq_of_test = function
5774   | TestRun s | TestOutput (s, _) | TestOutputList (s, _)
5775   | TestOutputListOfDevices (s, _)
5776   | TestOutputInt (s, _) | TestOutputIntOp (s, _, _)
5777   | TestOutputTrue s | TestOutputFalse s
5778   | TestOutputLength (s, _) | TestOutputBuffer (s, _)
5779   | TestOutputStruct (s, _)
5780   | TestLastFail s -> s
5781
5782 (* Handling for function flags. *)
5783 let protocol_limit_warning =
5784   "Because of the message protocol, there is a transfer limit
5785 of somewhere between 2MB and 4MB.  See L<guestfs(3)/PROTOCOL LIMITS>."
5786
5787 let danger_will_robinson =
5788   "B<This command is dangerous.  Without careful use you
5789 can easily destroy all your data>."
5790
5791 let deprecation_notice flags =
5792   try
5793     let alt =
5794       find_map (function DeprecatedBy str -> Some str | _ -> None) flags in
5795     let txt =
5796       sprintf "This function is deprecated.
5797 In new code, use the C<%s> call instead.
5798
5799 Deprecated functions will not be removed from the API, but the
5800 fact that they are deprecated indicates that there are problems
5801 with correct use of these functions." alt in
5802     Some txt
5803   with
5804     Not_found -> None
5805
5806 (* Create list of optional groups. *)
5807 let optgroups =
5808   let h = Hashtbl.create 13 in
5809   List.iter (
5810     fun (name, _, _, flags, _, _, _) ->
5811       List.iter (
5812         function
5813         | Optional group ->
5814             let names = try Hashtbl.find h group with Not_found -> [] in
5815             Hashtbl.replace h group (name :: names)
5816         | _ -> ()
5817       ) flags
5818   ) daemon_functions;
5819   let groups = Hashtbl.fold (fun k _ ks -> k :: ks) h [] in
5820   let groups =
5821     List.map (
5822       fun group -> group, List.sort compare (Hashtbl.find h group)
5823     ) groups in
5824   List.sort (fun x y -> compare (fst x) (fst y)) groups
5825
5826 (* Check function names etc. for consistency. *)
5827 let check_functions () =
5828   let contains_uppercase str =
5829     let len = String.length str in
5830     let rec loop i =
5831       if i >= len then false
5832       else (
5833         let c = str.[i] in
5834         if c >= 'A' && c <= 'Z' then true
5835         else loop (i+1)
5836       )
5837     in
5838     loop 0
5839   in
5840
5841   (* Check function names. *)
5842   List.iter (
5843     fun (name, _, _, _, _, _, _) ->
5844       if String.length name >= 7 && String.sub name 0 7 = "guestfs" then
5845         failwithf "function name %s does not need 'guestfs' prefix" name;
5846       if name = "" then
5847         failwithf "function name is empty";
5848       if name.[0] < 'a' || name.[0] > 'z' then
5849         failwithf "function name %s must start with lowercase a-z" name;
5850       if String.contains name '-' then
5851         failwithf "function name %s should not contain '-', use '_' instead."
5852           name
5853   ) all_functions;
5854
5855   (* Check function parameter/return names. *)
5856   List.iter (
5857     fun (name, style, _, _, _, _, _) ->
5858       let check_arg_ret_name n =
5859         if contains_uppercase n then
5860           failwithf "%s param/ret %s should not contain uppercase chars"
5861             name n;
5862         if String.contains n '-' || String.contains n '_' then
5863           failwithf "%s param/ret %s should not contain '-' or '_'"
5864             name n;
5865         if n = "value" then
5866           failwithf "%s has a param/ret called 'value', which causes conflicts in the OCaml bindings, use something like 'val' or a more descriptive name" name;
5867         if n = "int" || n = "char" || n = "short" || n = "long" then
5868           failwithf "%s has a param/ret which conflicts with a C type (eg. 'int', 'char' etc.)" name;
5869         if n = "i" || n = "n" then
5870           failwithf "%s has a param/ret called 'i' or 'n', which will cause some conflicts in the generated code" name;
5871         if n = "argv" || n = "args" then
5872           failwithf "%s has a param/ret called 'argv' or 'args', which will cause some conflicts in the generated code" name;
5873
5874         (* List Haskell, OCaml and C keywords here.
5875          * http://www.haskell.org/haskellwiki/Keywords
5876          * http://caml.inria.fr/pub/docs/manual-ocaml/lex.html#operator-char
5877          * http://en.wikipedia.org/wiki/C_syntax#Reserved_keywords
5878          * Formatted via: cat c haskell ocaml|sort -u|grep -vE '_|^val$' \
5879          *   |perl -pe 's/(.+)/"$1";/'|fmt -70
5880          * Omitting _-containing words, since they're handled above.
5881          * Omitting the OCaml reserved word, "val", is ok,
5882          * and saves us from renaming several parameters.
5883          *)
5884         let reserved = [
5885           "and"; "as"; "asr"; "assert"; "auto"; "begin"; "break"; "case";
5886           "char"; "class"; "const"; "constraint"; "continue"; "data";
5887           "default"; "deriving"; "do"; "done"; "double"; "downto"; "else";
5888           "end"; "enum"; "exception"; "extern"; "external"; "false"; "float";
5889           "for"; "forall"; "foreign"; "fun"; "function"; "functor"; "goto";
5890           "hiding"; "if"; "import"; "in"; "include"; "infix"; "infixl";
5891           "infixr"; "inherit"; "initializer"; "inline"; "instance"; "int";
5892           "interface";
5893           "land"; "lazy"; "let"; "long"; "lor"; "lsl"; "lsr"; "lxor";
5894           "match"; "mdo"; "method"; "mod"; "module"; "mutable"; "new";
5895           "newtype"; "object"; "of"; "open"; "or"; "private"; "qualified";
5896           "rec"; "register"; "restrict"; "return"; "short"; "sig"; "signed";
5897           "sizeof"; "static"; "struct"; "switch"; "then"; "to"; "true"; "try";
5898           "type"; "typedef"; "union"; "unsigned"; "virtual"; "void";
5899           "volatile"; "when"; "where"; "while";
5900           ] in
5901         if List.mem n reserved then
5902           failwithf "%s has param/ret using reserved word %s" name n;
5903       in
5904
5905       (match fst style with
5906        | RErr -> ()
5907        | RInt n | RInt64 n | RBool n
5908        | RConstString n | RConstOptString n | RString n
5909        | RStringList n | RStruct (n, _) | RStructList (n, _)
5910        | RHashtable n | RBufferOut n ->
5911            check_arg_ret_name n
5912       );
5913       List.iter (fun arg -> check_arg_ret_name (name_of_argt arg)) (snd style)
5914   ) all_functions;
5915
5916   (* Check short descriptions. *)
5917   List.iter (
5918     fun (name, _, _, _, _, shortdesc, _) ->
5919       if shortdesc.[0] <> Char.lowercase shortdesc.[0] then
5920         failwithf "short description of %s should begin with lowercase." name;
5921       let c = shortdesc.[String.length shortdesc-1] in
5922       if c = '\n' || c = '.' then
5923         failwithf "short description of %s should not end with . or \\n." name
5924   ) all_functions;
5925
5926   (* Check long descriptions. *)
5927   List.iter (
5928     fun (name, _, _, _, _, _, longdesc) ->
5929       if longdesc.[String.length longdesc-1] = '\n' then
5930         failwithf "long description of %s should not end with \\n." name
5931   ) all_functions;
5932
5933   (* Check proc_nrs. *)
5934   List.iter (
5935     fun (name, _, proc_nr, _, _, _, _) ->
5936       if proc_nr <= 0 then
5937         failwithf "daemon function %s should have proc_nr > 0" name
5938   ) daemon_functions;
5939
5940   List.iter (
5941     fun (name, _, proc_nr, _, _, _, _) ->
5942       if proc_nr <> -1 then
5943         failwithf "non-daemon function %s should have proc_nr -1" name
5944   ) non_daemon_functions;
5945
5946   let proc_nrs =
5947     List.map (fun (name, _, proc_nr, _, _, _, _) -> name, proc_nr)
5948       daemon_functions in
5949   let proc_nrs =
5950     List.sort (fun (_,nr1) (_,nr2) -> compare nr1 nr2) proc_nrs in
5951   let rec loop = function
5952     | [] -> ()
5953     | [_] -> ()
5954     | (name1,nr1) :: ((name2,nr2) :: _ as rest) when nr1 < nr2 ->
5955         loop rest
5956     | (name1,nr1) :: (name2,nr2) :: _ ->
5957         failwithf "%s and %s have conflicting procedure numbers (%d, %d)"
5958           name1 name2 nr1 nr2
5959   in
5960   loop proc_nrs;
5961
5962   (* Check tests. *)
5963   List.iter (
5964     function
5965       (* Ignore functions that have no tests.  We generate a
5966        * warning when the user does 'make check' instead.
5967        *)
5968     | name, _, _, _, [], _, _ -> ()
5969     | name, _, _, _, tests, _, _ ->
5970         let funcs =
5971           List.map (
5972             fun (_, _, test) ->
5973               match seq_of_test test with
5974               | [] ->
5975                   failwithf "%s has a test containing an empty sequence" name
5976               | cmds -> List.map List.hd cmds
5977           ) tests in
5978         let funcs = List.flatten funcs in
5979
5980         let tested = List.mem name funcs in
5981
5982         if not tested then
5983           failwithf "function %s has tests but does not test itself" name
5984   ) all_functions
5985
5986 (* 'pr' prints to the current output file. *)
5987 let chan = ref Pervasives.stdout
5988 let lines = ref 0
5989 let pr fs =
5990   ksprintf
5991     (fun str ->
5992        let i = count_chars '\n' str in
5993        lines := !lines + i;
5994        output_string !chan str
5995     ) fs
5996
5997 let copyright_years =
5998   let this_year = 1900 + (localtime (time ())).tm_year in
5999   if this_year > 2009 then sprintf "2009-%04d" this_year else "2009"
6000
6001 (* Generate a header block in a number of standard styles. *)
6002 type comment_style =
6003     CStyle | CPlusPlusStyle | HashStyle | OCamlStyle | HaskellStyle
6004 type license = GPLv2plus | LGPLv2plus
6005
6006 let generate_header ?(extra_inputs = []) comment license =
6007   let inputs = "src/generator.ml" :: extra_inputs in
6008   let c = match comment with
6009     | CStyle ->         pr "/* "; " *"
6010     | CPlusPlusStyle -> pr "// "; "//"
6011     | HashStyle ->      pr "# ";  "#"
6012     | OCamlStyle ->     pr "(* "; " *"
6013     | HaskellStyle ->   pr "{- "; "  " in
6014   pr "libguestfs generated file\n";
6015   pr "%s WARNING: THIS FILE IS GENERATED FROM:\n" c;
6016   List.iter (pr "%s   %s\n" c) inputs;
6017   pr "%s ANY CHANGES YOU MAKE TO THIS FILE WILL BE LOST.\n" c;
6018   pr "%s\n" c;
6019   pr "%s Copyright (C) %s Red Hat Inc.\n" c copyright_years;
6020   pr "%s\n" c;
6021   (match license with
6022    | GPLv2plus ->
6023        pr "%s This program is free software; you can redistribute it and/or modify\n" c;
6024        pr "%s it under the terms of the GNU General Public License as published by\n" c;
6025        pr "%s the Free Software Foundation; either version 2 of the License, or\n" c;
6026        pr "%s (at your option) any later version.\n" c;
6027        pr "%s\n" c;
6028        pr "%s This program is distributed in the hope that it will be useful,\n" c;
6029        pr "%s but WITHOUT ANY WARRANTY; without even the implied warranty of\n" c;
6030        pr "%s MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the\n" c;
6031        pr "%s GNU General Public License for more details.\n" c;
6032        pr "%s\n" c;
6033        pr "%s You should have received a copy of the GNU General Public License along\n" c;
6034        pr "%s with this program; if not, write to the Free Software Foundation, Inc.,\n" c;
6035        pr "%s 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA.\n" c;
6036
6037    | LGPLv2plus ->
6038        pr "%s This library is free software; you can redistribute it and/or\n" c;
6039        pr "%s modify it under the terms of the GNU Lesser General Public\n" c;
6040        pr "%s License as published by the Free Software Foundation; either\n" c;
6041        pr "%s version 2 of the License, or (at your option) any later version.\n" c;
6042        pr "%s\n" c;
6043        pr "%s This library is distributed in the hope that it will be useful,\n" c;
6044        pr "%s but WITHOUT ANY WARRANTY; without even the implied warranty of\n" c;
6045        pr "%s MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU\n" c;
6046        pr "%s Lesser General Public License for more details.\n" c;
6047        pr "%s\n" c;
6048        pr "%s You should have received a copy of the GNU Lesser General Public\n" c;
6049        pr "%s License along with this library; if not, write to the Free Software\n" c;
6050        pr "%s Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA\n" c;
6051   );
6052   (match comment with
6053    | CStyle -> pr " */\n"
6054    | CPlusPlusStyle
6055    | HashStyle -> ()
6056    | OCamlStyle -> pr " *)\n"
6057    | HaskellStyle -> pr "-}\n"
6058   );
6059   pr "\n"
6060
6061 (* Start of main code generation functions below this line. *)
6062
6063 (* Generate the pod documentation for the C API. *)
6064 let rec generate_actions_pod () =
6065   List.iter (
6066     fun (shortname, style, _, flags, _, _, longdesc) ->
6067       if not (List.mem NotInDocs flags) then (
6068         let name = "guestfs_" ^ shortname in
6069         pr "=head2 %s\n\n" name;
6070         pr " ";
6071         generate_prototype ~extern:false ~handle:"g" name style;
6072         pr "\n\n";
6073         pr "%s\n\n" longdesc;
6074         (match fst style with
6075          | RErr ->
6076              pr "This function returns 0 on success or -1 on error.\n\n"
6077          | RInt _ ->
6078              pr "On error this function returns -1.\n\n"
6079          | RInt64 _ ->
6080              pr "On error this function returns -1.\n\n"
6081          | RBool _ ->
6082              pr "This function returns a C truth value on success or -1 on error.\n\n"
6083          | RConstString _ ->
6084              pr "This function returns a string, or NULL on error.
6085 The string is owned by the guest handle and must I<not> be freed.\n\n"
6086          | RConstOptString _ ->
6087              pr "This function returns a string which may be NULL.
6088 There is no way to return an error from this function.
6089 The string is owned by the guest handle and must I<not> be freed.\n\n"
6090          | RString _ ->
6091              pr "This function returns a string, or NULL on error.
6092 I<The caller must free the returned string after use>.\n\n"
6093          | RStringList _ ->
6094              pr "This function returns a NULL-terminated array of strings
6095 (like L<environ(3)>), or NULL if there was an error.
6096 I<The caller must free the strings and the array after use>.\n\n"
6097          | RStruct (_, typ) ->
6098              pr "This function returns a C<struct guestfs_%s *>,
6099 or NULL if there was an error.
6100 I<The caller must call C<guestfs_free_%s> after use>.\n\n" typ typ
6101          | RStructList (_, typ) ->
6102              pr "This function returns a C<struct guestfs_%s_list *>
6103 (see E<lt>guestfs-structs.hE<gt>),
6104 or NULL if there was an error.
6105 I<The caller must call C<guestfs_free_%s_list> after use>.\n\n" typ typ
6106          | RHashtable _ ->
6107              pr "This function returns a NULL-terminated array of
6108 strings, or NULL if there was an error.
6109 The array of strings will always have length C<2n+1>, where
6110 C<n> keys and values alternate, followed by the trailing NULL entry.
6111 I<The caller must free the strings and the array after use>.\n\n"
6112          | RBufferOut _ ->
6113              pr "This function returns a buffer, or NULL on error.
6114 The size of the returned buffer is written to C<*size_r>.
6115 I<The caller must free the returned buffer after use>.\n\n"
6116         );
6117         if List.mem ProtocolLimitWarning flags then
6118           pr "%s\n\n" protocol_limit_warning;
6119         if List.mem DangerWillRobinson flags then
6120           pr "%s\n\n" danger_will_robinson;
6121         if List.exists (function Key _ -> true | _ -> false) (snd style) then
6122           pr "This function takes a key or passphrase parameter which
6123 could contain sensitive material.  Read the section
6124 L</KEYS AND PASSPHRASES> for more information.\n\n";
6125         match deprecation_notice flags with
6126         | None -> ()
6127         | Some txt -> pr "%s\n\n" txt
6128       )
6129   ) all_functions_sorted
6130
6131 and generate_structs_pod () =
6132   (* Structs documentation. *)
6133   List.iter (
6134     fun (typ, cols) ->
6135       pr "=head2 guestfs_%s\n" typ;
6136       pr "\n";
6137       pr " struct guestfs_%s {\n" typ;
6138       List.iter (
6139         function
6140         | name, FChar -> pr "   char %s;\n" name
6141         | name, FUInt32 -> pr "   uint32_t %s;\n" name
6142         | name, FInt32 -> pr "   int32_t %s;\n" name
6143         | name, (FUInt64|FBytes) -> pr "   uint64_t %s;\n" name
6144         | name, FInt64 -> pr "   int64_t %s;\n" name
6145         | name, FString -> pr "   char *%s;\n" name
6146         | name, FBuffer ->
6147             pr "   /* The next two fields describe a byte array. */\n";
6148             pr "   uint32_t %s_len;\n" name;
6149             pr "   char *%s;\n" name
6150         | name, FUUID ->
6151             pr "   /* The next field is NOT nul-terminated, be careful when printing it: */\n";
6152             pr "   char %s[32];\n" name
6153         | name, FOptPercent ->
6154             pr "   /* The next field is [0..100] or -1 meaning 'not present': */\n";
6155             pr "   float %s;\n" name
6156       ) cols;
6157       pr " };\n";
6158       pr " \n";
6159       pr " struct guestfs_%s_list {\n" typ;
6160       pr "   uint32_t len; /* Number of elements in list. */\n";
6161       pr "   struct guestfs_%s *val; /* Elements. */\n" typ;
6162       pr " };\n";
6163       pr " \n";
6164       pr " void guestfs_free_%s (struct guestfs_free_%s *);\n" typ typ;
6165       pr " void guestfs_free_%s_list (struct guestfs_free_%s_list *);\n"
6166         typ typ;
6167       pr "\n"
6168   ) structs
6169
6170 and generate_availability_pod () =
6171   (* Availability documentation. *)
6172   pr "=over 4\n";
6173   pr "\n";
6174   List.iter (
6175     fun (group, functions) ->
6176       pr "=item B<%s>\n" group;
6177       pr "\n";
6178       pr "The following functions:\n";
6179       List.iter (pr "L</guestfs_%s>\n") functions;
6180       pr "\n"
6181   ) optgroups;
6182   pr "=back\n";
6183   pr "\n"
6184
6185 (* Generate the protocol (XDR) file, 'guestfs_protocol.x' and
6186  * indirectly 'guestfs_protocol.h' and 'guestfs_protocol.c'.
6187  *
6188  * We have to use an underscore instead of a dash because otherwise
6189  * rpcgen generates incorrect code.
6190  *
6191  * This header is NOT exported to clients, but see also generate_structs_h.
6192  *)
6193 and generate_xdr () =
6194   generate_header CStyle LGPLv2plus;
6195
6196   (* This has to be defined to get around a limitation in Sun's rpcgen. *)
6197   pr "typedef string str<>;\n";
6198   pr "\n";
6199
6200   (* Internal structures. *)
6201   List.iter (
6202     function
6203     | typ, cols ->
6204         pr "struct guestfs_int_%s {\n" typ;
6205         List.iter (function
6206                    | name, FChar -> pr "  char %s;\n" name
6207                    | name, FString -> pr "  string %s<>;\n" name
6208                    | name, FBuffer -> pr "  opaque %s<>;\n" name
6209                    | name, FUUID -> pr "  opaque %s[32];\n" name
6210                    | name, (FInt32|FUInt32) -> pr "  int %s;\n" name
6211                    | name, (FInt64|FUInt64|FBytes) -> pr "  hyper %s;\n" name
6212                    | name, FOptPercent -> pr "  float %s;\n" name
6213                   ) cols;
6214         pr "};\n";
6215         pr "\n";
6216         pr "typedef struct guestfs_int_%s guestfs_int_%s_list<>;\n" typ typ;
6217         pr "\n";
6218   ) structs;
6219
6220   List.iter (
6221     fun (shortname, style, _, _, _, _, _) ->
6222       let name = "guestfs_" ^ shortname in
6223
6224       (match snd style with
6225        | [] -> ()
6226        | args ->
6227            pr "struct %s_args {\n" name;
6228            List.iter (
6229              function
6230              | Pathname n | Device n | Dev_or_Path n | String n | Key n ->
6231                  pr "  string %s<>;\n" n
6232              | OptString n -> pr "  str *%s;\n" n
6233              | StringList n | DeviceList n -> pr "  str %s<>;\n" n
6234              | Bool n -> pr "  bool %s;\n" n
6235              | Int n -> pr "  int %s;\n" n
6236              | Int64 n -> pr "  hyper %s;\n" n
6237              | BufferIn n ->
6238                  pr "  opaque %s<>;\n" n
6239              | FileIn _ | FileOut _ -> ()
6240            ) args;
6241            pr "};\n\n"
6242       );
6243       (match fst style with
6244        | RErr -> ()
6245        | RInt n ->
6246            pr "struct %s_ret {\n" name;
6247            pr "  int %s;\n" n;
6248            pr "};\n\n"
6249        | RInt64 n ->
6250            pr "struct %s_ret {\n" name;
6251            pr "  hyper %s;\n" n;
6252            pr "};\n\n"
6253        | RBool n ->
6254            pr "struct %s_ret {\n" name;
6255            pr "  bool %s;\n" n;
6256            pr "};\n\n"
6257        | RConstString _ | RConstOptString _ ->
6258            failwithf "RConstString|RConstOptString cannot be used by daemon functions"
6259        | RString n ->
6260            pr "struct %s_ret {\n" name;
6261            pr "  string %s<>;\n" n;
6262            pr "};\n\n"
6263        | RStringList n ->
6264            pr "struct %s_ret {\n" name;
6265            pr "  str %s<>;\n" n;
6266            pr "};\n\n"
6267        | RStruct (n, typ) ->
6268            pr "struct %s_ret {\n" name;
6269            pr "  guestfs_int_%s %s;\n" typ n;
6270            pr "};\n\n"
6271        | RStructList (n, typ) ->
6272            pr "struct %s_ret {\n" name;
6273            pr "  guestfs_int_%s_list %s;\n" typ n;
6274            pr "};\n\n"
6275        | RHashtable n ->
6276            pr "struct %s_ret {\n" name;
6277            pr "  str %s<>;\n" n;
6278            pr "};\n\n"
6279        | RBufferOut n ->
6280            pr "struct %s_ret {\n" name;
6281            pr "  opaque %s<>;\n" n;
6282            pr "};\n\n"
6283       );
6284   ) daemon_functions;
6285
6286   (* Table of procedure numbers. *)
6287   pr "enum guestfs_procedure {\n";
6288   List.iter (
6289     fun (shortname, _, proc_nr, _, _, _, _) ->
6290       pr "  GUESTFS_PROC_%s = %d,\n" (String.uppercase shortname) proc_nr
6291   ) daemon_functions;
6292   pr "  GUESTFS_PROC_NR_PROCS\n";
6293   pr "};\n";
6294   pr "\n";
6295
6296   (* Having to choose a maximum message size is annoying for several
6297    * reasons (it limits what we can do in the API), but it (a) makes
6298    * the protocol a lot simpler, and (b) provides a bound on the size
6299    * of the daemon which operates in limited memory space.
6300    *)
6301   pr "const GUESTFS_MESSAGE_MAX = %d;\n" (4 * 1024 * 1024);
6302   pr "\n";
6303
6304   (* Message header, etc. *)
6305   pr "\
6306 /* The communication protocol is now documented in the guestfs(3)
6307  * manpage.
6308  */
6309
6310 const GUESTFS_PROGRAM = 0x2000F5F5;
6311 const GUESTFS_PROTOCOL_VERSION = 1;
6312
6313 /* These constants must be larger than any possible message length. */
6314 const GUESTFS_LAUNCH_FLAG = 0xf5f55ff5;
6315 const GUESTFS_CANCEL_FLAG = 0xffffeeee;
6316
6317 enum guestfs_message_direction {
6318   GUESTFS_DIRECTION_CALL = 0,        /* client -> daemon */
6319   GUESTFS_DIRECTION_REPLY = 1        /* daemon -> client */
6320 };
6321
6322 enum guestfs_message_status {
6323   GUESTFS_STATUS_OK = 0,
6324   GUESTFS_STATUS_ERROR = 1
6325 };
6326
6327 ";
6328
6329   pr "const GUESTFS_ERROR_LEN = %d;\n" (64 * 1024);
6330   pr "\n";
6331
6332   pr "\
6333 struct guestfs_message_error {
6334   string error_message<GUESTFS_ERROR_LEN>;
6335 };
6336
6337 struct guestfs_message_header {
6338   unsigned prog;                     /* GUESTFS_PROGRAM */
6339   unsigned vers;                     /* GUESTFS_PROTOCOL_VERSION */
6340   guestfs_procedure proc;            /* GUESTFS_PROC_x */
6341   guestfs_message_direction direction;
6342   unsigned serial;                   /* message serial number */
6343   guestfs_message_status status;
6344 };
6345
6346 const GUESTFS_MAX_CHUNK_SIZE = 8192;
6347
6348 struct guestfs_chunk {
6349   int cancel;                        /* if non-zero, transfer is cancelled */
6350   /* data size is 0 bytes if the transfer has finished successfully */
6351   opaque data<GUESTFS_MAX_CHUNK_SIZE>;
6352 };
6353 "
6354
6355 (* Generate the guestfs-structs.h file. *)
6356 and generate_structs_h () =
6357   generate_header CStyle LGPLv2plus;
6358
6359   (* This is a public exported header file containing various
6360    * structures.  The structures are carefully written to have
6361    * exactly the same in-memory format as the XDR structures that
6362    * we use on the wire to the daemon.  The reason for creating
6363    * copies of these structures here is just so we don't have to
6364    * export the whole of guestfs_protocol.h (which includes much
6365    * unrelated and XDR-dependent stuff that we don't want to be
6366    * public, or required by clients).
6367    *
6368    * To reiterate, we will pass these structures to and from the
6369    * client with a simple assignment or memcpy, so the format
6370    * must be identical to what rpcgen / the RFC defines.
6371    *)
6372
6373   (* Public structures. *)
6374   List.iter (
6375     fun (typ, cols) ->
6376       pr "struct guestfs_%s {\n" typ;
6377       List.iter (
6378         function
6379         | name, FChar -> pr "  char %s;\n" name
6380         | name, FString -> pr "  char *%s;\n" name
6381         | name, FBuffer ->
6382             pr "  uint32_t %s_len;\n" name;
6383             pr "  char *%s;\n" name
6384         | name, FUUID -> pr "  char %s[32]; /* this is NOT nul-terminated, be careful when printing */\n" name
6385         | name, FUInt32 -> pr "  uint32_t %s;\n" name
6386         | name, FInt32 -> pr "  int32_t %s;\n" name
6387         | name, (FUInt64|FBytes) -> pr "  uint64_t %s;\n" name
6388         | name, FInt64 -> pr "  int64_t %s;\n" name
6389         | name, FOptPercent -> pr "  float %s; /* [0..100] or -1 */\n" name
6390       ) cols;
6391       pr "};\n";
6392       pr "\n";
6393       pr "struct guestfs_%s_list {\n" typ;
6394       pr "  uint32_t len;\n";
6395       pr "  struct guestfs_%s *val;\n" typ;
6396       pr "};\n";
6397       pr "\n";
6398       pr "extern void guestfs_free_%s (struct guestfs_%s *);\n" typ typ;
6399       pr "extern void guestfs_free_%s_list (struct guestfs_%s_list *);\n" typ typ;
6400       pr "\n"
6401   ) structs
6402
6403 (* Generate the guestfs-actions.h file. *)
6404 and generate_actions_h () =
6405   generate_header CStyle LGPLv2plus;
6406   List.iter (
6407     fun (shortname, style, _, _, _, _, _) ->
6408       let name = "guestfs_" ^ shortname in
6409       generate_prototype ~single_line:true ~newline:true ~handle:"g"
6410         name style
6411   ) all_functions
6412
6413 (* Generate the guestfs-internal-actions.h file. *)
6414 and generate_internal_actions_h () =
6415   generate_header CStyle LGPLv2plus;
6416   List.iter (
6417     fun (shortname, style, _, _, _, _, _) ->
6418       let name = "guestfs__" ^ shortname in
6419       generate_prototype ~single_line:true ~newline:true ~handle:"g"
6420         name style
6421   ) non_daemon_functions
6422
6423 (* Generate the client-side dispatch stubs. *)
6424 and generate_client_actions () =
6425   generate_header CStyle LGPLv2plus;
6426
6427   pr "\
6428 #include <stdio.h>
6429 #include <stdlib.h>
6430 #include <stdint.h>
6431 #include <string.h>
6432 #include <inttypes.h>
6433
6434 #include \"guestfs.h\"
6435 #include \"guestfs-internal.h\"
6436 #include \"guestfs-internal-actions.h\"
6437 #include \"guestfs_protocol.h\"
6438
6439 /* Check the return message from a call for validity. */
6440 static int
6441 check_reply_header (guestfs_h *g,
6442                     const struct guestfs_message_header *hdr,
6443                     unsigned int proc_nr, unsigned int serial)
6444 {
6445   if (hdr->prog != GUESTFS_PROGRAM) {
6446     error (g, \"wrong program (%%d/%%d)\", hdr->prog, GUESTFS_PROGRAM);
6447     return -1;
6448   }
6449   if (hdr->vers != GUESTFS_PROTOCOL_VERSION) {
6450     error (g, \"wrong protocol version (%%d/%%d)\",
6451            hdr->vers, GUESTFS_PROTOCOL_VERSION);
6452     return -1;
6453   }
6454   if (hdr->direction != GUESTFS_DIRECTION_REPLY) {
6455     error (g, \"unexpected message direction (%%d/%%d)\",
6456            hdr->direction, GUESTFS_DIRECTION_REPLY);
6457     return -1;
6458   }
6459   if (hdr->proc != proc_nr) {
6460     error (g, \"unexpected procedure number (%%d/%%d)\", hdr->proc, proc_nr);
6461     return -1;
6462   }
6463   if (hdr->serial != serial) {
6464     error (g, \"unexpected serial (%%d/%%d)\", hdr->serial, serial);
6465     return -1;
6466   }
6467
6468   return 0;
6469 }
6470
6471 /* Check we are in the right state to run a high-level action. */
6472 static int
6473 check_state (guestfs_h *g, const char *caller)
6474 {
6475   if (!guestfs__is_ready (g)) {
6476     if (guestfs__is_config (g) || guestfs__is_launching (g))
6477       error (g, \"%%s: call launch before using this function\\n(in guestfish, don't forget to use the 'run' command)\",
6478         caller);
6479     else
6480       error (g, \"%%s called from the wrong state, %%d != READY\",
6481         caller, guestfs__get_state (g));
6482     return -1;
6483   }
6484   return 0;
6485 }
6486
6487 ";
6488
6489   let error_code_of = function
6490     | RErr | RInt _ | RInt64 _ | RBool _ -> "-1"
6491     | RConstString _ | RConstOptString _
6492     | RString _ | RStringList _
6493     | RStruct _ | RStructList _
6494     | RHashtable _ | RBufferOut _ -> "NULL"
6495   in
6496
6497   (* Generate code to check String-like parameters are not passed in
6498    * as NULL (returning an error if they are).
6499    *)
6500   let check_null_strings shortname style =
6501     let pr_newline = ref false in
6502     List.iter (
6503       function
6504       (* parameters which should not be NULL *)
6505       | String n
6506       | Device n
6507       | Pathname n
6508       | Dev_or_Path n
6509       | FileIn n
6510       | FileOut n
6511       | BufferIn n
6512       | StringList n
6513       | DeviceList n
6514       | Key n ->
6515           pr "  if (%s == NULL) {\n" n;
6516           pr "    error (g, \"%%s: %%s: parameter cannot be NULL\",\n";
6517           pr "           \"%s\", \"%s\");\n" shortname n;
6518           pr "    return %s;\n" (error_code_of (fst style));
6519           pr "  }\n";
6520           pr_newline := true
6521
6522       (* can be NULL *)
6523       | OptString _
6524
6525       (* not applicable *)
6526       | Bool _
6527       | Int _
6528       | Int64 _ -> ()
6529     ) (snd style);
6530
6531     if !pr_newline then pr "\n";
6532   in
6533
6534   (* Generate code to generate guestfish call traces. *)
6535   let trace_call shortname style =
6536     pr "  if (guestfs__get_trace (g)) {\n";
6537
6538     let needs_i =
6539       List.exists (function
6540                    | StringList _ | DeviceList _ -> true
6541                    | _ -> false) (snd style) in
6542     if needs_i then (
6543       pr "    size_t i;\n";
6544       pr "\n"
6545     );
6546
6547     pr "    fprintf (stderr, \"%s\");\n" shortname;
6548     List.iter (
6549       function
6550       | String n                        (* strings *)
6551       | Device n
6552       | Pathname n
6553       | Dev_or_Path n
6554       | FileIn n
6555       | FileOut n
6556       | BufferIn n
6557       | Key n ->
6558           (* guestfish doesn't support string escaping, so neither do we *)
6559           pr "    fprintf (stderr, \" \\\"%%s\\\"\", %s);\n" n
6560       | OptString n ->                  (* string option *)
6561           pr "    if (%s) fprintf (stderr, \" \\\"%%s\\\"\", %s);\n" n n;
6562           pr "    else fprintf (stderr, \" null\");\n"
6563       | StringList n
6564       | DeviceList n ->                 (* string list *)
6565           pr "    fputc (' ', stderr);\n";
6566           pr "    fputc ('\"', stderr);\n";
6567           pr "    for (i = 0; %s[i]; ++i) {\n" n;
6568           pr "      if (i > 0) fputc (' ', stderr);\n";
6569           pr "      fputs (%s[i], stderr);\n" n;
6570           pr "    }\n";
6571           pr "    fputc ('\"', stderr);\n";
6572       | Bool n ->                       (* boolean *)
6573           pr "    fputs (%s ? \" true\" : \" false\", stderr);\n" n
6574       | Int n ->                        (* int *)
6575           pr "    fprintf (stderr, \" %%d\", %s);\n" n
6576       | Int64 n ->
6577           pr "    fprintf (stderr, \" %%\" PRIi64, %s);\n" n
6578     ) (snd style);
6579     pr "    fputc ('\\n', stderr);\n";
6580     pr "  }\n";
6581     pr "\n";
6582   in
6583
6584   (* For non-daemon functions, generate a wrapper around each function. *)
6585   List.iter (
6586     fun (shortname, style, _, _, _, _, _) ->
6587       let name = "guestfs_" ^ shortname in
6588
6589       generate_prototype ~extern:false ~semicolon:false ~newline:true
6590         ~handle:"g" name style;
6591       pr "{\n";
6592       check_null_strings shortname style;
6593       trace_call shortname style;
6594       pr "  return guestfs__%s " shortname;
6595       generate_c_call_args ~handle:"g" style;
6596       pr ";\n";
6597       pr "}\n";
6598       pr "\n"
6599   ) non_daemon_functions;
6600
6601   (* Client-side stubs for each function. *)
6602   List.iter (
6603     fun (shortname, style, _, _, _, _, _) ->
6604       let name = "guestfs_" ^ shortname in
6605       let error_code = error_code_of (fst style) in
6606
6607       (* Generate the action stub. *)
6608       generate_prototype ~extern:false ~semicolon:false ~newline:true
6609         ~handle:"g" name style;
6610
6611       pr "{\n";
6612
6613       (match snd style with
6614        | [] -> ()
6615        | _ -> pr "  struct %s_args args;\n" name
6616       );
6617
6618       pr "  guestfs_message_header hdr;\n";
6619       pr "  guestfs_message_error err;\n";
6620       let has_ret =
6621         match fst style with
6622         | RErr -> false
6623         | RConstString _ | RConstOptString _ ->
6624             failwithf "RConstString|RConstOptString cannot be used by daemon functions"
6625         | RInt _ | RInt64 _
6626         | RBool _ | RString _ | RStringList _
6627         | RStruct _ | RStructList _
6628         | RHashtable _ | RBufferOut _ ->
6629             pr "  struct %s_ret ret;\n" name;
6630             true in
6631
6632       pr "  int serial;\n";
6633       pr "  int r;\n";
6634       pr "\n";
6635       check_null_strings shortname style;
6636       trace_call shortname style;
6637       pr "  if (check_state (g, \"%s\") == -1) return %s;\n"
6638         shortname error_code;
6639       pr "  guestfs___set_busy (g);\n";
6640       pr "\n";
6641
6642       (* Send the main header and arguments. *)
6643       (match snd style with
6644        | [] ->
6645            pr "  serial = guestfs___send (g, GUESTFS_PROC_%s, NULL, NULL);\n"
6646              (String.uppercase shortname)
6647        | args ->
6648            List.iter (
6649              function
6650              | Pathname n | Device n | Dev_or_Path n | String n | Key n ->
6651                  pr "  args.%s = (char *) %s;\n" n n
6652              | OptString n ->
6653                  pr "  args.%s = %s ? (char **) &%s : NULL;\n" n n n
6654              | StringList n | DeviceList n ->
6655                  pr "  args.%s.%s_val = (char **) %s;\n" n n n;
6656                  pr "  for (args.%s.%s_len = 0; %s[args.%s.%s_len]; args.%s.%s_len++) ;\n" n n n n n n n;
6657              | Bool n ->
6658                  pr "  args.%s = %s;\n" n n
6659              | Int n ->
6660                  pr "  args.%s = %s;\n" n n
6661              | Int64 n ->
6662                  pr "  args.%s = %s;\n" n n
6663              | FileIn _ | FileOut _ -> ()
6664              | BufferIn n ->
6665                  pr "  /* Just catch grossly large sizes. XDR encoding will make this precise. */\n";
6666                  pr "  if (%s_size >= GUESTFS_MESSAGE_MAX) {\n" n;
6667                  pr "    error (g, \"%%s: size of input buffer too large\", \"%s\");\n"
6668                    shortname;
6669                  pr "    guestfs___end_busy (g);\n";
6670                  pr "    return %s;\n" error_code;
6671                  pr "  }\n";
6672                  pr "  args.%s.%s_val = (char *) %s;\n" n n n;
6673                  pr "  args.%s.%s_len = %s_size;\n" n n n
6674            ) args;
6675            pr "  serial = guestfs___send (g, GUESTFS_PROC_%s,\n"
6676              (String.uppercase shortname);
6677            pr "        (xdrproc_t) xdr_%s_args, (char *) &args);\n"
6678              name;
6679       );
6680       pr "  if (serial == -1) {\n";
6681       pr "    guestfs___end_busy (g);\n";
6682       pr "    return %s;\n" error_code;
6683       pr "  }\n";
6684       pr "\n";
6685
6686       (* Send any additional files (FileIn) requested. *)
6687       let need_read_reply_label = ref false in
6688       List.iter (
6689         function
6690         | FileIn n ->
6691             pr "  r = guestfs___send_file (g, %s);\n" n;
6692             pr "  if (r == -1) {\n";
6693             pr "    guestfs___end_busy (g);\n";
6694             pr "    return %s;\n" error_code;
6695             pr "  }\n";
6696             pr "  if (r == -2) /* daemon cancelled */\n";
6697             pr "    goto read_reply;\n";
6698             need_read_reply_label := true;
6699             pr "\n";
6700         | _ -> ()
6701       ) (snd style);
6702
6703       (* Wait for the reply from the remote end. *)
6704       if !need_read_reply_label then pr " read_reply:\n";
6705       pr "  memset (&hdr, 0, sizeof hdr);\n";
6706       pr "  memset (&err, 0, sizeof err);\n";
6707       if has_ret then pr "  memset (&ret, 0, sizeof ret);\n";
6708       pr "\n";
6709       pr "  r = guestfs___recv (g, \"%s\", &hdr, &err,\n        " shortname;
6710       if not has_ret then
6711         pr "NULL, NULL"
6712       else
6713         pr "(xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret" shortname;
6714       pr ");\n";
6715
6716       pr "  if (r == -1) {\n";
6717       pr "    guestfs___end_busy (g);\n";
6718       pr "    return %s;\n" error_code;
6719       pr "  }\n";
6720       pr "\n";
6721
6722       pr "  if (check_reply_header (g, &hdr, GUESTFS_PROC_%s, serial) == -1) {\n"
6723         (String.uppercase shortname);
6724       pr "    guestfs___end_busy (g);\n";
6725       pr "    return %s;\n" error_code;
6726       pr "  }\n";
6727       pr "\n";
6728
6729       pr "  if (hdr.status == GUESTFS_STATUS_ERROR) {\n";
6730       pr "    error (g, \"%%s: %%s\", \"%s\", err.error_message);\n" shortname;
6731       pr "    free (err.error_message);\n";
6732       pr "    guestfs___end_busy (g);\n";
6733       pr "    return %s;\n" error_code;
6734       pr "  }\n";
6735       pr "\n";
6736
6737       (* Expecting to receive further files (FileOut)? *)
6738       List.iter (
6739         function
6740         | FileOut n ->
6741             pr "  if (guestfs___recv_file (g, %s) == -1) {\n" n;
6742             pr "    guestfs___end_busy (g);\n";
6743             pr "    return %s;\n" error_code;
6744             pr "  }\n";
6745             pr "\n";
6746         | _ -> ()
6747       ) (snd style);
6748
6749       pr "  guestfs___end_busy (g);\n";
6750
6751       (match fst style with
6752        | RErr -> pr "  return 0;\n"
6753        | RInt n | RInt64 n | RBool n ->
6754            pr "  return ret.%s;\n" n
6755        | RConstString _ | RConstOptString _ ->
6756            failwithf "RConstString|RConstOptString cannot be used by daemon functions"
6757        | RString n ->
6758            pr "  return ret.%s; /* caller will free */\n" n
6759        | RStringList n | RHashtable n ->
6760            pr "  /* caller will free this, but we need to add a NULL entry */\n";
6761            pr "  ret.%s.%s_val =\n" n n;
6762            pr "    safe_realloc (g, ret.%s.%s_val,\n" n n;
6763            pr "                  sizeof (char *) * (ret.%s.%s_len + 1));\n"
6764              n n;
6765            pr "  ret.%s.%s_val[ret.%s.%s_len] = NULL;\n" n n n n;
6766            pr "  return ret.%s.%s_val;\n" n n
6767        | RStruct (n, _) ->
6768            pr "  /* caller will free this */\n";
6769            pr "  return safe_memdup (g, &ret.%s, sizeof (ret.%s));\n" n n
6770        | RStructList (n, _) ->
6771            pr "  /* caller will free this */\n";
6772            pr "  return safe_memdup (g, &ret.%s, sizeof (ret.%s));\n" n n
6773        | RBufferOut n ->
6774            pr "  /* RBufferOut is tricky: If the buffer is zero-length, then\n";
6775            pr "   * _val might be NULL here.  To make the API saner for\n";
6776            pr "   * callers, we turn this case into a unique pointer (using\n";
6777            pr "   * malloc(1)).\n";
6778            pr "   */\n";
6779            pr "  if (ret.%s.%s_len > 0) {\n" n n;
6780            pr "    *size_r = ret.%s.%s_len;\n" n n;
6781            pr "    return ret.%s.%s_val; /* caller will free */\n" n n;
6782            pr "  } else {\n";
6783            pr "    free (ret.%s.%s_val);\n" n n;
6784            pr "    char *p = safe_malloc (g, 1);\n";
6785            pr "    *size_r = ret.%s.%s_len;\n" n n;
6786            pr "    return p;\n";
6787            pr "  }\n";
6788       );
6789
6790       pr "}\n\n"
6791   ) daemon_functions;
6792
6793   (* Functions to free structures. *)
6794   pr "/* Structure-freeing functions.  These rely on the fact that the\n";
6795   pr " * structure format is identical to the XDR format.  See note in\n";
6796   pr " * generator.ml.\n";
6797   pr " */\n";
6798   pr "\n";
6799
6800   List.iter (
6801     fun (typ, _) ->
6802       pr "void\n";
6803       pr "guestfs_free_%s (struct guestfs_%s *x)\n" typ typ;
6804       pr "{\n";
6805       pr "  xdr_free ((xdrproc_t) xdr_guestfs_int_%s, (char *) x);\n" typ;
6806       pr "  free (x);\n";
6807       pr "}\n";
6808       pr "\n";
6809
6810       pr "void\n";
6811       pr "guestfs_free_%s_list (struct guestfs_%s_list *x)\n" typ typ;
6812       pr "{\n";
6813       pr "  xdr_free ((xdrproc_t) xdr_guestfs_int_%s_list, (char *) x);\n" typ;
6814       pr "  free (x);\n";
6815       pr "}\n";
6816       pr "\n";
6817
6818   ) structs;
6819
6820 (* Generate daemon/actions.h. *)
6821 and generate_daemon_actions_h () =
6822   generate_header CStyle GPLv2plus;
6823
6824   pr "#include \"../src/guestfs_protocol.h\"\n";
6825   pr "\n";
6826
6827   List.iter (
6828     fun (name, style, _, _, _, _, _) ->
6829       generate_prototype
6830         ~single_line:true ~newline:true ~in_daemon:true ~prefix:"do_"
6831         name style;
6832   ) daemon_functions
6833
6834 (* Generate the linker script which controls the visibility of
6835  * symbols in the public ABI and ensures no other symbols get
6836  * exported accidentally.
6837  *)
6838 and generate_linker_script () =
6839   generate_header HashStyle GPLv2plus;
6840
6841   let globals = [
6842     "guestfs_create";
6843     "guestfs_close";
6844     "guestfs_get_error_handler";
6845     "guestfs_get_out_of_memory_handler";
6846     "guestfs_last_error";
6847     "guestfs_set_close_callback";
6848     "guestfs_set_error_handler";
6849     "guestfs_set_launch_done_callback";
6850     "guestfs_set_log_message_callback";
6851     "guestfs_set_out_of_memory_handler";
6852     "guestfs_set_subprocess_quit_callback";
6853
6854     (* Unofficial parts of the API: the bindings code use these
6855      * functions, so it is useful to export them.
6856      *)
6857     "guestfs_safe_calloc";
6858     "guestfs_safe_malloc";
6859     "guestfs_safe_strdup";
6860     "guestfs_safe_memdup";
6861   ] in
6862   let functions =
6863     List.map (fun (name, _, _, _, _, _, _) -> "guestfs_" ^ name)
6864       all_functions in
6865   let structs =
6866     List.concat (
6867       List.map (fun (typ, _) ->
6868                   ["guestfs_free_" ^ typ; "guestfs_free_" ^ typ ^ "_list"])
6869         structs
6870     ) in
6871   let globals = List.sort compare (globals @ functions @ structs) in
6872
6873   pr "{\n";
6874   pr "    global:\n";
6875   List.iter (pr "        %s;\n") globals;
6876   pr "\n";
6877
6878   pr "    local:\n";
6879   pr "        *;\n";
6880   pr "};\n"
6881
6882 (* Generate the server-side stubs. *)
6883 and generate_daemon_actions () =
6884   generate_header CStyle GPLv2plus;
6885
6886   pr "#include <config.h>\n";
6887   pr "\n";
6888   pr "#include <stdio.h>\n";
6889   pr "#include <stdlib.h>\n";
6890   pr "#include <string.h>\n";
6891   pr "#include <inttypes.h>\n";
6892   pr "#include <rpc/types.h>\n";
6893   pr "#include <rpc/xdr.h>\n";
6894   pr "\n";
6895   pr "#include \"daemon.h\"\n";
6896   pr "#include \"c-ctype.h\"\n";
6897   pr "#include \"../src/guestfs_protocol.h\"\n";
6898   pr "#include \"actions.h\"\n";
6899   pr "\n";
6900
6901   List.iter (
6902     fun (name, style, _, _, _, _, _) ->
6903       (* Generate server-side stubs. *)
6904       pr "static void %s_stub (XDR *xdr_in)\n" name;
6905       pr "{\n";
6906       let error_code =
6907         match fst style with
6908         | RErr | RInt _ -> pr "  int r;\n"; "-1"
6909         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
6910         | RBool _ -> pr "  int r;\n"; "-1"
6911         | RConstString _ | RConstOptString _ ->
6912             failwithf "RConstString|RConstOptString cannot be used by daemon functions"
6913         | RString _ -> pr "  char *r;\n"; "NULL"
6914         | RStringList _ | RHashtable _ -> pr "  char **r;\n"; "NULL"
6915         | RStruct (_, typ) -> pr "  guestfs_int_%s *r;\n" typ; "NULL"
6916         | RStructList (_, typ) -> pr "  guestfs_int_%s_list *r;\n" typ; "NULL"
6917         | RBufferOut _ ->
6918             pr "  size_t size = 1;\n";
6919             pr "  char *r;\n";
6920             "NULL" in
6921
6922       (match snd style with
6923        | [] -> ()
6924        | args ->
6925            pr "  struct guestfs_%s_args args;\n" name;
6926            List.iter (
6927              function
6928              | Device n | Dev_or_Path n
6929              | Pathname n
6930              | String n
6931              | Key n -> ()
6932              | OptString n -> pr "  char *%s;\n" n
6933              | StringList n | DeviceList n -> pr "  char **%s;\n" n
6934              | Bool n -> pr "  int %s;\n" n
6935              | Int n -> pr "  int %s;\n" n
6936              | Int64 n -> pr "  int64_t %s;\n" n
6937              | FileIn _ | FileOut _ -> ()
6938              | BufferIn n ->
6939                  pr "  const char *%s;\n" n;
6940                  pr "  size_t %s_size;\n" n
6941            ) args
6942       );
6943       pr "\n";
6944
6945       let is_filein =
6946         List.exists (function FileIn _ -> true | _ -> false) (snd style) in
6947
6948       (match snd style with
6949        | [] -> ()
6950        | args ->
6951            pr "  memset (&args, 0, sizeof args);\n";
6952            pr "\n";
6953            pr "  if (!xdr_guestfs_%s_args (xdr_in, &args)) {\n" name;
6954            if is_filein then
6955              pr "    if (cancel_receive () != -2)\n";
6956            pr "      reply_with_error (\"daemon failed to decode procedure arguments\");\n";
6957            pr "    goto done;\n";
6958            pr "  }\n";
6959            let pr_args n =
6960              pr "  char *%s = args.%s;\n" n n
6961            in
6962            let pr_list_handling_code n =
6963              pr "  %s = realloc (args.%s.%s_val,\n" n n n;
6964              pr "                sizeof (char *) * (args.%s.%s_len+1));\n" n n;
6965              pr "  if (%s == NULL) {\n" n;
6966              if is_filein then
6967                pr "    if (cancel_receive () != -2)\n";
6968              pr "      reply_with_perror (\"realloc\");\n";
6969              pr "    goto done;\n";
6970              pr "  }\n";
6971              pr "  %s[args.%s.%s_len] = NULL;\n" n n n;
6972              pr "  args.%s.%s_val = %s;\n" n n n;
6973            in
6974            List.iter (
6975              function
6976              | Pathname n ->
6977                  pr_args n;
6978                  pr "  ABS_PATH (%s, %s, goto done);\n"
6979                    n (if is_filein then "cancel_receive ()" else "0");
6980              | Device n ->
6981                  pr_args n;
6982                  pr "  RESOLVE_DEVICE (%s, %s, goto done);\n"
6983                    n (if is_filein then "cancel_receive ()" else "0");
6984              | Dev_or_Path n ->
6985                  pr_args n;
6986                  pr "  REQUIRE_ROOT_OR_RESOLVE_DEVICE (%s, %s, goto done);\n"
6987                    n (if is_filein then "cancel_receive ()" else "0");
6988              | String n | Key n -> pr_args n
6989              | OptString n -> pr "  %s = args.%s ? *args.%s : NULL;\n" n n n
6990              | StringList n ->
6991                  pr_list_handling_code n;
6992              | DeviceList n ->
6993                  pr_list_handling_code n;
6994                  pr "  /* Ensure that each is a device,\n";
6995                  pr "   * and perform device name translation.\n";
6996                  pr "   */\n";
6997                  pr "  {\n";
6998                  pr "    size_t i;\n";
6999                  pr "    for (i = 0; %s[i] != NULL; ++i)\n" n;
7000                  pr "      RESOLVE_DEVICE (%s[i], %s, goto done);\n" n
7001                    (if is_filein then "cancel_receive ()" else "0");
7002                  pr "  }\n";
7003              | Bool n -> pr "  %s = args.%s;\n" n n
7004              | Int n -> pr "  %s = args.%s;\n" n n
7005              | Int64 n -> pr "  %s = args.%s;\n" n n
7006              | FileIn _ | FileOut _ -> ()
7007              | BufferIn n ->
7008                  pr "  %s = args.%s.%s_val;\n" n n n;
7009                  pr "  %s_size = args.%s.%s_len;\n" n n n
7010            ) args;
7011            pr "\n"
7012       );
7013
7014       (* this is used at least for do_equal *)
7015       if List.exists (function Pathname _ -> true | _ -> false) (snd style) then (
7016         (* Emit NEED_ROOT just once, even when there are two or
7017            more Pathname args *)
7018         pr "  NEED_ROOT (%s, goto done);\n"
7019           (if is_filein then "cancel_receive ()" else "0");
7020       );
7021
7022       (* Don't want to call the impl with any FileIn or FileOut
7023        * parameters, since these go "outside" the RPC protocol.
7024        *)
7025       let args' =
7026         List.filter (function FileIn _ | FileOut _ -> false | _ -> true)
7027           (snd style) in
7028       pr "  r = do_%s " name;
7029       generate_c_call_args (fst style, args');
7030       pr ";\n";
7031
7032       (match fst style with
7033        | RErr | RInt _ | RInt64 _ | RBool _
7034        | RConstString _ | RConstOptString _
7035        | RString _ | RStringList _ | RHashtable _
7036        | RStruct (_, _) | RStructList (_, _) ->
7037            pr "  if (r == %s)\n" error_code;
7038            pr "    /* do_%s has already called reply_with_error */\n" name;
7039            pr "    goto done;\n";
7040            pr "\n"
7041        | RBufferOut _ ->
7042            pr "  /* size == 0 && r == NULL could be a non-error case (just\n";
7043            pr "   * an ordinary zero-length buffer), so be careful ...\n";
7044            pr "   */\n";
7045            pr "  if (size == 1 && r == %s)\n" error_code;
7046            pr "    /* do_%s has already called reply_with_error */\n" name;
7047            pr "    goto done;\n";
7048            pr "\n"
7049       );
7050
7051       (* If there are any FileOut parameters, then the impl must
7052        * send its own reply.
7053        *)
7054       let no_reply =
7055         List.exists (function FileOut _ -> true | _ -> false) (snd style) in
7056       if no_reply then
7057         pr "  /* do_%s has already sent a reply */\n" name
7058       else (
7059         match fst style with
7060         | RErr -> pr "  reply (NULL, NULL);\n"
7061         | RInt n | RInt64 n | RBool n ->
7062             pr "  struct guestfs_%s_ret ret;\n" name;
7063             pr "  ret.%s = r;\n" n;
7064             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
7065               name
7066         | RConstString _ | RConstOptString _ ->
7067             failwithf "RConstString|RConstOptString cannot be used by daemon functions"
7068         | RString n ->
7069             pr "  struct guestfs_%s_ret ret;\n" name;
7070             pr "  ret.%s = r;\n" n;
7071             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
7072               name;
7073             pr "  free (r);\n"
7074         | RStringList n | RHashtable n ->
7075             pr "  struct guestfs_%s_ret ret;\n" name;
7076             pr "  ret.%s.%s_len = count_strings (r);\n" n n;
7077             pr "  ret.%s.%s_val = r;\n" n n;
7078             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
7079               name;
7080             pr "  free_strings (r);\n"
7081         | RStruct (n, _) ->
7082             pr "  struct guestfs_%s_ret ret;\n" name;
7083             pr "  ret.%s = *r;\n" n;
7084             pr "  reply ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
7085               name;
7086             pr "  xdr_free ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
7087               name
7088         | RStructList (n, _) ->
7089             pr "  struct guestfs_%s_ret ret;\n" name;
7090             pr "  ret.%s = *r;\n" n;
7091             pr "  reply ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
7092               name;
7093             pr "  xdr_free ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
7094               name
7095         | RBufferOut n ->
7096             pr "  struct guestfs_%s_ret ret;\n" name;
7097             pr "  ret.%s.%s_val = r;\n" n n;
7098             pr "  ret.%s.%s_len = size;\n" n n;
7099             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
7100               name;
7101             pr "  free (r);\n"
7102       );
7103
7104       (* Free the args. *)
7105       pr "done:\n";
7106       (match snd style with
7107        | [] -> ()
7108        | _ ->
7109            pr "  xdr_free ((xdrproc_t) xdr_guestfs_%s_args, (char *) &args);\n"
7110              name
7111       );
7112       pr "  return;\n";
7113       pr "}\n\n";
7114   ) daemon_functions;
7115
7116   (* Dispatch function. *)
7117   pr "void dispatch_incoming_message (XDR *xdr_in)\n";
7118   pr "{\n";
7119   pr "  switch (proc_nr) {\n";
7120
7121   List.iter (
7122     fun (name, style, _, _, _, _, _) ->
7123       pr "    case GUESTFS_PROC_%s:\n" (String.uppercase name);
7124       pr "      %s_stub (xdr_in);\n" name;
7125       pr "      break;\n"
7126   ) daemon_functions;
7127
7128   pr "    default:\n";
7129   pr "      reply_with_error (\"dispatch_incoming_message: unknown procedure number %%d, set LIBGUESTFS_PATH to point to the matching libguestfs appliance directory\", proc_nr);\n";
7130   pr "  }\n";
7131   pr "}\n";
7132   pr "\n";
7133
7134   (* LVM columns and tokenization functions. *)
7135   (* XXX This generates crap code.  We should rethink how we
7136    * do this parsing.
7137    *)
7138   List.iter (
7139     function
7140     | typ, cols ->
7141         pr "static const char *lvm_%s_cols = \"%s\";\n"
7142           typ (String.concat "," (List.map fst cols));
7143         pr "\n";
7144
7145         pr "static int lvm_tokenize_%s (char *str, guestfs_int_lvm_%s *r)\n" typ typ;
7146         pr "{\n";
7147         pr "  char *tok, *p, *next;\n";
7148         pr "  size_t i, j;\n";
7149         pr "\n";
7150         (*
7151           pr "  fprintf (stderr, \"%%s: <<%%s>>\\n\", __func__, str);\n";
7152           pr "\n";
7153         *)
7154         pr "  if (!str) {\n";
7155         pr "    fprintf (stderr, \"%%s: failed: passed a NULL string\\n\", __func__);\n";
7156         pr "    return -1;\n";
7157         pr "  }\n";
7158         pr "  if (!*str || c_isspace (*str)) {\n";
7159         pr "    fprintf (stderr, \"%%s: failed: passed a empty string or one beginning with whitespace\\n\", __func__);\n";
7160         pr "    return -1;\n";
7161         pr "  }\n";
7162         pr "  tok = str;\n";
7163         List.iter (
7164           fun (name, coltype) ->
7165             pr "  if (!tok) {\n";
7166             pr "    fprintf (stderr, \"%%s: failed: string finished early, around token %%s\\n\", __func__, \"%s\");\n" name;
7167             pr "    return -1;\n";
7168             pr "  }\n";
7169             pr "  p = strchrnul (tok, ',');\n";
7170             pr "  if (*p) next = p+1; else next = NULL;\n";
7171             pr "  *p = '\\0';\n";
7172             (match coltype with
7173              | FString ->
7174                  pr "  r->%s = strdup (tok);\n" name;
7175                  pr "  if (r->%s == NULL) {\n" name;
7176                  pr "    perror (\"strdup\");\n";
7177                  pr "    return -1;\n";
7178                  pr "  }\n"
7179              | FUUID ->
7180                  pr "  for (i = j = 0; i < 32; ++j) {\n";
7181                  pr "    if (tok[j] == '\\0') {\n";
7182                  pr "      fprintf (stderr, \"%%s: failed to parse UUID from '%%s'\\n\", __func__, tok);\n";
7183                  pr "      return -1;\n";
7184                  pr "    } else if (tok[j] != '-')\n";
7185                  pr "      r->%s[i++] = tok[j];\n" name;
7186                  pr "  }\n";
7187              | FBytes ->
7188                  pr "  if (sscanf (tok, \"%%\"SCNu64, &r->%s) != 1) {\n" name;
7189                  pr "    fprintf (stderr, \"%%s: failed to parse size '%%s' from token %%s\\n\", __func__, tok, \"%s\");\n" name;
7190                  pr "    return -1;\n";
7191                  pr "  }\n";
7192              | FInt64 ->
7193                  pr "  if (sscanf (tok, \"%%\"SCNi64, &r->%s) != 1) {\n" name;
7194                  pr "    fprintf (stderr, \"%%s: failed to parse int '%%s' from token %%s\\n\", __func__, tok, \"%s\");\n" name;
7195                  pr "    return -1;\n";
7196                  pr "  }\n";
7197              | FOptPercent ->
7198                  pr "  if (tok[0] == '\\0')\n";
7199                  pr "    r->%s = -1;\n" name;
7200                  pr "  else if (sscanf (tok, \"%%f\", &r->%s) != 1) {\n" name;
7201                  pr "    fprintf (stderr, \"%%s: failed to parse float '%%s' from token %%s\\n\", __func__, tok, \"%s\");\n" name;
7202                  pr "    return -1;\n";
7203                  pr "  }\n";
7204              | FBuffer | FInt32 | FUInt32 | FUInt64 | FChar ->
7205                  assert false (* can never be an LVM column *)
7206             );
7207             pr "  tok = next;\n";
7208         ) cols;
7209
7210         pr "  if (tok != NULL) {\n";
7211         pr "    fprintf (stderr, \"%%s: failed: extra tokens at end of string\\n\", __func__);\n";
7212         pr "    return -1;\n";
7213         pr "  }\n";
7214         pr "  return 0;\n";
7215         pr "}\n";
7216         pr "\n";
7217
7218         pr "guestfs_int_lvm_%s_list *\n" typ;
7219         pr "parse_command_line_%ss (void)\n" typ;
7220         pr "{\n";
7221         pr "  char *out, *err;\n";
7222         pr "  char *p, *pend;\n";
7223         pr "  int r, i;\n";
7224         pr "  guestfs_int_lvm_%s_list *ret;\n" typ;
7225         pr "  void *newp;\n";
7226         pr "\n";
7227         pr "  ret = malloc (sizeof *ret);\n";
7228         pr "  if (!ret) {\n";
7229         pr "    reply_with_perror (\"malloc\");\n";
7230         pr "    return NULL;\n";
7231         pr "  }\n";
7232         pr "\n";
7233         pr "  ret->guestfs_int_lvm_%s_list_len = 0;\n" typ;
7234         pr "  ret->guestfs_int_lvm_%s_list_val = NULL;\n" typ;
7235         pr "\n";
7236         pr "  r = command (&out, &err,\n";
7237         pr "           \"lvm\", \"%ss\",\n" typ;
7238         pr "           \"-o\", lvm_%s_cols, \"--unbuffered\", \"--noheadings\",\n" typ;
7239         pr "           \"--nosuffix\", \"--separator\", \",\", \"--units\", \"b\", NULL);\n";
7240         pr "  if (r == -1) {\n";
7241         pr "    reply_with_error (\"%%s\", err);\n";
7242         pr "    free (out);\n";
7243         pr "    free (err);\n";
7244         pr "    free (ret);\n";
7245         pr "    return NULL;\n";
7246         pr "  }\n";
7247         pr "\n";
7248         pr "  free (err);\n";
7249         pr "\n";
7250         pr "  /* Tokenize each line of the output. */\n";
7251         pr "  p = out;\n";
7252         pr "  i = 0;\n";
7253         pr "  while (p) {\n";
7254         pr "    pend = strchr (p, '\\n');       /* Get the next line of output. */\n";
7255         pr "    if (pend) {\n";
7256         pr "      *pend = '\\0';\n";
7257         pr "      pend++;\n";
7258         pr "    }\n";
7259         pr "\n";
7260         pr "    while (*p && c_isspace (*p))    /* Skip any leading whitespace. */\n";
7261         pr "      p++;\n";
7262         pr "\n";
7263         pr "    if (!*p) {                      /* Empty line?  Skip it. */\n";
7264         pr "      p = pend;\n";
7265         pr "      continue;\n";
7266         pr "    }\n";
7267         pr "\n";
7268         pr "    /* Allocate some space to store this next entry. */\n";
7269         pr "    newp = realloc (ret->guestfs_int_lvm_%s_list_val,\n" typ;
7270         pr "                sizeof (guestfs_int_lvm_%s) * (i+1));\n" typ;
7271         pr "    if (newp == NULL) {\n";
7272         pr "      reply_with_perror (\"realloc\");\n";
7273         pr "      free (ret->guestfs_int_lvm_%s_list_val);\n" typ;
7274         pr "      free (ret);\n";
7275         pr "      free (out);\n";
7276         pr "      return NULL;\n";
7277         pr "    }\n";
7278         pr "    ret->guestfs_int_lvm_%s_list_val = newp;\n" typ;
7279         pr "\n";
7280         pr "    /* Tokenize the next entry. */\n";
7281         pr "    r = lvm_tokenize_%s (p, &ret->guestfs_int_lvm_%s_list_val[i]);\n" typ typ;
7282         pr "    if (r == -1) {\n";
7283         pr "      reply_with_error (\"failed to parse output of '%ss' command\");\n" typ;
7284         pr "      free (ret->guestfs_int_lvm_%s_list_val);\n" typ;
7285         pr "      free (ret);\n";
7286         pr "      free (out);\n";
7287         pr "      return NULL;\n";
7288         pr "    }\n";
7289         pr "\n";
7290         pr "    ++i;\n";
7291         pr "    p = pend;\n";
7292         pr "  }\n";
7293         pr "\n";
7294         pr "  ret->guestfs_int_lvm_%s_list_len = i;\n" typ;
7295         pr "\n";
7296         pr "  free (out);\n";
7297         pr "  return ret;\n";
7298         pr "}\n"
7299
7300   ) ["pv", lvm_pv_cols; "vg", lvm_vg_cols; "lv", lvm_lv_cols]
7301
7302 (* Generate a list of function names, for debugging in the daemon.. *)
7303 and generate_daemon_names () =
7304   generate_header CStyle GPLv2plus;
7305
7306   pr "#include <config.h>\n";
7307   pr "\n";
7308   pr "#include \"daemon.h\"\n";
7309   pr "\n";
7310
7311   pr "/* This array is indexed by proc_nr.  See guestfs_protocol.x. */\n";
7312   pr "const char *function_names[] = {\n";
7313   List.iter (
7314     fun (name, _, proc_nr, _, _, _, _) -> pr "  [%d] = \"%s\",\n" proc_nr name
7315   ) daemon_functions;
7316   pr "};\n";
7317
7318 (* Generate the optional groups for the daemon to implement
7319  * guestfs_available.
7320  *)
7321 and generate_daemon_optgroups_c () =
7322   generate_header CStyle GPLv2plus;
7323
7324   pr "#include <config.h>\n";
7325   pr "\n";
7326   pr "#include \"daemon.h\"\n";
7327   pr "#include \"optgroups.h\"\n";
7328   pr "\n";
7329
7330   pr "struct optgroup optgroups[] = {\n";
7331   List.iter (
7332     fun (group, _) ->
7333       pr "  { \"%s\", optgroup_%s_available },\n" group group
7334   ) optgroups;
7335   pr "  { NULL, NULL }\n";
7336   pr "};\n"
7337
7338 and generate_daemon_optgroups_h () =
7339   generate_header CStyle GPLv2plus;
7340
7341   List.iter (
7342     fun (group, _) ->
7343       pr "extern int optgroup_%s_available (void);\n" group
7344   ) optgroups
7345
7346 (* Generate the tests. *)
7347 and generate_tests () =
7348   generate_header CStyle GPLv2plus;
7349
7350   pr "\
7351 #include <stdio.h>
7352 #include <stdlib.h>
7353 #include <string.h>
7354 #include <unistd.h>
7355 #include <sys/types.h>
7356 #include <fcntl.h>
7357
7358 #include \"guestfs.h\"
7359 #include \"guestfs-internal.h\"
7360
7361 static guestfs_h *g;
7362 static int suppress_error = 0;
7363
7364 static void print_error (guestfs_h *g, void *data, const char *msg)
7365 {
7366   if (!suppress_error)
7367     fprintf (stderr, \"%%s\\n\", msg);
7368 }
7369
7370 /* FIXME: nearly identical code appears in fish.c */
7371 static void print_strings (char *const *argv)
7372 {
7373   size_t argc;
7374
7375   for (argc = 0; argv[argc] != NULL; ++argc)
7376     printf (\"\\t%%s\\n\", argv[argc]);
7377 }
7378
7379 /*
7380 static void print_table (char const *const *argv)
7381 {
7382   size_t i;
7383
7384   for (i = 0; argv[i] != NULL; i += 2)
7385     printf (\"%%s: %%s\\n\", argv[i], argv[i+1]);
7386 }
7387 */
7388
7389 static int
7390 is_available (const char *group)
7391 {
7392   const char *groups[] = { group, NULL };
7393   int r;
7394
7395   suppress_error = 1;
7396   r = guestfs_available (g, (char **) groups);
7397   suppress_error = 0;
7398
7399   return r == 0;
7400 }
7401
7402 static void
7403 incr (guestfs_h *g, void *iv)
7404 {
7405   int *i = (int *) iv;
7406   (*i)++;
7407 }
7408
7409 ";
7410
7411   (* Generate a list of commands which are not tested anywhere. *)
7412   pr "static void no_test_warnings (void)\n";
7413   pr "{\n";
7414
7415   let hash : (string, bool) Hashtbl.t = Hashtbl.create 13 in
7416   List.iter (
7417     fun (_, _, _, _, tests, _, _) ->
7418       let tests = filter_map (
7419         function
7420         | (_, (Always|If _|Unless _|IfAvailable _), test) -> Some test
7421         | (_, Disabled, _) -> None
7422       ) tests in
7423       let seq = List.concat (List.map seq_of_test tests) in
7424       let cmds_tested = List.map List.hd seq in
7425       List.iter (fun cmd -> Hashtbl.replace hash cmd true) cmds_tested
7426   ) all_functions;
7427
7428   List.iter (
7429     fun (name, _, _, _, _, _, _) ->
7430       if not (Hashtbl.mem hash name) then
7431         pr "  fprintf (stderr, \"warning: \\\"guestfs_%s\\\" has no tests\\n\");\n" name
7432   ) all_functions;
7433
7434   pr "}\n";
7435   pr "\n";
7436
7437   (* Generate the actual tests.  Note that we generate the tests
7438    * in reverse order, deliberately, so that (in general) the
7439    * newest tests run first.  This makes it quicker and easier to
7440    * debug them.
7441    *)
7442   let test_names =
7443     List.map (
7444       fun (name, _, _, flags, tests, _, _) ->
7445         mapi (generate_one_test name flags) tests
7446     ) (List.rev all_functions) in
7447   let test_names = List.concat test_names in
7448   let nr_tests = List.length test_names in
7449
7450   pr "\
7451 int main (int argc, char *argv[])
7452 {
7453   char c = 0;
7454   unsigned long int n_failed = 0;
7455   const char *filename;
7456   int fd;
7457   int nr_tests, test_num = 0;
7458
7459   setbuf (stdout, NULL);
7460
7461   no_test_warnings ();
7462
7463   g = guestfs_create ();
7464   if (g == NULL) {
7465     printf (\"guestfs_create FAILED\\n\");
7466     exit (EXIT_FAILURE);
7467   }
7468
7469   guestfs_set_error_handler (g, print_error, NULL);
7470
7471   guestfs_set_path (g, \"../appliance\");
7472
7473   filename = \"test1.img\";
7474   fd = open (filename, O_WRONLY|O_CREAT|O_NOCTTY|O_NONBLOCK|O_TRUNC, 0666);
7475   if (fd == -1) {
7476     perror (filename);
7477     exit (EXIT_FAILURE);
7478   }
7479   if (lseek (fd, %d, SEEK_SET) == -1) {
7480     perror (\"lseek\");
7481     close (fd);
7482     unlink (filename);
7483     exit (EXIT_FAILURE);
7484   }
7485   if (write (fd, &c, 1) == -1) {
7486     perror (\"write\");
7487     close (fd);
7488     unlink (filename);
7489     exit (EXIT_FAILURE);
7490   }
7491   if (close (fd) == -1) {
7492     perror (filename);
7493     unlink (filename);
7494     exit (EXIT_FAILURE);
7495   }
7496   if (guestfs_add_drive (g, filename) == -1) {
7497     printf (\"guestfs_add_drive %%s FAILED\\n\", filename);
7498     exit (EXIT_FAILURE);
7499   }
7500
7501   filename = \"test2.img\";
7502   fd = open (filename, O_WRONLY|O_CREAT|O_NOCTTY|O_NONBLOCK|O_TRUNC, 0666);
7503   if (fd == -1) {
7504     perror (filename);
7505     exit (EXIT_FAILURE);
7506   }
7507   if (lseek (fd, %d, SEEK_SET) == -1) {
7508     perror (\"lseek\");
7509     close (fd);
7510     unlink (filename);
7511     exit (EXIT_FAILURE);
7512   }
7513   if (write (fd, &c, 1) == -1) {
7514     perror (\"write\");
7515     close (fd);
7516     unlink (filename);
7517     exit (EXIT_FAILURE);
7518   }
7519   if (close (fd) == -1) {
7520     perror (filename);
7521     unlink (filename);
7522     exit (EXIT_FAILURE);
7523   }
7524   if (guestfs_add_drive (g, filename) == -1) {
7525     printf (\"guestfs_add_drive %%s FAILED\\n\", filename);
7526     exit (EXIT_FAILURE);
7527   }
7528
7529   filename = \"test3.img\";
7530   fd = open (filename, O_WRONLY|O_CREAT|O_NOCTTY|O_NONBLOCK|O_TRUNC, 0666);
7531   if (fd == -1) {
7532     perror (filename);
7533     exit (EXIT_FAILURE);
7534   }
7535   if (lseek (fd, %d, SEEK_SET) == -1) {
7536     perror (\"lseek\");
7537     close (fd);
7538     unlink (filename);
7539     exit (EXIT_FAILURE);
7540   }
7541   if (write (fd, &c, 1) == -1) {
7542     perror (\"write\");
7543     close (fd);
7544     unlink (filename);
7545     exit (EXIT_FAILURE);
7546   }
7547   if (close (fd) == -1) {
7548     perror (filename);
7549     unlink (filename);
7550     exit (EXIT_FAILURE);
7551   }
7552   if (guestfs_add_drive (g, filename) == -1) {
7553     printf (\"guestfs_add_drive %%s FAILED\\n\", filename);
7554     exit (EXIT_FAILURE);
7555   }
7556
7557   if (guestfs_add_drive_ro (g, \"../images/test.iso\") == -1) {
7558     printf (\"guestfs_add_drive_ro ../images/test.iso FAILED\\n\");
7559     exit (EXIT_FAILURE);
7560   }
7561
7562   /* Set a timeout in case qemu hangs during launch (RHBZ#505329). */
7563   alarm (600);
7564
7565   if (guestfs_launch (g) == -1) {
7566     printf (\"guestfs_launch FAILED\\n\");
7567     exit (EXIT_FAILURE);
7568   }
7569
7570   /* Cancel previous alarm. */
7571   alarm (0);
7572
7573   nr_tests = %d;
7574
7575 " (500 * 1024 * 1024) (50 * 1024 * 1024) (10 * 1024 * 1024) nr_tests;
7576
7577   iteri (
7578     fun i test_name ->
7579       pr "  test_num++;\n";
7580       pr "  if (guestfs_get_verbose (g))\n";
7581       pr "    printf (\"-------------------------------------------------------------------------------\\n\");\n";
7582       pr "  printf (\"%%3d/%%3d %s\\n\", test_num, nr_tests);\n" test_name;
7583       pr "  if (%s () == -1) {\n" test_name;
7584       pr "    printf (\"%s FAILED\\n\");\n" test_name;
7585       pr "    n_failed++;\n";
7586       pr "  }\n";
7587   ) test_names;
7588   pr "\n";
7589
7590   pr "  /* Check close callback is called. */
7591   int close_sentinel = 1;
7592   guestfs_set_close_callback (g, incr, &close_sentinel);
7593
7594   guestfs_close (g);
7595
7596   if (close_sentinel != 2) {
7597     fprintf (stderr, \"close callback was not called\\n\");
7598     exit (EXIT_FAILURE);
7599   }
7600
7601   unlink (\"test1.img\");
7602   unlink (\"test2.img\");
7603   unlink (\"test3.img\");
7604
7605 ";
7606
7607   pr "  if (n_failed > 0) {\n";
7608   pr "    printf (\"***** %%lu / %%d tests FAILED *****\\n\", n_failed, nr_tests);\n";
7609   pr "    exit (EXIT_FAILURE);\n";
7610   pr "  }\n";
7611   pr "\n";
7612
7613   pr "  exit (EXIT_SUCCESS);\n";
7614   pr "}\n"
7615
7616 and generate_one_test name flags i (init, prereq, test) =
7617   let test_name = sprintf "test_%s_%d" name i in
7618
7619   pr "\
7620 static int %s_skip (void)
7621 {
7622   const char *str;
7623
7624   str = getenv (\"TEST_ONLY\");
7625   if (str)
7626     return strstr (str, \"%s\") == NULL;
7627   str = getenv (\"SKIP_%s\");
7628   if (str && STREQ (str, \"1\")) return 1;
7629   str = getenv (\"SKIP_TEST_%s\");
7630   if (str && STREQ (str, \"1\")) return 1;
7631   return 0;
7632 }
7633
7634 " test_name name (String.uppercase test_name) (String.uppercase name);
7635
7636   (match prereq with
7637    | Disabled | Always | IfAvailable _ -> ()
7638    | If code | Unless code ->
7639        pr "static int %s_prereq (void)\n" test_name;
7640        pr "{\n";
7641        pr "  %s\n" code;
7642        pr "}\n";
7643        pr "\n";
7644   );
7645
7646   pr "\
7647 static int %s (void)
7648 {
7649   if (%s_skip ()) {
7650     printf (\"        %%s skipped (reason: environment variable set)\\n\", \"%s\");
7651     return 0;
7652   }
7653
7654 " test_name test_name test_name;
7655
7656   (* Optional functions should only be tested if the relevant
7657    * support is available in the daemon.
7658    *)
7659   List.iter (
7660     function
7661     | Optional group ->
7662         pr "  if (!is_available (\"%s\")) {\n" group;
7663         pr "    printf (\"        %%s skipped (reason: group %%s not available in daemon)\\n\", \"%s\", \"%s\");\n" test_name group;
7664         pr "    return 0;\n";
7665         pr "  }\n";
7666     | _ -> ()
7667   ) flags;
7668
7669   (match prereq with
7670    | Disabled ->
7671        pr "  printf (\"        %%s skipped (reason: test disabled in generator)\\n\", \"%s\");\n" test_name
7672    | If _ ->
7673        pr "  if (! %s_prereq ()) {\n" test_name;
7674        pr "    printf (\"        %%s skipped (reason: test prerequisite)\\n\", \"%s\");\n" test_name;
7675        pr "    return 0;\n";
7676        pr "  }\n";
7677        pr "\n";
7678        generate_one_test_body name i test_name init test;
7679    | Unless _ ->
7680        pr "  if (%s_prereq ()) {\n" test_name;
7681        pr "    printf (\"        %%s skipped (reason: test prerequisite)\\n\", \"%s\");\n" test_name;
7682        pr "    return 0;\n";
7683        pr "  }\n";
7684        pr "\n";
7685        generate_one_test_body name i test_name init test;
7686    | IfAvailable group ->
7687        pr "  if (!is_available (\"%s\")) {\n" group;
7688        pr "    printf (\"        %%s skipped (reason: %%s not available)\\n\", \"%s\", \"%s\");\n" test_name group;
7689        pr "    return 0;\n";
7690        pr "  }\n";
7691        pr "\n";
7692        generate_one_test_body name i test_name init test;
7693    | Always ->
7694        generate_one_test_body name i test_name init test
7695   );
7696
7697   pr "  return 0;\n";
7698   pr "}\n";
7699   pr "\n";
7700   test_name
7701
7702 and generate_one_test_body name i test_name init test =
7703   (match init with
7704    | InitNone (* XXX at some point, InitNone and InitEmpty became
7705                * folded together as the same thing.  Really we should
7706                * make InitNone do nothing at all, but the tests may
7707                * need to be checked to make sure this is OK.
7708                *)
7709    | InitEmpty ->
7710        pr "  /* InitNone|InitEmpty for %s */\n" test_name;
7711        List.iter (generate_test_command_call test_name)
7712          [["blockdev_setrw"; "/dev/sda"];
7713           ["umount_all"];
7714           ["lvm_remove_all"]]
7715    | InitPartition ->
7716        pr "  /* InitPartition for %s: create /dev/sda1 */\n" test_name;
7717        List.iter (generate_test_command_call test_name)
7718          [["blockdev_setrw"; "/dev/sda"];
7719           ["umount_all"];
7720           ["lvm_remove_all"];
7721           ["part_disk"; "/dev/sda"; "mbr"]]
7722    | InitBasicFS ->
7723        pr "  /* InitBasicFS for %s: create ext2 on /dev/sda1 */\n" test_name;
7724        List.iter (generate_test_command_call test_name)
7725          [["blockdev_setrw"; "/dev/sda"];
7726           ["umount_all"];
7727           ["lvm_remove_all"];
7728           ["part_disk"; "/dev/sda"; "mbr"];
7729           ["mkfs"; "ext2"; "/dev/sda1"];
7730           ["mount_options"; ""; "/dev/sda1"; "/"]]
7731    | InitBasicFSonLVM ->
7732        pr "  /* InitBasicFSonLVM for %s: create ext2 on /dev/VG/LV */\n"
7733          test_name;
7734        List.iter (generate_test_command_call test_name)
7735          [["blockdev_setrw"; "/dev/sda"];
7736           ["umount_all"];
7737           ["lvm_remove_all"];
7738           ["part_disk"; "/dev/sda"; "mbr"];
7739           ["pvcreate"; "/dev/sda1"];
7740           ["vgcreate"; "VG"; "/dev/sda1"];
7741           ["lvcreate"; "LV"; "VG"; "8"];
7742           ["mkfs"; "ext2"; "/dev/VG/LV"];
7743           ["mount_options"; ""; "/dev/VG/LV"; "/"]]
7744    | InitISOFS ->
7745        pr "  /* InitISOFS for %s */\n" test_name;
7746        List.iter (generate_test_command_call test_name)
7747          [["blockdev_setrw"; "/dev/sda"];
7748           ["umount_all"];
7749           ["lvm_remove_all"];
7750           ["mount_ro"; "/dev/sdd"; "/"]]
7751   );
7752
7753   let get_seq_last = function
7754     | [] ->
7755         failwithf "%s: you cannot use [] (empty list) when expecting a command"
7756           test_name
7757     | seq ->
7758         let seq = List.rev seq in
7759         List.rev (List.tl seq), List.hd seq
7760   in
7761
7762   match test with
7763   | TestRun seq ->
7764       pr "  /* TestRun for %s (%d) */\n" name i;
7765       List.iter (generate_test_command_call test_name) seq
7766   | TestOutput (seq, expected) ->
7767       pr "  /* TestOutput for %s (%d) */\n" name i;
7768       pr "  const char *expected = \"%s\";\n" (c_quote expected);
7769       let seq, last = get_seq_last seq in
7770       let test () =
7771         pr "    if (STRNEQ (r, expected)) {\n";
7772         pr "      fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r);\n" test_name;
7773         pr "      return -1;\n";
7774         pr "    }\n"
7775       in
7776       List.iter (generate_test_command_call test_name) seq;
7777       generate_test_command_call ~test test_name last
7778   | TestOutputList (seq, expected) ->
7779       pr "  /* TestOutputList for %s (%d) */\n" name i;
7780       let seq, last = get_seq_last seq in
7781       let test () =
7782         iteri (
7783           fun i str ->
7784             pr "    if (!r[%d]) {\n" i;
7785             pr "      fprintf (stderr, \"%s: short list returned from command\\n\");\n" test_name;
7786             pr "      print_strings (r);\n";
7787             pr "      return -1;\n";
7788             pr "    }\n";
7789             pr "    {\n";
7790             pr "      const char *expected = \"%s\";\n" (c_quote str);
7791             pr "      if (STRNEQ (r[%d], expected)) {\n" i;
7792             pr "        fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r[%d]);\n" test_name i;
7793             pr "        return -1;\n";
7794             pr "      }\n";
7795             pr "    }\n"
7796         ) expected;
7797         pr "    if (r[%d] != NULL) {\n" (List.length expected);
7798         pr "      fprintf (stderr, \"%s: extra elements returned from command\\n\");\n"
7799           test_name;
7800         pr "      print_strings (r);\n";
7801         pr "      return -1;\n";
7802         pr "    }\n"
7803       in
7804       List.iter (generate_test_command_call test_name) seq;
7805       generate_test_command_call ~test test_name last
7806   | TestOutputListOfDevices (seq, expected) ->
7807       pr "  /* TestOutputListOfDevices for %s (%d) */\n" name i;
7808       let seq, last = get_seq_last seq in
7809       let test () =
7810         iteri (
7811           fun i str ->
7812             pr "    if (!r[%d]) {\n" i;
7813             pr "      fprintf (stderr, \"%s: short list returned from command\\n\");\n" test_name;
7814             pr "      print_strings (r);\n";
7815             pr "      return -1;\n";
7816             pr "    }\n";
7817             pr "    {\n";
7818             pr "      const char *expected = \"%s\";\n" (c_quote str);
7819             pr "      r[%d][5] = 's';\n" i;
7820             pr "      if (STRNEQ (r[%d], expected)) {\n" i;
7821             pr "        fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r[%d]);\n" test_name i;
7822             pr "        return -1;\n";
7823             pr "      }\n";
7824             pr "    }\n"
7825         ) expected;
7826         pr "    if (r[%d] != NULL) {\n" (List.length expected);
7827         pr "      fprintf (stderr, \"%s: extra elements returned from command\\n\");\n"
7828           test_name;
7829         pr "      print_strings (r);\n";
7830         pr "      return -1;\n";
7831         pr "    }\n"
7832       in
7833       List.iter (generate_test_command_call test_name) seq;
7834       generate_test_command_call ~test test_name last
7835   | TestOutputInt (seq, expected) ->
7836       pr "  /* TestOutputInt for %s (%d) */\n" name i;
7837       let seq, last = get_seq_last seq in
7838       let test () =
7839         pr "    if (r != %d) {\n" expected;
7840         pr "      fprintf (stderr, \"%s: expected %d but got %%d\\n\","
7841           test_name expected;
7842         pr "               (int) r);\n";
7843         pr "      return -1;\n";
7844         pr "    }\n"
7845       in
7846       List.iter (generate_test_command_call test_name) seq;
7847       generate_test_command_call ~test test_name last
7848   | TestOutputIntOp (seq, op, expected) ->
7849       pr "  /* TestOutputIntOp for %s (%d) */\n" name i;
7850       let seq, last = get_seq_last seq in
7851       let test () =
7852         pr "    if (! (r %s %d)) {\n" op expected;
7853         pr "      fprintf (stderr, \"%s: expected %s %d but got %%d\\n\","
7854           test_name op expected;
7855         pr "               (int) r);\n";
7856         pr "      return -1;\n";
7857         pr "    }\n"
7858       in
7859       List.iter (generate_test_command_call test_name) seq;
7860       generate_test_command_call ~test test_name last
7861   | TestOutputTrue seq ->
7862       pr "  /* TestOutputTrue for %s (%d) */\n" name i;
7863       let seq, last = get_seq_last seq in
7864       let test () =
7865         pr "    if (!r) {\n";
7866         pr "      fprintf (stderr, \"%s: expected true, got false\\n\");\n"
7867           test_name;
7868         pr "      return -1;\n";
7869         pr "    }\n"
7870       in
7871       List.iter (generate_test_command_call test_name) seq;
7872       generate_test_command_call ~test test_name last
7873   | TestOutputFalse seq ->
7874       pr "  /* TestOutputFalse for %s (%d) */\n" name i;
7875       let seq, last = get_seq_last seq in
7876       let test () =
7877         pr "    if (r) {\n";
7878         pr "      fprintf (stderr, \"%s: expected false, got true\\n\");\n"
7879           test_name;
7880         pr "      return -1;\n";
7881         pr "    }\n"
7882       in
7883       List.iter (generate_test_command_call test_name) seq;
7884       generate_test_command_call ~test test_name last
7885   | TestOutputLength (seq, expected) ->
7886       pr "  /* TestOutputLength for %s (%d) */\n" name i;
7887       let seq, last = get_seq_last seq in
7888       let test () =
7889         pr "    int j;\n";
7890         pr "    for (j = 0; j < %d; ++j)\n" expected;
7891         pr "      if (r[j] == NULL) {\n";
7892         pr "        fprintf (stderr, \"%s: short list returned\\n\");\n"
7893           test_name;
7894         pr "        print_strings (r);\n";
7895         pr "        return -1;\n";
7896         pr "      }\n";
7897         pr "    if (r[j] != NULL) {\n";
7898         pr "      fprintf (stderr, \"%s: long list returned\\n\");\n"
7899           test_name;
7900         pr "      print_strings (r);\n";
7901         pr "      return -1;\n";
7902         pr "    }\n"
7903       in
7904       List.iter (generate_test_command_call test_name) seq;
7905       generate_test_command_call ~test test_name last
7906   | TestOutputBuffer (seq, expected) ->
7907       pr "  /* TestOutputBuffer for %s (%d) */\n" name i;
7908       pr "  const char *expected = \"%s\";\n" (c_quote expected);
7909       let seq, last = get_seq_last seq in
7910       let len = String.length expected in
7911       let test () =
7912         pr "    if (size != %d) {\n" len;
7913         pr "      fprintf (stderr, \"%s: returned size of buffer wrong, expected %d but got %%zu\\n\", size);\n" test_name len;
7914         pr "      return -1;\n";
7915         pr "    }\n";
7916         pr "    if (STRNEQLEN (r, expected, size)) {\n";
7917         pr "      fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r);\n" test_name;
7918         pr "      return -1;\n";
7919         pr "    }\n"
7920       in
7921       List.iter (generate_test_command_call test_name) seq;
7922       generate_test_command_call ~test test_name last
7923   | TestOutputStruct (seq, checks) ->
7924       pr "  /* TestOutputStruct for %s (%d) */\n" name i;
7925       let seq, last = get_seq_last seq in
7926       let test () =
7927         List.iter (
7928           function
7929           | CompareWithInt (field, expected) ->
7930               pr "    if (r->%s != %d) {\n" field expected;
7931               pr "      fprintf (stderr, \"%s: %s was %%d, expected %d\\n\",\n"
7932                 test_name field expected;
7933               pr "               (int) r->%s);\n" field;
7934               pr "      return -1;\n";
7935               pr "    }\n"
7936           | CompareWithIntOp (field, op, expected) ->
7937               pr "    if (!(r->%s %s %d)) {\n" field op expected;
7938               pr "      fprintf (stderr, \"%s: %s was %%d, expected %s %d\\n\",\n"
7939                 test_name field op expected;
7940               pr "               (int) r->%s);\n" field;
7941               pr "      return -1;\n";
7942               pr "    }\n"
7943           | CompareWithString (field, expected) ->
7944               pr "    if (STRNEQ (r->%s, \"%s\")) {\n" field expected;
7945               pr "      fprintf (stderr, \"%s: %s was \"%%s\", expected \"%s\"\\n\",\n"
7946                 test_name field expected;
7947               pr "               r->%s);\n" field;
7948               pr "      return -1;\n";
7949               pr "    }\n"
7950           | CompareFieldsIntEq (field1, field2) ->
7951               pr "    if (r->%s != r->%s) {\n" field1 field2;
7952               pr "      fprintf (stderr, \"%s: %s (%%d) <> %s (%%d)\\n\",\n"
7953                 test_name field1 field2;
7954               pr "               (int) r->%s, (int) r->%s);\n" field1 field2;
7955               pr "      return -1;\n";
7956               pr "    }\n"
7957           | CompareFieldsStrEq (field1, field2) ->
7958               pr "    if (STRNEQ (r->%s, r->%s)) {\n" field1 field2;
7959               pr "      fprintf (stderr, \"%s: %s (\"%%s\") <> %s (\"%%s\")\\n\",\n"
7960                 test_name field1 field2;
7961               pr "               r->%s, r->%s);\n" field1 field2;
7962               pr "      return -1;\n";
7963               pr "    }\n"
7964         ) checks
7965       in
7966       List.iter (generate_test_command_call test_name) seq;
7967       generate_test_command_call ~test test_name last
7968   | TestLastFail seq ->
7969       pr "  /* TestLastFail for %s (%d) */\n" name i;
7970       let seq, last = get_seq_last seq in
7971       List.iter (generate_test_command_call test_name) seq;
7972       generate_test_command_call test_name ~expect_error:true last
7973
7974 (* Generate the code to run a command, leaving the result in 'r'.
7975  * If you expect to get an error then you should set expect_error:true.
7976  *)
7977 and generate_test_command_call ?(expect_error = false) ?test test_name cmd =
7978   match cmd with
7979   | [] -> assert false
7980   | name :: args ->
7981       (* Look up the command to find out what args/ret it has. *)
7982       let style =
7983         try
7984           let _, style, _, _, _, _, _ =
7985             List.find (fun (n, _, _, _, _, _, _) -> n = name) all_functions in
7986           style
7987         with Not_found ->
7988           failwithf "%s: in test, command %s was not found" test_name name in
7989
7990       if List.length (snd style) <> List.length args then
7991         failwithf "%s: in test, wrong number of args given to %s"
7992           test_name name;
7993
7994       pr "  {\n";
7995
7996       List.iter (
7997         function
7998         | OptString n, "NULL" -> ()
7999         | Pathname n, arg
8000         | Device n, arg
8001         | Dev_or_Path n, arg
8002         | String n, arg
8003         | OptString n, arg
8004         | Key n, arg ->
8005             pr "    const char *%s = \"%s\";\n" n (c_quote arg);
8006         | BufferIn n, arg ->
8007             pr "    const char *%s = \"%s\";\n" n (c_quote arg);
8008             pr "    size_t %s_size = %d;\n" n (String.length arg)
8009         | Int _, _
8010         | Int64 _, _
8011         | Bool _, _
8012         | FileIn _, _ | FileOut _, _ -> ()
8013         | StringList n, "" | DeviceList n, "" ->
8014             pr "    const char *const %s[1] = { NULL };\n" n
8015         | StringList n, arg | DeviceList n, arg ->
8016             let strs = string_split " " arg in
8017             iteri (
8018               fun i str ->
8019                 pr "    const char *%s_%d = \"%s\";\n" n i (c_quote str);
8020             ) strs;
8021             pr "    const char *const %s[] = {\n" n;
8022             iteri (
8023               fun i _ -> pr "      %s_%d,\n" n i
8024             ) strs;
8025             pr "      NULL\n";
8026             pr "    };\n";
8027       ) (List.combine (snd style) args);
8028
8029       let error_code =
8030         match fst style with
8031         | RErr | RInt _ | RBool _ -> pr "    int r;\n"; "-1"
8032         | RInt64 _ -> pr "    int64_t r;\n"; "-1"
8033         | RConstString _ | RConstOptString _ ->
8034             pr "    const char *r;\n"; "NULL"
8035         | RString _ -> pr "    char *r;\n"; "NULL"
8036         | RStringList _ | RHashtable _ ->
8037             pr "    char **r;\n";
8038             pr "    size_t i;\n";
8039             "NULL"
8040         | RStruct (_, typ) ->
8041             pr "    struct guestfs_%s *r;\n" typ; "NULL"
8042         | RStructList (_, typ) ->
8043             pr "    struct guestfs_%s_list *r;\n" typ; "NULL"
8044         | RBufferOut _ ->
8045             pr "    char *r;\n";
8046             pr "    size_t size;\n";
8047             "NULL" in
8048
8049       pr "    suppress_error = %d;\n" (if expect_error then 1 else 0);
8050       pr "    r = guestfs_%s (g" name;
8051
8052       (* Generate the parameters. *)
8053       List.iter (
8054         function
8055         | OptString _, "NULL" -> pr ", NULL"
8056         | Pathname n, _
8057         | Device n, _ | Dev_or_Path n, _
8058         | String n, _
8059         | OptString n, _
8060         | Key n, _ ->
8061             pr ", %s" n
8062         | BufferIn n, _ ->
8063             pr ", %s, %s_size" n n
8064         | FileIn _, arg | FileOut _, arg ->
8065             pr ", \"%s\"" (c_quote arg)
8066         | StringList n, _ | DeviceList n, _ ->
8067             pr ", (char **) %s" n
8068         | Int _, arg ->
8069             let i =
8070               try int_of_string arg
8071               with Failure "int_of_string" ->
8072                 failwithf "%s: expecting an int, but got '%s'" test_name arg in
8073             pr ", %d" i
8074         | Int64 _, arg ->
8075             let i =
8076               try Int64.of_string arg
8077               with Failure "int_of_string" ->
8078                 failwithf "%s: expecting an int64, but got '%s'" test_name arg in
8079             pr ", %Ld" i
8080         | Bool _, arg ->
8081             let b = bool_of_string arg in pr ", %d" (if b then 1 else 0)
8082       ) (List.combine (snd style) args);
8083
8084       (match fst style with
8085        | RBufferOut _ -> pr ", &size"
8086        | _ -> ()
8087       );
8088
8089       pr ");\n";
8090
8091       if not expect_error then
8092         pr "    if (r == %s)\n" error_code
8093       else
8094         pr "    if (r != %s)\n" error_code;
8095       pr "      return -1;\n";
8096
8097       (* Insert the test code. *)
8098       (match test with
8099        | None -> ()
8100        | Some f -> f ()
8101       );
8102
8103       (match fst style with
8104        | RErr | RInt _ | RInt64 _ | RBool _
8105        | RConstString _ | RConstOptString _ -> ()
8106        | RString _ | RBufferOut _ -> pr "    free (r);\n"
8107        | RStringList _ | RHashtable _ ->
8108            pr "    for (i = 0; r[i] != NULL; ++i)\n";
8109            pr "      free (r[i]);\n";
8110            pr "    free (r);\n"
8111        | RStruct (_, typ) ->
8112            pr "    guestfs_free_%s (r);\n" typ
8113        | RStructList (_, typ) ->
8114            pr "    guestfs_free_%s_list (r);\n" typ
8115       );
8116
8117       pr "  }\n"
8118
8119 and c_quote str =
8120   let str = replace_str str "\r" "\\r" in
8121   let str = replace_str str "\n" "\\n" in
8122   let str = replace_str str "\t" "\\t" in
8123   let str = replace_str str "\000" "\\0" in
8124   str
8125
8126 (* Generate a lot of different functions for guestfish. *)
8127 and generate_fish_cmds () =
8128   generate_header CStyle GPLv2plus;
8129
8130   let all_functions =
8131     List.filter (
8132       fun (_, _, _, flags, _, _, _) -> not (List.mem NotInFish flags)
8133     ) all_functions in
8134   let all_functions_sorted =
8135     List.filter (
8136       fun (_, _, _, flags, _, _, _) -> not (List.mem NotInFish flags)
8137     ) all_functions_sorted in
8138
8139   pr "#include <config.h>\n";
8140   pr "\n";
8141   pr "#include <stdio.h>\n";
8142   pr "#include <stdlib.h>\n";
8143   pr "#include <string.h>\n";
8144   pr "#include <inttypes.h>\n";
8145   pr "\n";
8146   pr "#include <guestfs.h>\n";
8147   pr "#include \"c-ctype.h\"\n";
8148   pr "#include \"full-write.h\"\n";
8149   pr "#include \"xstrtol.h\"\n";
8150   pr "#include \"fish.h\"\n";
8151   pr "\n";
8152   pr "/* Valid suffixes allowed for numbers.  See Gnulib xstrtol function. */\n";
8153   pr "static const char *xstrtol_suffixes = \"0kKMGTPEZY\";\n";
8154   pr "\n";
8155
8156   (* list_commands function, which implements guestfish -h *)
8157   pr "void list_commands (void)\n";
8158   pr "{\n";
8159   pr "  printf (\"    %%-16s     %%s\\n\", _(\"Command\"), _(\"Description\"));\n";
8160   pr "  list_builtin_commands ();\n";
8161   List.iter (
8162     fun (name, _, _, flags, _, shortdesc, _) ->
8163       let name = replace_char name '_' '-' in
8164       pr "  printf (\"%%-20s %%s\\n\", \"%s\", _(\"%s\"));\n"
8165         name shortdesc
8166   ) all_functions_sorted;
8167   pr "  printf (\"    %%s\\n\",";
8168   pr "          _(\"Use -h <cmd> / help <cmd> to show detailed help for a command.\"));\n";
8169   pr "}\n";
8170   pr "\n";
8171
8172   (* display_command function, which implements guestfish -h cmd *)
8173   pr "int display_command (const char *cmd)\n";
8174   pr "{\n";
8175   List.iter (
8176     fun (name, style, _, flags, _, shortdesc, longdesc) ->
8177       let name2 = replace_char name '_' '-' in
8178       let alias =
8179         try find_map (function FishAlias n -> Some n | _ -> None) flags
8180         with Not_found -> name in
8181       let longdesc = replace_str longdesc "C<guestfs_" "C<" in
8182       let synopsis =
8183         match snd style with
8184         | [] -> name2
8185         | args ->
8186             let args = List.filter (function Key _ -> false | _ -> true) args in
8187             sprintf "%s %s"
8188               name2 (String.concat " " (List.map name_of_argt args)) in
8189
8190       let warnings =
8191         if List.exists (function Key _ -> true | _ -> false) (snd style) then
8192           "\n\nThis command has one or more key or passphrase parameters.
8193 Guestfish will prompt for these separately."
8194         else "" in
8195
8196       let warnings =
8197         warnings ^
8198           if List.mem ProtocolLimitWarning flags then
8199             ("\n\n" ^ protocol_limit_warning)
8200           else "" in
8201
8202       (* For DangerWillRobinson commands, we should probably have
8203        * guestfish prompt before allowing you to use them (especially
8204        * in interactive mode). XXX
8205        *)
8206       let warnings =
8207         warnings ^
8208           if List.mem DangerWillRobinson flags then
8209             ("\n\n" ^ danger_will_robinson)
8210           else "" in
8211
8212       let warnings =
8213         warnings ^
8214           match deprecation_notice flags with
8215           | None -> ""
8216           | Some txt -> "\n\n" ^ txt in
8217
8218       let describe_alias =
8219         if name <> alias then
8220           sprintf "\n\nYou can use '%s' as an alias for this command." alias
8221         else "" in
8222
8223       pr "  if (";
8224       pr "STRCASEEQ (cmd, \"%s\")" name;
8225       if name <> name2 then
8226         pr " || STRCASEEQ (cmd, \"%s\")" name2;
8227       if name <> alias then
8228         pr " || STRCASEEQ (cmd, \"%s\")" alias;
8229       pr ") {\n";
8230       pr "    pod2text (\"%s\", _(\"%s\"), %S);\n"
8231         name2 shortdesc
8232         ("=head1 SYNOPSIS\n\n " ^ synopsis ^ "\n\n" ^
8233          "=head1 DESCRIPTION\n\n" ^
8234          longdesc ^ warnings ^ describe_alias);
8235       pr "    return 0;\n";
8236       pr "  }\n";
8237       pr "  else\n"
8238   ) all_functions;
8239   pr "    return display_builtin_command (cmd);\n";
8240   pr "}\n";
8241   pr "\n";
8242
8243   let emit_print_list_function typ =
8244     pr "static void print_%s_list (struct guestfs_%s_list *%ss)\n"
8245       typ typ typ;
8246     pr "{\n";
8247     pr "  unsigned int i;\n";
8248     pr "\n";
8249     pr "  for (i = 0; i < %ss->len; ++i) {\n" typ;
8250     pr "    printf (\"[%%d] = {\\n\", i);\n";
8251     pr "    print_%s_indent (&%ss->val[i], \"  \");\n" typ typ;
8252     pr "    printf (\"}\\n\");\n";
8253     pr "  }\n";
8254     pr "}\n";
8255     pr "\n";
8256   in
8257
8258   (* print_* functions *)
8259   List.iter (
8260     fun (typ, cols) ->
8261       let needs_i =
8262         List.exists (function (_, (FUUID|FBuffer)) -> true | _ -> false) cols in
8263
8264       pr "static void print_%s_indent (struct guestfs_%s *%s, const char *indent)\n" typ typ typ;
8265       pr "{\n";
8266       if needs_i then (
8267         pr "  unsigned int i;\n";
8268         pr "\n"
8269       );
8270       List.iter (
8271         function
8272         | name, FString ->
8273             pr "  printf (\"%%s%s: %%s\\n\", indent, %s->%s);\n" name typ name
8274         | name, FUUID ->
8275             pr "  printf (\"%%s%s: \", indent);\n" name;
8276             pr "  for (i = 0; i < 32; ++i)\n";
8277             pr "    printf (\"%%c\", %s->%s[i]);\n" typ name;
8278             pr "  printf (\"\\n\");\n"
8279         | name, FBuffer ->
8280             pr "  printf (\"%%s%s: \", indent);\n" name;
8281             pr "  for (i = 0; i < %s->%s_len; ++i)\n" typ name;
8282             pr "    if (c_isprint (%s->%s[i]))\n" typ name;
8283             pr "      printf (\"%%c\", %s->%s[i]);\n" typ name;
8284             pr "    else\n";
8285             pr "      printf (\"\\\\x%%02x\", %s->%s[i]);\n" typ name;
8286             pr "  printf (\"\\n\");\n"
8287         | name, (FUInt64|FBytes) ->
8288             pr "  printf (\"%%s%s: %%\" PRIu64 \"\\n\", indent, %s->%s);\n"
8289               name typ name
8290         | name, FInt64 ->
8291             pr "  printf (\"%%s%s: %%\" PRIi64 \"\\n\", indent, %s->%s);\n"
8292               name typ name
8293         | name, FUInt32 ->
8294             pr "  printf (\"%%s%s: %%\" PRIu32 \"\\n\", indent, %s->%s);\n"
8295               name typ name
8296         | name, FInt32 ->
8297             pr "  printf (\"%%s%s: %%\" PRIi32 \"\\n\", indent, %s->%s);\n"
8298               name typ name
8299         | name, FChar ->
8300             pr "  printf (\"%%s%s: %%c\\n\", indent, %s->%s);\n"
8301               name typ name
8302         | name, FOptPercent ->
8303             pr "  if (%s->%s >= 0) printf (\"%%s%s: %%g %%%%\\n\", indent, %s->%s);\n"
8304               typ name name typ name;
8305             pr "  else printf (\"%%s%s: \\n\", indent);\n" name
8306       ) cols;
8307       pr "}\n";
8308       pr "\n";
8309   ) structs;
8310
8311   (* Emit a print_TYPE_list function definition only if that function is used. *)
8312   List.iter (
8313     function
8314     | typ, (RStructListOnly | RStructAndList) ->
8315         (* generate the function for typ *)
8316         emit_print_list_function typ
8317     | typ, _ -> () (* empty *)
8318   ) (rstructs_used_by all_functions);
8319
8320   (* Emit a print_TYPE function definition only if that function is used. *)
8321   List.iter (
8322     function
8323     | typ, (RStructOnly | RStructAndList) ->
8324         pr "static void print_%s (struct guestfs_%s *%s)\n" typ typ typ;
8325         pr "{\n";
8326         pr "  print_%s_indent (%s, \"\");\n" typ typ;
8327         pr "}\n";
8328         pr "\n";
8329     | typ, _ -> () (* empty *)
8330   ) (rstructs_used_by all_functions);
8331
8332   (* run_<action> actions *)
8333   List.iter (
8334     fun (name, style, _, flags, _, _, _) ->
8335       pr "static int run_%s (const char *cmd, int argc, char *argv[])\n" name;
8336       pr "{\n";
8337       (match fst style with
8338        | RErr
8339        | RInt _
8340        | RBool _ -> pr "  int r;\n"
8341        | RInt64 _ -> pr "  int64_t r;\n"
8342        | RConstString _ | RConstOptString _ -> pr "  const char *r;\n"
8343        | RString _ -> pr "  char *r;\n"
8344        | RStringList _ | RHashtable _ -> pr "  char **r;\n"
8345        | RStruct (_, typ) -> pr "  struct guestfs_%s *r;\n" typ
8346        | RStructList (_, typ) -> pr "  struct guestfs_%s_list *r;\n" typ
8347        | RBufferOut _ ->
8348            pr "  char *r;\n";
8349            pr "  size_t size;\n";
8350       );
8351       List.iter (
8352         function
8353         | Device n
8354         | String n
8355         | OptString n -> pr "  const char *%s;\n" n
8356         | Pathname n
8357         | Dev_or_Path n
8358         | FileIn n
8359         | FileOut n
8360         | Key n -> pr "  char *%s;\n" n
8361         | BufferIn n ->
8362             pr "  const char *%s;\n" n;
8363             pr "  size_t %s_size;\n" n
8364         | StringList n | DeviceList n -> pr "  char **%s;\n" n
8365         | Bool n -> pr "  int %s;\n" n
8366         | Int n -> pr "  int %s;\n" n
8367         | Int64 n -> pr "  int64_t %s;\n" n
8368       ) (snd style);
8369
8370       (* Check and convert parameters. *)
8371       let argc_expected =
8372         let args_no_keys =
8373           List.filter (function Key _ -> false | _ -> true) (snd style) in
8374         List.length args_no_keys in
8375       pr "  if (argc != %d) {\n" argc_expected;
8376       pr "    fprintf (stderr, _(\"%%s should have %%d parameter(s)\\n\"), cmd, %d);\n"
8377         argc_expected;
8378       pr "    fprintf (stderr, _(\"type 'help %%s' for help on %%s\\n\"), cmd, cmd);\n";
8379       pr "    return -1;\n";
8380       pr "  }\n";
8381
8382       let parse_integer fn fntyp rtyp range name =
8383         pr "  {\n";
8384         pr "    strtol_error xerr;\n";
8385         pr "    %s r;\n" fntyp;
8386         pr "\n";
8387         pr "    xerr = %s (argv[i++], NULL, 0, &r, xstrtol_suffixes);\n" fn;
8388         pr "    if (xerr != LONGINT_OK) {\n";
8389         pr "      fprintf (stderr,\n";
8390         pr "               _(\"%%s: %%s: invalid integer parameter (%%s returned %%d)\\n\"),\n";
8391         pr "               cmd, \"%s\", \"%s\", xerr);\n" name fn;
8392         pr "      return -1;\n";
8393         pr "    }\n";
8394         (match range with
8395          | None -> ()
8396          | Some (min, max, comment) ->
8397              pr "    /* %s */\n" comment;
8398              pr "    if (r < %s || r > %s) {\n" min max;
8399              pr "      fprintf (stderr, _(\"%%s: %%s: integer out of range\\n\"), cmd, \"%s\");\n"
8400                name;
8401              pr "      return -1;\n";
8402              pr "    }\n";
8403              pr "    /* The check above should ensure this assignment does not overflow. */\n";
8404         );
8405         pr "    %s = r;\n" name;
8406         pr "  }\n";
8407       in
8408
8409       if snd style <> [] then
8410         pr "  size_t i = 0;\n";
8411
8412       List.iter (
8413         function
8414         | Device name
8415         | String name ->
8416             pr "  %s = argv[i++];\n" name
8417         | Pathname name
8418         | Dev_or_Path name ->
8419             pr "  %s = resolve_win_path (argv[i++]);\n" name;
8420             pr "  if (%s == NULL) return -1;\n" name
8421         | OptString name ->
8422             pr "  %s = STRNEQ (argv[i], \"\") ? argv[i] : NULL;\n" name;
8423             pr "  i++;\n"
8424         | BufferIn name ->
8425             pr "  %s = argv[i];\n" name;
8426             pr "  %s_size = strlen (argv[i]);\n" name;
8427             pr "  i++;\n"
8428         | FileIn name ->
8429             pr "  %s = file_in (argv[i++]);\n" name;
8430             pr "  if (%s == NULL) return -1;\n" name
8431         | FileOut name ->
8432             pr "  %s = file_out (argv[i++]);\n" name;
8433             pr "  if (%s == NULL) return -1;\n" name
8434         | StringList name | DeviceList name ->
8435             pr "  %s = parse_string_list (argv[i++]);\n" name;
8436             pr "  if (%s == NULL) return -1;\n" name
8437         | Key name ->
8438             pr "  %s = read_key (\"%s\");\n" name name;
8439             pr "  if (%s == NULL) return -1;\n" name
8440         | Bool name ->
8441             pr "  %s = is_true (argv[i++]) ? 1 : 0;\n" name
8442         | Int name ->
8443             let range =
8444               let min = "(-(2LL<<30))"
8445               and max = "((2LL<<30)-1)"
8446               and comment =
8447                 "The Int type in the generator is a signed 31 bit int." in
8448               Some (min, max, comment) in
8449             parse_integer "xstrtoll" "long long" "int" range name
8450         | Int64 name ->
8451             parse_integer "xstrtoll" "long long" "int64_t" None name
8452       ) (snd style);
8453
8454       (* Call C API function. *)
8455       pr "  r = guestfs_%s " name;
8456       generate_c_call_args ~handle:"g" style;
8457       pr ";\n";
8458
8459       List.iter (
8460         function
8461         | Device _ | String _
8462         | OptString _ | Bool _
8463         | Int _ | Int64 _
8464         | BufferIn _ -> ()
8465         | Pathname name | Dev_or_Path name | FileOut name
8466         | Key name ->
8467             pr "  free (%s);\n" name
8468         | FileIn name ->
8469             pr "  free_file_in (%s);\n" name
8470         | StringList name | DeviceList name ->
8471             pr "  free_strings (%s);\n" name
8472       ) (snd style);
8473
8474       (* Any output flags? *)
8475       let fish_output =
8476         let flags = filter_map (
8477           function FishOutput flag -> Some flag | _ -> None
8478         ) flags in
8479         match flags with
8480         | [] -> None
8481         | [f] -> Some f
8482         | _ ->
8483             failwithf "%s: more than one FishOutput flag is not allowed" name in
8484
8485       (* Check return value for errors and display command results. *)
8486       (match fst style with
8487        | RErr -> pr "  return r;\n"
8488        | RInt _ ->
8489            pr "  if (r == -1) return -1;\n";
8490            (match fish_output with
8491             | None ->
8492                 pr "  printf (\"%%d\\n\", r);\n";
8493             | Some FishOutputOctal ->
8494                 pr "  printf (\"%%s%%o\\n\", r != 0 ? \"0\" : \"\", r);\n";
8495             | Some FishOutputHexadecimal ->
8496                 pr "  printf (\"%%s%%x\\n\", r != 0 ? \"0x\" : \"\", r);\n");
8497            pr "  return 0;\n"
8498        | RInt64 _ ->
8499            pr "  if (r == -1) return -1;\n";
8500            (match fish_output with
8501             | None ->
8502                 pr "  printf (\"%%\" PRIi64 \"\\n\", r);\n";
8503             | Some FishOutputOctal ->
8504                 pr "  printf (\"%%s%%\" PRIo64 \"\\n\", r != 0 ? \"0\" : \"\", r);\n";
8505             | Some FishOutputHexadecimal ->
8506                 pr "  printf (\"%%s%%\" PRIx64 \"\\n\", r != 0 ? \"0x\" : \"\", r);\n");
8507            pr "  return 0;\n"
8508        | RBool _ ->
8509            pr "  if (r == -1) return -1;\n";
8510            pr "  if (r) printf (\"true\\n\"); else printf (\"false\\n\");\n";
8511            pr "  return 0;\n"
8512        | RConstString _ ->
8513            pr "  if (r == NULL) return -1;\n";
8514            pr "  printf (\"%%s\\n\", r);\n";
8515            pr "  return 0;\n"
8516        | RConstOptString _ ->
8517            pr "  printf (\"%%s\\n\", r ? : \"(null)\");\n";
8518            pr "  return 0;\n"
8519        | RString _ ->
8520            pr "  if (r == NULL) return -1;\n";
8521            pr "  printf (\"%%s\\n\", r);\n";
8522            pr "  free (r);\n";
8523            pr "  return 0;\n"
8524        | RStringList _ ->
8525            pr "  if (r == NULL) return -1;\n";
8526            pr "  print_strings (r);\n";
8527            pr "  free_strings (r);\n";
8528            pr "  return 0;\n"
8529        | RStruct (_, typ) ->
8530            pr "  if (r == NULL) return -1;\n";
8531            pr "  print_%s (r);\n" typ;
8532            pr "  guestfs_free_%s (r);\n" typ;
8533            pr "  return 0;\n"
8534        | RStructList (_, typ) ->
8535            pr "  if (r == NULL) return -1;\n";
8536            pr "  print_%s_list (r);\n" typ;
8537            pr "  guestfs_free_%s_list (r);\n" typ;
8538            pr "  return 0;\n"
8539        | RHashtable _ ->
8540            pr "  if (r == NULL) return -1;\n";
8541            pr "  print_table (r);\n";
8542            pr "  free_strings (r);\n";
8543            pr "  return 0;\n"
8544        | RBufferOut _ ->
8545            pr "  if (r == NULL) return -1;\n";
8546            pr "  if (full_write (1, r, size) != size) {\n";
8547            pr "    perror (\"write\");\n";
8548            pr "    free (r);\n";
8549            pr "    return -1;\n";
8550            pr "  }\n";
8551            pr "  free (r);\n";
8552            pr "  return 0;\n"
8553       );
8554       pr "}\n";
8555       pr "\n"
8556   ) all_functions;
8557
8558   (* run_action function *)
8559   pr "int run_action (const char *cmd, int argc, char *argv[])\n";
8560   pr "{\n";
8561   List.iter (
8562     fun (name, _, _, flags, _, _, _) ->
8563       let name2 = replace_char name '_' '-' in
8564       let alias =
8565         try find_map (function FishAlias n -> Some n | _ -> None) flags
8566         with Not_found -> name in
8567       pr "  if (";
8568       pr "STRCASEEQ (cmd, \"%s\")" name;
8569       if name <> name2 then
8570         pr " || STRCASEEQ (cmd, \"%s\")" name2;
8571       if name <> alias then
8572         pr " || STRCASEEQ (cmd, \"%s\")" alias;
8573       pr ")\n";
8574       pr "    return run_%s (cmd, argc, argv);\n" name;
8575       pr "  else\n";
8576   ) all_functions;
8577   pr "    {\n";
8578   pr "      fprintf (stderr, _(\"%%s: unknown command\\n\"), cmd);\n";
8579   pr "      if (command_num == 1)\n";
8580   pr "        extended_help_message ();\n";
8581   pr "      return -1;\n";
8582   pr "    }\n";
8583   pr "  return 0;\n";
8584   pr "}\n";
8585   pr "\n"
8586
8587 (* Readline completion for guestfish. *)
8588 and generate_fish_completion () =
8589   generate_header CStyle GPLv2plus;
8590
8591   let all_functions =
8592     List.filter (
8593       fun (_, _, _, flags, _, _, _) -> not (List.mem NotInFish flags)
8594     ) all_functions in
8595
8596   pr "\
8597 #include <config.h>
8598
8599 #include <stdio.h>
8600 #include <stdlib.h>
8601 #include <string.h>
8602
8603 #ifdef HAVE_LIBREADLINE
8604 #include <readline/readline.h>
8605 #endif
8606
8607 #include \"fish.h\"
8608
8609 #ifdef HAVE_LIBREADLINE
8610
8611 static const char *const commands[] = {
8612   BUILTIN_COMMANDS_FOR_COMPLETION,
8613 ";
8614
8615   (* Get the commands, including the aliases.  They don't need to be
8616    * sorted - the generator() function just does a dumb linear search.
8617    *)
8618   let commands =
8619     List.map (
8620       fun (name, _, _, flags, _, _, _) ->
8621         let name2 = replace_char name '_' '-' in
8622         let alias =
8623           try find_map (function FishAlias n -> Some n | _ -> None) flags
8624           with Not_found -> name in
8625
8626         if name <> alias then [name2; alias] else [name2]
8627     ) all_functions in
8628   let commands = List.flatten commands in
8629
8630   List.iter (pr "  \"%s\",\n") commands;
8631
8632   pr "  NULL
8633 };
8634
8635 static char *
8636 generator (const char *text, int state)
8637 {
8638   static size_t index, len;
8639   const char *name;
8640
8641   if (!state) {
8642     index = 0;
8643     len = strlen (text);
8644   }
8645
8646   rl_attempted_completion_over = 1;
8647
8648   while ((name = commands[index]) != NULL) {
8649     index++;
8650     if (STRCASEEQLEN (name, text, len))
8651       return strdup (name);
8652   }
8653
8654   return NULL;
8655 }
8656
8657 #endif /* HAVE_LIBREADLINE */
8658
8659 #ifdef HAVE_RL_COMPLETION_MATCHES
8660 #define RL_COMPLETION_MATCHES rl_completion_matches
8661 #else
8662 #ifdef HAVE_COMPLETION_MATCHES
8663 #define RL_COMPLETION_MATCHES completion_matches
8664 #endif
8665 #endif /* else just fail if we don't have either symbol */
8666
8667 char **
8668 do_completion (const char *text, int start, int end)
8669 {
8670   char **matches = NULL;
8671
8672 #ifdef HAVE_LIBREADLINE
8673   rl_completion_append_character = ' ';
8674
8675   if (start == 0)
8676     matches = RL_COMPLETION_MATCHES (text, generator);
8677   else if (complete_dest_paths)
8678     matches = RL_COMPLETION_MATCHES (text, complete_dest_paths_generator);
8679 #endif
8680
8681   return matches;
8682 }
8683 ";
8684
8685 (* Generate the POD documentation for guestfish. *)
8686 and generate_fish_actions_pod () =
8687   let all_functions_sorted =
8688     List.filter (
8689       fun (_, _, _, flags, _, _, _) ->
8690         not (List.mem NotInFish flags || List.mem NotInDocs flags)
8691     ) all_functions_sorted in
8692
8693   let rex = Str.regexp "C<guestfs_\\([^>]+\\)>" in
8694
8695   List.iter (
8696     fun (name, style, _, flags, _, _, longdesc) ->
8697       let longdesc =
8698         Str.global_substitute rex (
8699           fun s ->
8700             let sub =
8701               try Str.matched_group 1 s
8702               with Not_found ->
8703                 failwithf "error substituting C<guestfs_...> in longdesc of function %s" name in
8704             "C<" ^ replace_char sub '_' '-' ^ ">"
8705         ) longdesc in
8706       let name = replace_char name '_' '-' in
8707       let alias =
8708         try find_map (function FishAlias n -> Some n | _ -> None) flags
8709         with Not_found -> name in
8710
8711       pr "=head2 %s" name;
8712       if name <> alias then
8713         pr " | %s" alias;
8714       pr "\n";
8715       pr "\n";
8716       pr " %s" name;
8717       List.iter (
8718         function
8719         | Pathname n | Device n | Dev_or_Path n | String n ->
8720             pr " %s" n
8721         | OptString n -> pr " %s" n
8722         | StringList n | DeviceList n -> pr " '%s ...'" n
8723         | Bool _ -> pr " true|false"
8724         | Int n -> pr " %s" n
8725         | Int64 n -> pr " %s" n
8726         | FileIn n | FileOut n -> pr " (%s|-)" n
8727         | BufferIn n -> pr " %s" n
8728         | Key _ -> () (* keys are entered at a prompt *)
8729       ) (snd style);
8730       pr "\n";
8731       pr "\n";
8732       pr "%s\n\n" longdesc;
8733
8734       if List.exists (function FileIn _ | FileOut _ -> true
8735                       | _ -> false) (snd style) then
8736         pr "Use C<-> instead of a filename to read/write from stdin/stdout.\n\n";
8737
8738       if List.exists (function Key _ -> true | _ -> false) (snd style) then
8739         pr "This command has one or more key or passphrase parameters.
8740 Guestfish will prompt for these separately.\n\n";
8741
8742       if List.mem ProtocolLimitWarning flags then
8743         pr "%s\n\n" protocol_limit_warning;
8744
8745       if List.mem DangerWillRobinson flags then
8746         pr "%s\n\n" danger_will_robinson;
8747
8748       match deprecation_notice flags with
8749       | None -> ()
8750       | Some txt -> pr "%s\n\n" txt
8751   ) all_functions_sorted
8752
8753 (* Generate a C function prototype. *)
8754 and generate_prototype ?(extern = true) ?(static = false) ?(semicolon = true)
8755     ?(single_line = false) ?(newline = false) ?(in_daemon = false)
8756     ?(prefix = "")
8757     ?handle name style =
8758   if extern then pr "extern ";
8759   if static then pr "static ";
8760   (match fst style with
8761    | RErr -> pr "int "
8762    | RInt _ -> pr "int "
8763    | RInt64 _ -> pr "int64_t "
8764    | RBool _ -> pr "int "
8765    | RConstString _ | RConstOptString _ -> pr "const char *"
8766    | RString _ | RBufferOut _ -> pr "char *"
8767    | RStringList _ | RHashtable _ -> pr "char **"
8768    | RStruct (_, typ) ->
8769        if not in_daemon then pr "struct guestfs_%s *" typ
8770        else pr "guestfs_int_%s *" typ
8771    | RStructList (_, typ) ->
8772        if not in_daemon then pr "struct guestfs_%s_list *" typ
8773        else pr "guestfs_int_%s_list *" typ
8774   );
8775   let is_RBufferOut = match fst style with RBufferOut _ -> true | _ -> false in
8776   pr "%s%s (" prefix name;
8777   if handle = None && List.length (snd style) = 0 && not is_RBufferOut then
8778     pr "void"
8779   else (
8780     let comma = ref false in
8781     (match handle with
8782      | None -> ()
8783      | Some handle -> pr "guestfs_h *%s" handle; comma := true
8784     );
8785     let next () =
8786       if !comma then (
8787         if single_line then pr ", " else pr ",\n\t\t"
8788       );
8789       comma := true
8790     in
8791     List.iter (
8792       function
8793       | Pathname n
8794       | Device n | Dev_or_Path n
8795       | String n
8796       | OptString n
8797       | Key n ->
8798           next ();
8799           pr "const char *%s" n
8800       | StringList n | DeviceList n ->
8801           next ();
8802           pr "char *const *%s" n
8803       | Bool n -> next (); pr "int %s" n
8804       | Int n -> next (); pr "int %s" n
8805       | Int64 n -> next (); pr "int64_t %s" n
8806       | FileIn n
8807       | FileOut n ->
8808           if not in_daemon then (next (); pr "const char *%s" n)
8809       | BufferIn n ->
8810           next ();
8811           pr "const char *%s" n;
8812           next ();
8813           pr "size_t %s_size" n
8814     ) (snd style);
8815     if is_RBufferOut then (next (); pr "size_t *size_r");
8816   );
8817   pr ")";
8818   if semicolon then pr ";";
8819   if newline then pr "\n"
8820
8821 (* Generate C call arguments, eg "(handle, foo, bar)" *)
8822 and generate_c_call_args ?handle ?(decl = false) style =
8823   pr "(";
8824   let comma = ref false in
8825   let next () =
8826     if !comma then pr ", ";
8827     comma := true
8828   in
8829   (match handle with
8830    | None -> ()
8831    | Some handle -> pr "%s" handle; comma := true
8832   );
8833   List.iter (
8834     function
8835     | BufferIn n ->
8836         next ();
8837         pr "%s, %s_size" n n
8838     | arg ->
8839         next ();
8840         pr "%s" (name_of_argt arg)
8841   ) (snd style);
8842   (* For RBufferOut calls, add implicit &size parameter. *)
8843   if not decl then (
8844     match fst style with
8845     | RBufferOut _ ->
8846         next ();
8847         pr "&size"
8848     | _ -> ()
8849   );
8850   pr ")"
8851
8852 (* Generate the OCaml bindings interface. *)
8853 and generate_ocaml_mli () =
8854   generate_header OCamlStyle LGPLv2plus;
8855
8856   pr "\
8857 (** For API documentation you should refer to the C API
8858     in the guestfs(3) manual page.  The OCaml API uses almost
8859     exactly the same calls. *)
8860
8861 type t
8862 (** A [guestfs_h] handle. *)
8863
8864 exception Error of string
8865 (** This exception is raised when there is an error. *)
8866
8867 exception Handle_closed of string
8868 (** This exception is raised if you use a {!Guestfs.t} handle
8869     after calling {!close} on it.  The string is the name of
8870     the function. *)
8871
8872 val create : unit -> t
8873 (** Create a {!Guestfs.t} handle. *)
8874
8875 val close : t -> unit
8876 (** Close the {!Guestfs.t} handle and free up all resources used
8877     by it immediately.
8878
8879     Handles are closed by the garbage collector when they become
8880     unreferenced, but callers can call this in order to provide
8881     predictable cleanup. *)
8882
8883 ";
8884   generate_ocaml_structure_decls ();
8885
8886   (* The actions. *)
8887   List.iter (
8888     fun (name, style, _, _, _, shortdesc, _) ->
8889       generate_ocaml_prototype name style;
8890       pr "(** %s *)\n" shortdesc;
8891       pr "\n"
8892   ) all_functions_sorted
8893
8894 (* Generate the OCaml bindings implementation. *)
8895 and generate_ocaml_ml () =
8896   generate_header OCamlStyle LGPLv2plus;
8897
8898   pr "\
8899 type t
8900
8901 exception Error of string
8902 exception Handle_closed of string
8903
8904 external create : unit -> t = \"ocaml_guestfs_create\"
8905 external close : t -> unit = \"ocaml_guestfs_close\"
8906
8907 (* Give the exceptions names, so they can be raised from the C code. *)
8908 let () =
8909   Callback.register_exception \"ocaml_guestfs_error\" (Error \"\");
8910   Callback.register_exception \"ocaml_guestfs_closed\" (Handle_closed \"\")
8911
8912 ";
8913
8914   generate_ocaml_structure_decls ();
8915
8916   (* The actions. *)
8917   List.iter (
8918     fun (name, style, _, _, _, shortdesc, _) ->
8919       generate_ocaml_prototype ~is_external:true name style;
8920   ) all_functions_sorted
8921
8922 (* Generate the OCaml bindings C implementation. *)
8923 and generate_ocaml_c () =
8924   generate_header CStyle LGPLv2plus;
8925
8926   pr "\
8927 #include <stdio.h>
8928 #include <stdlib.h>
8929 #include <string.h>
8930
8931 #include <caml/config.h>
8932 #include <caml/alloc.h>
8933 #include <caml/callback.h>
8934 #include <caml/fail.h>
8935 #include <caml/memory.h>
8936 #include <caml/mlvalues.h>
8937 #include <caml/signals.h>
8938
8939 #include \"guestfs.h\"
8940
8941 #include \"guestfs_c.h\"
8942
8943 /* Copy a hashtable of string pairs into an assoc-list.  We return
8944  * the list in reverse order, but hashtables aren't supposed to be
8945  * ordered anyway.
8946  */
8947 static CAMLprim value
8948 copy_table (char * const * argv)
8949 {
8950   CAMLparam0 ();
8951   CAMLlocal5 (rv, pairv, kv, vv, cons);
8952   size_t i;
8953
8954   rv = Val_int (0);
8955   for (i = 0; argv[i] != NULL; i += 2) {
8956     kv = caml_copy_string (argv[i]);
8957     vv = caml_copy_string (argv[i+1]);
8958     pairv = caml_alloc (2, 0);
8959     Store_field (pairv, 0, kv);
8960     Store_field (pairv, 1, vv);
8961     cons = caml_alloc (2, 0);
8962     Store_field (cons, 1, rv);
8963     rv = cons;
8964     Store_field (cons, 0, pairv);
8965   }
8966
8967   CAMLreturn (rv);
8968 }
8969
8970 ";
8971
8972   (* Struct copy functions. *)
8973
8974   let emit_ocaml_copy_list_function typ =
8975     pr "static CAMLprim value\n";
8976     pr "copy_%s_list (const struct guestfs_%s_list *%ss)\n" typ typ typ;
8977     pr "{\n";
8978     pr "  CAMLparam0 ();\n";
8979     pr "  CAMLlocal2 (rv, v);\n";
8980     pr "  unsigned int i;\n";
8981     pr "\n";
8982     pr "  if (%ss->len == 0)\n" typ;
8983     pr "    CAMLreturn (Atom (0));\n";
8984     pr "  else {\n";
8985     pr "    rv = caml_alloc (%ss->len, 0);\n" typ;
8986     pr "    for (i = 0; i < %ss->len; ++i) {\n" typ;
8987     pr "      v = copy_%s (&%ss->val[i]);\n" typ typ;
8988     pr "      caml_modify (&Field (rv, i), v);\n";
8989     pr "    }\n";
8990     pr "    CAMLreturn (rv);\n";
8991     pr "  }\n";
8992     pr "}\n";
8993     pr "\n";
8994   in
8995
8996   List.iter (
8997     fun (typ, cols) ->
8998       let has_optpercent_col =
8999         List.exists (function (_, FOptPercent) -> true | _ -> false) cols in
9000
9001       pr "static CAMLprim value\n";
9002       pr "copy_%s (const struct guestfs_%s *%s)\n" typ typ typ;
9003       pr "{\n";
9004       pr "  CAMLparam0 ();\n";
9005       if has_optpercent_col then
9006         pr "  CAMLlocal3 (rv, v, v2);\n"
9007       else
9008         pr "  CAMLlocal2 (rv, v);\n";
9009       pr "\n";
9010       pr "  rv = caml_alloc (%d, 0);\n" (List.length cols);
9011       iteri (
9012         fun i col ->
9013           (match col with
9014            | name, FString ->
9015                pr "  v = caml_copy_string (%s->%s);\n" typ name
9016            | name, FBuffer ->
9017                pr "  v = caml_alloc_string (%s->%s_len);\n" typ name;
9018                pr "  memcpy (String_val (v), %s->%s, %s->%s_len);\n"
9019                  typ name typ name
9020            | name, FUUID ->
9021                pr "  v = caml_alloc_string (32);\n";
9022                pr "  memcpy (String_val (v), %s->%s, 32);\n" typ name
9023            | name, (FBytes|FInt64|FUInt64) ->
9024                pr "  v = caml_copy_int64 (%s->%s);\n" typ name
9025            | name, (FInt32|FUInt32) ->
9026                pr "  v = caml_copy_int32 (%s->%s);\n" typ name
9027            | name, FOptPercent ->
9028                pr "  if (%s->%s >= 0) { /* Some %s */\n" typ name name;
9029                pr "    v2 = caml_copy_double (%s->%s);\n" typ name;
9030                pr "    v = caml_alloc (1, 0);\n";
9031                pr "    Store_field (v, 0, v2);\n";
9032                pr "  } else /* None */\n";
9033                pr "    v = Val_int (0);\n";
9034            | name, FChar ->
9035                pr "  v = Val_int (%s->%s);\n" typ name
9036           );
9037           pr "  Store_field (rv, %d, v);\n" i
9038       ) cols;
9039       pr "  CAMLreturn (rv);\n";
9040       pr "}\n";
9041       pr "\n";
9042   ) structs;
9043
9044   (* Emit a copy_TYPE_list function definition only if that function is used. *)
9045   List.iter (
9046     function
9047     | typ, (RStructListOnly | RStructAndList) ->
9048         (* generate the function for typ *)
9049         emit_ocaml_copy_list_function typ
9050     | typ, _ -> () (* empty *)
9051   ) (rstructs_used_by all_functions);
9052
9053   (* The wrappers. *)
9054   List.iter (
9055     fun (name, style, _, _, _, _, _) ->
9056       pr "/* Automatically generated wrapper for function\n";
9057       pr " * ";
9058       generate_ocaml_prototype name style;
9059       pr " */\n";
9060       pr "\n";
9061
9062       let params =
9063         "gv" :: List.map (fun arg -> name_of_argt arg ^ "v") (snd style) in
9064
9065       let needs_extra_vs =
9066         match fst style with RConstOptString _ -> true | _ -> false in
9067
9068       pr "/* Emit prototype to appease gcc's -Wmissing-prototypes. */\n";
9069       pr "CAMLprim value ocaml_guestfs_%s (value %s" name (List.hd params);
9070       List.iter (pr ", value %s") (List.tl params); pr ");\n";
9071       pr "\n";
9072
9073       pr "CAMLprim value\n";
9074       pr "ocaml_guestfs_%s (value %s" name (List.hd params);
9075       List.iter (pr ", value %s") (List.tl params);
9076       pr ")\n";
9077       pr "{\n";
9078
9079       (match params with
9080        | [p1; p2; p3; p4; p5] ->
9081            pr "  CAMLparam5 (%s);\n" (String.concat ", " params)
9082        | p1 :: p2 :: p3 :: p4 :: p5 :: rest ->
9083            pr "  CAMLparam5 (%s);\n" (String.concat ", " [p1; p2; p3; p4; p5]);
9084            pr "  CAMLxparam%d (%s);\n"
9085              (List.length rest) (String.concat ", " rest)
9086        | ps ->
9087            pr "  CAMLparam%d (%s);\n" (List.length ps) (String.concat ", " ps)
9088       );
9089       if not needs_extra_vs then
9090         pr "  CAMLlocal1 (rv);\n"
9091       else
9092         pr "  CAMLlocal3 (rv, v, v2);\n";
9093       pr "\n";
9094
9095       pr "  guestfs_h *g = Guestfs_val (gv);\n";
9096       pr "  if (g == NULL)\n";
9097       pr "    ocaml_guestfs_raise_closed (\"%s\");\n" name;
9098       pr "\n";
9099
9100       List.iter (
9101         function
9102         | Pathname n
9103         | Device n | Dev_or_Path n
9104         | String n
9105         | FileIn n
9106         | FileOut n
9107         | Key n ->
9108             (* Copy strings in case the GC moves them: RHBZ#604691 *)
9109             pr "  char *%s = guestfs_safe_strdup (g, String_val (%sv));\n" n n
9110         | OptString n ->
9111             pr "  char *%s =\n" n;
9112             pr "    %sv != Val_int (0) ?" n;
9113             pr "      guestfs_safe_strdup (g, String_val (Field (%sv, 0))) : NULL;\n" n
9114         | BufferIn n ->
9115             pr "  size_t %s_size = caml_string_length (%sv);\n" n n;
9116             pr "  char *%s = guestfs_safe_memdup (g, String_val (%sv), %s_size);\n" n n n
9117         | StringList n | DeviceList n ->
9118             pr "  char **%s = ocaml_guestfs_strings_val (g, %sv);\n" n n
9119         | Bool n ->
9120             pr "  int %s = Bool_val (%sv);\n" n n
9121         | Int n ->
9122             pr "  int %s = Int_val (%sv);\n" n n
9123         | Int64 n ->
9124             pr "  int64_t %s = Int64_val (%sv);\n" n n
9125       ) (snd style);
9126       let error_code =
9127         match fst style with
9128         | RErr -> pr "  int r;\n"; "-1"
9129         | RInt _ -> pr "  int r;\n"; "-1"
9130         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
9131         | RBool _ -> pr "  int r;\n"; "-1"
9132         | RConstString _ | RConstOptString _ ->
9133             pr "  const char *r;\n"; "NULL"
9134         | RString _ -> pr "  char *r;\n"; "NULL"
9135         | RStringList _ ->
9136             pr "  size_t i;\n";
9137             pr "  char **r;\n";
9138             "NULL"
9139         | RStruct (_, typ) ->
9140             pr "  struct guestfs_%s *r;\n" typ; "NULL"
9141         | RStructList (_, typ) ->
9142             pr "  struct guestfs_%s_list *r;\n" typ; "NULL"
9143         | RHashtable _ ->
9144             pr "  size_t i;\n";
9145             pr "  char **r;\n";
9146             "NULL"
9147         | RBufferOut _ ->
9148             pr "  char *r;\n";
9149             pr "  size_t size;\n";
9150             "NULL" in
9151       pr "\n";
9152
9153       pr "  caml_enter_blocking_section ();\n";
9154       pr "  r = guestfs_%s " name;
9155       generate_c_call_args ~handle:"g" style;
9156       pr ";\n";
9157       pr "  caml_leave_blocking_section ();\n";
9158
9159       (* Free strings if we copied them above. *)
9160       List.iter (
9161         function
9162         | Pathname n | Device n | Dev_or_Path n | String n | OptString n
9163         | FileIn n | FileOut n | BufferIn n | Key n ->
9164             pr "  free (%s);\n" n
9165         | StringList n | DeviceList n ->
9166             pr "  ocaml_guestfs_free_strings (%s);\n" n;
9167         | Bool _ | Int _ | Int64 _ -> ()
9168       ) (snd style);
9169
9170       pr "  if (r == %s)\n" error_code;
9171       pr "    ocaml_guestfs_raise_error (g, \"%s\");\n" name;
9172       pr "\n";
9173
9174       (match fst style with
9175        | RErr -> pr "  rv = Val_unit;\n"
9176        | RInt _ -> pr "  rv = Val_int (r);\n"
9177        | RInt64 _ ->
9178            pr "  rv = caml_copy_int64 (r);\n"
9179        | RBool _ -> pr "  rv = Val_bool (r);\n"
9180        | RConstString _ ->
9181            pr "  rv = caml_copy_string (r);\n"
9182        | RConstOptString _ ->
9183            pr "  if (r) { /* Some string */\n";
9184            pr "    v = caml_alloc (1, 0);\n";
9185            pr "    v2 = caml_copy_string (r);\n";
9186            pr "    Store_field (v, 0, v2);\n";
9187            pr "  } else /* None */\n";
9188            pr "    v = Val_int (0);\n";
9189        | RString _ ->
9190            pr "  rv = caml_copy_string (r);\n";
9191            pr "  free (r);\n"
9192        | RStringList _ ->
9193            pr "  rv = caml_copy_string_array ((const char **) r);\n";
9194            pr "  for (i = 0; r[i] != NULL; ++i) free (r[i]);\n";
9195            pr "  free (r);\n"
9196        | RStruct (_, typ) ->
9197            pr "  rv = copy_%s (r);\n" typ;
9198            pr "  guestfs_free_%s (r);\n" typ;
9199        | RStructList (_, typ) ->
9200            pr "  rv = copy_%s_list (r);\n" typ;
9201            pr "  guestfs_free_%s_list (r);\n" typ;
9202        | RHashtable _ ->
9203            pr "  rv = copy_table (r);\n";
9204            pr "  for (i = 0; r[i] != NULL; ++i) free (r[i]);\n";
9205            pr "  free (r);\n";
9206        | RBufferOut _ ->
9207            pr "  rv = caml_alloc_string (size);\n";
9208            pr "  memcpy (String_val (rv), r, size);\n";
9209       );
9210
9211       pr "  CAMLreturn (rv);\n";
9212       pr "}\n";
9213       pr "\n";
9214
9215       if List.length params > 5 then (
9216         pr "/* Emit prototype to appease gcc's -Wmissing-prototypes. */\n";
9217         pr "CAMLprim value ";
9218         pr "ocaml_guestfs_%s_byte (value *argv, int argn);\n" name;
9219         pr "CAMLprim value\n";
9220         pr "ocaml_guestfs_%s_byte (value *argv, int argn)\n" name;
9221         pr "{\n";
9222         pr "  return ocaml_guestfs_%s (argv[0]" name;
9223         iteri (fun i _ -> pr ", argv[%d]" i) (List.tl params);
9224         pr ");\n";
9225         pr "}\n";
9226         pr "\n"
9227       )
9228   ) all_functions_sorted
9229
9230 and generate_ocaml_structure_decls () =
9231   List.iter (
9232     fun (typ, cols) ->
9233       pr "type %s = {\n" typ;
9234       List.iter (
9235         function
9236         | name, FString -> pr "  %s : string;\n" name
9237         | name, FBuffer -> pr "  %s : string;\n" name
9238         | name, FUUID -> pr "  %s : string;\n" name
9239         | name, (FBytes|FInt64|FUInt64) -> pr "  %s : int64;\n" name
9240         | name, (FInt32|FUInt32) -> pr "  %s : int32;\n" name
9241         | name, FChar -> pr "  %s : char;\n" name
9242         | name, FOptPercent -> pr "  %s : float option;\n" name
9243       ) cols;
9244       pr "}\n";
9245       pr "\n"
9246   ) structs
9247
9248 and generate_ocaml_prototype ?(is_external = false) name style =
9249   if is_external then pr "external " else pr "val ";
9250   pr "%s : t -> " name;
9251   List.iter (
9252     function
9253     | Pathname _ | Device _ | Dev_or_Path _ | String _ | FileIn _ | FileOut _
9254     | BufferIn _ | Key _ -> pr "string -> "
9255     | OptString _ -> pr "string option -> "
9256     | StringList _ | DeviceList _ -> pr "string array -> "
9257     | Bool _ -> pr "bool -> "
9258     | Int _ -> pr "int -> "
9259     | Int64 _ -> pr "int64 -> "
9260   ) (snd style);
9261   (match fst style with
9262    | RErr -> pr "unit" (* all errors are turned into exceptions *)
9263    | RInt _ -> pr "int"
9264    | RInt64 _ -> pr "int64"
9265    | RBool _ -> pr "bool"
9266    | RConstString _ -> pr "string"
9267    | RConstOptString _ -> pr "string option"
9268    | RString _ | RBufferOut _ -> pr "string"
9269    | RStringList _ -> pr "string array"
9270    | RStruct (_, typ) -> pr "%s" typ
9271    | RStructList (_, typ) -> pr "%s array" typ
9272    | RHashtable _ -> pr "(string * string) list"
9273   );
9274   if is_external then (
9275     pr " = ";
9276     if List.length (snd style) + 1 > 5 then
9277       pr "\"ocaml_guestfs_%s_byte\" " name;
9278     pr "\"ocaml_guestfs_%s\"" name
9279   );
9280   pr "\n"
9281
9282 (* Generate Perl xs code, a sort of crazy variation of C with macros. *)
9283 and generate_perl_xs () =
9284   generate_header CStyle LGPLv2plus;
9285
9286   pr "\
9287 #include \"EXTERN.h\"
9288 #include \"perl.h\"
9289 #include \"XSUB.h\"
9290
9291 #include <guestfs.h>
9292
9293 #ifndef PRId64
9294 #define PRId64 \"lld\"
9295 #endif
9296
9297 static SV *
9298 my_newSVll(long long val) {
9299 #ifdef USE_64_BIT_ALL
9300   return newSViv(val);
9301 #else
9302   char buf[100];
9303   int len;
9304   len = snprintf(buf, 100, \"%%\" PRId64, val);
9305   return newSVpv(buf, len);
9306 #endif
9307 }
9308
9309 #ifndef PRIu64
9310 #define PRIu64 \"llu\"
9311 #endif
9312
9313 static SV *
9314 my_newSVull(unsigned long long val) {
9315 #ifdef USE_64_BIT_ALL
9316   return newSVuv(val);
9317 #else
9318   char buf[100];
9319   int len;
9320   len = snprintf(buf, 100, \"%%\" PRIu64, val);
9321   return newSVpv(buf, len);
9322 #endif
9323 }
9324
9325 /* http://www.perlmonks.org/?node_id=680842 */
9326 static char **
9327 XS_unpack_charPtrPtr (SV *arg) {
9328   char **ret;
9329   AV *av;
9330   I32 i;
9331
9332   if (!arg || !SvOK (arg) || !SvROK (arg) || SvTYPE (SvRV (arg)) != SVt_PVAV)
9333     croak (\"array reference expected\");
9334
9335   av = (AV *)SvRV (arg);
9336   ret = malloc ((av_len (av) + 1 + 1) * sizeof (char *));
9337   if (!ret)
9338     croak (\"malloc failed\");
9339
9340   for (i = 0; i <= av_len (av); i++) {
9341     SV **elem = av_fetch (av, i, 0);
9342
9343     if (!elem || !*elem)
9344       croak (\"missing element in list\");
9345
9346     ret[i] = SvPV_nolen (*elem);
9347   }
9348
9349   ret[i] = NULL;
9350
9351   return ret;
9352 }
9353
9354 MODULE = Sys::Guestfs  PACKAGE = Sys::Guestfs
9355
9356 PROTOTYPES: ENABLE
9357
9358 guestfs_h *
9359 _create ()
9360    CODE:
9361       RETVAL = guestfs_create ();
9362       if (!RETVAL)
9363         croak (\"could not create guestfs handle\");
9364       guestfs_set_error_handler (RETVAL, NULL, NULL);
9365  OUTPUT:
9366       RETVAL
9367
9368 void
9369 DESTROY (sv)
9370       SV *sv;
9371  PPCODE:
9372       /* For the 'g' argument above we do the conversion explicitly and
9373        * don't rely on the typemap, because if the handle has been
9374        * explicitly closed we don't want the typemap conversion to
9375        * display an error.
9376        */
9377       HV *hv = (HV *) SvRV (sv);
9378       SV **svp = hv_fetch (hv, \"_g\", 2, 0);
9379       if (svp != NULL) {
9380         guestfs_h *g = (guestfs_h *) SvIV (*svp);
9381         assert (g != NULL);
9382         guestfs_close (g);
9383       }
9384
9385 void
9386 close (g)
9387       guestfs_h *g;
9388  PPCODE:
9389       guestfs_close (g);
9390       /* Avoid double-free in DESTROY method. */
9391       HV *hv = (HV *) SvRV (ST(0));
9392       (void) hv_delete (hv, \"_g\", 2, G_DISCARD);
9393
9394 ";
9395
9396   List.iter (
9397     fun (name, style, _, _, _, _, _) ->
9398       (match fst style with
9399        | RErr -> pr "void\n"
9400        | RInt _ -> pr "SV *\n"
9401        | RInt64 _ -> pr "SV *\n"
9402        | RBool _ -> pr "SV *\n"
9403        | RConstString _ -> pr "SV *\n"
9404        | RConstOptString _ -> pr "SV *\n"
9405        | RString _ -> pr "SV *\n"
9406        | RBufferOut _ -> pr "SV *\n"
9407        | RStringList _
9408        | RStruct _ | RStructList _
9409        | RHashtable _ ->
9410            pr "void\n" (* all lists returned implictly on the stack *)
9411       );
9412       (* Call and arguments. *)
9413       pr "%s (g" name;
9414       List.iter (
9415         fun arg -> pr ", %s" (name_of_argt arg)
9416       ) (snd style);
9417       pr ")\n";
9418       pr "      guestfs_h *g;\n";
9419       iteri (
9420         fun i ->
9421           function
9422           | Pathname n | Device n | Dev_or_Path n | String n
9423           | FileIn n | FileOut n | Key n ->
9424               pr "      char *%s;\n" n
9425           | BufferIn n ->
9426               pr "      char *%s;\n" n;
9427               pr "      size_t %s_size = SvCUR (ST(%d));\n" n (i+1)
9428           | OptString n ->
9429               (* http://www.perlmonks.org/?node_id=554277
9430                * Note that the implicit handle argument means we have
9431                * to add 1 to the ST(x) operator.
9432                *)
9433               pr "      char *%s = SvOK(ST(%d)) ? SvPV_nolen(ST(%d)) : NULL;\n" n (i+1) (i+1)
9434           | StringList n | DeviceList n -> pr "      char **%s;\n" n
9435           | Bool n -> pr "      int %s;\n" n
9436           | Int n -> pr "      int %s;\n" n
9437           | Int64 n -> pr "      int64_t %s;\n" n
9438       ) (snd style);
9439
9440       let do_cleanups () =
9441         List.iter (
9442           function
9443           | Pathname _ | Device _ | Dev_or_Path _ | String _ | OptString _
9444           | Bool _ | Int _ | Int64 _
9445           | FileIn _ | FileOut _
9446           | BufferIn _ | Key _ -> ()
9447           | StringList n | DeviceList n -> pr "      free (%s);\n" n
9448         ) (snd style)
9449       in
9450
9451       (* Code. *)
9452       (match fst style with
9453        | RErr ->
9454            pr "PREINIT:\n";
9455            pr "      int r;\n";
9456            pr " PPCODE:\n";
9457            pr "      r = guestfs_%s " name;
9458            generate_c_call_args ~handle:"g" style;
9459            pr ";\n";
9460            do_cleanups ();
9461            pr "      if (r == -1)\n";
9462            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9463        | RInt n
9464        | RBool n ->
9465            pr "PREINIT:\n";
9466            pr "      int %s;\n" n;
9467            pr "   CODE:\n";
9468            pr "      %s = guestfs_%s " n name;
9469            generate_c_call_args ~handle:"g" style;
9470            pr ";\n";
9471            do_cleanups ();
9472            pr "      if (%s == -1)\n" n;
9473            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9474            pr "      RETVAL = newSViv (%s);\n" n;
9475            pr " OUTPUT:\n";
9476            pr "      RETVAL\n"
9477        | RInt64 n ->
9478            pr "PREINIT:\n";
9479            pr "      int64_t %s;\n" n;
9480            pr "   CODE:\n";
9481            pr "      %s = guestfs_%s " n name;
9482            generate_c_call_args ~handle:"g" style;
9483            pr ";\n";
9484            do_cleanups ();
9485            pr "      if (%s == -1)\n" n;
9486            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9487            pr "      RETVAL = my_newSVll (%s);\n" n;
9488            pr " OUTPUT:\n";
9489            pr "      RETVAL\n"
9490        | RConstString n ->
9491            pr "PREINIT:\n";
9492            pr "      const char *%s;\n" n;
9493            pr "   CODE:\n";
9494            pr "      %s = guestfs_%s " n name;
9495            generate_c_call_args ~handle:"g" style;
9496            pr ";\n";
9497            do_cleanups ();
9498            pr "      if (%s == NULL)\n" n;
9499            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9500            pr "      RETVAL = newSVpv (%s, 0);\n" n;
9501            pr " OUTPUT:\n";
9502            pr "      RETVAL\n"
9503        | RConstOptString n ->
9504            pr "PREINIT:\n";
9505            pr "      const char *%s;\n" n;
9506            pr "   CODE:\n";
9507            pr "      %s = guestfs_%s " n name;
9508            generate_c_call_args ~handle:"g" style;
9509            pr ";\n";
9510            do_cleanups ();
9511            pr "      if (%s == NULL)\n" n;
9512            pr "        RETVAL = &PL_sv_undef;\n";
9513            pr "      else\n";
9514            pr "        RETVAL = newSVpv (%s, 0);\n" n;
9515            pr " OUTPUT:\n";
9516            pr "      RETVAL\n"
9517        | RString n ->
9518            pr "PREINIT:\n";
9519            pr "      char *%s;\n" n;
9520            pr "   CODE:\n";
9521            pr "      %s = guestfs_%s " n name;
9522            generate_c_call_args ~handle:"g" style;
9523            pr ";\n";
9524            do_cleanups ();
9525            pr "      if (%s == NULL)\n" n;
9526            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9527            pr "      RETVAL = newSVpv (%s, 0);\n" n;
9528            pr "      free (%s);\n" n;
9529            pr " OUTPUT:\n";
9530            pr "      RETVAL\n"
9531        | RStringList n | RHashtable n ->
9532            pr "PREINIT:\n";
9533            pr "      char **%s;\n" n;
9534            pr "      size_t i, n;\n";
9535            pr " PPCODE:\n";
9536            pr "      %s = guestfs_%s " n name;
9537            generate_c_call_args ~handle:"g" style;
9538            pr ";\n";
9539            do_cleanups ();
9540            pr "      if (%s == NULL)\n" n;
9541            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9542            pr "      for (n = 0; %s[n] != NULL; ++n) /**/;\n" n;
9543            pr "      EXTEND (SP, n);\n";
9544            pr "      for (i = 0; i < n; ++i) {\n";
9545            pr "        PUSHs (sv_2mortal (newSVpv (%s[i], 0)));\n" n;
9546            pr "        free (%s[i]);\n" n;
9547            pr "      }\n";
9548            pr "      free (%s);\n" n;
9549        | RStruct (n, typ) ->
9550            let cols = cols_of_struct typ in
9551            generate_perl_struct_code typ cols name style n do_cleanups
9552        | RStructList (n, typ) ->
9553            let cols = cols_of_struct typ in
9554            generate_perl_struct_list_code typ cols name style n do_cleanups
9555        | RBufferOut n ->
9556            pr "PREINIT:\n";
9557            pr "      char *%s;\n" n;
9558            pr "      size_t size;\n";
9559            pr "   CODE:\n";
9560            pr "      %s = guestfs_%s " n name;
9561            generate_c_call_args ~handle:"g" style;
9562            pr ";\n";
9563            do_cleanups ();
9564            pr "      if (%s == NULL)\n" n;
9565            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9566            pr "      RETVAL = newSVpvn (%s, size);\n" n;
9567            pr "      free (%s);\n" n;
9568            pr " OUTPUT:\n";
9569            pr "      RETVAL\n"
9570       );
9571
9572       pr "\n"
9573   ) all_functions
9574
9575 and generate_perl_struct_list_code typ cols name style n do_cleanups =
9576   pr "PREINIT:\n";
9577   pr "      struct guestfs_%s_list *%s;\n" typ n;
9578   pr "      size_t i;\n";
9579   pr "      HV *hv;\n";
9580   pr " PPCODE:\n";
9581   pr "      %s = guestfs_%s " n name;
9582   generate_c_call_args ~handle:"g" style;
9583   pr ";\n";
9584   do_cleanups ();
9585   pr "      if (%s == NULL)\n" n;
9586   pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9587   pr "      EXTEND (SP, %s->len);\n" n;
9588   pr "      for (i = 0; i < %s->len; ++i) {\n" n;
9589   pr "        hv = newHV ();\n";
9590   List.iter (
9591     function
9592     | name, FString ->
9593         pr "        (void) hv_store (hv, \"%s\", %d, newSVpv (%s->val[i].%s, 0), 0);\n"
9594           name (String.length name) n name
9595     | name, FUUID ->
9596         pr "        (void) hv_store (hv, \"%s\", %d, newSVpv (%s->val[i].%s, 32), 0);\n"
9597           name (String.length name) n name
9598     | name, FBuffer ->
9599         pr "        (void) hv_store (hv, \"%s\", %d, newSVpvn (%s->val[i].%s, %s->val[i].%s_len), 0);\n"
9600           name (String.length name) n name n name
9601     | name, (FBytes|FUInt64) ->
9602         pr "        (void) hv_store (hv, \"%s\", %d, my_newSVull (%s->val[i].%s), 0);\n"
9603           name (String.length name) n name
9604     | name, FInt64 ->
9605         pr "        (void) hv_store (hv, \"%s\", %d, my_newSVll (%s->val[i].%s), 0);\n"
9606           name (String.length name) n name
9607     | name, (FInt32|FUInt32) ->
9608         pr "        (void) hv_store (hv, \"%s\", %d, newSVnv (%s->val[i].%s), 0);\n"
9609           name (String.length name) n name
9610     | name, FChar ->
9611         pr "        (void) hv_store (hv, \"%s\", %d, newSVpv (&%s->val[i].%s, 1), 0);\n"
9612           name (String.length name) n name
9613     | name, FOptPercent ->
9614         pr "        (void) hv_store (hv, \"%s\", %d, newSVnv (%s->val[i].%s), 0);\n"
9615           name (String.length name) n name
9616   ) cols;
9617   pr "        PUSHs (sv_2mortal (newRV ((SV *) hv)));\n";
9618   pr "      }\n";
9619   pr "      guestfs_free_%s_list (%s);\n" typ n
9620
9621 and generate_perl_struct_code typ cols name style n do_cleanups =
9622   pr "PREINIT:\n";
9623   pr "      struct guestfs_%s *%s;\n" typ n;
9624   pr " PPCODE:\n";
9625   pr "      %s = guestfs_%s " n name;
9626   generate_c_call_args ~handle:"g" style;
9627   pr ";\n";
9628   do_cleanups ();
9629   pr "      if (%s == NULL)\n" n;
9630   pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9631   pr "      EXTEND (SP, 2 * %d);\n" (List.length cols);
9632   List.iter (
9633     fun ((name, _) as col) ->
9634       pr "      PUSHs (sv_2mortal (newSVpv (\"%s\", 0)));\n" name;
9635
9636       match col with
9637       | name, FString ->
9638           pr "      PUSHs (sv_2mortal (newSVpv (%s->%s, 0)));\n"
9639             n name
9640       | name, FBuffer ->
9641           pr "      PUSHs (sv_2mortal (newSVpvn (%s->%s, %s->%s_len)));\n"
9642             n name n name
9643       | name, FUUID ->
9644           pr "      PUSHs (sv_2mortal (newSVpv (%s->%s, 32)));\n"
9645             n name
9646       | name, (FBytes|FUInt64) ->
9647           pr "      PUSHs (sv_2mortal (my_newSVull (%s->%s)));\n"
9648             n name
9649       | name, FInt64 ->
9650           pr "      PUSHs (sv_2mortal (my_newSVll (%s->%s)));\n"
9651             n name
9652       | name, (FInt32|FUInt32) ->
9653           pr "      PUSHs (sv_2mortal (newSVnv (%s->%s)));\n"
9654             n name
9655       | name, FChar ->
9656           pr "      PUSHs (sv_2mortal (newSVpv (&%s->%s, 1)));\n"
9657             n name
9658       | name, FOptPercent ->
9659           pr "      PUSHs (sv_2mortal (newSVnv (%s->%s)));\n"
9660             n name
9661   ) cols;
9662   pr "      free (%s);\n" n
9663
9664 (* Generate Sys/Guestfs.pm. *)
9665 and generate_perl_pm () =
9666   generate_header HashStyle LGPLv2plus;
9667
9668   pr "\
9669 =pod
9670
9671 =head1 NAME
9672
9673 Sys::Guestfs - Perl bindings for libguestfs
9674
9675 =head1 SYNOPSIS
9676
9677  use Sys::Guestfs;
9678
9679  my $h = Sys::Guestfs->new ();
9680  $h->add_drive ('guest.img');
9681  $h->launch ();
9682  $h->mount ('/dev/sda1', '/');
9683  $h->touch ('/hello');
9684  $h->sync ();
9685
9686 =head1 DESCRIPTION
9687
9688 The C<Sys::Guestfs> module provides a Perl XS binding to the
9689 libguestfs API for examining and modifying virtual machine
9690 disk images.
9691
9692 Amongst the things this is good for: making batch configuration
9693 changes to guests, getting disk used/free statistics (see also:
9694 virt-df), migrating between virtualization systems (see also:
9695 virt-p2v), performing partial backups, performing partial guest
9696 clones, cloning guests and changing registry/UUID/hostname info, and
9697 much else besides.
9698
9699 Libguestfs uses Linux kernel and qemu code, and can access any type of
9700 guest filesystem that Linux and qemu can, including but not limited
9701 to: ext2/3/4, btrfs, FAT and NTFS, LVM, many different disk partition
9702 schemes, qcow, qcow2, vmdk.
9703
9704 Libguestfs provides ways to enumerate guest storage (eg. partitions,
9705 LVs, what filesystem is in each LV, etc.).  It can also run commands
9706 in the context of the guest.  Also you can access filesystems over
9707 FUSE.
9708
9709 See also L<Sys::Guestfs::Lib(3)> for a set of useful library
9710 functions for using libguestfs from Perl, including integration
9711 with libvirt.
9712
9713 =head1 ERRORS
9714
9715 All errors turn into calls to C<croak> (see L<Carp(3)>).
9716
9717 =head1 METHODS
9718
9719 =over 4
9720
9721 =cut
9722
9723 package Sys::Guestfs;
9724
9725 use strict;
9726 use warnings;
9727
9728 # This version number changes whenever a new function
9729 # is added to the libguestfs API.  It is not directly
9730 # related to the libguestfs version number.
9731 use vars qw($VERSION);
9732 $VERSION = '0.%d';
9733
9734 require XSLoader;
9735 XSLoader::load ('Sys::Guestfs');
9736
9737 =item $h = Sys::Guestfs->new ();
9738
9739 Create a new guestfs handle.
9740
9741 =cut
9742
9743 sub new {
9744   my $proto = shift;
9745   my $class = ref ($proto) || $proto;
9746
9747   my $g = Sys::Guestfs::_create ();
9748   my $self = { _g => $g };
9749   bless $self, $class;
9750   return $self;
9751 }
9752
9753 =item $h->close ();
9754
9755 Explicitly close the guestfs handle.
9756
9757 B<Note:> You should not usually call this function.  The handle will
9758 be closed implicitly when its reference count goes to zero (eg.
9759 when it goes out of scope or the program ends).  This call is
9760 only required in some exceptional cases, such as where the program
9761 may contain cached references to the handle 'somewhere' and you
9762 really have to have the close happen right away.  After calling
9763 C<close> the program must not call any method (including C<close>)
9764 on the handle (but the implicit call to C<DESTROY> that happens
9765 when the final reference is cleaned up is OK).
9766
9767 =cut
9768
9769 " max_proc_nr;
9770
9771   (* Actions.  We only need to print documentation for these as
9772    * they are pulled in from the XS code automatically.
9773    *)
9774   List.iter (
9775     fun (name, style, _, flags, _, _, longdesc) ->
9776       if not (List.mem NotInDocs flags) then (
9777         let longdesc = replace_str longdesc "C<guestfs_" "C<$h-E<gt>" in
9778         pr "=item ";
9779         generate_perl_prototype name style;
9780         pr "\n\n";
9781         pr "%s\n\n" longdesc;
9782         if List.mem ProtocolLimitWarning flags then
9783           pr "%s\n\n" protocol_limit_warning;
9784         if List.mem DangerWillRobinson flags then
9785           pr "%s\n\n" danger_will_robinson;
9786         match deprecation_notice flags with
9787         | None -> ()
9788         | Some txt -> pr "%s\n\n" txt
9789       )
9790   ) all_functions_sorted;
9791
9792   (* End of file. *)
9793   pr "\
9794 =cut
9795
9796 1;
9797
9798 =back
9799
9800 =head1 COPYRIGHT
9801
9802 Copyright (C) %s Red Hat Inc.
9803
9804 =head1 LICENSE
9805
9806 Please see the file COPYING.LIB for the full license.
9807
9808 =head1 SEE ALSO
9809
9810 L<guestfs(3)>,
9811 L<guestfish(1)>,
9812 L<http://libguestfs.org>,
9813 L<Sys::Guestfs::Lib(3)>.
9814
9815 =cut
9816 " copyright_years
9817
9818 and generate_perl_prototype name style =
9819   (match fst style with
9820    | RErr -> ()
9821    | RBool n
9822    | RInt n
9823    | RInt64 n
9824    | RConstString n
9825    | RConstOptString n
9826    | RString n
9827    | RBufferOut n -> pr "$%s = " n
9828    | RStruct (n,_)
9829    | RHashtable n -> pr "%%%s = " n
9830    | RStringList n
9831    | RStructList (n,_) -> pr "@%s = " n
9832   );
9833   pr "$h->%s (" name;
9834   let comma = ref false in
9835   List.iter (
9836     fun arg ->
9837       if !comma then pr ", ";
9838       comma := true;
9839       match arg with
9840       | Pathname n | Device n | Dev_or_Path n | String n
9841       | OptString n | Bool n | Int n | Int64 n | FileIn n | FileOut n
9842       | BufferIn n | Key n ->
9843           pr "$%s" n
9844       | StringList n | DeviceList n ->
9845           pr "\\@%s" n
9846   ) (snd style);
9847   pr ");"
9848
9849 (* Generate Python C module. *)
9850 and generate_python_c () =
9851   generate_header CStyle LGPLv2plus;
9852
9853   pr "\
9854 #define PY_SSIZE_T_CLEAN 1
9855 #include <Python.h>
9856
9857 #if PY_VERSION_HEX < 0x02050000
9858 typedef int Py_ssize_t;
9859 #define PY_SSIZE_T_MAX INT_MAX
9860 #define PY_SSIZE_T_MIN INT_MIN
9861 #endif
9862
9863 #include <stdio.h>
9864 #include <stdlib.h>
9865 #include <assert.h>
9866
9867 #include \"guestfs.h\"
9868
9869 #ifndef HAVE_PYCAPSULE_NEW
9870 typedef struct {
9871   PyObject_HEAD
9872   guestfs_h *g;
9873 } Pyguestfs_Object;
9874 #endif
9875
9876 static guestfs_h *
9877 get_handle (PyObject *obj)
9878 {
9879   assert (obj);
9880   assert (obj != Py_None);
9881 #ifndef HAVE_PYCAPSULE_NEW
9882   return ((Pyguestfs_Object *) obj)->g;
9883 #else
9884   return (guestfs_h*) PyCapsule_GetPointer(obj, \"guestfs_h\");
9885 #endif
9886 }
9887
9888 static PyObject *
9889 put_handle (guestfs_h *g)
9890 {
9891   assert (g);
9892 #ifndef HAVE_PYCAPSULE_NEW
9893   return
9894     PyCObject_FromVoidPtrAndDesc ((void *) g, (char *) \"guestfs_h\", NULL);
9895 #else
9896   return PyCapsule_New ((void *) g, \"guestfs_h\", NULL);
9897 #endif
9898 }
9899
9900 /* This list should be freed (but not the strings) after use. */
9901 static char **
9902 get_string_list (PyObject *obj)
9903 {
9904   size_t i, len;
9905   char **r;
9906
9907   assert (obj);
9908
9909   if (!PyList_Check (obj)) {
9910     PyErr_SetString (PyExc_RuntimeError, \"expecting a list parameter\");
9911     return NULL;
9912   }
9913
9914   Py_ssize_t slen = PyList_Size (obj);
9915   if (slen == -1) {
9916     PyErr_SetString (PyExc_RuntimeError, \"get_string_list: PyList_Size failure\");
9917     return NULL;
9918   }
9919   len = (size_t) slen;
9920   r = malloc (sizeof (char *) * (len+1));
9921   if (r == NULL) {
9922     PyErr_SetString (PyExc_RuntimeError, \"get_string_list: out of memory\");
9923     return NULL;
9924   }
9925
9926   for (i = 0; i < len; ++i)
9927     r[i] = PyString_AsString (PyList_GetItem (obj, i));
9928   r[len] = NULL;
9929
9930   return r;
9931 }
9932
9933 static PyObject *
9934 put_string_list (char * const * const argv)
9935 {
9936   PyObject *list;
9937   int argc, i;
9938
9939   for (argc = 0; argv[argc] != NULL; ++argc)
9940     ;
9941
9942   list = PyList_New (argc);
9943   for (i = 0; i < argc; ++i)
9944     PyList_SetItem (list, i, PyString_FromString (argv[i]));
9945
9946   return list;
9947 }
9948
9949 static PyObject *
9950 put_table (char * const * const argv)
9951 {
9952   PyObject *list, *item;
9953   int argc, i;
9954
9955   for (argc = 0; argv[argc] != NULL; ++argc)
9956     ;
9957
9958   list = PyList_New (argc >> 1);
9959   for (i = 0; i < argc; i += 2) {
9960     item = PyTuple_New (2);
9961     PyTuple_SetItem (item, 0, PyString_FromString (argv[i]));
9962     PyTuple_SetItem (item, 1, PyString_FromString (argv[i+1]));
9963     PyList_SetItem (list, i >> 1, item);
9964   }
9965
9966   return list;
9967 }
9968
9969 static void
9970 free_strings (char **argv)
9971 {
9972   int argc;
9973
9974   for (argc = 0; argv[argc] != NULL; ++argc)
9975     free (argv[argc]);
9976   free (argv);
9977 }
9978
9979 static PyObject *
9980 py_guestfs_create (PyObject *self, PyObject *args)
9981 {
9982   guestfs_h *g;
9983
9984   g = guestfs_create ();
9985   if (g == NULL) {
9986     PyErr_SetString (PyExc_RuntimeError,
9987                      \"guestfs.create: failed to allocate handle\");
9988     return NULL;
9989   }
9990   guestfs_set_error_handler (g, NULL, NULL);
9991   /* This can return NULL, but in that case put_handle will have
9992    * set the Python error string.
9993    */
9994   return put_handle (g);
9995 }
9996
9997 static PyObject *
9998 py_guestfs_close (PyObject *self, PyObject *args)
9999 {
10000   PyObject *py_g;
10001   guestfs_h *g;
10002
10003   if (!PyArg_ParseTuple (args, (char *) \"O:guestfs_close\", &py_g))
10004     return NULL;
10005   g = get_handle (py_g);
10006
10007   guestfs_close (g);
10008
10009   Py_INCREF (Py_None);
10010   return Py_None;
10011 }
10012
10013 ";
10014
10015   let emit_put_list_function typ =
10016     pr "static PyObject *\n";
10017     pr "put_%s_list (struct guestfs_%s_list *%ss)\n" typ typ typ;
10018     pr "{\n";
10019     pr "  PyObject *list;\n";
10020     pr "  size_t i;\n";
10021     pr "\n";
10022     pr "  list = PyList_New (%ss->len);\n" typ;
10023     pr "  for (i = 0; i < %ss->len; ++i)\n" typ;
10024     pr "    PyList_SetItem (list, i, put_%s (&%ss->val[i]));\n" typ typ;
10025     pr "  return list;\n";
10026     pr "};\n";
10027     pr "\n"
10028   in
10029
10030   (* Structures, turned into Python dictionaries. *)
10031   List.iter (
10032     fun (typ, cols) ->
10033       pr "static PyObject *\n";
10034       pr "put_%s (struct guestfs_%s *%s)\n" typ typ typ;
10035       pr "{\n";
10036       pr "  PyObject *dict;\n";
10037       pr "\n";
10038       pr "  dict = PyDict_New ();\n";
10039       List.iter (
10040         function
10041         | name, FString ->
10042             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
10043             pr "                        PyString_FromString (%s->%s));\n"
10044               typ name
10045         | name, FBuffer ->
10046             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
10047             pr "                        PyString_FromStringAndSize (%s->%s, %s->%s_len));\n"
10048               typ name typ name
10049         | name, FUUID ->
10050             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
10051             pr "                        PyString_FromStringAndSize (%s->%s, 32));\n"
10052               typ name
10053         | name, (FBytes|FUInt64) ->
10054             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
10055             pr "                        PyLong_FromUnsignedLongLong (%s->%s));\n"
10056               typ name
10057         | name, FInt64 ->
10058             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
10059             pr "                        PyLong_FromLongLong (%s->%s));\n"
10060               typ name
10061         | name, FUInt32 ->
10062             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
10063             pr "                        PyLong_FromUnsignedLong (%s->%s));\n"
10064               typ name
10065         | name, FInt32 ->
10066             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
10067             pr "                        PyLong_FromLong (%s->%s));\n"
10068               typ name
10069         | name, FOptPercent ->
10070             pr "  if (%s->%s >= 0)\n" typ name;
10071             pr "    PyDict_SetItemString (dict, \"%s\",\n" name;
10072             pr "                          PyFloat_FromDouble ((double) %s->%s));\n"
10073               typ name;
10074             pr "  else {\n";
10075             pr "    Py_INCREF (Py_None);\n";
10076             pr "    PyDict_SetItemString (dict, \"%s\", Py_None);\n" name;
10077             pr "  }\n"
10078         | name, FChar ->
10079             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
10080             pr "                        PyString_FromStringAndSize (&dirent->%s, 1));\n" name
10081       ) cols;
10082       pr "  return dict;\n";
10083       pr "};\n";
10084       pr "\n";
10085
10086   ) structs;
10087
10088   (* Emit a put_TYPE_list function definition only if that function is used. *)
10089   List.iter (
10090     function
10091     | typ, (RStructListOnly | RStructAndList) ->
10092         (* generate the function for typ *)
10093         emit_put_list_function typ
10094     | typ, _ -> () (* empty *)
10095   ) (rstructs_used_by all_functions);
10096
10097   (* Python wrapper functions. *)
10098   List.iter (
10099     fun (name, style, _, _, _, _, _) ->
10100       pr "static PyObject *\n";
10101       pr "py_guestfs_%s (PyObject *self, PyObject *args)\n" name;
10102       pr "{\n";
10103
10104       pr "  PyObject *py_g;\n";
10105       pr "  guestfs_h *g;\n";
10106       pr "  PyObject *py_r;\n";
10107
10108       let error_code =
10109         match fst style with
10110         | RErr | RInt _ | RBool _ -> pr "  int r;\n"; "-1"
10111         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
10112         | RConstString _ | RConstOptString _ ->
10113             pr "  const char *r;\n"; "NULL"
10114         | RString _ -> pr "  char *r;\n"; "NULL"
10115         | RStringList _ | RHashtable _ -> pr "  char **r;\n"; "NULL"
10116         | RStruct (_, typ) -> pr "  struct guestfs_%s *r;\n" typ; "NULL"
10117         | RStructList (_, typ) ->
10118             pr "  struct guestfs_%s_list *r;\n" typ; "NULL"
10119         | RBufferOut _ ->
10120             pr "  char *r;\n";
10121             pr "  size_t size;\n";
10122             "NULL" in
10123
10124       List.iter (
10125         function
10126         | Pathname n | Device n | Dev_or_Path n | String n | Key n
10127         | FileIn n | FileOut n ->
10128             pr "  const char *%s;\n" n
10129         | OptString n -> pr "  const char *%s;\n" n
10130         | BufferIn n ->
10131             pr "  const char *%s;\n" n;
10132             pr "  Py_ssize_t %s_size;\n" n
10133         | StringList n | DeviceList n ->
10134             pr "  PyObject *py_%s;\n" n;
10135             pr "  char **%s;\n" n
10136         | Bool n -> pr "  int %s;\n" n
10137         | Int n -> pr "  int %s;\n" n
10138         | Int64 n -> pr "  long long %s;\n" n
10139       ) (snd style);
10140
10141       pr "\n";
10142
10143       (* Convert the parameters. *)
10144       pr "  if (!PyArg_ParseTuple (args, (char *) \"O";
10145       List.iter (
10146         function
10147         | Pathname _ | Device _ | Dev_or_Path _ | String _ | Key _
10148         | FileIn _ | FileOut _ -> pr "s"
10149         | OptString _ -> pr "z"
10150         | StringList _ | DeviceList _ -> pr "O"
10151         | Bool _ -> pr "i" (* XXX Python has booleans? *)
10152         | Int _ -> pr "i"
10153         | Int64 _ -> pr "L" (* XXX Whoever thought it was a good idea to
10154                              * emulate C's int/long/long long in Python?
10155                              *)
10156         | BufferIn _ -> pr "s#"
10157       ) (snd style);
10158       pr ":guestfs_%s\",\n" name;
10159       pr "                         &py_g";
10160       List.iter (
10161         function
10162         | Pathname n | Device n | Dev_or_Path n | String n | Key n
10163         | FileIn n | FileOut n -> pr ", &%s" n
10164         | OptString n -> pr ", &%s" n
10165         | StringList n | DeviceList n -> pr ", &py_%s" n
10166         | Bool n -> pr ", &%s" n
10167         | Int n -> pr ", &%s" n
10168         | Int64 n -> pr ", &%s" n
10169         | BufferIn n -> pr ", &%s, &%s_size" n n
10170       ) (snd style);
10171
10172       pr "))\n";
10173       pr "    return NULL;\n";
10174
10175       pr "  g = get_handle (py_g);\n";
10176       List.iter (
10177         function
10178         | Pathname _ | Device _ | Dev_or_Path _ | String _ | Key _
10179         | FileIn _ | FileOut _ | OptString _ | Bool _ | Int _ | Int64 _
10180         | BufferIn _ -> ()
10181         | StringList n | DeviceList n ->
10182             pr "  %s = get_string_list (py_%s);\n" n n;
10183             pr "  if (!%s) return NULL;\n" n
10184       ) (snd style);
10185
10186       pr "\n";
10187
10188       pr "  r = guestfs_%s " name;
10189       generate_c_call_args ~handle:"g" style;
10190       pr ";\n";
10191
10192       List.iter (
10193         function
10194         | Pathname _ | Device _ | Dev_or_Path _ | String _ | Key _
10195         | FileIn _ | FileOut _ | OptString _ | Bool _ | Int _ | Int64 _
10196         | BufferIn _ -> ()
10197         | StringList n | DeviceList n ->
10198             pr "  free (%s);\n" n
10199       ) (snd style);
10200
10201       pr "  if (r == %s) {\n" error_code;
10202       pr "    PyErr_SetString (PyExc_RuntimeError, guestfs_last_error (g));\n";
10203       pr "    return NULL;\n";
10204       pr "  }\n";
10205       pr "\n";
10206
10207       (match fst style with
10208        | RErr ->
10209            pr "  Py_INCREF (Py_None);\n";
10210            pr "  py_r = Py_None;\n"
10211        | RInt _
10212        | RBool _ -> pr "  py_r = PyInt_FromLong ((long) r);\n"
10213        | RInt64 _ -> pr "  py_r = PyLong_FromLongLong (r);\n"
10214        | RConstString _ -> pr "  py_r = PyString_FromString (r);\n"
10215        | RConstOptString _ ->
10216            pr "  if (r)\n";
10217            pr "    py_r = PyString_FromString (r);\n";
10218            pr "  else {\n";
10219            pr "    Py_INCREF (Py_None);\n";
10220            pr "    py_r = Py_None;\n";
10221            pr "  }\n"
10222        | RString _ ->
10223            pr "  py_r = PyString_FromString (r);\n";
10224            pr "  free (r);\n"
10225        | RStringList _ ->
10226            pr "  py_r = put_string_list (r);\n";
10227            pr "  free_strings (r);\n"
10228        | RStruct (_, typ) ->
10229            pr "  py_r = put_%s (r);\n" typ;
10230            pr "  guestfs_free_%s (r);\n" typ
10231        | RStructList (_, typ) ->
10232            pr "  py_r = put_%s_list (r);\n" typ;
10233            pr "  guestfs_free_%s_list (r);\n" typ
10234        | RHashtable n ->
10235            pr "  py_r = put_table (r);\n";
10236            pr "  free_strings (r);\n"
10237        | RBufferOut _ ->
10238            pr "  py_r = PyString_FromStringAndSize (r, size);\n";
10239            pr "  free (r);\n"
10240       );
10241
10242       pr "  return py_r;\n";
10243       pr "}\n";
10244       pr "\n"
10245   ) all_functions;
10246
10247   (* Table of functions. *)
10248   pr "static PyMethodDef methods[] = {\n";
10249   pr "  { (char *) \"create\", py_guestfs_create, METH_VARARGS, NULL },\n";
10250   pr "  { (char *) \"close\", py_guestfs_close, METH_VARARGS, NULL },\n";
10251   List.iter (
10252     fun (name, _, _, _, _, _, _) ->
10253       pr "  { (char *) \"%s\", py_guestfs_%s, METH_VARARGS, NULL },\n"
10254         name name
10255   ) all_functions;
10256   pr "  { NULL, NULL, 0, NULL }\n";
10257   pr "};\n";
10258   pr "\n";
10259
10260   (* Init function. *)
10261   pr "\
10262 void
10263 initlibguestfsmod (void)
10264 {
10265   static int initialized = 0;
10266
10267   if (initialized) return;
10268   Py_InitModule ((char *) \"libguestfsmod\", methods);
10269   initialized = 1;
10270 }
10271 "
10272
10273 (* Generate Python module. *)
10274 and generate_python_py () =
10275   generate_header HashStyle LGPLv2plus;
10276
10277   pr "\
10278 u\"\"\"Python bindings for libguestfs
10279
10280 import guestfs
10281 g = guestfs.GuestFS ()
10282 g.add_drive (\"guest.img\")
10283 g.launch ()
10284 parts = g.list_partitions ()
10285
10286 The guestfs module provides a Python binding to the libguestfs API
10287 for examining and modifying virtual machine disk images.
10288
10289 Amongst the things this is good for: making batch configuration
10290 changes to guests, getting disk used/free statistics (see also:
10291 virt-df), migrating between virtualization systems (see also:
10292 virt-p2v), performing partial backups, performing partial guest
10293 clones, cloning guests and changing registry/UUID/hostname info, and
10294 much else besides.
10295
10296 Libguestfs uses Linux kernel and qemu code, and can access any type of
10297 guest filesystem that Linux and qemu can, including but not limited
10298 to: ext2/3/4, btrfs, FAT and NTFS, LVM, many different disk partition
10299 schemes, qcow, qcow2, vmdk.
10300
10301 Libguestfs provides ways to enumerate guest storage (eg. partitions,
10302 LVs, what filesystem is in each LV, etc.).  It can also run commands
10303 in the context of the guest.  Also you can access filesystems over
10304 FUSE.
10305
10306 Errors which happen while using the API are turned into Python
10307 RuntimeError exceptions.
10308
10309 To create a guestfs handle you usually have to perform the following
10310 sequence of calls:
10311
10312 # Create the handle, call add_drive at least once, and possibly
10313 # several times if the guest has multiple block devices:
10314 g = guestfs.GuestFS ()
10315 g.add_drive (\"guest.img\")
10316
10317 # Launch the qemu subprocess and wait for it to become ready:
10318 g.launch ()
10319
10320 # Now you can issue commands, for example:
10321 logvols = g.lvs ()
10322
10323 \"\"\"
10324
10325 import libguestfsmod
10326
10327 class GuestFS:
10328     \"\"\"Instances of this class are libguestfs API handles.\"\"\"
10329
10330     def __init__ (self):
10331         \"\"\"Create a new libguestfs handle.\"\"\"
10332         self._o = libguestfsmod.create ()
10333
10334     def __del__ (self):
10335         libguestfsmod.close (self._o)
10336
10337 ";
10338
10339   List.iter (
10340     fun (name, style, _, flags, _, _, longdesc) ->
10341       pr "    def %s " name;
10342       generate_py_call_args ~handle:"self" (snd style);
10343       pr ":\n";
10344
10345       if not (List.mem NotInDocs flags) then (
10346         let doc = replace_str longdesc "C<guestfs_" "C<g." in
10347         let doc =
10348           match fst style with
10349           | RErr | RInt _ | RInt64 _ | RBool _
10350           | RConstOptString _ | RConstString _
10351           | RString _ | RBufferOut _ -> doc
10352           | RStringList _ ->
10353               doc ^ "\n\nThis function returns a list of strings."
10354           | RStruct (_, typ) ->
10355               doc ^ sprintf "\n\nThis function returns a dictionary, with keys matching the various fields in the guestfs_%s structure." typ
10356           | RStructList (_, typ) ->
10357               doc ^ sprintf "\n\nThis function returns a list of %ss.  Each %s is represented as a dictionary." typ typ
10358           | RHashtable _ ->
10359               doc ^ "\n\nThis function returns a dictionary." in
10360         let doc =
10361           if List.mem ProtocolLimitWarning flags then
10362             doc ^ "\n\n" ^ protocol_limit_warning
10363           else doc in
10364         let doc =
10365           if List.mem DangerWillRobinson flags then
10366             doc ^ "\n\n" ^ danger_will_robinson
10367           else doc in
10368         let doc =
10369           match deprecation_notice flags with
10370           | None -> doc
10371           | Some txt -> doc ^ "\n\n" ^ txt in
10372         let doc = pod2text ~width:60 name doc in
10373         let doc = List.map (fun line -> replace_str line "\\" "\\\\") doc in
10374         let doc = String.concat "\n        " doc in
10375         pr "        u\"\"\"%s\"\"\"\n" doc;
10376       );
10377       pr "        return libguestfsmod.%s " name;
10378       generate_py_call_args ~handle:"self._o" (snd style);
10379       pr "\n";
10380       pr "\n";
10381   ) all_functions
10382
10383 (* Generate Python call arguments, eg "(handle, foo, bar)" *)
10384 and generate_py_call_args ~handle args =
10385   pr "(%s" handle;
10386   List.iter (fun arg -> pr ", %s" (name_of_argt arg)) args;
10387   pr ")"
10388
10389 (* Useful if you need the longdesc POD text as plain text.  Returns a
10390  * list of lines.
10391  *
10392  * Because this is very slow (the slowest part of autogeneration),
10393  * we memoize the results.
10394  *)
10395 and pod2text ~width name longdesc =
10396   let key = width, name, longdesc in
10397   try Hashtbl.find pod2text_memo key
10398   with Not_found ->
10399     let filename, chan = Filename.open_temp_file "gen" ".tmp" in
10400     fprintf chan "=head1 %s\n\n%s\n" name longdesc;
10401     close_out chan;
10402     let cmd = sprintf "pod2text -w %d %s" width (Filename.quote filename) in
10403     let chan = open_process_in cmd in
10404     let lines = ref [] in
10405     let rec loop i =
10406       let line = input_line chan in
10407       if i = 1 then             (* discard the first line of output *)
10408         loop (i+1)
10409       else (
10410         let line = triml line in
10411         lines := line :: !lines;
10412         loop (i+1)
10413       ) in
10414     let lines = try loop 1 with End_of_file -> List.rev !lines in
10415     unlink filename;
10416     (match close_process_in chan with
10417      | WEXITED 0 -> ()
10418      | WEXITED i ->
10419          failwithf "pod2text: process exited with non-zero status (%d)" i
10420      | WSIGNALED i | WSTOPPED i ->
10421          failwithf "pod2text: process signalled or stopped by signal %d" i
10422     );
10423     Hashtbl.add pod2text_memo key lines;
10424     pod2text_memo_updated ();
10425     lines
10426
10427 (* Generate ruby bindings. *)
10428 and generate_ruby_c () =
10429   generate_header CStyle LGPLv2plus;
10430
10431   pr "\
10432 #include <stdio.h>
10433 #include <stdlib.h>
10434
10435 #include <ruby.h>
10436
10437 #include \"guestfs.h\"
10438
10439 #include \"extconf.h\"
10440
10441 /* For Ruby < 1.9 */
10442 #ifndef RARRAY_LEN
10443 #define RARRAY_LEN(r) (RARRAY((r))->len)
10444 #endif
10445
10446 static VALUE m_guestfs;                 /* guestfs module */
10447 static VALUE c_guestfs;                 /* guestfs_h handle */
10448 static VALUE e_Error;                   /* used for all errors */
10449
10450 static void ruby_guestfs_free (void *p)
10451 {
10452   if (!p) return;
10453   guestfs_close ((guestfs_h *) p);
10454 }
10455
10456 static VALUE ruby_guestfs_create (VALUE m)
10457 {
10458   guestfs_h *g;
10459
10460   g = guestfs_create ();
10461   if (!g)
10462     rb_raise (e_Error, \"failed to create guestfs handle\");
10463
10464   /* Don't print error messages to stderr by default. */
10465   guestfs_set_error_handler (g, NULL, NULL);
10466
10467   /* Wrap it, and make sure the close function is called when the
10468    * handle goes away.
10469    */
10470   return Data_Wrap_Struct (c_guestfs, NULL, ruby_guestfs_free, g);
10471 }
10472
10473 static VALUE ruby_guestfs_close (VALUE gv)
10474 {
10475   guestfs_h *g;
10476   Data_Get_Struct (gv, guestfs_h, g);
10477
10478   ruby_guestfs_free (g);
10479   DATA_PTR (gv) = NULL;
10480
10481   return Qnil;
10482 }
10483
10484 ";
10485
10486   List.iter (
10487     fun (name, style, _, _, _, _, _) ->
10488       pr "static VALUE ruby_guestfs_%s (VALUE gv" name;
10489       List.iter (fun arg -> pr ", VALUE %sv" (name_of_argt arg)) (snd style);
10490       pr ")\n";
10491       pr "{\n";
10492       pr "  guestfs_h *g;\n";
10493       pr "  Data_Get_Struct (gv, guestfs_h, g);\n";
10494       pr "  if (!g)\n";
10495       pr "    rb_raise (rb_eArgError, \"%%s: used handle after closing it\", \"%s\");\n"
10496         name;
10497       pr "\n";
10498
10499       List.iter (
10500         function
10501         | Pathname n | Device n | Dev_or_Path n | String n | Key n
10502         | FileIn n | FileOut n ->
10503             pr "  Check_Type (%sv, T_STRING);\n" n;
10504             pr "  const char *%s = StringValueCStr (%sv);\n" n n;
10505             pr "  if (!%s)\n" n;
10506             pr "    rb_raise (rb_eTypeError, \"expected string for parameter %%s of %%s\",\n";
10507             pr "              \"%s\", \"%s\");\n" n name
10508         | BufferIn n ->
10509             pr "  Check_Type (%sv, T_STRING);\n" n;
10510             pr "  const char *%s = RSTRING (%sv)->ptr;\n" n n;
10511             pr "  if (!%s)\n" n;
10512             pr "    rb_raise (rb_eTypeError, \"expected string for parameter %%s of %%s\",\n";
10513             pr "              \"%s\", \"%s\");\n" n name;
10514             pr "  size_t %s_size = RSTRING (%sv)->len;\n" n n
10515         | OptString n ->
10516             pr "  const char *%s = !NIL_P (%sv) ? StringValueCStr (%sv) : NULL;\n" n n n
10517         | StringList n | DeviceList n ->
10518             pr "  char **%s;\n" n;
10519             pr "  Check_Type (%sv, T_ARRAY);\n" n;
10520             pr "  {\n";
10521             pr "    size_t i, len;\n";
10522             pr "    len = RARRAY_LEN (%sv);\n" n;
10523             pr "    %s = guestfs_safe_malloc (g, sizeof (char *) * (len+1));\n"
10524               n;
10525             pr "    for (i = 0; i < len; ++i) {\n";
10526             pr "      VALUE v = rb_ary_entry (%sv, i);\n" n;
10527             pr "      %s[i] = StringValueCStr (v);\n" n;
10528             pr "    }\n";
10529             pr "    %s[len] = NULL;\n" n;
10530             pr "  }\n";
10531         | Bool n ->
10532             pr "  int %s = RTEST (%sv);\n" n n
10533         | Int n ->
10534             pr "  int %s = NUM2INT (%sv);\n" n n
10535         | Int64 n ->
10536             pr "  long long %s = NUM2LL (%sv);\n" n n
10537       ) (snd style);
10538       pr "\n";
10539
10540       let error_code =
10541         match fst style with
10542         | RErr | RInt _ | RBool _ -> pr "  int r;\n"; "-1"
10543         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
10544         | RConstString _ | RConstOptString _ ->
10545             pr "  const char *r;\n"; "NULL"
10546         | RString _ -> pr "  char *r;\n"; "NULL"
10547         | RStringList _ | RHashtable _ -> pr "  char **r;\n"; "NULL"
10548         | RStruct (_, typ) -> pr "  struct guestfs_%s *r;\n" typ; "NULL"
10549         | RStructList (_, typ) ->
10550             pr "  struct guestfs_%s_list *r;\n" typ; "NULL"
10551         | RBufferOut _ ->
10552             pr "  char *r;\n";
10553             pr "  size_t size;\n";
10554             "NULL" in
10555       pr "\n";
10556
10557       pr "  r = guestfs_%s " name;
10558       generate_c_call_args ~handle:"g" style;
10559       pr ";\n";
10560
10561       List.iter (
10562         function
10563         | Pathname _ | Device _ | Dev_or_Path _ | String _ | Key _
10564         | FileIn _ | FileOut _ | OptString _ | Bool _ | Int _ | Int64 _
10565         | BufferIn _ -> ()
10566         | StringList n | DeviceList n ->
10567             pr "  free (%s);\n" n
10568       ) (snd style);
10569
10570       pr "  if (r == %s)\n" error_code;
10571       pr "    rb_raise (e_Error, \"%%s\", guestfs_last_error (g));\n";
10572       pr "\n";
10573
10574       (match fst style with
10575        | RErr ->
10576            pr "  return Qnil;\n"
10577        | RInt _ | RBool _ ->
10578            pr "  return INT2NUM (r);\n"
10579        | RInt64 _ ->
10580            pr "  return ULL2NUM (r);\n"
10581        | RConstString _ ->
10582            pr "  return rb_str_new2 (r);\n";
10583        | RConstOptString _ ->
10584            pr "  if (r)\n";
10585            pr "    return rb_str_new2 (r);\n";
10586            pr "  else\n";
10587            pr "    return Qnil;\n";
10588        | RString _ ->
10589            pr "  VALUE rv = rb_str_new2 (r);\n";
10590            pr "  free (r);\n";
10591            pr "  return rv;\n";
10592        | RStringList _ ->
10593            pr "  size_t i, len = 0;\n";
10594            pr "  for (i = 0; r[i] != NULL; ++i) len++;\n";
10595            pr "  VALUE rv = rb_ary_new2 (len);\n";
10596            pr "  for (i = 0; r[i] != NULL; ++i) {\n";
10597            pr "    rb_ary_push (rv, rb_str_new2 (r[i]));\n";
10598            pr "    free (r[i]);\n";
10599            pr "  }\n";
10600            pr "  free (r);\n";
10601            pr "  return rv;\n"
10602        | RStruct (_, typ) ->
10603            let cols = cols_of_struct typ in
10604            generate_ruby_struct_code typ cols
10605        | RStructList (_, typ) ->
10606            let cols = cols_of_struct typ in
10607            generate_ruby_struct_list_code typ cols
10608        | RHashtable _ ->
10609            pr "  VALUE rv = rb_hash_new ();\n";
10610            pr "  size_t i;\n";
10611            pr "  for (i = 0; r[i] != NULL; i+=2) {\n";
10612            pr "    rb_hash_aset (rv, rb_str_new2 (r[i]), rb_str_new2 (r[i+1]));\n";
10613            pr "    free (r[i]);\n";
10614            pr "    free (r[i+1]);\n";
10615            pr "  }\n";
10616            pr "  free (r);\n";
10617            pr "  return rv;\n"
10618        | RBufferOut _ ->
10619            pr "  VALUE rv = rb_str_new (r, size);\n";
10620            pr "  free (r);\n";
10621            pr "  return rv;\n";
10622       );
10623
10624       pr "}\n";
10625       pr "\n"
10626   ) all_functions;
10627
10628   pr "\
10629 /* Initialize the module. */
10630 void Init__guestfs ()
10631 {
10632   m_guestfs = rb_define_module (\"Guestfs\");
10633   c_guestfs = rb_define_class_under (m_guestfs, \"Guestfs\", rb_cObject);
10634   e_Error = rb_define_class_under (m_guestfs, \"Error\", rb_eStandardError);
10635
10636   rb_define_module_function (m_guestfs, \"create\", ruby_guestfs_create, 0);
10637   rb_define_method (c_guestfs, \"close\", ruby_guestfs_close, 0);
10638
10639 ";
10640   (* Define the rest of the methods. *)
10641   List.iter (
10642     fun (name, style, _, _, _, _, _) ->
10643       pr "  rb_define_method (c_guestfs, \"%s\",\n" name;
10644       pr "        ruby_guestfs_%s, %d);\n" name (List.length (snd style))
10645   ) all_functions;
10646
10647   pr "}\n"
10648
10649 (* Ruby code to return a struct. *)
10650 and generate_ruby_struct_code typ cols =
10651   pr "  VALUE rv = rb_hash_new ();\n";
10652   List.iter (
10653     function
10654     | name, FString ->
10655         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_str_new2 (r->%s));\n" name name
10656     | name, FBuffer ->
10657         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_str_new (r->%s, r->%s_len));\n" name name name
10658     | name, FUUID ->
10659         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_str_new (r->%s, 32));\n" name name
10660     | name, (FBytes|FUInt64) ->
10661         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), ULL2NUM (r->%s));\n" name name
10662     | name, FInt64 ->
10663         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), LL2NUM (r->%s));\n" name name
10664     | name, FUInt32 ->
10665         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), UINT2NUM (r->%s));\n" name name
10666     | name, FInt32 ->
10667         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), INT2NUM (r->%s));\n" name name
10668     | name, FOptPercent ->
10669         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_dbl2big (r->%s));\n" name name
10670     | name, FChar -> (* XXX wrong? *)
10671         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), ULL2NUM (r->%s));\n" name name
10672   ) cols;
10673   pr "  guestfs_free_%s (r);\n" typ;
10674   pr "  return rv;\n"
10675
10676 (* Ruby code to return a struct list. *)
10677 and generate_ruby_struct_list_code typ cols =
10678   pr "  VALUE rv = rb_ary_new2 (r->len);\n";
10679   pr "  size_t i;\n";
10680   pr "  for (i = 0; i < r->len; ++i) {\n";
10681   pr "    VALUE hv = rb_hash_new ();\n";
10682   List.iter (
10683     function
10684     | name, FString ->
10685         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_str_new2 (r->val[i].%s));\n" name name
10686     | name, FBuffer ->
10687         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_str_new (r->val[i].%s, r->val[i].%s_len));\n" name name name
10688     | name, FUUID ->
10689         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_str_new (r->val[i].%s, 32));\n" name name
10690     | name, (FBytes|FUInt64) ->
10691         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), ULL2NUM (r->val[i].%s));\n" name name
10692     | name, FInt64 ->
10693         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), LL2NUM (r->val[i].%s));\n" name name
10694     | name, FUInt32 ->
10695         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), UINT2NUM (r->val[i].%s));\n" name name
10696     | name, FInt32 ->
10697         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), INT2NUM (r->val[i].%s));\n" name name
10698     | name, FOptPercent ->
10699         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_dbl2big (r->val[i].%s));\n" name name
10700     | name, FChar -> (* XXX wrong? *)
10701         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), ULL2NUM (r->val[i].%s));\n" name name
10702   ) cols;
10703   pr "    rb_ary_push (rv, hv);\n";
10704   pr "  }\n";
10705   pr "  guestfs_free_%s_list (r);\n" typ;
10706   pr "  return rv;\n"
10707
10708 (* Generate Java bindings GuestFS.java file. *)
10709 and generate_java_java () =
10710   generate_header CStyle LGPLv2plus;
10711
10712   pr "\
10713 package com.redhat.et.libguestfs;
10714
10715 import java.util.HashMap;
10716 import com.redhat.et.libguestfs.LibGuestFSException;
10717 import com.redhat.et.libguestfs.PV;
10718 import com.redhat.et.libguestfs.VG;
10719 import com.redhat.et.libguestfs.LV;
10720 import com.redhat.et.libguestfs.Stat;
10721 import com.redhat.et.libguestfs.StatVFS;
10722 import com.redhat.et.libguestfs.IntBool;
10723 import com.redhat.et.libguestfs.Dirent;
10724
10725 /**
10726  * The GuestFS object is a libguestfs handle.
10727  *
10728  * @author rjones
10729  */
10730 public class GuestFS {
10731   // Load the native code.
10732   static {
10733     System.loadLibrary (\"guestfs_jni\");
10734   }
10735
10736   /**
10737    * The native guestfs_h pointer.
10738    */
10739   long g;
10740
10741   /**
10742    * Create a libguestfs handle.
10743    *
10744    * @throws LibGuestFSException
10745    */
10746   public GuestFS () throws LibGuestFSException
10747   {
10748     g = _create ();
10749   }
10750   private native long _create () throws LibGuestFSException;
10751
10752   /**
10753    * Close a libguestfs handle.
10754    *
10755    * You can also leave handles to be collected by the garbage
10756    * collector, but this method ensures that the resources used
10757    * by the handle are freed up immediately.  If you call any
10758    * other methods after closing the handle, you will get an
10759    * exception.
10760    *
10761    * @throws LibGuestFSException
10762    */
10763   public void close () throws LibGuestFSException
10764   {
10765     if (g != 0)
10766       _close (g);
10767     g = 0;
10768   }
10769   private native void _close (long g) throws LibGuestFSException;
10770
10771   public void finalize () throws LibGuestFSException
10772   {
10773     close ();
10774   }
10775
10776 ";
10777
10778   List.iter (
10779     fun (name, style, _, flags, _, shortdesc, longdesc) ->
10780       if not (List.mem NotInDocs flags); then (
10781         let doc = replace_str longdesc "C<guestfs_" "C<g." in
10782         let doc =
10783           if List.mem ProtocolLimitWarning flags then
10784             doc ^ "\n\n" ^ protocol_limit_warning
10785           else doc in
10786         let doc =
10787           if List.mem DangerWillRobinson flags then
10788             doc ^ "\n\n" ^ danger_will_robinson
10789           else doc in
10790         let doc =
10791           match deprecation_notice flags with
10792           | None -> doc
10793           | Some txt -> doc ^ "\n\n" ^ txt in
10794         let doc = pod2text ~width:60 name doc in
10795         let doc = List.map (            (* RHBZ#501883 *)
10796           function
10797           | "" -> "<p>"
10798           | nonempty -> nonempty
10799         ) doc in
10800         let doc = String.concat "\n   * " doc in
10801
10802         pr "  /**\n";
10803         pr "   * %s\n" shortdesc;
10804         pr "   * <p>\n";
10805         pr "   * %s\n" doc;
10806         pr "   * @throws LibGuestFSException\n";
10807         pr "   */\n";
10808         pr "  ";
10809       );
10810       generate_java_prototype ~public:true ~semicolon:false name style;
10811       pr "\n";
10812       pr "  {\n";
10813       pr "    if (g == 0)\n";
10814       pr "      throw new LibGuestFSException (\"%s: handle is closed\");\n"
10815         name;
10816       pr "    ";
10817       if fst style <> RErr then pr "return ";
10818       pr "_%s " name;
10819       generate_java_call_args ~handle:"g" (snd style);
10820       pr ";\n";
10821       pr "  }\n";
10822       pr "  ";
10823       generate_java_prototype ~privat:true ~native:true name style;
10824       pr "\n";
10825       pr "\n";
10826   ) all_functions;
10827
10828   pr "}\n"
10829
10830 (* Generate Java call arguments, eg "(handle, foo, bar)" *)
10831 and generate_java_call_args ~handle args =
10832   pr "(%s" handle;
10833   List.iter (fun arg -> pr ", %s" (name_of_argt arg)) args;
10834   pr ")"
10835
10836 and generate_java_prototype ?(public=false) ?(privat=false) ?(native=false)
10837     ?(semicolon=true) name style =
10838   if privat then pr "private ";
10839   if public then pr "public ";
10840   if native then pr "native ";
10841
10842   (* return type *)
10843   (match fst style with
10844    | RErr -> pr "void ";
10845    | RInt _ -> pr "int ";
10846    | RInt64 _ -> pr "long ";
10847    | RBool _ -> pr "boolean ";
10848    | RConstString _ | RConstOptString _ | RString _
10849    | RBufferOut _ -> pr "String ";
10850    | RStringList _ -> pr "String[] ";
10851    | RStruct (_, typ) ->
10852        let name = java_name_of_struct typ in
10853        pr "%s " name;
10854    | RStructList (_, typ) ->
10855        let name = java_name_of_struct typ in
10856        pr "%s[] " name;
10857    | RHashtable _ -> pr "HashMap<String,String> ";
10858   );
10859
10860   if native then pr "_%s " name else pr "%s " name;
10861   pr "(";
10862   let needs_comma = ref false in
10863   if native then (
10864     pr "long g";
10865     needs_comma := true
10866   );
10867
10868   (* args *)
10869   List.iter (
10870     fun arg ->
10871       if !needs_comma then pr ", ";
10872       needs_comma := true;
10873
10874       match arg with
10875       | Pathname n
10876       | Device n | Dev_or_Path n
10877       | String n
10878       | OptString n
10879       | FileIn n
10880       | FileOut n
10881       | Key n ->
10882           pr "String %s" n
10883       | BufferIn n ->
10884           pr "byte[] %s" n
10885       | StringList n | DeviceList n ->
10886           pr "String[] %s" n
10887       | Bool n ->
10888           pr "boolean %s" n
10889       | Int n ->
10890           pr "int %s" n
10891       | Int64 n ->
10892           pr "long %s" n
10893   ) (snd style);
10894
10895   pr ")\n";
10896   pr "    throws LibGuestFSException";
10897   if semicolon then pr ";"
10898
10899 and generate_java_struct jtyp cols () =
10900   generate_header CStyle LGPLv2plus;
10901
10902   pr "\
10903 package com.redhat.et.libguestfs;
10904
10905 /**
10906  * Libguestfs %s structure.
10907  *
10908  * @author rjones
10909  * @see GuestFS
10910  */
10911 public class %s {
10912 " jtyp jtyp;
10913
10914   List.iter (
10915     function
10916     | name, FString
10917     | name, FUUID
10918     | name, FBuffer -> pr "  public String %s;\n" name
10919     | name, (FBytes|FUInt64|FInt64) -> pr "  public long %s;\n" name
10920     | name, (FUInt32|FInt32) -> pr "  public int %s;\n" name
10921     | name, FChar -> pr "  public char %s;\n" name
10922     | name, FOptPercent ->
10923         pr "  /* The next field is [0..100] or -1 meaning 'not present': */\n";
10924         pr "  public float %s;\n" name
10925   ) cols;
10926
10927   pr "}\n"
10928
10929 and generate_java_c () =
10930   generate_header CStyle LGPLv2plus;
10931
10932   pr "\
10933 #include <stdio.h>
10934 #include <stdlib.h>
10935 #include <string.h>
10936
10937 #include \"com_redhat_et_libguestfs_GuestFS.h\"
10938 #include \"guestfs.h\"
10939
10940 /* Note that this function returns.  The exception is not thrown
10941  * until after the wrapper function returns.
10942  */
10943 static void
10944 throw_exception (JNIEnv *env, const char *msg)
10945 {
10946   jclass cl;
10947   cl = (*env)->FindClass (env,
10948                           \"com/redhat/et/libguestfs/LibGuestFSException\");
10949   (*env)->ThrowNew (env, cl, msg);
10950 }
10951
10952 JNIEXPORT jlong JNICALL
10953 Java_com_redhat_et_libguestfs_GuestFS__1create
10954   (JNIEnv *env, jobject obj)
10955 {
10956   guestfs_h *g;
10957
10958   g = guestfs_create ();
10959   if (g == NULL) {
10960     throw_exception (env, \"GuestFS.create: failed to allocate handle\");
10961     return 0;
10962   }
10963   guestfs_set_error_handler (g, NULL, NULL);
10964   return (jlong) (long) g;
10965 }
10966
10967 JNIEXPORT void JNICALL
10968 Java_com_redhat_et_libguestfs_GuestFS__1close
10969   (JNIEnv *env, jobject obj, jlong jg)
10970 {
10971   guestfs_h *g = (guestfs_h *) (long) jg;
10972   guestfs_close (g);
10973 }
10974
10975 ";
10976
10977   List.iter (
10978     fun (name, style, _, _, _, _, _) ->
10979       pr "JNIEXPORT ";
10980       (match fst style with
10981        | RErr -> pr "void ";
10982        | RInt _ -> pr "jint ";
10983        | RInt64 _ -> pr "jlong ";
10984        | RBool _ -> pr "jboolean ";
10985        | RConstString _ | RConstOptString _ | RString _
10986        | RBufferOut _ -> pr "jstring ";
10987        | RStruct _ | RHashtable _ ->
10988            pr "jobject ";
10989        | RStringList _ | RStructList _ ->
10990            pr "jobjectArray ";
10991       );
10992       pr "JNICALL\n";
10993       pr "Java_com_redhat_et_libguestfs_GuestFS_";
10994       pr "%s" (replace_str ("_" ^ name) "_" "_1");
10995       pr "\n";
10996       pr "  (JNIEnv *env, jobject obj, jlong jg";
10997       List.iter (
10998         function
10999         | Pathname n
11000         | Device n | Dev_or_Path n
11001         | String n
11002         | OptString n
11003         | FileIn n
11004         | FileOut n
11005         | Key n ->
11006             pr ", jstring j%s" n
11007         | BufferIn n ->
11008             pr ", jbyteArray j%s" n
11009         | StringList n | DeviceList n ->
11010             pr ", jobjectArray j%s" n
11011         | Bool n ->
11012             pr ", jboolean j%s" n
11013         | Int n ->
11014             pr ", jint j%s" n
11015         | Int64 n ->
11016             pr ", jlong j%s" n
11017       ) (snd style);
11018       pr ")\n";
11019       pr "{\n";
11020       pr "  guestfs_h *g = (guestfs_h *) (long) jg;\n";
11021       let error_code, no_ret =
11022         match fst style with
11023         | RErr -> pr "  int r;\n"; "-1", ""
11024         | RBool _
11025         | RInt _ -> pr "  int r;\n"; "-1", "0"
11026         | RInt64 _ -> pr "  int64_t r;\n"; "-1", "0"
11027         | RConstString _ -> pr "  const char *r;\n"; "NULL", "NULL"
11028         | RConstOptString _ -> pr "  const char *r;\n"; "NULL", "NULL"
11029         | RString _ ->
11030             pr "  jstring jr;\n";
11031             pr "  char *r;\n"; "NULL", "NULL"
11032         | RStringList _ ->
11033             pr "  jobjectArray jr;\n";
11034             pr "  int r_len;\n";
11035             pr "  jclass cl;\n";
11036             pr "  jstring jstr;\n";
11037             pr "  char **r;\n"; "NULL", "NULL"
11038         | RStruct (_, typ) ->
11039             pr "  jobject jr;\n";
11040             pr "  jclass cl;\n";
11041             pr "  jfieldID fl;\n";
11042             pr "  struct guestfs_%s *r;\n" typ; "NULL", "NULL"
11043         | RStructList (_, typ) ->
11044             pr "  jobjectArray jr;\n";
11045             pr "  jclass cl;\n";
11046             pr "  jfieldID fl;\n";
11047             pr "  jobject jfl;\n";
11048             pr "  struct guestfs_%s_list *r;\n" typ; "NULL", "NULL"
11049         | RHashtable _ -> pr "  char **r;\n"; "NULL", "NULL"
11050         | RBufferOut _ ->
11051             pr "  jstring jr;\n";
11052             pr "  char *r;\n";
11053             pr "  size_t size;\n";
11054             "NULL", "NULL" in
11055       List.iter (
11056         function
11057         | Pathname n
11058         | Device n | Dev_or_Path n
11059         | String n
11060         | OptString n
11061         | FileIn n
11062         | FileOut n
11063         | Key n ->
11064             pr "  const char *%s;\n" n
11065         | BufferIn n ->
11066             pr "  jbyte *%s;\n" n;
11067             pr "  size_t %s_size;\n" n
11068         | StringList n | DeviceList n ->
11069             pr "  int %s_len;\n" n;
11070             pr "  const char **%s;\n" n
11071         | Bool n
11072         | Int n ->
11073             pr "  int %s;\n" n
11074         | Int64 n ->
11075             pr "  int64_t %s;\n" n
11076       ) (snd style);
11077
11078       let needs_i =
11079         (match fst style with
11080          | RStringList _ | RStructList _ -> true
11081          | RErr | RBool _ | RInt _ | RInt64 _ | RConstString _
11082          | RConstOptString _
11083          | RString _ | RBufferOut _ | RStruct _ | RHashtable _ -> false) ||
11084           List.exists (function
11085                        | StringList _ -> true
11086                        | DeviceList _ -> true
11087                        | _ -> false) (snd style) in
11088       if needs_i then
11089         pr "  size_t i;\n";
11090
11091       pr "\n";
11092
11093       (* Get the parameters. *)
11094       List.iter (
11095         function
11096         | Pathname n
11097         | Device n | Dev_or_Path n
11098         | String n
11099         | FileIn n
11100         | FileOut n
11101         | Key n ->
11102             pr "  %s = (*env)->GetStringUTFChars (env, j%s, NULL);\n" n n
11103         | OptString n ->
11104             (* This is completely undocumented, but Java null becomes
11105              * a NULL parameter.
11106              *)
11107             pr "  %s = j%s ? (*env)->GetStringUTFChars (env, j%s, NULL) : NULL;\n" n n n
11108         | BufferIn n ->
11109             pr "  %s = (*env)->GetByteArrayElements (env, j%s, NULL);\n" n n;
11110             pr "  %s_size = (*env)->GetArrayLength (env, j%s);\n" n n
11111         | StringList n | DeviceList n ->
11112             pr "  %s_len = (*env)->GetArrayLength (env, j%s);\n" n n;
11113             pr "  %s = guestfs_safe_malloc (g, sizeof (char *) * (%s_len+1));\n" n n;
11114             pr "  for (i = 0; i < %s_len; ++i) {\n" n;
11115             pr "    jobject o = (*env)->GetObjectArrayElement (env, j%s, i);\n"
11116               n;
11117             pr "    %s[i] = (*env)->GetStringUTFChars (env, o, NULL);\n" n;
11118             pr "  }\n";
11119             pr "  %s[%s_len] = NULL;\n" n n;
11120         | Bool n
11121         | Int n
11122         | Int64 n ->
11123             pr "  %s = j%s;\n" n n
11124       ) (snd style);
11125
11126       (* Make the call. *)
11127       pr "  r = guestfs_%s " name;
11128       generate_c_call_args ~handle:"g" style;
11129       pr ";\n";
11130
11131       (* Release the parameters. *)
11132       List.iter (
11133         function
11134         | Pathname n
11135         | Device n | Dev_or_Path n
11136         | String n
11137         | FileIn n
11138         | FileOut n
11139         | Key n ->
11140             pr "  (*env)->ReleaseStringUTFChars (env, j%s, %s);\n" n n
11141         | OptString n ->
11142             pr "  if (j%s)\n" n;
11143             pr "    (*env)->ReleaseStringUTFChars (env, j%s, %s);\n" n n
11144         | BufferIn n ->
11145             pr "  (*env)->ReleaseByteArrayElements (env, j%s, %s, 0);\n" n n
11146         | StringList n | DeviceList n ->
11147             pr "  for (i = 0; i < %s_len; ++i) {\n" n;
11148             pr "    jobject o = (*env)->GetObjectArrayElement (env, j%s, i);\n"
11149               n;
11150             pr "    (*env)->ReleaseStringUTFChars (env, o, %s[i]);\n" n;
11151             pr "  }\n";
11152             pr "  free (%s);\n" n
11153         | Bool n
11154         | Int n
11155         | Int64 n -> ()
11156       ) (snd style);
11157
11158       (* Check for errors. *)
11159       pr "  if (r == %s) {\n" error_code;
11160       pr "    throw_exception (env, guestfs_last_error (g));\n";
11161       pr "    return %s;\n" no_ret;
11162       pr "  }\n";
11163
11164       (* Return value. *)
11165       (match fst style with
11166        | RErr -> ()
11167        | RInt _ -> pr "  return (jint) r;\n"
11168        | RBool _ -> pr "  return (jboolean) r;\n"
11169        | RInt64 _ -> pr "  return (jlong) r;\n"
11170        | RConstString _ -> pr "  return (*env)->NewStringUTF (env, r);\n"
11171        | RConstOptString _ ->
11172            pr "  return (*env)->NewStringUTF (env, r); /* XXX r NULL? */\n"
11173        | RString _ ->
11174            pr "  jr = (*env)->NewStringUTF (env, r);\n";
11175            pr "  free (r);\n";
11176            pr "  return jr;\n"
11177        | RStringList _ ->
11178            pr "  for (r_len = 0; r[r_len] != NULL; ++r_len) ;\n";
11179            pr "  cl = (*env)->FindClass (env, \"java/lang/String\");\n";
11180            pr "  jstr = (*env)->NewStringUTF (env, \"\");\n";
11181            pr "  jr = (*env)->NewObjectArray (env, r_len, cl, jstr);\n";
11182            pr "  for (i = 0; i < r_len; ++i) {\n";
11183            pr "    jstr = (*env)->NewStringUTF (env, r[i]);\n";
11184            pr "    (*env)->SetObjectArrayElement (env, jr, i, jstr);\n";
11185            pr "    free (r[i]);\n";
11186            pr "  }\n";
11187            pr "  free (r);\n";
11188            pr "  return jr;\n"
11189        | RStruct (_, typ) ->
11190            let jtyp = java_name_of_struct typ in
11191            let cols = cols_of_struct typ in
11192            generate_java_struct_return typ jtyp cols
11193        | RStructList (_, typ) ->
11194            let jtyp = java_name_of_struct typ in
11195            let cols = cols_of_struct typ in
11196            generate_java_struct_list_return typ jtyp cols
11197        | RHashtable _ ->
11198            (* XXX *)
11199            pr "  throw_exception (env, \"%s: internal error: please let us know how to make a Java HashMap from JNI bindings!\");\n" name;
11200            pr "  return NULL;\n"
11201        | RBufferOut _ ->
11202            pr "  jr = (*env)->NewStringUTF (env, r); /* XXX size */\n";
11203            pr "  free (r);\n";
11204            pr "  return jr;\n"
11205       );
11206
11207       pr "}\n";
11208       pr "\n"
11209   ) all_functions
11210
11211 and generate_java_struct_return typ jtyp cols =
11212   pr "  cl = (*env)->FindClass (env, \"com/redhat/et/libguestfs/%s\");\n" jtyp;
11213   pr "  jr = (*env)->AllocObject (env, cl);\n";
11214   List.iter (
11215     function
11216     | name, FString ->
11217         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
11218         pr "  (*env)->SetObjectField (env, jr, fl, (*env)->NewStringUTF (env, r->%s));\n" name;
11219     | name, FUUID ->
11220         pr "  {\n";
11221         pr "    char s[33];\n";
11222         pr "    memcpy (s, r->%s, 32);\n" name;
11223         pr "    s[32] = 0;\n";
11224         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
11225         pr "    (*env)->SetObjectField (env, jr, fl, (*env)->NewStringUTF (env, s));\n";
11226         pr "  }\n";
11227     | name, FBuffer ->
11228         pr "  {\n";
11229         pr "    int len = r->%s_len;\n" name;
11230         pr "    char s[len+1];\n";
11231         pr "    memcpy (s, r->%s, len);\n" name;
11232         pr "    s[len] = 0;\n";
11233         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
11234         pr "    (*env)->SetObjectField (env, jr, fl, (*env)->NewStringUTF (env, s));\n";
11235         pr "  }\n";
11236     | name, (FBytes|FUInt64|FInt64) ->
11237         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"J\");\n" name;
11238         pr "  (*env)->SetLongField (env, jr, fl, r->%s);\n" name;
11239     | name, (FUInt32|FInt32) ->
11240         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"I\");\n" name;
11241         pr "  (*env)->SetLongField (env, jr, fl, r->%s);\n" name;
11242     | name, FOptPercent ->
11243         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"F\");\n" name;
11244         pr "  (*env)->SetFloatField (env, jr, fl, r->%s);\n" name;
11245     | name, FChar ->
11246         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"C\");\n" name;
11247         pr "  (*env)->SetLongField (env, jr, fl, r->%s);\n" name;
11248   ) cols;
11249   pr "  free (r);\n";
11250   pr "  return jr;\n"
11251
11252 and generate_java_struct_list_return typ jtyp cols =
11253   pr "  cl = (*env)->FindClass (env, \"com/redhat/et/libguestfs/%s\");\n" jtyp;
11254   pr "  jr = (*env)->NewObjectArray (env, r->len, cl, NULL);\n";
11255   pr "  for (i = 0; i < r->len; ++i) {\n";
11256   pr "    jfl = (*env)->AllocObject (env, cl);\n";
11257   List.iter (
11258     function
11259     | name, FString ->
11260         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
11261         pr "    (*env)->SetObjectField (env, jfl, fl, (*env)->NewStringUTF (env, r->val[i].%s));\n" name;
11262     | name, FUUID ->
11263         pr "    {\n";
11264         pr "      char s[33];\n";
11265         pr "      memcpy (s, r->val[i].%s, 32);\n" name;
11266         pr "      s[32] = 0;\n";
11267         pr "      fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
11268         pr "      (*env)->SetObjectField (env, jfl, fl, (*env)->NewStringUTF (env, s));\n";
11269         pr "    }\n";
11270     | name, FBuffer ->
11271         pr "    {\n";
11272         pr "      int len = r->val[i].%s_len;\n" name;
11273         pr "      char s[len+1];\n";
11274         pr "      memcpy (s, r->val[i].%s, len);\n" name;
11275         pr "      s[len] = 0;\n";
11276         pr "      fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
11277         pr "      (*env)->SetObjectField (env, jfl, fl, (*env)->NewStringUTF (env, s));\n";
11278         pr "    }\n";
11279     | name, (FBytes|FUInt64|FInt64) ->
11280         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"J\");\n" name;
11281         pr "    (*env)->SetLongField (env, jfl, fl, r->val[i].%s);\n" name;
11282     | name, (FUInt32|FInt32) ->
11283         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"I\");\n" name;
11284         pr "    (*env)->SetLongField (env, jfl, fl, r->val[i].%s);\n" name;
11285     | name, FOptPercent ->
11286         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"F\");\n" name;
11287         pr "    (*env)->SetFloatField (env, jfl, fl, r->val[i].%s);\n" name;
11288     | name, FChar ->
11289         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"C\");\n" name;
11290         pr "    (*env)->SetLongField (env, jfl, fl, r->val[i].%s);\n" name;
11291   ) cols;
11292   pr "    (*env)->SetObjectArrayElement (env, jfl, i, jfl);\n";
11293   pr "  }\n";
11294   pr "  guestfs_free_%s_list (r);\n" typ;
11295   pr "  return jr;\n"
11296
11297 and generate_java_makefile_inc () =
11298   generate_header HashStyle GPLv2plus;
11299
11300   pr "java_built_sources = \\\n";
11301   List.iter (
11302     fun (typ, jtyp) ->
11303         pr "\tcom/redhat/et/libguestfs/%s.java \\\n" jtyp;
11304   ) java_structs;
11305   pr "\tcom/redhat/et/libguestfs/GuestFS.java\n"
11306
11307 and generate_haskell_hs () =
11308   generate_header HaskellStyle LGPLv2plus;
11309
11310   (* XXX We only know how to generate partial FFI for Haskell
11311    * at the moment.  Please help out!
11312    *)
11313   let can_generate style =
11314     match style with
11315     | RErr, _
11316     | RInt _, _
11317     | RInt64 _, _ -> true
11318     | RBool _, _
11319     | RConstString _, _
11320     | RConstOptString _, _
11321     | RString _, _
11322     | RStringList _, _
11323     | RStruct _, _
11324     | RStructList _, _
11325     | RHashtable _, _
11326     | RBufferOut _, _ -> false in
11327
11328   pr "\
11329 {-# INCLUDE <guestfs.h> #-}
11330 {-# LANGUAGE ForeignFunctionInterface #-}
11331
11332 module Guestfs (
11333   create";
11334
11335   (* List out the names of the actions we want to export. *)
11336   List.iter (
11337     fun (name, style, _, _, _, _, _) ->
11338       if can_generate style then pr ",\n  %s" name
11339   ) all_functions;
11340
11341   pr "
11342   ) where
11343
11344 -- Unfortunately some symbols duplicate ones already present
11345 -- in Prelude.  We don't know which, so we hard-code a list
11346 -- here.
11347 import Prelude hiding (truncate)
11348
11349 import Foreign
11350 import Foreign.C
11351 import Foreign.C.Types
11352 import IO
11353 import Control.Exception
11354 import Data.Typeable
11355
11356 data GuestfsS = GuestfsS            -- represents the opaque C struct
11357 type GuestfsP = Ptr GuestfsS        -- guestfs_h *
11358 type GuestfsH = ForeignPtr GuestfsS -- guestfs_h * with attached finalizer
11359
11360 -- XXX define properly later XXX
11361 data PV = PV
11362 data VG = VG
11363 data LV = LV
11364 data IntBool = IntBool
11365 data Stat = Stat
11366 data StatVFS = StatVFS
11367 data Hashtable = Hashtable
11368
11369 foreign import ccall unsafe \"guestfs_create\" c_create
11370   :: IO GuestfsP
11371 foreign import ccall unsafe \"&guestfs_close\" c_close
11372   :: FunPtr (GuestfsP -> IO ())
11373 foreign import ccall unsafe \"guestfs_set_error_handler\" c_set_error_handler
11374   :: GuestfsP -> Ptr CInt -> Ptr CInt -> IO ()
11375
11376 create :: IO GuestfsH
11377 create = do
11378   p <- c_create
11379   c_set_error_handler p nullPtr nullPtr
11380   h <- newForeignPtr c_close p
11381   return h
11382
11383 foreign import ccall unsafe \"guestfs_last_error\" c_last_error
11384   :: GuestfsP -> IO CString
11385
11386 -- last_error :: GuestfsH -> IO (Maybe String)
11387 -- last_error h = do
11388 --   str <- withForeignPtr h (\\p -> c_last_error p)
11389 --   maybePeek peekCString str
11390
11391 last_error :: GuestfsH -> IO (String)
11392 last_error h = do
11393   str <- withForeignPtr h (\\p -> c_last_error p)
11394   if (str == nullPtr)
11395     then return \"no error\"
11396     else peekCString str
11397
11398 ";
11399
11400   (* Generate wrappers for each foreign function. *)
11401   List.iter (
11402     fun (name, style, _, _, _, _, _) ->
11403       if can_generate style then (
11404         pr "foreign import ccall unsafe \"guestfs_%s\" c_%s\n" name name;
11405         pr "  :: ";
11406         generate_haskell_prototype ~handle:"GuestfsP" style;
11407         pr "\n";
11408         pr "\n";
11409         pr "%s :: " name;
11410         generate_haskell_prototype ~handle:"GuestfsH" ~hs:true style;
11411         pr "\n";
11412         pr "%s %s = do\n" name
11413           (String.concat " " ("h" :: List.map name_of_argt (snd style)));
11414         pr "  r <- ";
11415         (* Convert pointer arguments using with* functions. *)
11416         List.iter (
11417           function
11418           | FileIn n
11419           | FileOut n
11420           | Pathname n | Device n | Dev_or_Path n | String n | Key n ->
11421               pr "withCString %s $ \\%s -> " n n
11422           | BufferIn n ->
11423               pr "withCStringLen %s $ \\(%s, %s_size) -> " n n n
11424           | OptString n -> pr "maybeWith withCString %s $ \\%s -> " n n
11425           | StringList n | DeviceList n -> pr "withMany withCString %s $ \\%s -> withArray0 nullPtr %s $ \\%s -> " n n n n
11426           | Bool _ | Int _ | Int64 _ -> ()
11427         ) (snd style);
11428         (* Convert integer arguments. *)
11429         let args =
11430           List.map (
11431             function
11432             | Bool n -> sprintf "(fromBool %s)" n
11433             | Int n -> sprintf "(fromIntegral %s)" n
11434             | Int64 n -> sprintf "(fromIntegral %s)" n
11435             | FileIn n | FileOut n
11436             | Pathname n | Device n | Dev_or_Path n
11437             | String n | OptString n
11438             | StringList n | DeviceList n
11439             | Key n -> n
11440             | BufferIn n -> sprintf "%s (fromIntegral %s_size)" n n
11441           ) (snd style) in
11442         pr "withForeignPtr h (\\p -> c_%s %s)\n" name
11443           (String.concat " " ("p" :: args));
11444         (match fst style with
11445          | RErr | RInt _ | RInt64 _ | RBool _ ->
11446              pr "  if (r == -1)\n";
11447              pr "    then do\n";
11448              pr "      err <- last_error h\n";
11449              pr "      fail err\n";
11450          | RConstString _ | RConstOptString _ | RString _
11451          | RStringList _ | RStruct _
11452          | RStructList _ | RHashtable _ | RBufferOut _ ->
11453              pr "  if (r == nullPtr)\n";
11454              pr "    then do\n";
11455              pr "      err <- last_error h\n";
11456              pr "      fail err\n";
11457         );
11458         (match fst style with
11459          | RErr ->
11460              pr "    else return ()\n"
11461          | RInt _ ->
11462              pr "    else return (fromIntegral r)\n"
11463          | RInt64 _ ->
11464              pr "    else return (fromIntegral r)\n"
11465          | RBool _ ->
11466              pr "    else return (toBool r)\n"
11467          | RConstString _
11468          | RConstOptString _
11469          | RString _
11470          | RStringList _
11471          | RStruct _
11472          | RStructList _
11473          | RHashtable _
11474          | RBufferOut _ ->
11475              pr "    else return ()\n" (* XXXXXXXXXXXXXXXXXXXX *)
11476         );
11477         pr "\n";
11478       )
11479   ) all_functions
11480
11481 and generate_haskell_prototype ~handle ?(hs = false) style =
11482   pr "%s -> " handle;
11483   let string = if hs then "String" else "CString" in
11484   let int = if hs then "Int" else "CInt" in
11485   let bool = if hs then "Bool" else "CInt" in
11486   let int64 = if hs then "Integer" else "Int64" in
11487   List.iter (
11488     fun arg ->
11489       (match arg with
11490        | Pathname _ | Device _ | Dev_or_Path _ | String _ | Key _ ->
11491            pr "%s" string
11492        | BufferIn _ ->
11493            if hs then pr "String"
11494            else pr "CString -> CInt"
11495        | OptString _ -> if hs then pr "Maybe String" else pr "CString"
11496        | StringList _ | DeviceList _ -> if hs then pr "[String]" else pr "Ptr CString"
11497        | Bool _ -> pr "%s" bool
11498        | Int _ -> pr "%s" int
11499        | Int64 _ -> pr "%s" int
11500        | FileIn _ -> pr "%s" string
11501        | FileOut _ -> pr "%s" string
11502       );
11503       pr " -> ";
11504   ) (snd style);
11505   pr "IO (";
11506   (match fst style with
11507    | RErr -> if not hs then pr "CInt"
11508    | RInt _ -> pr "%s" int
11509    | RInt64 _ -> pr "%s" int64
11510    | RBool _ -> pr "%s" bool
11511    | RConstString _ -> pr "%s" string
11512    | RConstOptString _ -> pr "Maybe %s" string
11513    | RString _ -> pr "%s" string
11514    | RStringList _ -> pr "[%s]" string
11515    | RStruct (_, typ) ->
11516        let name = java_name_of_struct typ in
11517        pr "%s" name
11518    | RStructList (_, typ) ->
11519        let name = java_name_of_struct typ in
11520        pr "[%s]" name
11521    | RHashtable _ -> pr "Hashtable"
11522    | RBufferOut _ -> pr "%s" string
11523   );
11524   pr ")"
11525
11526 and generate_csharp () =
11527   generate_header CPlusPlusStyle LGPLv2plus;
11528
11529   (* XXX Make this configurable by the C# assembly users. *)
11530   let library = "libguestfs.so.0" in
11531
11532   pr "\
11533 // These C# bindings are highly experimental at present.
11534 //
11535 // Firstly they only work on Linux (ie. Mono).  In order to get them
11536 // to work on Windows (ie. .Net) you would need to port the library
11537 // itself to Windows first.
11538 //
11539 // The second issue is that some calls are known to be incorrect and
11540 // can cause Mono to segfault.  Particularly: calls which pass or
11541 // return string[], or return any structure value.  This is because
11542 // we haven't worked out the correct way to do this from C#.
11543 //
11544 // The third issue is that when compiling you get a lot of warnings.
11545 // We are not sure whether the warnings are important or not.
11546 //
11547 // Fourthly we do not routinely build or test these bindings as part
11548 // of the make && make check cycle, which means that regressions might
11549 // go unnoticed.
11550 //
11551 // Suggestions and patches are welcome.
11552
11553 // To compile:
11554 //
11555 // gmcs Libguestfs.cs
11556 // mono Libguestfs.exe
11557 //
11558 // (You'll probably want to add a Test class / static main function
11559 // otherwise this won't do anything useful).
11560
11561 using System;
11562 using System.IO;
11563 using System.Runtime.InteropServices;
11564 using System.Runtime.Serialization;
11565 using System.Collections;
11566
11567 namespace Guestfs
11568 {
11569   class Error : System.ApplicationException
11570   {
11571     public Error (string message) : base (message) {}
11572     protected Error (SerializationInfo info, StreamingContext context) {}
11573   }
11574
11575   class Guestfs
11576   {
11577     IntPtr _handle;
11578
11579     [DllImport (\"%s\")]
11580     static extern IntPtr guestfs_create ();
11581
11582     public Guestfs ()
11583     {
11584       _handle = guestfs_create ();
11585       if (_handle == IntPtr.Zero)
11586         throw new Error (\"could not create guestfs handle\");
11587     }
11588
11589     [DllImport (\"%s\")]
11590     static extern void guestfs_close (IntPtr h);
11591
11592     ~Guestfs ()
11593     {
11594       guestfs_close (_handle);
11595     }
11596
11597     [DllImport (\"%s\")]
11598     static extern string guestfs_last_error (IntPtr h);
11599
11600 " library library library;
11601
11602   (* Generate C# structure bindings.  We prefix struct names with
11603    * underscore because C# cannot have conflicting struct names and
11604    * method names (eg. "class stat" and "stat").
11605    *)
11606   List.iter (
11607     fun (typ, cols) ->
11608       pr "    [StructLayout (LayoutKind.Sequential)]\n";
11609       pr "    public class _%s {\n" typ;
11610       List.iter (
11611         function
11612         | name, FChar -> pr "      char %s;\n" name
11613         | name, FString -> pr "      string %s;\n" name
11614         | name, FBuffer ->
11615             pr "      uint %s_len;\n" name;
11616             pr "      string %s;\n" name
11617         | name, FUUID ->
11618             pr "      [MarshalAs (UnmanagedType.ByValTStr, SizeConst=16)]\n";
11619             pr "      string %s;\n" name
11620         | name, FUInt32 -> pr "      uint %s;\n" name
11621         | name, FInt32 -> pr "      int %s;\n" name
11622         | name, (FUInt64|FBytes) -> pr "      ulong %s;\n" name
11623         | name, FInt64 -> pr "      long %s;\n" name
11624         | name, FOptPercent -> pr "      float %s; /* [0..100] or -1 */\n" name
11625       ) cols;
11626       pr "    }\n";
11627       pr "\n"
11628   ) structs;
11629
11630   (* Generate C# function bindings. *)
11631   List.iter (
11632     fun (name, style, _, _, _, shortdesc, _) ->
11633       let rec csharp_return_type () =
11634         match fst style with
11635         | RErr -> "void"
11636         | RBool n -> "bool"
11637         | RInt n -> "int"
11638         | RInt64 n -> "long"
11639         | RConstString n
11640         | RConstOptString n
11641         | RString n
11642         | RBufferOut n -> "string"
11643         | RStruct (_,n) -> "_" ^ n
11644         | RHashtable n -> "Hashtable"
11645         | RStringList n -> "string[]"
11646         | RStructList (_,n) -> sprintf "_%s[]" n
11647
11648       and c_return_type () =
11649         match fst style with
11650         | RErr
11651         | RBool _
11652         | RInt _ -> "int"
11653         | RInt64 _ -> "long"
11654         | RConstString _
11655         | RConstOptString _
11656         | RString _
11657         | RBufferOut _ -> "string"
11658         | RStruct (_,n) -> "_" ^ n
11659         | RHashtable _
11660         | RStringList _ -> "string[]"
11661         | RStructList (_,n) -> sprintf "_%s[]" n
11662
11663       and c_error_comparison () =
11664         match fst style with
11665         | RErr
11666         | RBool _
11667         | RInt _
11668         | RInt64 _ -> "== -1"
11669         | RConstString _
11670         | RConstOptString _
11671         | RString _
11672         | RBufferOut _
11673         | RStruct (_,_)
11674         | RHashtable _
11675         | RStringList _
11676         | RStructList (_,_) -> "== null"
11677
11678       and generate_extern_prototype () =
11679         pr "    static extern %s guestfs_%s (IntPtr h"
11680           (c_return_type ()) name;
11681         List.iter (
11682           function
11683           | Pathname n | Device n | Dev_or_Path n | String n | OptString n
11684           | FileIn n | FileOut n
11685           | Key n
11686           | BufferIn n ->
11687               pr ", [In] string %s" n
11688           | StringList n | DeviceList n ->
11689               pr ", [In] string[] %s" n
11690           | Bool n ->
11691               pr ", bool %s" n
11692           | Int n ->
11693               pr ", int %s" n
11694           | Int64 n ->
11695               pr ", long %s" n
11696         ) (snd style);
11697         pr ");\n"
11698
11699       and generate_public_prototype () =
11700         pr "    public %s %s (" (csharp_return_type ()) name;
11701         let comma = ref false in
11702         let next () =
11703           if !comma then pr ", ";
11704           comma := true
11705         in
11706         List.iter (
11707           function
11708           | Pathname n | Device n | Dev_or_Path n | String n | OptString n
11709           | FileIn n | FileOut n
11710           | Key n
11711           | BufferIn n ->
11712               next (); pr "string %s" n
11713           | StringList n | DeviceList n ->
11714               next (); pr "string[] %s" n
11715           | Bool n ->
11716               next (); pr "bool %s" n
11717           | Int n ->
11718               next (); pr "int %s" n
11719           | Int64 n ->
11720               next (); pr "long %s" n
11721         ) (snd style);
11722         pr ")\n"
11723
11724       and generate_call () =
11725         pr "guestfs_%s (_handle" name;
11726         List.iter (fun arg -> pr ", %s" (name_of_argt arg)) (snd style);
11727         pr ");\n";
11728       in
11729
11730       pr "    [DllImport (\"%s\")]\n" library;
11731       generate_extern_prototype ();
11732       pr "\n";
11733       pr "    /// <summary>\n";
11734       pr "    /// %s\n" shortdesc;
11735       pr "    /// </summary>\n";
11736       generate_public_prototype ();
11737       pr "    {\n";
11738       pr "      %s r;\n" (c_return_type ());
11739       pr "      r = ";
11740       generate_call ();
11741       pr "      if (r %s)\n" (c_error_comparison ());
11742       pr "        throw new Error (guestfs_last_error (_handle));\n";
11743       (match fst style with
11744        | RErr -> ()
11745        | RBool _ ->
11746            pr "      return r != 0 ? true : false;\n"
11747        | RHashtable _ ->
11748            pr "      Hashtable rr = new Hashtable ();\n";
11749            pr "      for (size_t i = 0; i < r.Length; i += 2)\n";
11750            pr "        rr.Add (r[i], r[i+1]);\n";
11751            pr "      return rr;\n"
11752        | RInt _ | RInt64 _ | RConstString _ | RConstOptString _
11753        | RString _ | RBufferOut _ | RStruct _ | RStringList _
11754        | RStructList _ ->
11755            pr "      return r;\n"
11756       );
11757       pr "    }\n";
11758       pr "\n";
11759   ) all_functions_sorted;
11760
11761   pr "  }
11762 }
11763 "
11764
11765 and generate_bindtests () =
11766   generate_header CStyle LGPLv2plus;
11767
11768   pr "\
11769 #include <stdio.h>
11770 #include <stdlib.h>
11771 #include <inttypes.h>
11772 #include <string.h>
11773
11774 #include \"guestfs.h\"
11775 #include \"guestfs-internal.h\"
11776 #include \"guestfs-internal-actions.h\"
11777 #include \"guestfs_protocol.h\"
11778
11779 #define error guestfs_error
11780 #define safe_calloc guestfs_safe_calloc
11781 #define safe_malloc guestfs_safe_malloc
11782
11783 static void
11784 print_strings (char *const *argv)
11785 {
11786   size_t argc;
11787
11788   printf (\"[\");
11789   for (argc = 0; argv[argc] != NULL; ++argc) {
11790     if (argc > 0) printf (\", \");
11791     printf (\"\\\"%%s\\\"\", argv[argc]);
11792   }
11793   printf (\"]\\n\");
11794 }
11795
11796 /* The test0 function prints its parameters to stdout. */
11797 ";
11798
11799   let test0, tests =
11800     match test_functions with
11801     | [] -> assert false
11802     | test0 :: tests -> test0, tests in
11803
11804   let () =
11805     let (name, style, _, _, _, _, _) = test0 in
11806     generate_prototype ~extern:false ~semicolon:false ~newline:true
11807       ~handle:"g" ~prefix:"guestfs__" name style;
11808     pr "{\n";
11809     List.iter (
11810       function
11811       | Pathname n
11812       | Device n | Dev_or_Path n
11813       | String n
11814       | FileIn n
11815       | FileOut n
11816       | Key n -> pr "  printf (\"%%s\\n\", %s);\n" n
11817       | BufferIn n ->
11818           pr "  {\n";
11819           pr "    size_t i;\n";
11820           pr "    for (i = 0; i < %s_size; ++i)\n" n;
11821           pr "      printf (\"<%%02x>\", %s[i]);\n" n;
11822           pr "    printf (\"\\n\");\n";
11823           pr "  }\n";
11824       | OptString n -> pr "  printf (\"%%s\\n\", %s ? %s : \"null\");\n" n n
11825       | StringList n | DeviceList n -> pr "  print_strings (%s);\n" n
11826       | Bool n -> pr "  printf (\"%%s\\n\", %s ? \"true\" : \"false\");\n" n
11827       | Int n -> pr "  printf (\"%%d\\n\", %s);\n" n
11828       | Int64 n -> pr "  printf (\"%%\" PRIi64 \"\\n\", %s);\n" n
11829     ) (snd style);
11830     pr "  /* Java changes stdout line buffering so we need this: */\n";
11831     pr "  fflush (stdout);\n";
11832     pr "  return 0;\n";
11833     pr "}\n";
11834     pr "\n" in
11835
11836   List.iter (
11837     fun (name, style, _, _, _, _, _) ->
11838       if String.sub name (String.length name - 3) 3 <> "err" then (
11839         pr "/* Test normal return. */\n";
11840         generate_prototype ~extern:false ~semicolon:false ~newline:true
11841           ~handle:"g" ~prefix:"guestfs__" name style;
11842         pr "{\n";
11843         (match fst style with
11844          | RErr ->
11845              pr "  return 0;\n"
11846          | RInt _ ->
11847              pr "  int r;\n";
11848              pr "  sscanf (val, \"%%d\", &r);\n";
11849              pr "  return r;\n"
11850          | RInt64 _ ->
11851              pr "  int64_t r;\n";
11852              pr "  sscanf (val, \"%%\" SCNi64, &r);\n";
11853              pr "  return r;\n"
11854          | RBool _ ->
11855              pr "  return STREQ (val, \"true\");\n"
11856          | RConstString _
11857          | RConstOptString _ ->
11858              (* Can't return the input string here.  Return a static
11859               * string so we ensure we get a segfault if the caller
11860               * tries to free it.
11861               *)
11862              pr "  return \"static string\";\n"
11863          | RString _ ->
11864              pr "  return strdup (val);\n"
11865          | RStringList _ ->
11866              pr "  char **strs;\n";
11867              pr "  int n, i;\n";
11868              pr "  sscanf (val, \"%%d\", &n);\n";
11869              pr "  strs = safe_malloc (g, (n+1) * sizeof (char *));\n";
11870              pr "  for (i = 0; i < n; ++i) {\n";
11871              pr "    strs[i] = safe_malloc (g, 16);\n";
11872              pr "    snprintf (strs[i], 16, \"%%d\", i);\n";
11873              pr "  }\n";
11874              pr "  strs[n] = NULL;\n";
11875              pr "  return strs;\n"
11876          | RStruct (_, typ) ->
11877              pr "  struct guestfs_%s *r;\n" typ;
11878              pr "  r = safe_calloc (g, sizeof *r, 1);\n";
11879              pr "  return r;\n"
11880          | RStructList (_, typ) ->
11881              pr "  struct guestfs_%s_list *r;\n" typ;
11882              pr "  r = safe_calloc (g, sizeof *r, 1);\n";
11883              pr "  sscanf (val, \"%%d\", &r->len);\n";
11884              pr "  r->val = safe_calloc (g, r->len, sizeof *r->val);\n";
11885              pr "  return r;\n"
11886          | RHashtable _ ->
11887              pr "  char **strs;\n";
11888              pr "  int n, i;\n";
11889              pr "  sscanf (val, \"%%d\", &n);\n";
11890              pr "  strs = safe_malloc (g, (n*2+1) * sizeof (*strs));\n";
11891              pr "  for (i = 0; i < n; ++i) {\n";
11892              pr "    strs[i*2] = safe_malloc (g, 16);\n";
11893              pr "    strs[i*2+1] = safe_malloc (g, 16);\n";
11894              pr "    snprintf (strs[i*2], 16, \"%%d\", i);\n";
11895              pr "    snprintf (strs[i*2+1], 16, \"%%d\", i);\n";
11896              pr "  }\n";
11897              pr "  strs[n*2] = NULL;\n";
11898              pr "  return strs;\n"
11899          | RBufferOut _ ->
11900              pr "  return strdup (val);\n"
11901         );
11902         pr "}\n";
11903         pr "\n"
11904       ) else (
11905         pr "/* Test error return. */\n";
11906         generate_prototype ~extern:false ~semicolon:false ~newline:true
11907           ~handle:"g" ~prefix:"guestfs__" name style;
11908         pr "{\n";
11909         pr "  error (g, \"error\");\n";
11910         (match fst style with
11911          | RErr | RInt _ | RInt64 _ | RBool _ ->
11912              pr "  return -1;\n"
11913          | RConstString _ | RConstOptString _
11914          | RString _ | RStringList _ | RStruct _
11915          | RStructList _
11916          | RHashtable _
11917          | RBufferOut _ ->
11918              pr "  return NULL;\n"
11919         );
11920         pr "}\n";
11921         pr "\n"
11922       )
11923   ) tests
11924
11925 and generate_ocaml_bindtests () =
11926   generate_header OCamlStyle GPLv2plus;
11927
11928   pr "\
11929 let () =
11930   let g = Guestfs.create () in
11931 ";
11932
11933   let mkargs args =
11934     String.concat " " (
11935       List.map (
11936         function
11937         | CallString s -> "\"" ^ s ^ "\""
11938         | CallOptString None -> "None"
11939         | CallOptString (Some s) -> sprintf "(Some \"%s\")" s
11940         | CallStringList xs ->
11941             "[|" ^ String.concat ";" (List.map (sprintf "\"%s\"") xs) ^ "|]"
11942         | CallInt i when i >= 0 -> string_of_int i
11943         | CallInt i (* when i < 0 *) -> "(" ^ string_of_int i ^ ")"
11944         | CallInt64 i when i >= 0L -> Int64.to_string i ^ "L"
11945         | CallInt64 i (* when i < 0L *) -> "(" ^ Int64.to_string i ^ "L)"
11946         | CallBool b -> string_of_bool b
11947         | CallBuffer s -> sprintf "%S" s
11948       ) args
11949     )
11950   in
11951
11952   generate_lang_bindtests (
11953     fun f args -> pr "  Guestfs.%s g %s;\n" f (mkargs args)
11954   );
11955
11956   pr "print_endline \"EOF\"\n"
11957
11958 and generate_perl_bindtests () =
11959   pr "#!/usr/bin/perl -w\n";
11960   generate_header HashStyle GPLv2plus;
11961
11962   pr "\
11963 use strict;
11964
11965 use Sys::Guestfs;
11966
11967 my $g = Sys::Guestfs->new ();
11968 ";
11969
11970   let mkargs args =
11971     String.concat ", " (
11972       List.map (
11973         function
11974         | CallString s -> "\"" ^ s ^ "\""
11975         | CallOptString None -> "undef"
11976         | CallOptString (Some s) -> sprintf "\"%s\"" s
11977         | CallStringList xs ->
11978             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
11979         | CallInt i -> string_of_int i
11980         | CallInt64 i -> Int64.to_string i
11981         | CallBool b -> if b then "1" else "0"
11982         | CallBuffer s -> "\"" ^ c_quote s ^ "\""
11983       ) args
11984     )
11985   in
11986
11987   generate_lang_bindtests (
11988     fun f args -> pr "$g->%s (%s);\n" f (mkargs args)
11989   );
11990
11991   pr "print \"EOF\\n\"\n"
11992
11993 and generate_python_bindtests () =
11994   generate_header HashStyle GPLv2plus;
11995
11996   pr "\
11997 import guestfs
11998
11999 g = guestfs.GuestFS ()
12000 ";
12001
12002   let mkargs args =
12003     String.concat ", " (
12004       List.map (
12005         function
12006         | CallString s -> "\"" ^ s ^ "\""
12007         | CallOptString None -> "None"
12008         | CallOptString (Some s) -> sprintf "\"%s\"" s
12009         | CallStringList xs ->
12010             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
12011         | CallInt i -> string_of_int i
12012         | CallInt64 i -> Int64.to_string i
12013         | CallBool b -> if b then "1" else "0"
12014         | CallBuffer s -> "\"" ^ c_quote s ^ "\""
12015       ) args
12016     )
12017   in
12018
12019   generate_lang_bindtests (
12020     fun f args -> pr "g.%s (%s)\n" f (mkargs args)
12021   );
12022
12023   pr "print \"EOF\"\n"
12024
12025 and generate_ruby_bindtests () =
12026   generate_header HashStyle GPLv2plus;
12027
12028   pr "\
12029 require 'guestfs'
12030
12031 g = Guestfs::create()
12032 ";
12033
12034   let mkargs args =
12035     String.concat ", " (
12036       List.map (
12037         function
12038         | CallString s -> "\"" ^ s ^ "\""
12039         | CallOptString None -> "nil"
12040         | CallOptString (Some s) -> sprintf "\"%s\"" s
12041         | CallStringList xs ->
12042             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
12043         | CallInt i -> string_of_int i
12044         | CallInt64 i -> Int64.to_string i
12045         | CallBool b -> string_of_bool b
12046         | CallBuffer s -> "\"" ^ c_quote s ^ "\""
12047       ) args
12048     )
12049   in
12050
12051   generate_lang_bindtests (
12052     fun f args -> pr "g.%s(%s)\n" f (mkargs args)
12053   );
12054
12055   pr "print \"EOF\\n\"\n"
12056
12057 and generate_java_bindtests () =
12058   generate_header CStyle GPLv2plus;
12059
12060   pr "\
12061 import com.redhat.et.libguestfs.*;
12062
12063 public class Bindtests {
12064     public static void main (String[] argv)
12065     {
12066         try {
12067             GuestFS g = new GuestFS ();
12068 ";
12069
12070   let mkargs args =
12071     String.concat ", " (
12072       List.map (
12073         function
12074         | CallString s -> "\"" ^ s ^ "\""
12075         | CallOptString None -> "null"
12076         | CallOptString (Some s) -> sprintf "\"%s\"" s
12077         | CallStringList xs ->
12078             "new String[]{" ^
12079               String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "}"
12080         | CallInt i -> string_of_int i
12081         | CallInt64 i -> Int64.to_string i
12082         | CallBool b -> string_of_bool b
12083         | CallBuffer s ->
12084             "new byte[] { " ^ String.concat "," (
12085               map_chars (fun c -> string_of_int (Char.code c)) s
12086             ) ^ " }"
12087       ) args
12088     )
12089   in
12090
12091   generate_lang_bindtests (
12092     fun f args -> pr "            g.%s (%s);\n" f (mkargs args)
12093   );
12094
12095   pr "
12096             System.out.println (\"EOF\");
12097         }
12098         catch (Exception exn) {
12099             System.err.println (exn);
12100             System.exit (1);
12101         }
12102     }
12103 }
12104 "
12105
12106 and generate_haskell_bindtests () =
12107   generate_header HaskellStyle GPLv2plus;
12108
12109   pr "\
12110 module Bindtests where
12111 import qualified Guestfs
12112
12113 main = do
12114   g <- Guestfs.create
12115 ";
12116
12117   let mkargs args =
12118     String.concat " " (
12119       List.map (
12120         function
12121         | CallString s -> "\"" ^ s ^ "\""
12122         | CallOptString None -> "Nothing"
12123         | CallOptString (Some s) -> sprintf "(Just \"%s\")" s
12124         | CallStringList xs ->
12125             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
12126         | CallInt i when i < 0 -> "(" ^ string_of_int i ^ ")"
12127         | CallInt i -> string_of_int i
12128         | CallInt64 i when i < 0L -> "(" ^ Int64.to_string i ^ ")"
12129         | CallInt64 i -> Int64.to_string i
12130         | CallBool true -> "True"
12131         | CallBool false -> "False"
12132         | CallBuffer s -> "\"" ^ c_quote s ^ "\""
12133       ) args
12134     )
12135   in
12136
12137   generate_lang_bindtests (
12138     fun f args -> pr "  Guestfs.%s g %s\n" f (mkargs args)
12139   );
12140
12141   pr "  putStrLn \"EOF\"\n"
12142
12143 (* Language-independent bindings tests - we do it this way to
12144  * ensure there is parity in testing bindings across all languages.
12145  *)
12146 and generate_lang_bindtests call =
12147   call "test0" [CallString "abc"; CallOptString (Some "def");
12148                 CallStringList []; CallBool false;
12149                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
12150                 CallBuffer "abc\000abc"];
12151   call "test0" [CallString "abc"; CallOptString None;
12152                 CallStringList []; CallBool false;
12153                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
12154                 CallBuffer "abc\000abc"];
12155   call "test0" [CallString ""; CallOptString (Some "def");
12156                 CallStringList []; CallBool false;
12157                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
12158                 CallBuffer "abc\000abc"];
12159   call "test0" [CallString ""; CallOptString (Some "");
12160                 CallStringList []; CallBool false;
12161                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
12162                 CallBuffer "abc\000abc"];
12163   call "test0" [CallString "abc"; CallOptString (Some "def");
12164                 CallStringList ["1"]; CallBool false;
12165                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
12166                 CallBuffer "abc\000abc"];
12167   call "test0" [CallString "abc"; CallOptString (Some "def");
12168                 CallStringList ["1"; "2"]; CallBool false;
12169                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
12170                 CallBuffer "abc\000abc"];
12171   call "test0" [CallString "abc"; CallOptString (Some "def");
12172                 CallStringList ["1"]; CallBool true;
12173                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
12174                 CallBuffer "abc\000abc"];
12175   call "test0" [CallString "abc"; CallOptString (Some "def");
12176                 CallStringList ["1"]; CallBool false;
12177                 CallInt (-1); CallInt64 (-1L); CallString "123"; CallString "456";
12178                 CallBuffer "abc\000abc"];
12179   call "test0" [CallString "abc"; CallOptString (Some "def");
12180                 CallStringList ["1"]; CallBool false;
12181                 CallInt (-2); CallInt64 (-2L); CallString "123"; CallString "456";
12182                 CallBuffer "abc\000abc"];
12183   call "test0" [CallString "abc"; CallOptString (Some "def");
12184                 CallStringList ["1"]; CallBool false;
12185                 CallInt 1; CallInt64 1L; CallString "123"; CallString "456";
12186                 CallBuffer "abc\000abc"];
12187   call "test0" [CallString "abc"; CallOptString (Some "def");
12188                 CallStringList ["1"]; CallBool false;
12189                 CallInt 2; CallInt64 2L; CallString "123"; CallString "456";
12190                 CallBuffer "abc\000abc"];
12191   call "test0" [CallString "abc"; CallOptString (Some "def");
12192                 CallStringList ["1"]; CallBool false;
12193                 CallInt 4095; CallInt64 4095L; CallString "123"; CallString "456";
12194                 CallBuffer "abc\000abc"];
12195   call "test0" [CallString "abc"; CallOptString (Some "def");
12196                 CallStringList ["1"]; CallBool false;
12197                 CallInt 0; CallInt64 0L; CallString ""; CallString "";
12198                 CallBuffer "abc\000abc"]
12199
12200 (* XXX Add here tests of the return and error functions. *)
12201
12202 and generate_max_proc_nr () =
12203   pr "%d\n" max_proc_nr
12204
12205 let output_to filename k =
12206   let filename_new = filename ^ ".new" in
12207   chan := open_out filename_new;
12208   k ();
12209   close_out !chan;
12210   chan := Pervasives.stdout;
12211
12212   (* Is the new file different from the current file? *)
12213   if Sys.file_exists filename && files_equal filename filename_new then
12214     unlink filename_new                 (* same, so skip it *)
12215   else (
12216     (* different, overwrite old one *)
12217     (try chmod filename 0o644 with Unix_error _ -> ());
12218     rename filename_new filename;
12219     chmod filename 0o444;
12220     printf "written %s\n%!" filename;
12221   )
12222
12223 let perror msg = function
12224   | Unix_error (err, _, _) ->
12225       eprintf "%s: %s\n" msg (error_message err)
12226   | exn ->
12227       eprintf "%s: %s\n" msg (Printexc.to_string exn)
12228
12229 (* Main program. *)
12230 let () =
12231   let lock_fd =
12232     try openfile "HACKING" [O_RDWR] 0
12233     with
12234     | Unix_error (ENOENT, _, _) ->
12235         eprintf "\
12236 You are probably running this from the wrong directory.
12237 Run it from the top source directory using the command
12238   src/generator.ml
12239 ";
12240         exit 1
12241     | exn ->
12242         perror "open: HACKING" exn;
12243         exit 1 in
12244
12245   (* Acquire a lock so parallel builds won't try to run the generator
12246    * twice at the same time.  Subsequent builds will wait for the first
12247    * one to finish.  Note the lock is released implicitly when the
12248    * program exits.
12249    *)
12250   (try lockf lock_fd F_LOCK 1
12251    with exn ->
12252      perror "lock: HACKING" exn;
12253      exit 1);
12254
12255   check_functions ();
12256
12257   output_to "src/guestfs_protocol.x" generate_xdr;
12258   output_to "src/guestfs-structs.h" generate_structs_h;
12259   output_to "src/guestfs-actions.h" generate_actions_h;
12260   output_to "src/guestfs-internal-actions.h" generate_internal_actions_h;
12261   output_to "src/actions.c" generate_client_actions;
12262   output_to "src/bindtests.c" generate_bindtests;
12263   output_to "src/guestfs-structs.pod" generate_structs_pod;
12264   output_to "src/guestfs-actions.pod" generate_actions_pod;
12265   output_to "src/guestfs-availability.pod" generate_availability_pod;
12266   output_to "src/MAX_PROC_NR" generate_max_proc_nr;
12267   output_to "src/libguestfs.syms" generate_linker_script;
12268   output_to "daemon/actions.h" generate_daemon_actions_h;
12269   output_to "daemon/stubs.c" generate_daemon_actions;
12270   output_to "daemon/names.c" generate_daemon_names;
12271   output_to "daemon/optgroups.c" generate_daemon_optgroups_c;
12272   output_to "daemon/optgroups.h" generate_daemon_optgroups_h;
12273   output_to "capitests/tests.c" generate_tests;
12274   output_to "fish/cmds.c" generate_fish_cmds;
12275   output_to "fish/completion.c" generate_fish_completion;
12276   output_to "fish/guestfish-actions.pod" generate_fish_actions_pod;
12277   output_to "ocaml/guestfs.mli" generate_ocaml_mli;
12278   output_to "ocaml/guestfs.ml" generate_ocaml_ml;
12279   output_to "ocaml/guestfs_c_actions.c" generate_ocaml_c;
12280   output_to "ocaml/bindtests.ml" generate_ocaml_bindtests;
12281   output_to "perl/Guestfs.xs" generate_perl_xs;
12282   output_to "perl/lib/Sys/Guestfs.pm" generate_perl_pm;
12283   output_to "perl/bindtests.pl" generate_perl_bindtests;
12284   output_to "python/guestfs-py.c" generate_python_c;
12285   output_to "python/guestfs.py" generate_python_py;
12286   output_to "python/bindtests.py" generate_python_bindtests;
12287   output_to "ruby/ext/guestfs/_guestfs.c" generate_ruby_c;
12288   output_to "ruby/bindtests.rb" generate_ruby_bindtests;
12289   output_to "java/com/redhat/et/libguestfs/GuestFS.java" generate_java_java;
12290
12291   List.iter (
12292     fun (typ, jtyp) ->
12293       let cols = cols_of_struct typ in
12294       let filename = sprintf "java/com/redhat/et/libguestfs/%s.java" jtyp in
12295       output_to filename (generate_java_struct jtyp cols);
12296   ) java_structs;
12297
12298   output_to "java/Makefile.inc" generate_java_makefile_inc;
12299   output_to "java/com_redhat_et_libguestfs_GuestFS.c" generate_java_c;
12300   output_to "java/Bindtests.java" generate_java_bindtests;
12301   output_to "haskell/Guestfs.hs" generate_haskell_hs;
12302   output_to "haskell/Bindtests.hs" generate_haskell_bindtests;
12303   output_to "csharp/Libguestfs.cs" generate_csharp;
12304
12305   (* Always generate this file last, and unconditionally.  It's used
12306    * by the Makefile to know when we must re-run the generator.
12307    *)
12308   let chan = open_out "src/stamp-generator" in
12309   fprintf chan "1\n";
12310   close_out chan;
12311
12312   printf "generated %d lines of code\n" !lines