PHP bindings.
[libguestfs.git] / src / generator.ml
1 #!/usr/bin/env ocaml
2 (* libguestfs
3  * Copyright (C) 2009-2010 Red Hat Inc.
4  *
5  * This program is free software; you can redistribute it and/or modify
6  * it under the terms of the GNU General Public License as published by
7  * the Free Software Foundation; either version 2 of the License, or
8  * (at your option) any later version.
9  *
10  * This program is distributed in the hope that it will be useful,
11  * but WITHOUT ANY WARRANTY; without even the implied warranty of
12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
13  * GNU General Public License for more details.
14  *
15  * You should have received a copy of the GNU General Public License
16  * along with this program; if not, write to the Free Software
17  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
18  *)
19
20 (* This script generates a large amount of code and documentation for
21  * all the daemon actions.
22  *
23  * To add a new action there are only two files you need to change,
24  * this one to describe the interface (see the big table of
25  * 'daemon_functions' below), and daemon/<somefile>.c to write the
26  * implementation.
27  *
28  * After editing this file, run it (./src/generator.ml) to regenerate
29  * all the output files.  'make' will rerun this automatically when
30  * necessary.  Note that if you are using a separate build directory
31  * you must run generator.ml from the _source_ directory.
32  *
33  * IMPORTANT: This script should NOT print any warnings.  If it prints
34  * warnings, you should treat them as errors.
35  *
36  * OCaml tips:
37  * (1) In emacs, install tuareg-mode to display and format OCaml code
38  * correctly.  'vim' comes with a good OCaml editing mode by default.
39  * (2) Read the resources at http://ocaml-tutorial.org/
40  *)
41
42 #load "unix.cma";;
43 #load "str.cma";;
44 #directory "+xml-light";;
45 #directory "+../pkg-lib/xml-light";; (* for GODI users *)
46 #load "xml-light.cma";;
47
48 open Unix
49 open Printf
50
51 type style = ret * args
52 and ret =
53     (* "RErr" as a return value means an int used as a simple error
54      * indication, ie. 0 or -1.
55      *)
56   | RErr
57
58     (* "RInt" as a return value means an int which is -1 for error
59      * or any value >= 0 on success.  Only use this for smallish
60      * positive ints (0 <= i < 2^30).
61      *)
62   | RInt of string
63
64     (* "RInt64" is the same as RInt, but is guaranteed to be able
65      * to return a full 64 bit value, _except_ that -1 means error
66      * (so -1 cannot be a valid, non-error return value).
67      *)
68   | RInt64 of string
69
70     (* "RBool" is a bool return value which can be true/false or
71      * -1 for error.
72      *)
73   | RBool of string
74
75     (* "RConstString" is a string that refers to a constant value.
76      * The return value must NOT be NULL (since NULL indicates
77      * an error).
78      *
79      * Try to avoid using this.  In particular you cannot use this
80      * for values returned from the daemon, because there is no
81      * thread-safe way to return them in the C API.
82      *)
83   | RConstString of string
84
85     (* "RConstOptString" is an even more broken version of
86      * "RConstString".  The returned string may be NULL and there
87      * is no way to return an error indication.  Avoid using this!
88      *)
89   | RConstOptString of string
90
91     (* "RString" is a returned string.  It must NOT be NULL, since
92      * a NULL return indicates an error.  The caller frees this.
93      *)
94   | RString of string
95
96     (* "RStringList" is a list of strings.  No string in the list
97      * can be NULL.  The caller frees the strings and the array.
98      *)
99   | RStringList of string
100
101     (* "RStruct" is a function which returns a single named structure
102      * or an error indication (in C, a struct, and in other languages
103      * with varying representations, but usually very efficient).  See
104      * after the function list below for the structures.
105      *)
106   | RStruct of string * string          (* name of retval, name of struct *)
107
108     (* "RStructList" is a function which returns either a list/array
109      * of structures (could be zero-length), or an error indication.
110      *)
111   | RStructList of string * string      (* name of retval, name of struct *)
112
113     (* Key-value pairs of untyped strings.  Turns into a hashtable or
114      * dictionary in languages which support it.  DON'T use this as a
115      * general "bucket" for results.  Prefer a stronger typed return
116      * value if one is available, or write a custom struct.  Don't use
117      * this if the list could potentially be very long, since it is
118      * inefficient.  Keys should be unique.  NULLs are not permitted.
119      *)
120   | RHashtable of string
121
122     (* "RBufferOut" is handled almost exactly like RString, but
123      * it allows the string to contain arbitrary 8 bit data including
124      * ASCII NUL.  In the C API this causes an implicit extra parameter
125      * to be added of type <size_t *size_r>.  The extra parameter
126      * returns the actual size of the return buffer in bytes.
127      *
128      * Other programming languages support strings with arbitrary 8 bit
129      * data.
130      *
131      * At the RPC layer we have to use the opaque<> type instead of
132      * string<>.  Returned data is still limited to the max message
133      * size (ie. ~ 2 MB).
134      *)
135   | RBufferOut of string
136
137 and args = argt list    (* Function parameters, guestfs handle is implicit. *)
138
139     (* Note in future we should allow a "variable args" parameter as
140      * the final parameter, to allow commands like
141      *   chmod mode file [file(s)...]
142      * This is not implemented yet, but many commands (such as chmod)
143      * are currently defined with the argument order keeping this future
144      * possibility in mind.
145      *)
146 and argt =
147   | String of string    (* const char *name, cannot be NULL *)
148   | Device of string    (* /dev device name, cannot be NULL *)
149   | Pathname of string  (* file name, cannot be NULL *)
150   | Dev_or_Path of string (* /dev device name or Pathname, cannot be NULL *)
151   | OptString of string (* const char *name, may be NULL *)
152   | StringList of string(* list of strings (each string cannot be NULL) *)
153   | DeviceList of string(* list of Device names (each cannot be NULL) *)
154   | Bool of string      (* boolean *)
155   | Int of string       (* int (smallish ints, signed, <= 31 bits) *)
156   | Int64 of string     (* any 64 bit int *)
157     (* These are treated as filenames (simple string parameters) in
158      * the C API and bindings.  But in the RPC protocol, we transfer
159      * the actual file content up to or down from the daemon.
160      * FileIn: local machine -> daemon (in request)
161      * FileOut: daemon -> local machine (in reply)
162      * In guestfish (only), the special name "-" means read from
163      * stdin or write to stdout.
164      *)
165   | FileIn of string
166   | FileOut of string
167     (* Opaque buffer which can contain arbitrary 8 bit data.
168      * In the C API, this is expressed as <const char *, size_t> pair.
169      * Most other languages have a string type which can contain
170      * ASCII NUL.  We use whatever type is appropriate for each
171      * language.
172      * Buffers are limited by the total message size.  To transfer
173      * large blocks of data, use FileIn/FileOut parameters instead.
174      * To return an arbitrary buffer, use RBufferOut.
175      *)
176   | BufferIn of string
177     (* Key material / passphrase.  Eventually we should treat this
178      * as sensitive and mlock it into physical RAM.  However this
179      * is highly complex because of all the places that XDR-encoded
180      * strings can end up.  So currently the only difference from
181      * 'String' is the way that guestfish requests these parameters
182      * from the user.
183      *)
184   | Key of string
185
186 type flags =
187   | ProtocolLimitWarning  (* display warning about protocol size limits *)
188   | DangerWillRobinson    (* flags particularly dangerous commands *)
189   | FishAlias of string   (* provide an alias for this cmd in guestfish *)
190   | FishOutput of fish_output_t (* how to display output in guestfish *)
191   | NotInFish             (* do not export via guestfish *)
192   | NotInDocs             (* do not add this function to documentation *)
193   | DeprecatedBy of string (* function is deprecated, use .. instead *)
194   | Optional of string    (* function is part of an optional group *)
195   | Progress              (* function can generate progress messages *)
196
197 and fish_output_t =
198   | FishOutputOctal       (* for int return, print in octal *)
199   | FishOutputHexadecimal (* for int return, print in hex *)
200
201 (* You can supply zero or as many tests as you want per API call.
202  *
203  * Note that the test environment has 3 block devices, of size 500MB,
204  * 50MB and 10MB (respectively /dev/sda, /dev/sdb, /dev/sdc), and
205  * a fourth ISO block device with some known files on it (/dev/sdd).
206  *
207  * Note for partitioning purposes, the 500MB device has 1015 cylinders.
208  * Number of cylinders was 63 for IDE emulated disks with precisely
209  * the same size.  How exactly this is calculated is a mystery.
210  *
211  * The ISO block device (/dev/sdd) comes from images/test.iso.
212  *
213  * To be able to run the tests in a reasonable amount of time,
214  * the virtual machine and block devices are reused between tests.
215  * So don't try testing kill_subprocess :-x
216  *
217  * Between each test we blockdev-setrw, umount-all, lvm-remove-all.
218  *
219  * Don't assume anything about the previous contents of the block
220  * devices.  Use 'Init*' to create some initial scenarios.
221  *
222  * You can add a prerequisite clause to any individual test.  This
223  * is a run-time check, which, if it fails, causes the test to be
224  * skipped.  Useful if testing a command which might not work on
225  * all variations of libguestfs builds.  A test that has prerequisite
226  * of 'Always' is run unconditionally.
227  *
228  * In addition, packagers can skip individual tests by setting the
229  * environment variables:     eg:
230  *   SKIP_TEST_<CMD>_<NUM>=1  SKIP_TEST_COMMAND_3=1  (skips test #3 of command)
231  *   SKIP_TEST_<CMD>=1        SKIP_TEST_ZEROFREE=1   (skips all zerofree tests)
232  *)
233 type tests = (test_init * test_prereq * test) list
234 and test =
235     (* Run the command sequence and just expect nothing to fail. *)
236   | TestRun of seq
237
238     (* Run the command sequence and expect the output of the final
239      * command to be the string.
240      *)
241   | TestOutput of seq * string
242
243     (* Run the command sequence and expect the output of the final
244      * command to be the list of strings.
245      *)
246   | TestOutputList of seq * string list
247
248     (* Run the command sequence and expect the output of the final
249      * command to be the list of block devices (could be either
250      * "/dev/sd.." or "/dev/hd.." form - we don't check the 5th
251      * character of each string).
252      *)
253   | TestOutputListOfDevices of seq * string list
254
255     (* Run the command sequence and expect the output of the final
256      * command to be the integer.
257      *)
258   | TestOutputInt of seq * int
259
260     (* Run the command sequence and expect the output of the final
261      * command to be <op> <int>, eg. ">=", "1".
262      *)
263   | TestOutputIntOp of seq * string * int
264
265     (* Run the command sequence and expect the output of the final
266      * command to be a true value (!= 0 or != NULL).
267      *)
268   | TestOutputTrue of seq
269
270     (* Run the command sequence and expect the output of the final
271      * command to be a false value (== 0 or == NULL, but not an error).
272      *)
273   | TestOutputFalse of seq
274
275     (* Run the command sequence and expect the output of the final
276      * command to be a list of the given length (but don't care about
277      * content).
278      *)
279   | TestOutputLength of seq * int
280
281     (* Run the command sequence and expect the output of the final
282      * command to be a buffer (RBufferOut), ie. string + size.
283      *)
284   | TestOutputBuffer of seq * string
285
286     (* Run the command sequence and expect the output of the final
287      * command to be a structure.
288      *)
289   | TestOutputStruct of seq * test_field_compare list
290
291     (* Run the command sequence and expect the final command (only)
292      * to fail.
293      *)
294   | TestLastFail of seq
295
296 and test_field_compare =
297   | CompareWithInt of string * int
298   | CompareWithIntOp of string * string * int
299   | CompareWithString of string * string
300   | CompareFieldsIntEq of string * string
301   | CompareFieldsStrEq of string * string
302
303 (* Test prerequisites. *)
304 and test_prereq =
305     (* Test always runs. *)
306   | Always
307
308     (* Test is currently disabled - eg. it fails, or it tests some
309      * unimplemented feature.
310      *)
311   | Disabled
312
313     (* 'string' is some C code (a function body) that should return
314      * true or false.  The test will run if the code returns true.
315      *)
316   | If of string
317
318     (* As for 'If' but the test runs _unless_ the code returns true. *)
319   | Unless of string
320
321     (* Run the test only if 'string' is available in the daemon. *)
322   | IfAvailable of string
323
324 (* Some initial scenarios for testing. *)
325 and test_init =
326     (* Do nothing, block devices could contain random stuff including
327      * LVM PVs, and some filesystems might be mounted.  This is usually
328      * a bad idea.
329      *)
330   | InitNone
331
332     (* Block devices are empty and no filesystems are mounted. *)
333   | InitEmpty
334
335     (* /dev/sda contains a single partition /dev/sda1, with random
336      * content.  /dev/sdb and /dev/sdc may have random content.
337      * No LVM.
338      *)
339   | InitPartition
340
341     (* /dev/sda contains a single partition /dev/sda1, which is formatted
342      * as ext2, empty [except for lost+found] and mounted on /.
343      * /dev/sdb and /dev/sdc may have random content.
344      * No LVM.
345      *)
346   | InitBasicFS
347
348     (* /dev/sda:
349      *   /dev/sda1 (is a PV):
350      *     /dev/VG/LV (size 8MB):
351      *       formatted as ext2, empty [except for lost+found], mounted on /
352      * /dev/sdb and /dev/sdc may have random content.
353      *)
354   | InitBasicFSonLVM
355
356     (* /dev/sdd (the ISO, see images/ directory in source)
357      * is mounted on /
358      *)
359   | InitISOFS
360
361 (* Sequence of commands for testing. *)
362 and seq = cmd list
363 and cmd = string list
364
365 (* Note about long descriptions: When referring to another
366  * action, use the format C<guestfs_other> (ie. the full name of
367  * the C function).  This will be replaced as appropriate in other
368  * language bindings.
369  *
370  * Apart from that, long descriptions are just perldoc paragraphs.
371  *)
372
373 (* Generate a random UUID (used in tests). *)
374 let uuidgen () =
375   let chan = open_process_in "uuidgen" in
376   let uuid = input_line chan in
377   (match close_process_in chan with
378    | WEXITED 0 -> ()
379    | WEXITED _ ->
380        failwith "uuidgen: process exited with non-zero status"
381    | WSIGNALED _ | WSTOPPED _ ->
382        failwith "uuidgen: process signalled or stopped by signal"
383   );
384   uuid
385
386 (* These test functions are used in the language binding tests. *)
387
388 let test_all_args = [
389   String "str";
390   OptString "optstr";
391   StringList "strlist";
392   Bool "b";
393   Int "integer";
394   Int64 "integer64";
395   FileIn "filein";
396   FileOut "fileout";
397   BufferIn "bufferin";
398 ]
399
400 let test_all_rets = [
401   (* except for RErr, which is tested thoroughly elsewhere *)
402   "test0rint",         RInt "valout";
403   "test0rint64",       RInt64 "valout";
404   "test0rbool",        RBool "valout";
405   "test0rconststring", RConstString "valout";
406   "test0rconstoptstring", RConstOptString "valout";
407   "test0rstring",      RString "valout";
408   "test0rstringlist",  RStringList "valout";
409   "test0rstruct",      RStruct ("valout", "lvm_pv");
410   "test0rstructlist",  RStructList ("valout", "lvm_pv");
411   "test0rhashtable",   RHashtable "valout";
412 ]
413
414 let test_functions = [
415   ("test0", (RErr, test_all_args), -1, [NotInFish; NotInDocs],
416    [],
417    "internal test function - do not use",
418    "\
419 This is an internal test function which is used to test whether
420 the automatically generated bindings can handle every possible
421 parameter type correctly.
422
423 It echos the contents of each parameter to stdout.
424
425 You probably don't want to call this function.");
426 ] @ List.flatten (
427   List.map (
428     fun (name, ret) ->
429       [(name, (ret, [String "val"]), -1, [NotInFish; NotInDocs],
430         [],
431         "internal test function - do not use",
432         "\
433 This is an internal test function which is used to test whether
434 the automatically generated bindings can handle every possible
435 return type correctly.
436
437 It converts string C<val> to the return type.
438
439 You probably don't want to call this function.");
440        (name ^ "err", (ret, []), -1, [NotInFish; NotInDocs],
441         [],
442         "internal test function - do not use",
443         "\
444 This is an internal test function which is used to test whether
445 the automatically generated bindings can handle every possible
446 return type correctly.
447
448 This function always returns an error.
449
450 You probably don't want to call this function.")]
451   ) test_all_rets
452 )
453
454 (* non_daemon_functions are any functions which don't get processed
455  * in the daemon, eg. functions for setting and getting local
456  * configuration values.
457  *)
458
459 let non_daemon_functions = test_functions @ [
460   ("launch", (RErr, []), -1, [FishAlias "run"],
461    [],
462    "launch the qemu subprocess",
463    "\
464 Internally libguestfs is implemented by running a virtual machine
465 using L<qemu(1)>.
466
467 You should call this after configuring the handle
468 (eg. adding drives) but before performing any actions.");
469
470   ("wait_ready", (RErr, []), -1, [NotInFish],
471    [],
472    "wait until the qemu subprocess launches (no op)",
473    "\
474 This function is a no op.
475
476 In versions of the API E<lt> 1.0.71 you had to call this function
477 just after calling C<guestfs_launch> to wait for the launch
478 to complete.  However this is no longer necessary because
479 C<guestfs_launch> now does the waiting.
480
481 If you see any calls to this function in code then you can just
482 remove them, unless you want to retain compatibility with older
483 versions of the API.");
484
485   ("kill_subprocess", (RErr, []), -1, [],
486    [],
487    "kill the qemu subprocess",
488    "\
489 This kills the qemu subprocess.  You should never need to call this.");
490
491   ("add_drive", (RErr, [String "filename"]), -1, [FishAlias "add"],
492    [],
493    "add an image to examine or modify",
494    "\
495 This function adds a virtual machine disk image C<filename> to the
496 guest.  The first time you call this function, the disk appears as IDE
497 disk 0 (C</dev/sda>) in the guest, the second time as C</dev/sdb>, and
498 so on.
499
500 You don't necessarily need to be root when using libguestfs.  However
501 you obviously do need sufficient permissions to access the filename
502 for whatever operations you want to perform (ie. read access if you
503 just want to read the image or write access if you want to modify the
504 image).
505
506 This is equivalent to the qemu parameter
507 C<-drive file=filename,cache=off,if=...>.
508
509 C<cache=off> is omitted in cases where it is not supported by
510 the underlying filesystem.
511
512 C<if=...> is set at compile time by the configuration option
513 C<./configure --with-drive-if=...>.  In the rare case where you
514 might need to change this at run time, use C<guestfs_add_drive_with_if>
515 or C<guestfs_add_drive_ro_with_if>.
516
517 Note that this call checks for the existence of C<filename>.  This
518 stops you from specifying other types of drive which are supported
519 by qemu such as C<nbd:> and C<http:> URLs.  To specify those, use
520 the general C<guestfs_config> call instead.");
521
522   ("add_cdrom", (RErr, [String "filename"]), -1, [FishAlias "cdrom"],
523    [],
524    "add a CD-ROM disk image to examine",
525    "\
526 This function adds a virtual CD-ROM disk image to the guest.
527
528 This is equivalent to the qemu parameter C<-cdrom filename>.
529
530 Notes:
531
532 =over 4
533
534 =item *
535
536 This call checks for the existence of C<filename>.  This
537 stops you from specifying other types of drive which are supported
538 by qemu such as C<nbd:> and C<http:> URLs.  To specify those, use
539 the general C<guestfs_config> call instead.
540
541 =item *
542
543 If you just want to add an ISO file (often you use this as an
544 efficient way to transfer large files into the guest), then you
545 should probably use C<guestfs_add_drive_ro> instead.
546
547 =back");
548
549   ("add_drive_ro", (RErr, [String "filename"]), -1, [FishAlias "add-ro"],
550    [],
551    "add a drive in snapshot mode (read-only)",
552    "\
553 This adds a drive in snapshot mode, making it effectively
554 read-only.
555
556 Note that writes to the device are allowed, and will be seen for
557 the duration of the guestfs handle, but they are written
558 to a temporary file which is discarded as soon as the guestfs
559 handle is closed.  We don't currently have any method to enable
560 changes to be committed, although qemu can support this.
561
562 This is equivalent to the qemu parameter
563 C<-drive file=filename,snapshot=on,if=...>.
564
565 C<if=...> is set at compile time by the configuration option
566 C<./configure --with-drive-if=...>.  In the rare case where you
567 might need to change this at run time, use C<guestfs_add_drive_with_if>
568 or C<guestfs_add_drive_ro_with_if>.
569
570 Note that this call checks for the existence of C<filename>.  This
571 stops you from specifying other types of drive which are supported
572 by qemu such as C<nbd:> and C<http:> URLs.  To specify those, use
573 the general C<guestfs_config> call instead.");
574
575   ("config", (RErr, [String "qemuparam"; OptString "qemuvalue"]), -1, [],
576    [],
577    "add qemu parameters",
578    "\
579 This can be used to add arbitrary qemu command line parameters
580 of the form C<-param value>.  Actually it's not quite arbitrary - we
581 prevent you from setting some parameters which would interfere with
582 parameters that we use.
583
584 The first character of C<param> string must be a C<-> (dash).
585
586 C<value> can be NULL.");
587
588   ("set_qemu", (RErr, [OptString "qemu"]), -1, [FishAlias "qemu"],
589    [],
590    "set the qemu binary",
591    "\
592 Set the qemu binary that we will use.
593
594 The default is chosen when the library was compiled by the
595 configure script.
596
597 You can also override this by setting the C<LIBGUESTFS_QEMU>
598 environment variable.
599
600 Setting C<qemu> to C<NULL> restores the default qemu binary.
601
602 Note that you should call this function as early as possible
603 after creating the handle.  This is because some pre-launch
604 operations depend on testing qemu features (by running C<qemu -help>).
605 If the qemu binary changes, we don't retest features, and
606 so you might see inconsistent results.  Using the environment
607 variable C<LIBGUESTFS_QEMU> is safest of all since that picks
608 the qemu binary at the same time as the handle is created.");
609
610   ("get_qemu", (RConstString "qemu", []), -1, [],
611    [InitNone, Always, TestRun (
612       [["get_qemu"]])],
613    "get the qemu binary",
614    "\
615 Return the current qemu binary.
616
617 This is always non-NULL.  If it wasn't set already, then this will
618 return the default qemu binary name.");
619
620   ("set_path", (RErr, [OptString "searchpath"]), -1, [FishAlias "path"],
621    [],
622    "set the search path",
623    "\
624 Set the path that libguestfs searches for kernel and initrd.img.
625
626 The default is C<$libdir/guestfs> unless overridden by setting
627 C<LIBGUESTFS_PATH> environment variable.
628
629 Setting C<path> to C<NULL> restores the default path.");
630
631   ("get_path", (RConstString "path", []), -1, [],
632    [InitNone, Always, TestRun (
633       [["get_path"]])],
634    "get the search path",
635    "\
636 Return the current search path.
637
638 This is always non-NULL.  If it wasn't set already, then this will
639 return the default path.");
640
641   ("set_append", (RErr, [OptString "append"]), -1, [FishAlias "append"],
642    [],
643    "add options to kernel command line",
644    "\
645 This function is used to add additional options to the
646 guest kernel command line.
647
648 The default is C<NULL> unless overridden by setting
649 C<LIBGUESTFS_APPEND> environment variable.
650
651 Setting C<append> to C<NULL> means I<no> additional options
652 are passed (libguestfs always adds a few of its own).");
653
654   ("get_append", (RConstOptString "append", []), -1, [],
655    (* This cannot be tested with the current framework.  The
656     * function can return NULL in normal operations, which the
657     * test framework interprets as an error.
658     *)
659    [],
660    "get the additional kernel options",
661    "\
662 Return the additional kernel options which are added to the
663 guest kernel command line.
664
665 If C<NULL> then no options are added.");
666
667   ("set_autosync", (RErr, [Bool "autosync"]), -1, [FishAlias "autosync"],
668    [],
669    "set autosync mode",
670    "\
671 If C<autosync> is true, this enables autosync.  Libguestfs will make a
672 best effort attempt to run C<guestfs_umount_all> followed by
673 C<guestfs_sync> when the handle is closed
674 (also if the program exits without closing handles).
675
676 This is disabled by default (except in guestfish where it is
677 enabled by default).");
678
679   ("get_autosync", (RBool "autosync", []), -1, [],
680    [InitNone, Always, TestRun (
681       [["get_autosync"]])],
682    "get autosync mode",
683    "\
684 Get the autosync flag.");
685
686   ("set_verbose", (RErr, [Bool "verbose"]), -1, [FishAlias "verbose"],
687    [],
688    "set verbose mode",
689    "\
690 If C<verbose> is true, this turns on verbose messages (to C<stderr>).
691
692 Verbose messages are disabled unless the environment variable
693 C<LIBGUESTFS_DEBUG> is defined and set to C<1>.");
694
695   ("get_verbose", (RBool "verbose", []), -1, [],
696    [],
697    "get verbose mode",
698    "\
699 This returns the verbose messages flag.");
700
701   ("is_ready", (RBool "ready", []), -1, [],
702    [InitNone, Always, TestOutputTrue (
703       [["is_ready"]])],
704    "is ready to accept commands",
705    "\
706 This returns true iff this handle is ready to accept commands
707 (in the C<READY> state).
708
709 For more information on states, see L<guestfs(3)>.");
710
711   ("is_config", (RBool "config", []), -1, [],
712    [InitNone, Always, TestOutputFalse (
713       [["is_config"]])],
714    "is in configuration state",
715    "\
716 This returns true iff this handle is being configured
717 (in the C<CONFIG> state).
718
719 For more information on states, see L<guestfs(3)>.");
720
721   ("is_launching", (RBool "launching", []), -1, [],
722    [InitNone, Always, TestOutputFalse (
723       [["is_launching"]])],
724    "is launching subprocess",
725    "\
726 This returns true iff this handle is launching the subprocess
727 (in the C<LAUNCHING> state).
728
729 For more information on states, see L<guestfs(3)>.");
730
731   ("is_busy", (RBool "busy", []), -1, [],
732    [InitNone, Always, TestOutputFalse (
733       [["is_busy"]])],
734    "is busy processing a command",
735    "\
736 This returns true iff this handle is busy processing a command
737 (in the C<BUSY> state).
738
739 For more information on states, see L<guestfs(3)>.");
740
741   ("get_state", (RInt "state", []), -1, [],
742    [],
743    "get the current state",
744    "\
745 This returns the current state as an opaque integer.  This is
746 only useful for printing debug and internal error messages.
747
748 For more information on states, see L<guestfs(3)>.");
749
750   ("set_memsize", (RErr, [Int "memsize"]), -1, [FishAlias "memsize"],
751    [InitNone, Always, TestOutputInt (
752       [["set_memsize"; "500"];
753        ["get_memsize"]], 500)],
754    "set memory allocated to the qemu subprocess",
755    "\
756 This sets the memory size in megabytes allocated to the
757 qemu subprocess.  This only has any effect if called before
758 C<guestfs_launch>.
759
760 You can also change this by setting the environment
761 variable C<LIBGUESTFS_MEMSIZE> before the handle is
762 created.
763
764 For more information on the architecture of libguestfs,
765 see L<guestfs(3)>.");
766
767   ("get_memsize", (RInt "memsize", []), -1, [],
768    [InitNone, Always, TestOutputIntOp (
769       [["get_memsize"]], ">=", 256)],
770    "get memory allocated to the qemu subprocess",
771    "\
772 This gets the memory size in megabytes allocated to the
773 qemu subprocess.
774
775 If C<guestfs_set_memsize> was not called
776 on this handle, and if C<LIBGUESTFS_MEMSIZE> was not set,
777 then this returns the compiled-in default value for memsize.
778
779 For more information on the architecture of libguestfs,
780 see L<guestfs(3)>.");
781
782   ("get_pid", (RInt "pid", []), -1, [FishAlias "pid"],
783    [InitNone, Always, TestOutputIntOp (
784       [["get_pid"]], ">=", 1)],
785    "get PID of qemu subprocess",
786    "\
787 Return the process ID of the qemu subprocess.  If there is no
788 qemu subprocess, then this will return an error.
789
790 This is an internal call used for debugging and testing.");
791
792   ("version", (RStruct ("version", "version"), []), -1, [],
793    [InitNone, Always, TestOutputStruct (
794       [["version"]], [CompareWithInt ("major", 1)])],
795    "get the library version number",
796    "\
797 Return the libguestfs version number that the program is linked
798 against.
799
800 Note that because of dynamic linking this is not necessarily
801 the version of libguestfs that you compiled against.  You can
802 compile the program, and then at runtime dynamically link
803 against a completely different C<libguestfs.so> library.
804
805 This call was added in version C<1.0.58>.  In previous
806 versions of libguestfs there was no way to get the version
807 number.  From C code you can use dynamic linker functions
808 to find out if this symbol exists (if it doesn't, then
809 it's an earlier version).
810
811 The call returns a structure with four elements.  The first
812 three (C<major>, C<minor> and C<release>) are numbers and
813 correspond to the usual version triplet.  The fourth element
814 (C<extra>) is a string and is normally empty, but may be
815 used for distro-specific information.
816
817 To construct the original version string:
818 C<$major.$minor.$release$extra>
819
820 See also: L<guestfs(3)/LIBGUESTFS VERSION NUMBERS>.
821
822 I<Note:> Don't use this call to test for availability
823 of features.  In enterprise distributions we backport
824 features from later versions into earlier versions,
825 making this an unreliable way to test for features.
826 Use C<guestfs_available> instead.");
827
828   ("set_selinux", (RErr, [Bool "selinux"]), -1, [FishAlias "selinux"],
829    [InitNone, Always, TestOutputTrue (
830       [["set_selinux"; "true"];
831        ["get_selinux"]])],
832    "set SELinux enabled or disabled at appliance boot",
833    "\
834 This sets the selinux flag that is passed to the appliance
835 at boot time.  The default is C<selinux=0> (disabled).
836
837 Note that if SELinux is enabled, it is always in
838 Permissive mode (C<enforcing=0>).
839
840 For more information on the architecture of libguestfs,
841 see L<guestfs(3)>.");
842
843   ("get_selinux", (RBool "selinux", []), -1, [],
844    [],
845    "get SELinux enabled flag",
846    "\
847 This returns the current setting of the selinux flag which
848 is passed to the appliance at boot time.  See C<guestfs_set_selinux>.
849
850 For more information on the architecture of libguestfs,
851 see L<guestfs(3)>.");
852
853   ("set_trace", (RErr, [Bool "trace"]), -1, [FishAlias "trace"],
854    [InitNone, Always, TestOutputFalse (
855       [["set_trace"; "false"];
856        ["get_trace"]])],
857    "enable or disable command traces",
858    "\
859 If the command trace flag is set to 1, then commands are
860 printed on stderr before they are executed in a format
861 which is very similar to the one used by guestfish.  In
862 other words, you can run a program with this enabled, and
863 you will get out a script which you can feed to guestfish
864 to perform the same set of actions.
865
866 If you want to trace C API calls into libguestfs (and
867 other libraries) then possibly a better way is to use
868 the external ltrace(1) command.
869
870 Command traces are disabled unless the environment variable
871 C<LIBGUESTFS_TRACE> is defined and set to C<1>.");
872
873   ("get_trace", (RBool "trace", []), -1, [],
874    [],
875    "get command trace enabled flag",
876    "\
877 Return the command trace flag.");
878
879   ("set_direct", (RErr, [Bool "direct"]), -1, [FishAlias "direct"],
880    [InitNone, Always, TestOutputFalse (
881       [["set_direct"; "false"];
882        ["get_direct"]])],
883    "enable or disable direct appliance mode",
884    "\
885 If the direct appliance mode flag is enabled, then stdin and
886 stdout are passed directly through to the appliance once it
887 is launched.
888
889 One consequence of this is that log messages aren't caught
890 by the library and handled by C<guestfs_set_log_message_callback>,
891 but go straight to stdout.
892
893 You probably don't want to use this unless you know what you
894 are doing.
895
896 The default is disabled.");
897
898   ("get_direct", (RBool "direct", []), -1, [],
899    [],
900    "get direct appliance mode flag",
901    "\
902 Return the direct appliance mode flag.");
903
904   ("set_recovery_proc", (RErr, [Bool "recoveryproc"]), -1, [FishAlias "recovery-proc"],
905    [InitNone, Always, TestOutputTrue (
906       [["set_recovery_proc"; "true"];
907        ["get_recovery_proc"]])],
908    "enable or disable the recovery process",
909    "\
910 If this is called with the parameter C<false> then
911 C<guestfs_launch> does not create a recovery process.  The
912 purpose of the recovery process is to stop runaway qemu
913 processes in the case where the main program aborts abruptly.
914
915 This only has any effect if called before C<guestfs_launch>,
916 and the default is true.
917
918 About the only time when you would want to disable this is
919 if the main process will fork itself into the background
920 (\"daemonize\" itself).  In this case the recovery process
921 thinks that the main program has disappeared and so kills
922 qemu, which is not very helpful.");
923
924   ("get_recovery_proc", (RBool "recoveryproc", []), -1, [],
925    [],
926    "get recovery process enabled flag",
927    "\
928 Return the recovery process enabled flag.");
929
930   ("add_drive_with_if", (RErr, [String "filename"; String "iface"]), -1, [],
931    [],
932    "add a drive specifying the QEMU block emulation to use",
933    "\
934 This is the same as C<guestfs_add_drive> but it allows you
935 to specify the QEMU interface emulation to use at run time.");
936
937   ("add_drive_ro_with_if", (RErr, [String "filename"; String "iface"]), -1, [],
938    [],
939    "add a drive read-only specifying the QEMU block emulation to use",
940    "\
941 This is the same as C<guestfs_add_drive_ro> but it allows you
942 to specify the QEMU interface emulation to use at run time.");
943
944   ("file_architecture", (RString "arch", [Pathname "filename"]), -1, [],
945    [InitISOFS, Always, TestOutput (
946       [["file_architecture"; "/bin-i586-dynamic"]], "i386");
947     InitISOFS, Always, TestOutput (
948       [["file_architecture"; "/bin-sparc-dynamic"]], "sparc");
949     InitISOFS, Always, TestOutput (
950       [["file_architecture"; "/bin-win32.exe"]], "i386");
951     InitISOFS, Always, TestOutput (
952       [["file_architecture"; "/bin-win64.exe"]], "x86_64");
953     InitISOFS, Always, TestOutput (
954       [["file_architecture"; "/bin-x86_64-dynamic"]], "x86_64");
955     InitISOFS, Always, TestOutput (
956       [["file_architecture"; "/lib-i586.so"]], "i386");
957     InitISOFS, Always, TestOutput (
958       [["file_architecture"; "/lib-sparc.so"]], "sparc");
959     InitISOFS, Always, TestOutput (
960       [["file_architecture"; "/lib-win32.dll"]], "i386");
961     InitISOFS, Always, TestOutput (
962       [["file_architecture"; "/lib-win64.dll"]], "x86_64");
963     InitISOFS, Always, TestOutput (
964       [["file_architecture"; "/lib-x86_64.so"]], "x86_64");
965     InitISOFS, Always, TestOutput (
966       [["file_architecture"; "/initrd-x86_64.img"]], "x86_64");
967     InitISOFS, Always, TestOutput (
968       [["file_architecture"; "/initrd-x86_64.img.gz"]], "x86_64");],
969    "detect the architecture of a binary file",
970    "\
971 This detects the architecture of the binary C<filename>,
972 and returns it if known.
973
974 Currently defined architectures are:
975
976 =over 4
977
978 =item \"i386\"
979
980 This string is returned for all 32 bit i386, i486, i586, i686 binaries
981 irrespective of the precise processor requirements of the binary.
982
983 =item \"x86_64\"
984
985 64 bit x86-64.
986
987 =item \"sparc\"
988
989 32 bit SPARC.
990
991 =item \"sparc64\"
992
993 64 bit SPARC V9 and above.
994
995 =item \"ia64\"
996
997 Intel Itanium.
998
999 =item \"ppc\"
1000
1001 32 bit Power PC.
1002
1003 =item \"ppc64\"
1004
1005 64 bit Power PC.
1006
1007 =back
1008
1009 Libguestfs may return other architecture strings in future.
1010
1011 The function works on at least the following types of files:
1012
1013 =over 4
1014
1015 =item *
1016
1017 many types of Un*x and Linux binary
1018
1019 =item *
1020
1021 many types of Un*x and Linux shared library
1022
1023 =item *
1024
1025 Windows Win32 and Win64 binaries
1026
1027 =item *
1028
1029 Windows Win32 and Win64 DLLs
1030
1031 Win32 binaries and DLLs return C<i386>.
1032
1033 Win64 binaries and DLLs return C<x86_64>.
1034
1035 =item *
1036
1037 Linux kernel modules
1038
1039 =item *
1040
1041 Linux new-style initrd images
1042
1043 =item *
1044
1045 some non-x86 Linux vmlinuz kernels
1046
1047 =back
1048
1049 What it can't do currently:
1050
1051 =over 4
1052
1053 =item *
1054
1055 static libraries (libfoo.a)
1056
1057 =item *
1058
1059 Linux old-style initrd as compressed ext2 filesystem (RHEL 3)
1060
1061 =item *
1062
1063 x86 Linux vmlinuz kernels
1064
1065 x86 vmlinuz images (bzImage format) consist of a mix of 16-, 32- and
1066 compressed code, and are horribly hard to unpack.  If you want to find
1067 the architecture of a kernel, use the architecture of the associated
1068 initrd or kernel module(s) instead.
1069
1070 =back");
1071
1072   ("inspect_os", (RStringList "roots", []), -1, [],
1073    [],
1074    "inspect disk and return list of operating systems found",
1075    "\
1076 This function uses other libguestfs functions and certain
1077 heuristics to inspect the disk(s) (usually disks belonging to
1078 a virtual machine), looking for operating systems.
1079
1080 The list returned is empty if no operating systems were found.
1081
1082 If one operating system was found, then this returns a list with
1083 a single element, which is the name of the root filesystem of
1084 this operating system.  It is also possible for this function
1085 to return a list containing more than one element, indicating
1086 a dual-boot or multi-boot virtual machine, with each element being
1087 the root filesystem of one of the operating systems.
1088
1089 You can pass the root string(s) returned to other
1090 C<guestfs_inspect_get_*> functions in order to query further
1091 information about each operating system, such as the name
1092 and version.
1093
1094 This function uses other libguestfs features such as
1095 C<guestfs_mount_ro> and C<guestfs_umount_all> in order to mount
1096 and unmount filesystems and look at the contents.  This should
1097 be called with no disks currently mounted.  The function may also
1098 use Augeas, so any existing Augeas handle will be closed.
1099
1100 This function cannot decrypt encrypted disks.  The caller
1101 must do that first (supplying the necessary keys) if the
1102 disk is encrypted.
1103
1104 Please read L<guestfs(3)/INSPECTION> for more details.");
1105
1106   ("inspect_get_type", (RString "name", [Device "root"]), -1, [],
1107    [],
1108    "get type of inspected operating system",
1109    "\
1110 This function should only be called with a root device string
1111 as returned by C<guestfs_inspect_os>.
1112
1113 This returns the type of the inspected operating system.
1114 Currently defined types are:
1115
1116 =over 4
1117
1118 =item \"linux\"
1119
1120 Any Linux-based operating system.
1121
1122 =item \"windows\"
1123
1124 Any Microsoft Windows operating system.
1125
1126 =item \"unknown\"
1127
1128 The operating system type could not be determined.
1129
1130 =back
1131
1132 Future versions of libguestfs may return other strings here.
1133 The caller should be prepared to handle any string.
1134
1135 Please read L<guestfs(3)/INSPECTION> for more details.");
1136
1137   ("inspect_get_arch", (RString "arch", [Device "root"]), -1, [],
1138    [],
1139    "get architecture of inspected operating system",
1140    "\
1141 This function should only be called with a root device string
1142 as returned by C<guestfs_inspect_os>.
1143
1144 This returns the architecture of the inspected operating system.
1145 The possible return values are listed under
1146 C<guestfs_file_architecture>.
1147
1148 If the architecture could not be determined, then the
1149 string C<unknown> is returned.
1150
1151 Please read L<guestfs(3)/INSPECTION> for more details.");
1152
1153   ("inspect_get_distro", (RString "distro", [Device "root"]), -1, [],
1154    [],
1155    "get distro of inspected operating system",
1156    "\
1157 This function should only be called with a root device string
1158 as returned by C<guestfs_inspect_os>.
1159
1160 This returns the distro (distribution) of the inspected operating
1161 system.
1162
1163 Currently defined distros are:
1164
1165 =over 4
1166
1167 =item \"debian\"
1168
1169 Debian or a Debian-derived distro such as Ubuntu.
1170
1171 =item \"fedora\"
1172
1173 Fedora.
1174
1175 =item \"redhat-based\"
1176
1177 Some Red Hat-derived distro.
1178
1179 =item \"rhel\"
1180
1181 Red Hat Enterprise Linux and some derivatives.
1182
1183 =item \"windows\"
1184
1185 Windows does not have distributions.  This string is
1186 returned if the OS type is Windows.
1187
1188 =item \"unknown\"
1189
1190 The distro could not be determined.
1191
1192 =back
1193
1194 Future versions of libguestfs may return other strings here.
1195 The caller should be prepared to handle any string.
1196
1197 Please read L<guestfs(3)/INSPECTION> for more details.");
1198
1199   ("inspect_get_major_version", (RInt "major", [Device "root"]), -1, [],
1200    [],
1201    "get major version of inspected operating system",
1202    "\
1203 This function should only be called with a root device string
1204 as returned by C<guestfs_inspect_os>.
1205
1206 This returns the major version number of the inspected operating
1207 system.
1208
1209 Windows uses a consistent versioning scheme which is I<not>
1210 reflected in the popular public names used by the operating system.
1211 Notably the operating system known as \"Windows 7\" is really
1212 version 6.1 (ie. major = 6, minor = 1).  You can find out the
1213 real versions corresponding to releases of Windows by consulting
1214 Wikipedia or MSDN.
1215
1216 If the version could not be determined, then C<0> is returned.
1217
1218 Please read L<guestfs(3)/INSPECTION> for more details.");
1219
1220   ("inspect_get_minor_version", (RInt "minor", [Device "root"]), -1, [],
1221    [],
1222    "get minor version of inspected operating system",
1223    "\
1224 This function should only be called with a root device string
1225 as returned by C<guestfs_inspect_os>.
1226
1227 This returns the minor version number of the inspected operating
1228 system.
1229
1230 If the version could not be determined, then C<0> is returned.
1231
1232 Please read L<guestfs(3)/INSPECTION> for more details.
1233 See also C<guestfs_inspect_get_major_version>.");
1234
1235   ("inspect_get_product_name", (RString "product", [Device "root"]), -1, [],
1236    [],
1237    "get product name of inspected operating system",
1238    "\
1239 This function should only be called with a root device string
1240 as returned by C<guestfs_inspect_os>.
1241
1242 This returns the product name of the inspected operating
1243 system.  The product name is generally some freeform string
1244 which can be displayed to the user, but should not be
1245 parsed by programs.
1246
1247 If the product name could not be determined, then the
1248 string C<unknown> is returned.
1249
1250 Please read L<guestfs(3)/INSPECTION> for more details.");
1251
1252   ("inspect_get_mountpoints", (RHashtable "mountpoints", [Device "root"]), -1, [],
1253    [],
1254    "get mountpoints of inspected operating system",
1255    "\
1256 This function should only be called with a root device string
1257 as returned by C<guestfs_inspect_os>.
1258
1259 This returns a hash of where we think the filesystems
1260 associated with this operating system should be mounted.
1261 Callers should note that this is at best an educated guess
1262 made by reading configuration files such as C</etc/fstab>.
1263
1264 Each element in the returned hashtable has a key which
1265 is the path of the mountpoint (eg. C</boot>) and a value
1266 which is the filesystem that would be mounted there
1267 (eg. C</dev/sda1>).
1268
1269 Non-mounted devices such as swap devices are I<not>
1270 returned in this list.
1271
1272 Please read L<guestfs(3)/INSPECTION> for more details.
1273 See also C<guestfs_inspect_get_filesystems>.");
1274
1275   ("inspect_get_filesystems", (RStringList "filesystems", [Device "root"]), -1, [],
1276    [],
1277    "get filesystems associated with inspected operating system",
1278    "\
1279 This function should only be called with a root device string
1280 as returned by C<guestfs_inspect_os>.
1281
1282 This returns a list of all the filesystems that we think
1283 are associated with this operating system.  This includes
1284 the root filesystem, other ordinary filesystems, and
1285 non-mounted devices like swap partitions.
1286
1287 In the case of a multi-boot virtual machine, it is possible
1288 for a filesystem to be shared between operating systems.
1289
1290 Please read L<guestfs(3)/INSPECTION> for more details.
1291 See also C<guestfs_inspect_get_mountpoints>.");
1292
1293   ("set_network", (RErr, [Bool "network"]), -1, [FishAlias "network"],
1294    [],
1295    "set enable network flag",
1296    "\
1297 If C<network> is true, then the network is enabled in the
1298 libguestfs appliance.  The default is false.
1299
1300 This affects whether commands are able to access the network
1301 (see L<guestfs(3)/RUNNING COMMANDS>).
1302
1303 You must call this before calling C<guestfs_launch>, otherwise
1304 it has no effect.");
1305
1306   ("get_network", (RBool "network", []), -1, [],
1307    [],
1308    "get enable network flag",
1309    "\
1310 This returns the enable network flag.");
1311
1312 ]
1313
1314 (* daemon_functions are any functions which cause some action
1315  * to take place in the daemon.
1316  *)
1317
1318 let daemon_functions = [
1319   ("mount", (RErr, [Device "device"; String "mountpoint"]), 1, [],
1320    [InitEmpty, Always, TestOutput (
1321       [["part_disk"; "/dev/sda"; "mbr"];
1322        ["mkfs"; "ext2"; "/dev/sda1"];
1323        ["mount"; "/dev/sda1"; "/"];
1324        ["write"; "/new"; "new file contents"];
1325        ["cat"; "/new"]], "new file contents")],
1326    "mount a guest disk at a position in the filesystem",
1327    "\
1328 Mount a guest disk at a position in the filesystem.  Block devices
1329 are named C</dev/sda>, C</dev/sdb> and so on, as they were added to
1330 the guest.  If those block devices contain partitions, they will have
1331 the usual names (eg. C</dev/sda1>).  Also LVM C</dev/VG/LV>-style
1332 names can be used.
1333
1334 The rules are the same as for L<mount(2)>:  A filesystem must
1335 first be mounted on C</> before others can be mounted.  Other
1336 filesystems can only be mounted on directories which already
1337 exist.
1338
1339 The mounted filesystem is writable, if we have sufficient permissions
1340 on the underlying device.
1341
1342 B<Important note:>
1343 When you use this call, the filesystem options C<sync> and C<noatime>
1344 are set implicitly.  This was originally done because we thought it
1345 would improve reliability, but it turns out that I<-o sync> has a
1346 very large negative performance impact and negligible effect on
1347 reliability.  Therefore we recommend that you avoid using
1348 C<guestfs_mount> in any code that needs performance, and instead
1349 use C<guestfs_mount_options> (use an empty string for the first
1350 parameter if you don't want any options).");
1351
1352   ("sync", (RErr, []), 2, [],
1353    [ InitEmpty, Always, TestRun [["sync"]]],
1354    "sync disks, writes are flushed through to the disk image",
1355    "\
1356 This syncs the disk, so that any writes are flushed through to the
1357 underlying disk image.
1358
1359 You should always call this if you have modified a disk image, before
1360 closing the handle.");
1361
1362   ("touch", (RErr, [Pathname "path"]), 3, [],
1363    [InitBasicFS, Always, TestOutputTrue (
1364       [["touch"; "/new"];
1365        ["exists"; "/new"]])],
1366    "update file timestamps or create a new file",
1367    "\
1368 Touch acts like the L<touch(1)> command.  It can be used to
1369 update the timestamps on a file, or, if the file does not exist,
1370 to create a new zero-length file.
1371
1372 This command only works on regular files, and will fail on other
1373 file types such as directories, symbolic links, block special etc.");
1374
1375   ("cat", (RString "content", [Pathname "path"]), 4, [ProtocolLimitWarning],
1376    [InitISOFS, Always, TestOutput (
1377       [["cat"; "/known-2"]], "abcdef\n")],
1378    "list the contents of a file",
1379    "\
1380 Return the contents of the file named C<path>.
1381
1382 Note that this function cannot correctly handle binary files
1383 (specifically, files containing C<\\0> character which is treated
1384 as end of string).  For those you need to use the C<guestfs_read_file>
1385 or C<guestfs_download> functions which have a more complex interface.");
1386
1387   ("ll", (RString "listing", [Pathname "directory"]), 5, [],
1388    [], (* XXX Tricky to test because it depends on the exact format
1389         * of the 'ls -l' command, which changes between F10 and F11.
1390         *)
1391    "list the files in a directory (long format)",
1392    "\
1393 List the files in C<directory> (relative to the root directory,
1394 there is no cwd) in the format of 'ls -la'.
1395
1396 This command is mostly useful for interactive sessions.  It
1397 is I<not> intended that you try to parse the output string.");
1398
1399   ("ls", (RStringList "listing", [Pathname "directory"]), 6, [],
1400    [InitBasicFS, Always, TestOutputList (
1401       [["touch"; "/new"];
1402        ["touch"; "/newer"];
1403        ["touch"; "/newest"];
1404        ["ls"; "/"]], ["lost+found"; "new"; "newer"; "newest"])],
1405    "list the files in a directory",
1406    "\
1407 List the files in C<directory> (relative to the root directory,
1408 there is no cwd).  The '.' and '..' entries are not returned, but
1409 hidden files are shown.
1410
1411 This command is mostly useful for interactive sessions.  Programs
1412 should probably use C<guestfs_readdir> instead.");
1413
1414   ("list_devices", (RStringList "devices", []), 7, [],
1415    [InitEmpty, Always, TestOutputListOfDevices (
1416       [["list_devices"]], ["/dev/sda"; "/dev/sdb"; "/dev/sdc"; "/dev/sdd"])],
1417    "list the block devices",
1418    "\
1419 List all the block devices.
1420
1421 The full block device names are returned, eg. C</dev/sda>");
1422
1423   ("list_partitions", (RStringList "partitions", []), 8, [],
1424    [InitBasicFS, Always, TestOutputListOfDevices (
1425       [["list_partitions"]], ["/dev/sda1"]);
1426     InitEmpty, Always, TestOutputListOfDevices (
1427       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1428        ["list_partitions"]], ["/dev/sda1"; "/dev/sda2"; "/dev/sda3"])],
1429    "list the partitions",
1430    "\
1431 List all the partitions detected on all block devices.
1432
1433 The full partition device names are returned, eg. C</dev/sda1>
1434
1435 This does not return logical volumes.  For that you will need to
1436 call C<guestfs_lvs>.");
1437
1438   ("pvs", (RStringList "physvols", []), 9, [Optional "lvm2"],
1439    [InitBasicFSonLVM, Always, TestOutputListOfDevices (
1440       [["pvs"]], ["/dev/sda1"]);
1441     InitEmpty, Always, TestOutputListOfDevices (
1442       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1443        ["pvcreate"; "/dev/sda1"];
1444        ["pvcreate"; "/dev/sda2"];
1445        ["pvcreate"; "/dev/sda3"];
1446        ["pvs"]], ["/dev/sda1"; "/dev/sda2"; "/dev/sda3"])],
1447    "list the LVM physical volumes (PVs)",
1448    "\
1449 List all the physical volumes detected.  This is the equivalent
1450 of the L<pvs(8)> command.
1451
1452 This returns a list of just the device names that contain
1453 PVs (eg. C</dev/sda2>).
1454
1455 See also C<guestfs_pvs_full>.");
1456
1457   ("vgs", (RStringList "volgroups", []), 10, [Optional "lvm2"],
1458    [InitBasicFSonLVM, Always, TestOutputList (
1459       [["vgs"]], ["VG"]);
1460     InitEmpty, Always, TestOutputList (
1461       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1462        ["pvcreate"; "/dev/sda1"];
1463        ["pvcreate"; "/dev/sda2"];
1464        ["pvcreate"; "/dev/sda3"];
1465        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1466        ["vgcreate"; "VG2"; "/dev/sda3"];
1467        ["vgs"]], ["VG1"; "VG2"])],
1468    "list the LVM volume groups (VGs)",
1469    "\
1470 List all the volumes groups detected.  This is the equivalent
1471 of the L<vgs(8)> command.
1472
1473 This returns a list of just the volume group names that were
1474 detected (eg. C<VolGroup00>).
1475
1476 See also C<guestfs_vgs_full>.");
1477
1478   ("lvs", (RStringList "logvols", []), 11, [Optional "lvm2"],
1479    [InitBasicFSonLVM, Always, TestOutputList (
1480       [["lvs"]], ["/dev/VG/LV"]);
1481     InitEmpty, Always, TestOutputList (
1482       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1483        ["pvcreate"; "/dev/sda1"];
1484        ["pvcreate"; "/dev/sda2"];
1485        ["pvcreate"; "/dev/sda3"];
1486        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1487        ["vgcreate"; "VG2"; "/dev/sda3"];
1488        ["lvcreate"; "LV1"; "VG1"; "50"];
1489        ["lvcreate"; "LV2"; "VG1"; "50"];
1490        ["lvcreate"; "LV3"; "VG2"; "50"];
1491        ["lvs"]], ["/dev/VG1/LV1"; "/dev/VG1/LV2"; "/dev/VG2/LV3"])],
1492    "list the LVM logical volumes (LVs)",
1493    "\
1494 List all the logical volumes detected.  This is the equivalent
1495 of the L<lvs(8)> command.
1496
1497 This returns a list of the logical volume device names
1498 (eg. C</dev/VolGroup00/LogVol00>).
1499
1500 See also C<guestfs_lvs_full>.");
1501
1502   ("pvs_full", (RStructList ("physvols", "lvm_pv"), []), 12, [Optional "lvm2"],
1503    [], (* XXX how to test? *)
1504    "list the LVM physical volumes (PVs)",
1505    "\
1506 List all the physical volumes detected.  This is the equivalent
1507 of the L<pvs(8)> command.  The \"full\" version includes all fields.");
1508
1509   ("vgs_full", (RStructList ("volgroups", "lvm_vg"), []), 13, [Optional "lvm2"],
1510    [], (* XXX how to test? *)
1511    "list the LVM volume groups (VGs)",
1512    "\
1513 List all the volumes groups detected.  This is the equivalent
1514 of the L<vgs(8)> command.  The \"full\" version includes all fields.");
1515
1516   ("lvs_full", (RStructList ("logvols", "lvm_lv"), []), 14, [Optional "lvm2"],
1517    [], (* XXX how to test? *)
1518    "list the LVM logical volumes (LVs)",
1519    "\
1520 List all the logical volumes detected.  This is the equivalent
1521 of the L<lvs(8)> command.  The \"full\" version includes all fields.");
1522
1523   ("read_lines", (RStringList "lines", [Pathname "path"]), 15, [],
1524    [InitISOFS, Always, TestOutputList (
1525       [["read_lines"; "/known-4"]], ["abc"; "def"; "ghi"]);
1526     InitISOFS, Always, TestOutputList (
1527       [["read_lines"; "/empty"]], [])],
1528    "read file as lines",
1529    "\
1530 Return the contents of the file named C<path>.
1531
1532 The file contents are returned as a list of lines.  Trailing
1533 C<LF> and C<CRLF> character sequences are I<not> returned.
1534
1535 Note that this function cannot correctly handle binary files
1536 (specifically, files containing C<\\0> character which is treated
1537 as end of line).  For those you need to use the C<guestfs_read_file>
1538 function which has a more complex interface.");
1539
1540   ("aug_init", (RErr, [Pathname "root"; Int "flags"]), 16, [Optional "augeas"],
1541    [], (* XXX Augeas code needs tests. *)
1542    "create a new Augeas handle",
1543    "\
1544 Create a new Augeas handle for editing configuration files.
1545 If there was any previous Augeas handle associated with this
1546 guestfs session, then it is closed.
1547
1548 You must call this before using any other C<guestfs_aug_*>
1549 commands.
1550
1551 C<root> is the filesystem root.  C<root> must not be NULL,
1552 use C</> instead.
1553
1554 The flags are the same as the flags defined in
1555 E<lt>augeas.hE<gt>, the logical I<or> of the following
1556 integers:
1557
1558 =over 4
1559
1560 =item C<AUG_SAVE_BACKUP> = 1
1561
1562 Keep the original file with a C<.augsave> extension.
1563
1564 =item C<AUG_SAVE_NEWFILE> = 2
1565
1566 Save changes into a file with extension C<.augnew>, and
1567 do not overwrite original.  Overrides C<AUG_SAVE_BACKUP>.
1568
1569 =item C<AUG_TYPE_CHECK> = 4
1570
1571 Typecheck lenses (can be expensive).
1572
1573 =item C<AUG_NO_STDINC> = 8
1574
1575 Do not use standard load path for modules.
1576
1577 =item C<AUG_SAVE_NOOP> = 16
1578
1579 Make save a no-op, just record what would have been changed.
1580
1581 =item C<AUG_NO_LOAD> = 32
1582
1583 Do not load the tree in C<guestfs_aug_init>.
1584
1585 =back
1586
1587 To close the handle, you can call C<guestfs_aug_close>.
1588
1589 To find out more about Augeas, see L<http://augeas.net/>.");
1590
1591   ("aug_close", (RErr, []), 26, [Optional "augeas"],
1592    [], (* XXX Augeas code needs tests. *)
1593    "close the current Augeas handle",
1594    "\
1595 Close the current Augeas handle and free up any resources
1596 used by it.  After calling this, you have to call
1597 C<guestfs_aug_init> again before you can use any other
1598 Augeas functions.");
1599
1600   ("aug_defvar", (RInt "nrnodes", [String "name"; OptString "expr"]), 17, [Optional "augeas"],
1601    [], (* XXX Augeas code needs tests. *)
1602    "define an Augeas variable",
1603    "\
1604 Defines an Augeas variable C<name> whose value is the result
1605 of evaluating C<expr>.  If C<expr> is NULL, then C<name> is
1606 undefined.
1607
1608 On success this returns the number of nodes in C<expr>, or
1609 C<0> if C<expr> evaluates to something which is not a nodeset.");
1610
1611   ("aug_defnode", (RStruct ("nrnodescreated", "int_bool"), [String "name"; String "expr"; String "val"]), 18, [Optional "augeas"],
1612    [], (* XXX Augeas code needs tests. *)
1613    "define an Augeas node",
1614    "\
1615 Defines a variable C<name> whose value is the result of
1616 evaluating C<expr>.
1617
1618 If C<expr> evaluates to an empty nodeset, a node is created,
1619 equivalent to calling C<guestfs_aug_set> C<expr>, C<value>.
1620 C<name> will be the nodeset containing that single node.
1621
1622 On success this returns a pair containing the
1623 number of nodes in the nodeset, and a boolean flag
1624 if a node was created.");
1625
1626   ("aug_get", (RString "val", [String "augpath"]), 19, [Optional "augeas"],
1627    [], (* XXX Augeas code needs tests. *)
1628    "look up the value of an Augeas path",
1629    "\
1630 Look up the value associated with C<path>.  If C<path>
1631 matches exactly one node, the C<value> is returned.");
1632
1633   ("aug_set", (RErr, [String "augpath"; String "val"]), 20, [Optional "augeas"],
1634    [], (* XXX Augeas code needs tests. *)
1635    "set Augeas path to value",
1636    "\
1637 Set the value associated with C<path> to C<val>.
1638
1639 In the Augeas API, it is possible to clear a node by setting
1640 the value to NULL.  Due to an oversight in the libguestfs API
1641 you cannot do that with this call.  Instead you must use the
1642 C<guestfs_aug_clear> call.");
1643
1644   ("aug_insert", (RErr, [String "augpath"; String "label"; Bool "before"]), 21, [Optional "augeas"],
1645    [], (* XXX Augeas code needs tests. *)
1646    "insert a sibling Augeas node",
1647    "\
1648 Create a new sibling C<label> for C<path>, inserting it into
1649 the tree before or after C<path> (depending on the boolean
1650 flag C<before>).
1651
1652 C<path> must match exactly one existing node in the tree, and
1653 C<label> must be a label, ie. not contain C</>, C<*> or end
1654 with a bracketed index C<[N]>.");
1655
1656   ("aug_rm", (RInt "nrnodes", [String "augpath"]), 22, [Optional "augeas"],
1657    [], (* XXX Augeas code needs tests. *)
1658    "remove an Augeas path",
1659    "\
1660 Remove C<path> and all of its children.
1661
1662 On success this returns the number of entries which were removed.");
1663
1664   ("aug_mv", (RErr, [String "src"; String "dest"]), 23, [Optional "augeas"],
1665    [], (* XXX Augeas code needs tests. *)
1666    "move Augeas node",
1667    "\
1668 Move the node C<src> to C<dest>.  C<src> must match exactly
1669 one node.  C<dest> is overwritten if it exists.");
1670
1671   ("aug_match", (RStringList "matches", [String "augpath"]), 24, [Optional "augeas"],
1672    [], (* XXX Augeas code needs tests. *)
1673    "return Augeas nodes which match augpath",
1674    "\
1675 Returns a list of paths which match the path expression C<path>.
1676 The returned paths are sufficiently qualified so that they match
1677 exactly one node in the current tree.");
1678
1679   ("aug_save", (RErr, []), 25, [Optional "augeas"],
1680    [], (* XXX Augeas code needs tests. *)
1681    "write all pending Augeas changes to disk",
1682    "\
1683 This writes all pending changes to disk.
1684
1685 The flags which were passed to C<guestfs_aug_init> affect exactly
1686 how files are saved.");
1687
1688   ("aug_load", (RErr, []), 27, [Optional "augeas"],
1689    [], (* XXX Augeas code needs tests. *)
1690    "load files into the tree",
1691    "\
1692 Load files into the tree.
1693
1694 See C<aug_load> in the Augeas documentation for the full gory
1695 details.");
1696
1697   ("aug_ls", (RStringList "matches", [String "augpath"]), 28, [Optional "augeas"],
1698    [], (* XXX Augeas code needs tests. *)
1699    "list Augeas nodes under augpath",
1700    "\
1701 This is just a shortcut for listing C<guestfs_aug_match>
1702 C<path/*> and sorting the resulting nodes into alphabetical order.");
1703
1704   ("rm", (RErr, [Pathname "path"]), 29, [],
1705    [InitBasicFS, Always, TestRun
1706       [["touch"; "/new"];
1707        ["rm"; "/new"]];
1708     InitBasicFS, Always, TestLastFail
1709       [["rm"; "/new"]];
1710     InitBasicFS, Always, TestLastFail
1711       [["mkdir"; "/new"];
1712        ["rm"; "/new"]]],
1713    "remove a file",
1714    "\
1715 Remove the single file C<path>.");
1716
1717   ("rmdir", (RErr, [Pathname "path"]), 30, [],
1718    [InitBasicFS, Always, TestRun
1719       [["mkdir"; "/new"];
1720        ["rmdir"; "/new"]];
1721     InitBasicFS, Always, TestLastFail
1722       [["rmdir"; "/new"]];
1723     InitBasicFS, Always, TestLastFail
1724       [["touch"; "/new"];
1725        ["rmdir"; "/new"]]],
1726    "remove a directory",
1727    "\
1728 Remove the single directory C<path>.");
1729
1730   ("rm_rf", (RErr, [Pathname "path"]), 31, [],
1731    [InitBasicFS, Always, TestOutputFalse
1732       [["mkdir"; "/new"];
1733        ["mkdir"; "/new/foo"];
1734        ["touch"; "/new/foo/bar"];
1735        ["rm_rf"; "/new"];
1736        ["exists"; "/new"]]],
1737    "remove a file or directory recursively",
1738    "\
1739 Remove the file or directory C<path>, recursively removing the
1740 contents if its a directory.  This is like the C<rm -rf> shell
1741 command.");
1742
1743   ("mkdir", (RErr, [Pathname "path"]), 32, [],
1744    [InitBasicFS, Always, TestOutputTrue
1745       [["mkdir"; "/new"];
1746        ["is_dir"; "/new"]];
1747     InitBasicFS, Always, TestLastFail
1748       [["mkdir"; "/new/foo/bar"]]],
1749    "create a directory",
1750    "\
1751 Create a directory named C<path>.");
1752
1753   ("mkdir_p", (RErr, [Pathname "path"]), 33, [],
1754    [InitBasicFS, Always, TestOutputTrue
1755       [["mkdir_p"; "/new/foo/bar"];
1756        ["is_dir"; "/new/foo/bar"]];
1757     InitBasicFS, Always, TestOutputTrue
1758       [["mkdir_p"; "/new/foo/bar"];
1759        ["is_dir"; "/new/foo"]];
1760     InitBasicFS, Always, TestOutputTrue
1761       [["mkdir_p"; "/new/foo/bar"];
1762        ["is_dir"; "/new"]];
1763     (* Regression tests for RHBZ#503133: *)
1764     InitBasicFS, Always, TestRun
1765       [["mkdir"; "/new"];
1766        ["mkdir_p"; "/new"]];
1767     InitBasicFS, Always, TestLastFail
1768       [["touch"; "/new"];
1769        ["mkdir_p"; "/new"]]],
1770    "create a directory and parents",
1771    "\
1772 Create a directory named C<path>, creating any parent directories
1773 as necessary.  This is like the C<mkdir -p> shell command.");
1774
1775   ("chmod", (RErr, [Int "mode"; Pathname "path"]), 34, [],
1776    [], (* XXX Need stat command to test *)
1777    "change file mode",
1778    "\
1779 Change the mode (permissions) of C<path> to C<mode>.  Only
1780 numeric modes are supported.
1781
1782 I<Note>: When using this command from guestfish, C<mode>
1783 by default would be decimal, unless you prefix it with
1784 C<0> to get octal, ie. use C<0700> not C<700>.
1785
1786 The mode actually set is affected by the umask.");
1787
1788   ("chown", (RErr, [Int "owner"; Int "group"; Pathname "path"]), 35, [],
1789    [], (* XXX Need stat command to test *)
1790    "change file owner and group",
1791    "\
1792 Change the file owner to C<owner> and group to C<group>.
1793
1794 Only numeric uid and gid are supported.  If you want to use
1795 names, you will need to locate and parse the password file
1796 yourself (Augeas support makes this relatively easy).");
1797
1798   ("exists", (RBool "existsflag", [Pathname "path"]), 36, [],
1799    [InitISOFS, Always, TestOutputTrue (
1800       [["exists"; "/empty"]]);
1801     InitISOFS, Always, TestOutputTrue (
1802       [["exists"; "/directory"]])],
1803    "test if file or directory exists",
1804    "\
1805 This returns C<true> if and only if there is a file, directory
1806 (or anything) with the given C<path> name.
1807
1808 See also C<guestfs_is_file>, C<guestfs_is_dir>, C<guestfs_stat>.");
1809
1810   ("is_file", (RBool "fileflag", [Pathname "path"]), 37, [],
1811    [InitISOFS, Always, TestOutputTrue (
1812       [["is_file"; "/known-1"]]);
1813     InitISOFS, Always, TestOutputFalse (
1814       [["is_file"; "/directory"]])],
1815    "test if file exists",
1816    "\
1817 This returns C<true> if and only if there is a file
1818 with the given C<path> name.  Note that it returns false for
1819 other objects like directories.
1820
1821 See also C<guestfs_stat>.");
1822
1823   ("is_dir", (RBool "dirflag", [Pathname "path"]), 38, [],
1824    [InitISOFS, Always, TestOutputFalse (
1825       [["is_dir"; "/known-3"]]);
1826     InitISOFS, Always, TestOutputTrue (
1827       [["is_dir"; "/directory"]])],
1828    "test if file exists",
1829    "\
1830 This returns C<true> if and only if there is a directory
1831 with the given C<path> name.  Note that it returns false for
1832 other objects like files.
1833
1834 See also C<guestfs_stat>.");
1835
1836   ("pvcreate", (RErr, [Device "device"]), 39, [Optional "lvm2"],
1837    [InitEmpty, Always, TestOutputListOfDevices (
1838       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1839        ["pvcreate"; "/dev/sda1"];
1840        ["pvcreate"; "/dev/sda2"];
1841        ["pvcreate"; "/dev/sda3"];
1842        ["pvs"]], ["/dev/sda1"; "/dev/sda2"; "/dev/sda3"])],
1843    "create an LVM physical volume",
1844    "\
1845 This creates an LVM physical volume on the named C<device>,
1846 where C<device> should usually be a partition name such
1847 as C</dev/sda1>.");
1848
1849   ("vgcreate", (RErr, [String "volgroup"; DeviceList "physvols"]), 40, [Optional "lvm2"],
1850    [InitEmpty, Always, TestOutputList (
1851       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1852        ["pvcreate"; "/dev/sda1"];
1853        ["pvcreate"; "/dev/sda2"];
1854        ["pvcreate"; "/dev/sda3"];
1855        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1856        ["vgcreate"; "VG2"; "/dev/sda3"];
1857        ["vgs"]], ["VG1"; "VG2"])],
1858    "create an LVM volume group",
1859    "\
1860 This creates an LVM volume group called C<volgroup>
1861 from the non-empty list of physical volumes C<physvols>.");
1862
1863   ("lvcreate", (RErr, [String "logvol"; String "volgroup"; Int "mbytes"]), 41, [Optional "lvm2"],
1864    [InitEmpty, Always, TestOutputList (
1865       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1866        ["pvcreate"; "/dev/sda1"];
1867        ["pvcreate"; "/dev/sda2"];
1868        ["pvcreate"; "/dev/sda3"];
1869        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1870        ["vgcreate"; "VG2"; "/dev/sda3"];
1871        ["lvcreate"; "LV1"; "VG1"; "50"];
1872        ["lvcreate"; "LV2"; "VG1"; "50"];
1873        ["lvcreate"; "LV3"; "VG2"; "50"];
1874        ["lvcreate"; "LV4"; "VG2"; "50"];
1875        ["lvcreate"; "LV5"; "VG2"; "50"];
1876        ["lvs"]],
1877       ["/dev/VG1/LV1"; "/dev/VG1/LV2";
1878        "/dev/VG2/LV3"; "/dev/VG2/LV4"; "/dev/VG2/LV5"])],
1879    "create an LVM logical volume",
1880    "\
1881 This creates an LVM logical volume called C<logvol>
1882 on the volume group C<volgroup>, with C<size> megabytes.");
1883
1884   ("mkfs", (RErr, [String "fstype"; Device "device"]), 42, [],
1885    [InitEmpty, Always, TestOutput (
1886       [["part_disk"; "/dev/sda"; "mbr"];
1887        ["mkfs"; "ext2"; "/dev/sda1"];
1888        ["mount_options"; ""; "/dev/sda1"; "/"];
1889        ["write"; "/new"; "new file contents"];
1890        ["cat"; "/new"]], "new file contents")],
1891    "make a filesystem",
1892    "\
1893 This creates a filesystem on C<device> (usually a partition
1894 or LVM logical volume).  The filesystem type is C<fstype>, for
1895 example C<ext3>.");
1896
1897   ("sfdisk", (RErr, [Device "device";
1898                      Int "cyls"; Int "heads"; Int "sectors";
1899                      StringList "lines"]), 43, [DangerWillRobinson],
1900    [],
1901    "create partitions on a block device",
1902    "\
1903 This is a direct interface to the L<sfdisk(8)> program for creating
1904 partitions on block devices.
1905
1906 C<device> should be a block device, for example C</dev/sda>.
1907
1908 C<cyls>, C<heads> and C<sectors> are the number of cylinders, heads
1909 and sectors on the device, which are passed directly to sfdisk as
1910 the I<-C>, I<-H> and I<-S> parameters.  If you pass C<0> for any
1911 of these, then the corresponding parameter is omitted.  Usually for
1912 'large' disks, you can just pass C<0> for these, but for small
1913 (floppy-sized) disks, sfdisk (or rather, the kernel) cannot work
1914 out the right geometry and you will need to tell it.
1915
1916 C<lines> is a list of lines that we feed to C<sfdisk>.  For more
1917 information refer to the L<sfdisk(8)> manpage.
1918
1919 To create a single partition occupying the whole disk, you would
1920 pass C<lines> as a single element list, when the single element being
1921 the string C<,> (comma).
1922
1923 See also: C<guestfs_sfdisk_l>, C<guestfs_sfdisk_N>,
1924 C<guestfs_part_init>");
1925
1926   ("write_file", (RErr, [Pathname "path"; String "content"; Int "size"]), 44, [ProtocolLimitWarning; DeprecatedBy "write"],
1927    (* Regression test for RHBZ#597135. *)
1928    [InitBasicFS, Always, TestLastFail
1929       [["write_file"; "/new"; "abc"; "10000"]]],
1930    "create a file",
1931    "\
1932 This call creates a file called C<path>.  The contents of the
1933 file is the string C<content> (which can contain any 8 bit data),
1934 with length C<size>.
1935
1936 As a special case, if C<size> is C<0>
1937 then the length is calculated using C<strlen> (so in this case
1938 the content cannot contain embedded ASCII NULs).
1939
1940 I<NB.> Owing to a bug, writing content containing ASCII NUL
1941 characters does I<not> work, even if the length is specified.");
1942
1943   ("umount", (RErr, [String "pathordevice"]), 45, [FishAlias "unmount"],
1944    [InitEmpty, Always, TestOutputListOfDevices (
1945       [["part_disk"; "/dev/sda"; "mbr"];
1946        ["mkfs"; "ext2"; "/dev/sda1"];
1947        ["mount_options"; ""; "/dev/sda1"; "/"];
1948        ["mounts"]], ["/dev/sda1"]);
1949     InitEmpty, Always, TestOutputList (
1950       [["part_disk"; "/dev/sda"; "mbr"];
1951        ["mkfs"; "ext2"; "/dev/sda1"];
1952        ["mount_options"; ""; "/dev/sda1"; "/"];
1953        ["umount"; "/"];
1954        ["mounts"]], [])],
1955    "unmount a filesystem",
1956    "\
1957 This unmounts the given filesystem.  The filesystem may be
1958 specified either by its mountpoint (path) or the device which
1959 contains the filesystem.");
1960
1961   ("mounts", (RStringList "devices", []), 46, [],
1962    [InitBasicFS, Always, TestOutputListOfDevices (
1963       [["mounts"]], ["/dev/sda1"])],
1964    "show mounted filesystems",
1965    "\
1966 This returns the list of currently mounted filesystems.  It returns
1967 the list of devices (eg. C</dev/sda1>, C</dev/VG/LV>).
1968
1969 Some internal mounts are not shown.
1970
1971 See also: C<guestfs_mountpoints>");
1972
1973   ("umount_all", (RErr, []), 47, [FishAlias "unmount-all"],
1974    [InitBasicFS, Always, TestOutputList (
1975       [["umount_all"];
1976        ["mounts"]], []);
1977     (* check that umount_all can unmount nested mounts correctly: *)
1978     InitEmpty, Always, TestOutputList (
1979       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1980        ["mkfs"; "ext2"; "/dev/sda1"];
1981        ["mkfs"; "ext2"; "/dev/sda2"];
1982        ["mkfs"; "ext2"; "/dev/sda3"];
1983        ["mount_options"; ""; "/dev/sda1"; "/"];
1984        ["mkdir"; "/mp1"];
1985        ["mount_options"; ""; "/dev/sda2"; "/mp1"];
1986        ["mkdir"; "/mp1/mp2"];
1987        ["mount_options"; ""; "/dev/sda3"; "/mp1/mp2"];
1988        ["mkdir"; "/mp1/mp2/mp3"];
1989        ["umount_all"];
1990        ["mounts"]], [])],
1991    "unmount all filesystems",
1992    "\
1993 This unmounts all mounted filesystems.
1994
1995 Some internal mounts are not unmounted by this call.");
1996
1997   ("lvm_remove_all", (RErr, []), 48, [DangerWillRobinson; Optional "lvm2"],
1998    [],
1999    "remove all LVM LVs, VGs and PVs",
2000    "\
2001 This command removes all LVM logical volumes, volume groups
2002 and physical volumes.");
2003
2004   ("file", (RString "description", [Dev_or_Path "path"]), 49, [],
2005    [InitISOFS, Always, TestOutput (
2006       [["file"; "/empty"]], "empty");
2007     InitISOFS, Always, TestOutput (
2008       [["file"; "/known-1"]], "ASCII text");
2009     InitISOFS, Always, TestLastFail (
2010       [["file"; "/notexists"]]);
2011     InitISOFS, Always, TestOutput (
2012       [["file"; "/abssymlink"]], "symbolic link");
2013     InitISOFS, Always, TestOutput (
2014       [["file"; "/directory"]], "directory")],
2015    "determine file type",
2016    "\
2017 This call uses the standard L<file(1)> command to determine
2018 the type or contents of the file.
2019
2020 This call will also transparently look inside various types
2021 of compressed file.
2022
2023 The exact command which runs is C<file -zb path>.  Note in
2024 particular that the filename is not prepended to the output
2025 (the C<-b> option).
2026
2027 This command can also be used on C</dev/> devices
2028 (and partitions, LV names).  You can for example use this
2029 to determine if a device contains a filesystem, although
2030 it's usually better to use C<guestfs_vfs_type>.
2031
2032 If the C<path> does not begin with C</dev/> then
2033 this command only works for the content of regular files.
2034 For other file types (directory, symbolic link etc) it
2035 will just return the string C<directory> etc.");
2036
2037   ("command", (RString "output", [StringList "arguments"]), 50, [ProtocolLimitWarning],
2038    [InitBasicFS, Always, TestOutput (
2039       [["upload"; "test-command"; "/test-command"];
2040        ["chmod"; "0o755"; "/test-command"];
2041        ["command"; "/test-command 1"]], "Result1");
2042     InitBasicFS, Always, TestOutput (
2043       [["upload"; "test-command"; "/test-command"];
2044        ["chmod"; "0o755"; "/test-command"];
2045        ["command"; "/test-command 2"]], "Result2\n");
2046     InitBasicFS, Always, TestOutput (
2047       [["upload"; "test-command"; "/test-command"];
2048        ["chmod"; "0o755"; "/test-command"];
2049        ["command"; "/test-command 3"]], "\nResult3");
2050     InitBasicFS, Always, TestOutput (
2051       [["upload"; "test-command"; "/test-command"];
2052        ["chmod"; "0o755"; "/test-command"];
2053        ["command"; "/test-command 4"]], "\nResult4\n");
2054     InitBasicFS, Always, TestOutput (
2055       [["upload"; "test-command"; "/test-command"];
2056        ["chmod"; "0o755"; "/test-command"];
2057        ["command"; "/test-command 5"]], "\nResult5\n\n");
2058     InitBasicFS, Always, TestOutput (
2059       [["upload"; "test-command"; "/test-command"];
2060        ["chmod"; "0o755"; "/test-command"];
2061        ["command"; "/test-command 6"]], "\n\nResult6\n\n");
2062     InitBasicFS, Always, TestOutput (
2063       [["upload"; "test-command"; "/test-command"];
2064        ["chmod"; "0o755"; "/test-command"];
2065        ["command"; "/test-command 7"]], "");
2066     InitBasicFS, Always, TestOutput (
2067       [["upload"; "test-command"; "/test-command"];
2068        ["chmod"; "0o755"; "/test-command"];
2069        ["command"; "/test-command 8"]], "\n");
2070     InitBasicFS, Always, TestOutput (
2071       [["upload"; "test-command"; "/test-command"];
2072        ["chmod"; "0o755"; "/test-command"];
2073        ["command"; "/test-command 9"]], "\n\n");
2074     InitBasicFS, Always, TestOutput (
2075       [["upload"; "test-command"; "/test-command"];
2076        ["chmod"; "0o755"; "/test-command"];
2077        ["command"; "/test-command 10"]], "Result10-1\nResult10-2\n");
2078     InitBasicFS, Always, TestOutput (
2079       [["upload"; "test-command"; "/test-command"];
2080        ["chmod"; "0o755"; "/test-command"];
2081        ["command"; "/test-command 11"]], "Result11-1\nResult11-2");
2082     InitBasicFS, Always, TestLastFail (
2083       [["upload"; "test-command"; "/test-command"];
2084        ["chmod"; "0o755"; "/test-command"];
2085        ["command"; "/test-command"]])],
2086    "run a command from the guest filesystem",
2087    "\
2088 This call runs a command from the guest filesystem.  The
2089 filesystem must be mounted, and must contain a compatible
2090 operating system (ie. something Linux, with the same
2091 or compatible processor architecture).
2092
2093 The single parameter is an argv-style list of arguments.
2094 The first element is the name of the program to run.
2095 Subsequent elements are parameters.  The list must be
2096 non-empty (ie. must contain a program name).  Note that
2097 the command runs directly, and is I<not> invoked via
2098 the shell (see C<guestfs_sh>).
2099
2100 The return value is anything printed to I<stdout> by
2101 the command.
2102
2103 If the command returns a non-zero exit status, then
2104 this function returns an error message.  The error message
2105 string is the content of I<stderr> from the command.
2106
2107 The C<$PATH> environment variable will contain at least
2108 C</usr/bin> and C</bin>.  If you require a program from
2109 another location, you should provide the full path in the
2110 first parameter.
2111
2112 Shared libraries and data files required by the program
2113 must be available on filesystems which are mounted in the
2114 correct places.  It is the caller's responsibility to ensure
2115 all filesystems that are needed are mounted at the right
2116 locations.");
2117
2118   ("command_lines", (RStringList "lines", [StringList "arguments"]), 51, [ProtocolLimitWarning],
2119    [InitBasicFS, Always, TestOutputList (
2120       [["upload"; "test-command"; "/test-command"];
2121        ["chmod"; "0o755"; "/test-command"];
2122        ["command_lines"; "/test-command 1"]], ["Result1"]);
2123     InitBasicFS, Always, TestOutputList (
2124       [["upload"; "test-command"; "/test-command"];
2125        ["chmod"; "0o755"; "/test-command"];
2126        ["command_lines"; "/test-command 2"]], ["Result2"]);
2127     InitBasicFS, Always, TestOutputList (
2128       [["upload"; "test-command"; "/test-command"];
2129        ["chmod"; "0o755"; "/test-command"];
2130        ["command_lines"; "/test-command 3"]], ["";"Result3"]);
2131     InitBasicFS, Always, TestOutputList (
2132       [["upload"; "test-command"; "/test-command"];
2133        ["chmod"; "0o755"; "/test-command"];
2134        ["command_lines"; "/test-command 4"]], ["";"Result4"]);
2135     InitBasicFS, Always, TestOutputList (
2136       [["upload"; "test-command"; "/test-command"];
2137        ["chmod"; "0o755"; "/test-command"];
2138        ["command_lines"; "/test-command 5"]], ["";"Result5";""]);
2139     InitBasicFS, Always, TestOutputList (
2140       [["upload"; "test-command"; "/test-command"];
2141        ["chmod"; "0o755"; "/test-command"];
2142        ["command_lines"; "/test-command 6"]], ["";"";"Result6";""]);
2143     InitBasicFS, Always, TestOutputList (
2144       [["upload"; "test-command"; "/test-command"];
2145        ["chmod"; "0o755"; "/test-command"];
2146        ["command_lines"; "/test-command 7"]], []);
2147     InitBasicFS, Always, TestOutputList (
2148       [["upload"; "test-command"; "/test-command"];
2149        ["chmod"; "0o755"; "/test-command"];
2150        ["command_lines"; "/test-command 8"]], [""]);
2151     InitBasicFS, Always, TestOutputList (
2152       [["upload"; "test-command"; "/test-command"];
2153        ["chmod"; "0o755"; "/test-command"];
2154        ["command_lines"; "/test-command 9"]], ["";""]);
2155     InitBasicFS, Always, TestOutputList (
2156       [["upload"; "test-command"; "/test-command"];
2157        ["chmod"; "0o755"; "/test-command"];
2158        ["command_lines"; "/test-command 10"]], ["Result10-1";"Result10-2"]);
2159     InitBasicFS, Always, TestOutputList (
2160       [["upload"; "test-command"; "/test-command"];
2161        ["chmod"; "0o755"; "/test-command"];
2162        ["command_lines"; "/test-command 11"]], ["Result11-1";"Result11-2"])],
2163    "run a command, returning lines",
2164    "\
2165 This is the same as C<guestfs_command>, but splits the
2166 result into a list of lines.
2167
2168 See also: C<guestfs_sh_lines>");
2169
2170   ("stat", (RStruct ("statbuf", "stat"), [Pathname "path"]), 52, [],
2171    [InitISOFS, Always, TestOutputStruct (
2172       [["stat"; "/empty"]], [CompareWithInt ("size", 0)])],
2173    "get file information",
2174    "\
2175 Returns file information for the given C<path>.
2176
2177 This is the same as the C<stat(2)> system call.");
2178
2179   ("lstat", (RStruct ("statbuf", "stat"), [Pathname "path"]), 53, [],
2180    [InitISOFS, Always, TestOutputStruct (
2181       [["lstat"; "/empty"]], [CompareWithInt ("size", 0)])],
2182    "get file information for a symbolic link",
2183    "\
2184 Returns file information for the given C<path>.
2185
2186 This is the same as C<guestfs_stat> except that if C<path>
2187 is a symbolic link, then the link is stat-ed, not the file it
2188 refers to.
2189
2190 This is the same as the C<lstat(2)> system call.");
2191
2192   ("statvfs", (RStruct ("statbuf", "statvfs"), [Pathname "path"]), 54, [],
2193    [InitISOFS, Always, TestOutputStruct (
2194       [["statvfs"; "/"]], [CompareWithInt ("namemax", 255)])],
2195    "get file system statistics",
2196    "\
2197 Returns file system statistics for any mounted file system.
2198 C<path> should be a file or directory in the mounted file system
2199 (typically it is the mount point itself, but it doesn't need to be).
2200
2201 This is the same as the C<statvfs(2)> system call.");
2202
2203   ("tune2fs_l", (RHashtable "superblock", [Device "device"]), 55, [],
2204    [], (* XXX test *)
2205    "get ext2/ext3/ext4 superblock details",
2206    "\
2207 This returns the contents of the ext2, ext3 or ext4 filesystem
2208 superblock on C<device>.
2209
2210 It is the same as running C<tune2fs -l device>.  See L<tune2fs(8)>
2211 manpage for more details.  The list of fields returned isn't
2212 clearly defined, and depends on both the version of C<tune2fs>
2213 that libguestfs was built against, and the filesystem itself.");
2214
2215   ("blockdev_setro", (RErr, [Device "device"]), 56, [],
2216    [InitEmpty, Always, TestOutputTrue (
2217       [["blockdev_setro"; "/dev/sda"];
2218        ["blockdev_getro"; "/dev/sda"]])],
2219    "set block device to read-only",
2220    "\
2221 Sets the block device named C<device> to read-only.
2222
2223 This uses the L<blockdev(8)> command.");
2224
2225   ("blockdev_setrw", (RErr, [Device "device"]), 57, [],
2226    [InitEmpty, Always, TestOutputFalse (
2227       [["blockdev_setrw"; "/dev/sda"];
2228        ["blockdev_getro"; "/dev/sda"]])],
2229    "set block device to read-write",
2230    "\
2231 Sets the block device named C<device> to read-write.
2232
2233 This uses the L<blockdev(8)> command.");
2234
2235   ("blockdev_getro", (RBool "ro", [Device "device"]), 58, [],
2236    [InitEmpty, Always, TestOutputTrue (
2237       [["blockdev_setro"; "/dev/sda"];
2238        ["blockdev_getro"; "/dev/sda"]])],
2239    "is block device set to read-only",
2240    "\
2241 Returns a boolean indicating if the block device is read-only
2242 (true if read-only, false if not).
2243
2244 This uses the L<blockdev(8)> command.");
2245
2246   ("blockdev_getss", (RInt "sectorsize", [Device "device"]), 59, [],
2247    [InitEmpty, Always, TestOutputInt (
2248       [["blockdev_getss"; "/dev/sda"]], 512)],
2249    "get sectorsize of block device",
2250    "\
2251 This returns the size of sectors on a block device.
2252 Usually 512, but can be larger for modern devices.
2253
2254 (Note, this is not the size in sectors, use C<guestfs_blockdev_getsz>
2255 for that).
2256
2257 This uses the L<blockdev(8)> command.");
2258
2259   ("blockdev_getbsz", (RInt "blocksize", [Device "device"]), 60, [],
2260    [InitEmpty, Always, TestOutputInt (
2261       [["blockdev_getbsz"; "/dev/sda"]], 4096)],
2262    "get blocksize of block device",
2263    "\
2264 This returns the block size of a device.
2265
2266 (Note this is different from both I<size in blocks> and
2267 I<filesystem block size>).
2268
2269 This uses the L<blockdev(8)> command.");
2270
2271   ("blockdev_setbsz", (RErr, [Device "device"; Int "blocksize"]), 61, [],
2272    [], (* XXX test *)
2273    "set blocksize of block device",
2274    "\
2275 This sets the block size of a device.
2276
2277 (Note this is different from both I<size in blocks> and
2278 I<filesystem block size>).
2279
2280 This uses the L<blockdev(8)> command.");
2281
2282   ("blockdev_getsz", (RInt64 "sizeinsectors", [Device "device"]), 62, [],
2283    [InitEmpty, Always, TestOutputInt (
2284       [["blockdev_getsz"; "/dev/sda"]], 1024000)],
2285    "get total size of device in 512-byte sectors",
2286    "\
2287 This returns the size of the device in units of 512-byte sectors
2288 (even if the sectorsize isn't 512 bytes ... weird).
2289
2290 See also C<guestfs_blockdev_getss> for the real sector size of
2291 the device, and C<guestfs_blockdev_getsize64> for the more
2292 useful I<size in bytes>.
2293
2294 This uses the L<blockdev(8)> command.");
2295
2296   ("blockdev_getsize64", (RInt64 "sizeinbytes", [Device "device"]), 63, [],
2297    [InitEmpty, Always, TestOutputInt (
2298       [["blockdev_getsize64"; "/dev/sda"]], 524288000)],
2299    "get total size of device in bytes",
2300    "\
2301 This returns the size of the device in bytes.
2302
2303 See also C<guestfs_blockdev_getsz>.
2304
2305 This uses the L<blockdev(8)> command.");
2306
2307   ("blockdev_flushbufs", (RErr, [Device "device"]), 64, [],
2308    [InitEmpty, Always, TestRun
2309       [["blockdev_flushbufs"; "/dev/sda"]]],
2310    "flush device buffers",
2311    "\
2312 This tells the kernel to flush internal buffers associated
2313 with C<device>.
2314
2315 This uses the L<blockdev(8)> command.");
2316
2317   ("blockdev_rereadpt", (RErr, [Device "device"]), 65, [],
2318    [InitEmpty, Always, TestRun
2319       [["blockdev_rereadpt"; "/dev/sda"]]],
2320    "reread partition table",
2321    "\
2322 Reread the partition table on C<device>.
2323
2324 This uses the L<blockdev(8)> command.");
2325
2326   ("upload", (RErr, [FileIn "filename"; Dev_or_Path "remotefilename"]), 66, [],
2327    [InitBasicFS, Always, TestOutput (
2328       (* Pick a file from cwd which isn't likely to change. *)
2329       [["upload"; "../COPYING.LIB"; "/COPYING.LIB"];
2330        ["checksum"; "md5"; "/COPYING.LIB"]],
2331       Digest.to_hex (Digest.file "COPYING.LIB"))],
2332    "upload a file from the local machine",
2333    "\
2334 Upload local file C<filename> to C<remotefilename> on the
2335 filesystem.
2336
2337 C<filename> can also be a named pipe.
2338
2339 See also C<guestfs_download>.");
2340
2341   ("download", (RErr, [Dev_or_Path "remotefilename"; FileOut "filename"]), 67, [Progress],
2342    [InitBasicFS, Always, TestOutput (
2343       (* Pick a file from cwd which isn't likely to change. *)
2344       [["upload"; "../COPYING.LIB"; "/COPYING.LIB"];
2345        ["download"; "/COPYING.LIB"; "testdownload.tmp"];
2346        ["upload"; "testdownload.tmp"; "/upload"];
2347        ["checksum"; "md5"; "/upload"]],
2348       Digest.to_hex (Digest.file "COPYING.LIB"))],
2349    "download a file to the local machine",
2350    "\
2351 Download file C<remotefilename> and save it as C<filename>
2352 on the local machine.
2353
2354 C<filename> can also be a named pipe.
2355
2356 See also C<guestfs_upload>, C<guestfs_cat>.");
2357
2358   ("checksum", (RString "checksum", [String "csumtype"; Pathname "path"]), 68, [],
2359    [InitISOFS, Always, TestOutput (
2360       [["checksum"; "crc"; "/known-3"]], "2891671662");
2361     InitISOFS, Always, TestLastFail (
2362       [["checksum"; "crc"; "/notexists"]]);
2363     InitISOFS, Always, TestOutput (
2364       [["checksum"; "md5"; "/known-3"]], "46d6ca27ee07cdc6fa99c2e138cc522c");
2365     InitISOFS, Always, TestOutput (
2366       [["checksum"; "sha1"; "/known-3"]], "b7ebccc3ee418311091c3eda0a45b83c0a770f15");
2367     InitISOFS, Always, TestOutput (
2368       [["checksum"; "sha224"; "/known-3"]], "d2cd1774b28f3659c14116be0a6dc2bb5c4b350ce9cd5defac707741");
2369     InitISOFS, Always, TestOutput (
2370       [["checksum"; "sha256"; "/known-3"]], "75bb71b90cd20cb13f86d2bea8dad63ac7194e7517c3b52b8d06ff52d3487d30");
2371     InitISOFS, Always, TestOutput (
2372       [["checksum"; "sha384"; "/known-3"]], "5fa7883430f357b5d7b7271d3a1d2872b51d73cba72731de6863d3dea55f30646af2799bef44d5ea776a5ec7941ac640");
2373     InitISOFS, Always, TestOutput (
2374       [["checksum"; "sha512"; "/known-3"]], "2794062c328c6b216dca90443b7f7134c5f40e56bd0ed7853123275a09982a6f992e6ca682f9d2fba34a4c5e870d8fe077694ff831e3032a004ee077e00603f6");
2375     (* Test for RHBZ#579608, absolute symbolic links. *)
2376     InitISOFS, Always, TestOutput (
2377       [["checksum"; "sha512"; "/abssymlink"]], "5f57d0639bc95081c53afc63a449403883818edc64da48930ad6b1a4fb49be90404686877743fbcd7c99811f3def7df7bc22635c885c6a8cf79c806b43451c1a")],
2378    "compute MD5, SHAx or CRC checksum of file",
2379    "\
2380 This call computes the MD5, SHAx or CRC checksum of the
2381 file named C<path>.
2382
2383 The type of checksum to compute is given by the C<csumtype>
2384 parameter which must have one of the following values:
2385
2386 =over 4
2387
2388 =item C<crc>
2389
2390 Compute the cyclic redundancy check (CRC) specified by POSIX
2391 for the C<cksum> command.
2392
2393 =item C<md5>
2394
2395 Compute the MD5 hash (using the C<md5sum> program).
2396
2397 =item C<sha1>
2398
2399 Compute the SHA1 hash (using the C<sha1sum> program).
2400
2401 =item C<sha224>
2402
2403 Compute the SHA224 hash (using the C<sha224sum> program).
2404
2405 =item C<sha256>
2406
2407 Compute the SHA256 hash (using the C<sha256sum> program).
2408
2409 =item C<sha384>
2410
2411 Compute the SHA384 hash (using the C<sha384sum> program).
2412
2413 =item C<sha512>
2414
2415 Compute the SHA512 hash (using the C<sha512sum> program).
2416
2417 =back
2418
2419 The checksum is returned as a printable string.
2420
2421 To get the checksum for a device, use C<guestfs_checksum_device>.
2422
2423 To get the checksums for many files, use C<guestfs_checksums_out>.");
2424
2425   ("tar_in", (RErr, [FileIn "tarfile"; Pathname "directory"]), 69, [],
2426    [InitBasicFS, Always, TestOutput (
2427       [["tar_in"; "../images/helloworld.tar"; "/"];
2428        ["cat"; "/hello"]], "hello\n")],
2429    "unpack tarfile to directory",
2430    "\
2431 This command uploads and unpacks local file C<tarfile> (an
2432 I<uncompressed> tar file) into C<directory>.
2433
2434 To upload a compressed tarball, use C<guestfs_tgz_in>
2435 or C<guestfs_txz_in>.");
2436
2437   ("tar_out", (RErr, [String "directory"; FileOut "tarfile"]), 70, [],
2438    [],
2439    "pack directory into tarfile",
2440    "\
2441 This command packs the contents of C<directory> and downloads
2442 it to local file C<tarfile>.
2443
2444 To download a compressed tarball, use C<guestfs_tgz_out>
2445 or C<guestfs_txz_out>.");
2446
2447   ("tgz_in", (RErr, [FileIn "tarball"; Pathname "directory"]), 71, [],
2448    [InitBasicFS, Always, TestOutput (
2449       [["tgz_in"; "../images/helloworld.tar.gz"; "/"];
2450        ["cat"; "/hello"]], "hello\n")],
2451    "unpack compressed tarball to directory",
2452    "\
2453 This command uploads and unpacks local file C<tarball> (a
2454 I<gzip compressed> tar file) into C<directory>.
2455
2456 To upload an uncompressed tarball, use C<guestfs_tar_in>.");
2457
2458   ("tgz_out", (RErr, [Pathname "directory"; FileOut "tarball"]), 72, [],
2459    [],
2460    "pack directory into compressed tarball",
2461    "\
2462 This command packs the contents of C<directory> and downloads
2463 it to local file C<tarball>.
2464
2465 To download an uncompressed tarball, use C<guestfs_tar_out>.");
2466
2467   ("mount_ro", (RErr, [Device "device"; String "mountpoint"]), 73, [],
2468    [InitBasicFS, Always, TestLastFail (
2469       [["umount"; "/"];
2470        ["mount_ro"; "/dev/sda1"; "/"];
2471        ["touch"; "/new"]]);
2472     InitBasicFS, Always, TestOutput (
2473       [["write"; "/new"; "data"];
2474        ["umount"; "/"];
2475        ["mount_ro"; "/dev/sda1"; "/"];
2476        ["cat"; "/new"]], "data")],
2477    "mount a guest disk, read-only",
2478    "\
2479 This is the same as the C<guestfs_mount> command, but it
2480 mounts the filesystem with the read-only (I<-o ro>) flag.");
2481
2482   ("mount_options", (RErr, [String "options"; Device "device"; String "mountpoint"]), 74, [],
2483    [],
2484    "mount a guest disk with mount options",
2485    "\
2486 This is the same as the C<guestfs_mount> command, but it
2487 allows you to set the mount options as for the
2488 L<mount(8)> I<-o> flag.
2489
2490 If the C<options> parameter is an empty string, then
2491 no options are passed (all options default to whatever
2492 the filesystem uses).");
2493
2494   ("mount_vfs", (RErr, [String "options"; String "vfstype"; Device "device"; String "mountpoint"]), 75, [],
2495    [],
2496    "mount a guest disk with mount options and vfstype",
2497    "\
2498 This is the same as the C<guestfs_mount> command, but it
2499 allows you to set both the mount options and the vfstype
2500 as for the L<mount(8)> I<-o> and I<-t> flags.");
2501
2502   ("debug", (RString "result", [String "subcmd"; StringList "extraargs"]), 76, [],
2503    [],
2504    "debugging and internals",
2505    "\
2506 The C<guestfs_debug> command exposes some internals of
2507 C<guestfsd> (the guestfs daemon) that runs inside the
2508 qemu subprocess.
2509
2510 There is no comprehensive help for this command.  You have
2511 to look at the file C<daemon/debug.c> in the libguestfs source
2512 to find out what you can do.");
2513
2514   ("lvremove", (RErr, [Device "device"]), 77, [Optional "lvm2"],
2515    [InitEmpty, Always, TestOutputList (
2516       [["part_disk"; "/dev/sda"; "mbr"];
2517        ["pvcreate"; "/dev/sda1"];
2518        ["vgcreate"; "VG"; "/dev/sda1"];
2519        ["lvcreate"; "LV1"; "VG"; "50"];
2520        ["lvcreate"; "LV2"; "VG"; "50"];
2521        ["lvremove"; "/dev/VG/LV1"];
2522        ["lvs"]], ["/dev/VG/LV2"]);
2523     InitEmpty, Always, TestOutputList (
2524       [["part_disk"; "/dev/sda"; "mbr"];
2525        ["pvcreate"; "/dev/sda1"];
2526        ["vgcreate"; "VG"; "/dev/sda1"];
2527        ["lvcreate"; "LV1"; "VG"; "50"];
2528        ["lvcreate"; "LV2"; "VG"; "50"];
2529        ["lvremove"; "/dev/VG"];
2530        ["lvs"]], []);
2531     InitEmpty, Always, TestOutputList (
2532       [["part_disk"; "/dev/sda"; "mbr"];
2533        ["pvcreate"; "/dev/sda1"];
2534        ["vgcreate"; "VG"; "/dev/sda1"];
2535        ["lvcreate"; "LV1"; "VG"; "50"];
2536        ["lvcreate"; "LV2"; "VG"; "50"];
2537        ["lvremove"; "/dev/VG"];
2538        ["vgs"]], ["VG"])],
2539    "remove an LVM logical volume",
2540    "\
2541 Remove an LVM logical volume C<device>, where C<device> is
2542 the path to the LV, such as C</dev/VG/LV>.
2543
2544 You can also remove all LVs in a volume group by specifying
2545 the VG name, C</dev/VG>.");
2546
2547   ("vgremove", (RErr, [String "vgname"]), 78, [Optional "lvm2"],
2548    [InitEmpty, Always, TestOutputList (
2549       [["part_disk"; "/dev/sda"; "mbr"];
2550        ["pvcreate"; "/dev/sda1"];
2551        ["vgcreate"; "VG"; "/dev/sda1"];
2552        ["lvcreate"; "LV1"; "VG"; "50"];
2553        ["lvcreate"; "LV2"; "VG"; "50"];
2554        ["vgremove"; "VG"];
2555        ["lvs"]], []);
2556     InitEmpty, Always, TestOutputList (
2557       [["part_disk"; "/dev/sda"; "mbr"];
2558        ["pvcreate"; "/dev/sda1"];
2559        ["vgcreate"; "VG"; "/dev/sda1"];
2560        ["lvcreate"; "LV1"; "VG"; "50"];
2561        ["lvcreate"; "LV2"; "VG"; "50"];
2562        ["vgremove"; "VG"];
2563        ["vgs"]], [])],
2564    "remove an LVM volume group",
2565    "\
2566 Remove an LVM volume group C<vgname>, (for example C<VG>).
2567
2568 This also forcibly removes all logical volumes in the volume
2569 group (if any).");
2570
2571   ("pvremove", (RErr, [Device "device"]), 79, [Optional "lvm2"],
2572    [InitEmpty, Always, TestOutputListOfDevices (
2573       [["part_disk"; "/dev/sda"; "mbr"];
2574        ["pvcreate"; "/dev/sda1"];
2575        ["vgcreate"; "VG"; "/dev/sda1"];
2576        ["lvcreate"; "LV1"; "VG"; "50"];
2577        ["lvcreate"; "LV2"; "VG"; "50"];
2578        ["vgremove"; "VG"];
2579        ["pvremove"; "/dev/sda1"];
2580        ["lvs"]], []);
2581     InitEmpty, Always, TestOutputListOfDevices (
2582       [["part_disk"; "/dev/sda"; "mbr"];
2583        ["pvcreate"; "/dev/sda1"];
2584        ["vgcreate"; "VG"; "/dev/sda1"];
2585        ["lvcreate"; "LV1"; "VG"; "50"];
2586        ["lvcreate"; "LV2"; "VG"; "50"];
2587        ["vgremove"; "VG"];
2588        ["pvremove"; "/dev/sda1"];
2589        ["vgs"]], []);
2590     InitEmpty, Always, TestOutputListOfDevices (
2591       [["part_disk"; "/dev/sda"; "mbr"];
2592        ["pvcreate"; "/dev/sda1"];
2593        ["vgcreate"; "VG"; "/dev/sda1"];
2594        ["lvcreate"; "LV1"; "VG"; "50"];
2595        ["lvcreate"; "LV2"; "VG"; "50"];
2596        ["vgremove"; "VG"];
2597        ["pvremove"; "/dev/sda1"];
2598        ["pvs"]], [])],
2599    "remove an LVM physical volume",
2600    "\
2601 This wipes a physical volume C<device> so that LVM will no longer
2602 recognise it.
2603
2604 The implementation uses the C<pvremove> command which refuses to
2605 wipe physical volumes that contain any volume groups, so you have
2606 to remove those first.");
2607
2608   ("set_e2label", (RErr, [Device "device"; String "label"]), 80, [],
2609    [InitBasicFS, Always, TestOutput (
2610       [["set_e2label"; "/dev/sda1"; "testlabel"];
2611        ["get_e2label"; "/dev/sda1"]], "testlabel")],
2612    "set the ext2/3/4 filesystem label",
2613    "\
2614 This sets the ext2/3/4 filesystem label of the filesystem on
2615 C<device> to C<label>.  Filesystem labels are limited to
2616 16 characters.
2617
2618 You can use either C<guestfs_tune2fs_l> or C<guestfs_get_e2label>
2619 to return the existing label on a filesystem.");
2620
2621   ("get_e2label", (RString "label", [Device "device"]), 81, [DeprecatedBy "vfs_label"],
2622    [],
2623    "get the ext2/3/4 filesystem label",
2624    "\
2625 This returns the ext2/3/4 filesystem label of the filesystem on
2626 C<device>.");
2627
2628   ("set_e2uuid", (RErr, [Device "device"; String "uuid"]), 82, [],
2629    (let uuid = uuidgen () in
2630     [InitBasicFS, Always, TestOutput (
2631        [["set_e2uuid"; "/dev/sda1"; uuid];
2632         ["get_e2uuid"; "/dev/sda1"]], uuid);
2633      InitBasicFS, Always, TestOutput (
2634        [["set_e2uuid"; "/dev/sda1"; "clear"];
2635         ["get_e2uuid"; "/dev/sda1"]], "");
2636      (* We can't predict what UUIDs will be, so just check the commands run. *)
2637      InitBasicFS, Always, TestRun (
2638        [["set_e2uuid"; "/dev/sda1"; "random"]]);
2639      InitBasicFS, Always, TestRun (
2640        [["set_e2uuid"; "/dev/sda1"; "time"]])]),
2641    "set the ext2/3/4 filesystem UUID",
2642    "\
2643 This sets the ext2/3/4 filesystem UUID of the filesystem on
2644 C<device> to C<uuid>.  The format of the UUID and alternatives
2645 such as C<clear>, C<random> and C<time> are described in the
2646 L<tune2fs(8)> manpage.
2647
2648 You can use either C<guestfs_tune2fs_l> or C<guestfs_get_e2uuid>
2649 to return the existing UUID of a filesystem.");
2650
2651   ("get_e2uuid", (RString "uuid", [Device "device"]), 83, [DeprecatedBy "vfs_uuid"],
2652    (* Regression test for RHBZ#597112. *)
2653    (let uuid = uuidgen () in
2654     [InitBasicFS, Always, TestOutput (
2655        [["mke2journal"; "1024"; "/dev/sdb"];
2656         ["set_e2uuid"; "/dev/sdb"; uuid];
2657         ["get_e2uuid"; "/dev/sdb"]], uuid)]),
2658    "get the ext2/3/4 filesystem UUID",
2659    "\
2660 This returns the ext2/3/4 filesystem UUID of the filesystem on
2661 C<device>.");
2662
2663   ("fsck", (RInt "status", [String "fstype"; Device "device"]), 84, [FishOutput FishOutputHexadecimal],
2664    [InitBasicFS, Always, TestOutputInt (
2665       [["umount"; "/dev/sda1"];
2666        ["fsck"; "ext2"; "/dev/sda1"]], 0);
2667     InitBasicFS, Always, TestOutputInt (
2668       [["umount"; "/dev/sda1"];
2669        ["zero"; "/dev/sda1"];
2670        ["fsck"; "ext2"; "/dev/sda1"]], 8)],
2671    "run the filesystem checker",
2672    "\
2673 This runs the filesystem checker (fsck) on C<device> which
2674 should have filesystem type C<fstype>.
2675
2676 The returned integer is the status.  See L<fsck(8)> for the
2677 list of status codes from C<fsck>.
2678
2679 Notes:
2680
2681 =over 4
2682
2683 =item *
2684
2685 Multiple status codes can be summed together.
2686
2687 =item *
2688
2689 A non-zero return code can mean \"success\", for example if
2690 errors have been corrected on the filesystem.
2691
2692 =item *
2693
2694 Checking or repairing NTFS volumes is not supported
2695 (by linux-ntfs).
2696
2697 =back
2698
2699 This command is entirely equivalent to running C<fsck -a -t fstype device>.");
2700
2701   ("zero", (RErr, [Device "device"]), 85, [Progress],
2702    [InitBasicFS, Always, TestOutput (
2703       [["umount"; "/dev/sda1"];
2704        ["zero"; "/dev/sda1"];
2705        ["file"; "/dev/sda1"]], "data")],
2706    "write zeroes to the device",
2707    "\
2708 This command writes zeroes over the first few blocks of C<device>.
2709
2710 How many blocks are zeroed isn't specified (but it's I<not> enough
2711 to securely wipe the device).  It should be sufficient to remove
2712 any partition tables, filesystem superblocks and so on.
2713
2714 See also: C<guestfs_zero_device>, C<guestfs_scrub_device>.");
2715
2716   ("grub_install", (RErr, [Pathname "root"; Device "device"]), 86, [],
2717    (* See:
2718     * https://bugzilla.redhat.com/show_bug.cgi?id=484986
2719     * https://bugzilla.redhat.com/show_bug.cgi?id=479760
2720     *)
2721    [InitBasicFS, Always, TestOutputTrue (
2722       [["mkdir_p"; "/boot/grub"];
2723        ["write"; "/boot/grub/device.map"; "(hd0) /dev/vda"];
2724        ["grub_install"; "/"; "/dev/vda"];
2725        ["is_dir"; "/boot"]])],
2726    "install GRUB",
2727    "\
2728 This command installs GRUB (the Grand Unified Bootloader) on
2729 C<device>, with the root directory being C<root>.
2730
2731 Note: If grub-install reports the error
2732 \"No suitable drive was found in the generated device map.\"
2733 it may be that you need to create a C</boot/grub/device.map>
2734 file first that contains the mapping between grub device names
2735 and Linux device names.  It is usually sufficient to create
2736 a file containing:
2737
2738  (hd0) /dev/vda
2739
2740 replacing C</dev/vda> with the name of the installation device.");
2741
2742   ("cp", (RErr, [Pathname "src"; Pathname "dest"]), 87, [],
2743    [InitBasicFS, Always, TestOutput (
2744       [["write"; "/old"; "file content"];
2745        ["cp"; "/old"; "/new"];
2746        ["cat"; "/new"]], "file content");
2747     InitBasicFS, Always, TestOutputTrue (
2748       [["write"; "/old"; "file content"];
2749        ["cp"; "/old"; "/new"];
2750        ["is_file"; "/old"]]);
2751     InitBasicFS, Always, TestOutput (
2752       [["write"; "/old"; "file content"];
2753        ["mkdir"; "/dir"];
2754        ["cp"; "/old"; "/dir/new"];
2755        ["cat"; "/dir/new"]], "file content")],
2756    "copy a file",
2757    "\
2758 This copies a file from C<src> to C<dest> where C<dest> is
2759 either a destination filename or destination directory.");
2760
2761   ("cp_a", (RErr, [Pathname "src"; Pathname "dest"]), 88, [],
2762    [InitBasicFS, Always, TestOutput (
2763       [["mkdir"; "/olddir"];
2764        ["mkdir"; "/newdir"];
2765        ["write"; "/olddir/file"; "file content"];
2766        ["cp_a"; "/olddir"; "/newdir"];
2767        ["cat"; "/newdir/olddir/file"]], "file content")],
2768    "copy a file or directory recursively",
2769    "\
2770 This copies a file or directory from C<src> to C<dest>
2771 recursively using the C<cp -a> command.");
2772
2773   ("mv", (RErr, [Pathname "src"; Pathname "dest"]), 89, [],
2774    [InitBasicFS, Always, TestOutput (
2775       [["write"; "/old"; "file content"];
2776        ["mv"; "/old"; "/new"];
2777        ["cat"; "/new"]], "file content");
2778     InitBasicFS, Always, TestOutputFalse (
2779       [["write"; "/old"; "file content"];
2780        ["mv"; "/old"; "/new"];
2781        ["is_file"; "/old"]])],
2782    "move a file",
2783    "\
2784 This moves a file from C<src> to C<dest> where C<dest> is
2785 either a destination filename or destination directory.");
2786
2787   ("drop_caches", (RErr, [Int "whattodrop"]), 90, [],
2788    [InitEmpty, Always, TestRun (
2789       [["drop_caches"; "3"]])],
2790    "drop kernel page cache, dentries and inodes",
2791    "\
2792 This instructs the guest kernel to drop its page cache,
2793 and/or dentries and inode caches.  The parameter C<whattodrop>
2794 tells the kernel what precisely to drop, see
2795 L<http://linux-mm.org/Drop_Caches>
2796
2797 Setting C<whattodrop> to 3 should drop everything.
2798
2799 This automatically calls L<sync(2)> before the operation,
2800 so that the maximum guest memory is freed.");
2801
2802   ("dmesg", (RString "kmsgs", []), 91, [],
2803    [InitEmpty, Always, TestRun (
2804       [["dmesg"]])],
2805    "return kernel messages",
2806    "\
2807 This returns the kernel messages (C<dmesg> output) from
2808 the guest kernel.  This is sometimes useful for extended
2809 debugging of problems.
2810
2811 Another way to get the same information is to enable
2812 verbose messages with C<guestfs_set_verbose> or by setting
2813 the environment variable C<LIBGUESTFS_DEBUG=1> before
2814 running the program.");
2815
2816   ("ping_daemon", (RErr, []), 92, [],
2817    [InitEmpty, Always, TestRun (
2818       [["ping_daemon"]])],
2819    "ping the guest daemon",
2820    "\
2821 This is a test probe into the guestfs daemon running inside
2822 the qemu subprocess.  Calling this function checks that the
2823 daemon responds to the ping message, without affecting the daemon
2824 or attached block device(s) in any other way.");
2825
2826   ("equal", (RBool "equality", [Pathname "file1"; Pathname "file2"]), 93, [],
2827    [InitBasicFS, Always, TestOutputTrue (
2828       [["write"; "/file1"; "contents of a file"];
2829        ["cp"; "/file1"; "/file2"];
2830        ["equal"; "/file1"; "/file2"]]);
2831     InitBasicFS, Always, TestOutputFalse (
2832       [["write"; "/file1"; "contents of a file"];
2833        ["write"; "/file2"; "contents of another file"];
2834        ["equal"; "/file1"; "/file2"]]);
2835     InitBasicFS, Always, TestLastFail (
2836       [["equal"; "/file1"; "/file2"]])],
2837    "test if two files have equal contents",
2838    "\
2839 This compares the two files C<file1> and C<file2> and returns
2840 true if their content is exactly equal, or false otherwise.
2841
2842 The external L<cmp(1)> program is used for the comparison.");
2843
2844   ("strings", (RStringList "stringsout", [Pathname "path"]), 94, [ProtocolLimitWarning],
2845    [InitISOFS, Always, TestOutputList (
2846       [["strings"; "/known-5"]], ["abcdefghi"; "jklmnopqr"]);
2847     InitISOFS, Always, TestOutputList (
2848       [["strings"; "/empty"]], []);
2849     (* Test for RHBZ#579608, absolute symbolic links. *)
2850     InitISOFS, Always, TestRun (
2851       [["strings"; "/abssymlink"]])],
2852    "print the printable strings in a file",
2853    "\
2854 This runs the L<strings(1)> command on a file and returns
2855 the list of printable strings found.");
2856
2857   ("strings_e", (RStringList "stringsout", [String "encoding"; Pathname "path"]), 95, [ProtocolLimitWarning],
2858    [InitISOFS, Always, TestOutputList (
2859       [["strings_e"; "b"; "/known-5"]], []);
2860     InitBasicFS, Always, TestOutputList (
2861       [["write"; "/new"; "\000h\000e\000l\000l\000o\000\n\000w\000o\000r\000l\000d\000\n"];
2862        ["strings_e"; "b"; "/new"]], ["hello"; "world"])],
2863    "print the printable strings in a file",
2864    "\
2865 This is like the C<guestfs_strings> command, but allows you to
2866 specify the encoding of strings that are looked for in
2867 the source file C<path>.
2868
2869 Allowed encodings are:
2870
2871 =over 4
2872
2873 =item s
2874
2875 Single 7-bit-byte characters like ASCII and the ASCII-compatible
2876 parts of ISO-8859-X (this is what C<guestfs_strings> uses).
2877
2878 =item S
2879
2880 Single 8-bit-byte characters.
2881
2882 =item b
2883
2884 16-bit big endian strings such as those encoded in
2885 UTF-16BE or UCS-2BE.
2886
2887 =item l (lower case letter L)
2888
2889 16-bit little endian such as UTF-16LE and UCS-2LE.
2890 This is useful for examining binaries in Windows guests.
2891
2892 =item B
2893
2894 32-bit big endian such as UCS-4BE.
2895
2896 =item L
2897
2898 32-bit little endian such as UCS-4LE.
2899
2900 =back
2901
2902 The returned strings are transcoded to UTF-8.");
2903
2904   ("hexdump", (RString "dump", [Pathname "path"]), 96, [ProtocolLimitWarning],
2905    [InitISOFS, Always, TestOutput (
2906       [["hexdump"; "/known-4"]], "00000000  61 62 63 0a 64 65 66 0a  67 68 69                 |abc.def.ghi|\n0000000b\n");
2907     (* Test for RHBZ#501888c2 regression which caused large hexdump
2908      * commands to segfault.
2909      *)
2910     InitISOFS, Always, TestRun (
2911       [["hexdump"; "/100krandom"]]);
2912     (* Test for RHBZ#579608, absolute symbolic links. *)
2913     InitISOFS, Always, TestRun (
2914       [["hexdump"; "/abssymlink"]])],
2915    "dump a file in hexadecimal",
2916    "\
2917 This runs C<hexdump -C> on the given C<path>.  The result is
2918 the human-readable, canonical hex dump of the file.");
2919
2920   ("zerofree", (RErr, [Device "device"]), 97, [Optional "zerofree"],
2921    [InitNone, Always, TestOutput (
2922       [["part_disk"; "/dev/sda"; "mbr"];
2923        ["mkfs"; "ext3"; "/dev/sda1"];
2924        ["mount_options"; ""; "/dev/sda1"; "/"];
2925        ["write"; "/new"; "test file"];
2926        ["umount"; "/dev/sda1"];
2927        ["zerofree"; "/dev/sda1"];
2928        ["mount_options"; ""; "/dev/sda1"; "/"];
2929        ["cat"; "/new"]], "test file")],
2930    "zero unused inodes and disk blocks on ext2/3 filesystem",
2931    "\
2932 This runs the I<zerofree> program on C<device>.  This program
2933 claims to zero unused inodes and disk blocks on an ext2/3
2934 filesystem, thus making it possible to compress the filesystem
2935 more effectively.
2936
2937 You should B<not> run this program if the filesystem is
2938 mounted.
2939
2940 It is possible that using this program can damage the filesystem
2941 or data on the filesystem.");
2942
2943   ("pvresize", (RErr, [Device "device"]), 98, [Optional "lvm2"],
2944    [],
2945    "resize an LVM physical volume",
2946    "\
2947 This resizes (expands or shrinks) an existing LVM physical
2948 volume to match the new size of the underlying device.");
2949
2950   ("sfdisk_N", (RErr, [Device "device"; Int "partnum";
2951                        Int "cyls"; Int "heads"; Int "sectors";
2952                        String "line"]), 99, [DangerWillRobinson],
2953    [],
2954    "modify a single partition on a block device",
2955    "\
2956 This runs L<sfdisk(8)> option to modify just the single
2957 partition C<n> (note: C<n> counts from 1).
2958
2959 For other parameters, see C<guestfs_sfdisk>.  You should usually
2960 pass C<0> for the cyls/heads/sectors parameters.
2961
2962 See also: C<guestfs_part_add>");
2963
2964   ("sfdisk_l", (RString "partitions", [Device "device"]), 100, [],
2965    [],
2966    "display the partition table",
2967    "\
2968 This displays the partition table on C<device>, in the
2969 human-readable output of the L<sfdisk(8)> command.  It is
2970 not intended to be parsed.
2971
2972 See also: C<guestfs_part_list>");
2973
2974   ("sfdisk_kernel_geometry", (RString "partitions", [Device "device"]), 101, [],
2975    [],
2976    "display the kernel geometry",
2977    "\
2978 This displays the kernel's idea of the geometry of C<device>.
2979
2980 The result is in human-readable format, and not designed to
2981 be parsed.");
2982
2983   ("sfdisk_disk_geometry", (RString "partitions", [Device "device"]), 102, [],
2984    [],
2985    "display the disk geometry from the partition table",
2986    "\
2987 This displays the disk geometry of C<device> read from the
2988 partition table.  Especially in the case where the underlying
2989 block device has been resized, this can be different from the
2990 kernel's idea of the geometry (see C<guestfs_sfdisk_kernel_geometry>).
2991
2992 The result is in human-readable format, and not designed to
2993 be parsed.");
2994
2995   ("vg_activate_all", (RErr, [Bool "activate"]), 103, [Optional "lvm2"],
2996    [],
2997    "activate or deactivate all volume groups",
2998    "\
2999 This command activates or (if C<activate> is false) deactivates
3000 all logical volumes in all volume groups.
3001 If activated, then they are made known to the
3002 kernel, ie. they appear as C</dev/mapper> devices.  If deactivated,
3003 then those devices disappear.
3004
3005 This command is the same as running C<vgchange -a y|n>");
3006
3007   ("vg_activate", (RErr, [Bool "activate"; StringList "volgroups"]), 104, [Optional "lvm2"],
3008    [],
3009    "activate or deactivate some volume groups",
3010    "\
3011 This command activates or (if C<activate> is false) deactivates
3012 all logical volumes in the listed volume groups C<volgroups>.
3013 If activated, then they are made known to the
3014 kernel, ie. they appear as C</dev/mapper> devices.  If deactivated,
3015 then those devices disappear.
3016
3017 This command is the same as running C<vgchange -a y|n volgroups...>
3018
3019 Note that if C<volgroups> is an empty list then B<all> volume groups
3020 are activated or deactivated.");
3021
3022   ("lvresize", (RErr, [Device "device"; Int "mbytes"]), 105, [Optional "lvm2"],
3023    [InitNone, Always, TestOutput (
3024       [["part_disk"; "/dev/sda"; "mbr"];
3025        ["pvcreate"; "/dev/sda1"];
3026        ["vgcreate"; "VG"; "/dev/sda1"];
3027        ["lvcreate"; "LV"; "VG"; "10"];
3028        ["mkfs"; "ext2"; "/dev/VG/LV"];
3029        ["mount_options"; ""; "/dev/VG/LV"; "/"];
3030        ["write"; "/new"; "test content"];
3031        ["umount"; "/"];
3032        ["lvresize"; "/dev/VG/LV"; "20"];
3033        ["e2fsck_f"; "/dev/VG/LV"];
3034        ["resize2fs"; "/dev/VG/LV"];
3035        ["mount_options"; ""; "/dev/VG/LV"; "/"];
3036        ["cat"; "/new"]], "test content");
3037     InitNone, Always, TestRun (
3038       (* Make an LV smaller to test RHBZ#587484. *)
3039       [["part_disk"; "/dev/sda"; "mbr"];
3040        ["pvcreate"; "/dev/sda1"];
3041        ["vgcreate"; "VG"; "/dev/sda1"];
3042        ["lvcreate"; "LV"; "VG"; "20"];
3043        ["lvresize"; "/dev/VG/LV"; "10"]])],
3044    "resize an LVM logical volume",
3045    "\
3046 This resizes (expands or shrinks) an existing LVM logical
3047 volume to C<mbytes>.  When reducing, data in the reduced part
3048 is lost.");
3049
3050   ("resize2fs", (RErr, [Device "device"]), 106, [],
3051    [], (* lvresize tests this *)
3052    "resize an ext2, ext3 or ext4 filesystem",
3053    "\
3054 This resizes an ext2, ext3 or ext4 filesystem to match the size of
3055 the underlying device.
3056
3057 I<Note:> It is sometimes required that you run C<guestfs_e2fsck_f>
3058 on the C<device> before calling this command.  For unknown reasons
3059 C<resize2fs> sometimes gives an error about this and sometimes not.
3060 In any case, it is always safe to call C<guestfs_e2fsck_f> before
3061 calling this function.");
3062
3063   ("find", (RStringList "names", [Pathname "directory"]), 107, [ProtocolLimitWarning],
3064    [InitBasicFS, Always, TestOutputList (
3065       [["find"; "/"]], ["lost+found"]);
3066     InitBasicFS, Always, TestOutputList (
3067       [["touch"; "/a"];
3068        ["mkdir"; "/b"];
3069        ["touch"; "/b/c"];
3070        ["find"; "/"]], ["a"; "b"; "b/c"; "lost+found"]);
3071     InitBasicFS, Always, TestOutputList (
3072       [["mkdir_p"; "/a/b/c"];
3073        ["touch"; "/a/b/c/d"];
3074        ["find"; "/a/b/"]], ["c"; "c/d"])],
3075    "find all files and directories",
3076    "\
3077 This command lists out all files and directories, recursively,
3078 starting at C<directory>.  It is essentially equivalent to
3079 running the shell command C<find directory -print> but some
3080 post-processing happens on the output, described below.
3081
3082 This returns a list of strings I<without any prefix>.  Thus
3083 if the directory structure was:
3084
3085  /tmp/a
3086  /tmp/b
3087  /tmp/c/d
3088
3089 then the returned list from C<guestfs_find> C</tmp> would be
3090 4 elements:
3091
3092  a
3093  b
3094  c
3095  c/d
3096
3097 If C<directory> is not a directory, then this command returns
3098 an error.
3099
3100 The returned list is sorted.
3101
3102 See also C<guestfs_find0>.");
3103
3104   ("e2fsck_f", (RErr, [Device "device"]), 108, [],
3105    [], (* lvresize tests this *)
3106    "check an ext2/ext3 filesystem",
3107    "\
3108 This runs C<e2fsck -p -f device>, ie. runs the ext2/ext3
3109 filesystem checker on C<device>, noninteractively (C<-p>),
3110 even if the filesystem appears to be clean (C<-f>).
3111
3112 This command is only needed because of C<guestfs_resize2fs>
3113 (q.v.).  Normally you should use C<guestfs_fsck>.");
3114
3115   ("sleep", (RErr, [Int "secs"]), 109, [],
3116    [InitNone, Always, TestRun (
3117       [["sleep"; "1"]])],
3118    "sleep for some seconds",
3119    "\
3120 Sleep for C<secs> seconds.");
3121
3122   ("ntfs_3g_probe", (RInt "status", [Bool "rw"; Device "device"]), 110, [Optional "ntfs3g"],
3123    [InitNone, Always, TestOutputInt (
3124       [["part_disk"; "/dev/sda"; "mbr"];
3125        ["mkfs"; "ntfs"; "/dev/sda1"];
3126        ["ntfs_3g_probe"; "true"; "/dev/sda1"]], 0);
3127     InitNone, Always, TestOutputInt (
3128       [["part_disk"; "/dev/sda"; "mbr"];
3129        ["mkfs"; "ext2"; "/dev/sda1"];
3130        ["ntfs_3g_probe"; "true"; "/dev/sda1"]], 12)],
3131    "probe NTFS volume",
3132    "\
3133 This command runs the L<ntfs-3g.probe(8)> command which probes
3134 an NTFS C<device> for mountability.  (Not all NTFS volumes can
3135 be mounted read-write, and some cannot be mounted at all).
3136
3137 C<rw> is a boolean flag.  Set it to true if you want to test
3138 if the volume can be mounted read-write.  Set it to false if
3139 you want to test if the volume can be mounted read-only.
3140
3141 The return value is an integer which C<0> if the operation
3142 would succeed, or some non-zero value documented in the
3143 L<ntfs-3g.probe(8)> manual page.");
3144
3145   ("sh", (RString "output", [String "command"]), 111, [],
3146    [], (* XXX needs tests *)
3147    "run a command via the shell",
3148    "\
3149 This call runs a command from the guest filesystem via the
3150 guest's C</bin/sh>.
3151
3152 This is like C<guestfs_command>, but passes the command to:
3153
3154  /bin/sh -c \"command\"
3155
3156 Depending on the guest's shell, this usually results in
3157 wildcards being expanded, shell expressions being interpolated
3158 and so on.
3159
3160 All the provisos about C<guestfs_command> apply to this call.");
3161
3162   ("sh_lines", (RStringList "lines", [String "command"]), 112, [],
3163    [], (* XXX needs tests *)
3164    "run a command via the shell returning lines",
3165    "\
3166 This is the same as C<guestfs_sh>, but splits the result
3167 into a list of lines.
3168
3169 See also: C<guestfs_command_lines>");
3170
3171   ("glob_expand", (RStringList "paths", [Pathname "pattern"]), 113, [],
3172    (* Use Pathname here, and hence ABS_PATH (pattern,... in generated
3173     * code in stubs.c, since all valid glob patterns must start with "/".
3174     * There is no concept of "cwd" in libguestfs, hence no "."-relative names.
3175     *)
3176    [InitBasicFS, Always, TestOutputList (
3177       [["mkdir_p"; "/a/b/c"];
3178        ["touch"; "/a/b/c/d"];
3179        ["touch"; "/a/b/c/e"];
3180        ["glob_expand"; "/a/b/c/*"]], ["/a/b/c/d"; "/a/b/c/e"]);
3181     InitBasicFS, Always, TestOutputList (
3182       [["mkdir_p"; "/a/b/c"];
3183        ["touch"; "/a/b/c/d"];
3184        ["touch"; "/a/b/c/e"];
3185        ["glob_expand"; "/a/*/c/*"]], ["/a/b/c/d"; "/a/b/c/e"]);
3186     InitBasicFS, Always, TestOutputList (
3187       [["mkdir_p"; "/a/b/c"];
3188        ["touch"; "/a/b/c/d"];
3189        ["touch"; "/a/b/c/e"];
3190        ["glob_expand"; "/a/*/x/*"]], [])],
3191    "expand a wildcard path",
3192    "\
3193 This command searches for all the pathnames matching
3194 C<pattern> according to the wildcard expansion rules
3195 used by the shell.
3196
3197 If no paths match, then this returns an empty list
3198 (note: not an error).
3199
3200 It is just a wrapper around the C L<glob(3)> function
3201 with flags C<GLOB_MARK|GLOB_BRACE>.
3202 See that manual page for more details.");
3203
3204   ("scrub_device", (RErr, [Device "device"]), 114, [DangerWillRobinson; Optional "scrub"],
3205    [InitNone, Always, TestRun ( (* use /dev/sdc because it's smaller *)
3206       [["scrub_device"; "/dev/sdc"]])],
3207    "scrub (securely wipe) a device",
3208    "\
3209 This command writes patterns over C<device> to make data retrieval
3210 more difficult.
3211
3212 It is an interface to the L<scrub(1)> program.  See that
3213 manual page for more details.");
3214
3215   ("scrub_file", (RErr, [Pathname "file"]), 115, [Optional "scrub"],
3216    [InitBasicFS, Always, TestRun (
3217       [["write"; "/file"; "content"];
3218        ["scrub_file"; "/file"]])],
3219    "scrub (securely wipe) a file",
3220    "\
3221 This command writes patterns over a file to make data retrieval
3222 more difficult.
3223
3224 The file is I<removed> after scrubbing.
3225
3226 It is an interface to the L<scrub(1)> program.  See that
3227 manual page for more details.");
3228
3229   ("scrub_freespace", (RErr, [Pathname "dir"]), 116, [Optional "scrub"],
3230    [], (* XXX needs testing *)
3231    "scrub (securely wipe) free space",
3232    "\
3233 This command creates the directory C<dir> and then fills it
3234 with files until the filesystem is full, and scrubs the files
3235 as for C<guestfs_scrub_file>, and deletes them.
3236 The intention is to scrub any free space on the partition
3237 containing C<dir>.
3238
3239 It is an interface to the L<scrub(1)> program.  See that
3240 manual page for more details.");
3241
3242   ("mkdtemp", (RString "dir", [Pathname "template"]), 117, [],
3243    [InitBasicFS, Always, TestRun (
3244       [["mkdir"; "/tmp"];
3245        ["mkdtemp"; "/tmp/tmpXXXXXX"]])],
3246    "create a temporary directory",
3247    "\
3248 This command creates a temporary directory.  The
3249 C<template> parameter should be a full pathname for the
3250 temporary directory name with the final six characters being
3251 \"XXXXXX\".
3252
3253 For example: \"/tmp/myprogXXXXXX\" or \"/Temp/myprogXXXXXX\",
3254 the second one being suitable for Windows filesystems.
3255
3256 The name of the temporary directory that was created
3257 is returned.
3258
3259 The temporary directory is created with mode 0700
3260 and is owned by root.
3261
3262 The caller is responsible for deleting the temporary
3263 directory and its contents after use.
3264
3265 See also: L<mkdtemp(3)>");
3266
3267   ("wc_l", (RInt "lines", [Pathname "path"]), 118, [],
3268    [InitISOFS, Always, TestOutputInt (
3269       [["wc_l"; "/10klines"]], 10000);
3270     (* Test for RHBZ#579608, absolute symbolic links. *)
3271     InitISOFS, Always, TestOutputInt (
3272       [["wc_l"; "/abssymlink"]], 10000)],
3273    "count lines in a file",
3274    "\
3275 This command counts the lines in a file, using the
3276 C<wc -l> external command.");
3277
3278   ("wc_w", (RInt "words", [Pathname "path"]), 119, [],
3279    [InitISOFS, Always, TestOutputInt (
3280       [["wc_w"; "/10klines"]], 10000)],
3281    "count words in a file",
3282    "\
3283 This command counts the words in a file, using the
3284 C<wc -w> external command.");
3285
3286   ("wc_c", (RInt "chars", [Pathname "path"]), 120, [],
3287    [InitISOFS, Always, TestOutputInt (
3288       [["wc_c"; "/100kallspaces"]], 102400)],
3289    "count characters in a file",
3290    "\
3291 This command counts the characters in a file, using the
3292 C<wc -c> external command.");
3293
3294   ("head", (RStringList "lines", [Pathname "path"]), 121, [ProtocolLimitWarning],
3295    [InitISOFS, Always, TestOutputList (
3296       [["head"; "/10klines"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz";"3abcdefghijklmnopqrstuvwxyz";"4abcdefghijklmnopqrstuvwxyz";"5abcdefghijklmnopqrstuvwxyz";"6abcdefghijklmnopqrstuvwxyz";"7abcdefghijklmnopqrstuvwxyz";"8abcdefghijklmnopqrstuvwxyz";"9abcdefghijklmnopqrstuvwxyz"]);
3297     (* Test for RHBZ#579608, absolute symbolic links. *)
3298     InitISOFS, Always, TestOutputList (
3299       [["head"; "/abssymlink"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz";"3abcdefghijklmnopqrstuvwxyz";"4abcdefghijklmnopqrstuvwxyz";"5abcdefghijklmnopqrstuvwxyz";"6abcdefghijklmnopqrstuvwxyz";"7abcdefghijklmnopqrstuvwxyz";"8abcdefghijklmnopqrstuvwxyz";"9abcdefghijklmnopqrstuvwxyz"])],
3300    "return first 10 lines of a file",
3301    "\
3302 This command returns up to the first 10 lines of a file as
3303 a list of strings.");
3304
3305   ("head_n", (RStringList "lines", [Int "nrlines"; Pathname "path"]), 122, [ProtocolLimitWarning],
3306    [InitISOFS, Always, TestOutputList (
3307       [["head_n"; "3"; "/10klines"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz"]);
3308     InitISOFS, Always, TestOutputList (
3309       [["head_n"; "-9997"; "/10klines"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz"]);
3310     InitISOFS, Always, TestOutputList (
3311       [["head_n"; "0"; "/10klines"]], [])],
3312    "return first N lines of a file",
3313    "\
3314 If the parameter C<nrlines> is a positive number, this returns the first
3315 C<nrlines> lines of the file C<path>.
3316
3317 If the parameter C<nrlines> is a negative number, this returns lines
3318 from the file C<path>, excluding the last C<nrlines> lines.
3319
3320 If the parameter C<nrlines> is zero, this returns an empty list.");
3321
3322   ("tail", (RStringList "lines", [Pathname "path"]), 123, [ProtocolLimitWarning],
3323    [InitISOFS, Always, TestOutputList (
3324       [["tail"; "/10klines"]], ["9990abcdefghijklmnopqrstuvwxyz";"9991abcdefghijklmnopqrstuvwxyz";"9992abcdefghijklmnopqrstuvwxyz";"9993abcdefghijklmnopqrstuvwxyz";"9994abcdefghijklmnopqrstuvwxyz";"9995abcdefghijklmnopqrstuvwxyz";"9996abcdefghijklmnopqrstuvwxyz";"9997abcdefghijklmnopqrstuvwxyz";"9998abcdefghijklmnopqrstuvwxyz";"9999abcdefghijklmnopqrstuvwxyz"])],
3325    "return last 10 lines of a file",
3326    "\
3327 This command returns up to the last 10 lines of a file as
3328 a list of strings.");
3329
3330   ("tail_n", (RStringList "lines", [Int "nrlines"; Pathname "path"]), 124, [ProtocolLimitWarning],
3331    [InitISOFS, Always, TestOutputList (
3332       [["tail_n"; "3"; "/10klines"]], ["9997abcdefghijklmnopqrstuvwxyz";"9998abcdefghijklmnopqrstuvwxyz";"9999abcdefghijklmnopqrstuvwxyz"]);
3333     InitISOFS, Always, TestOutputList (
3334       [["tail_n"; "-9998"; "/10klines"]], ["9997abcdefghijklmnopqrstuvwxyz";"9998abcdefghijklmnopqrstuvwxyz";"9999abcdefghijklmnopqrstuvwxyz"]);
3335     InitISOFS, Always, TestOutputList (
3336       [["tail_n"; "0"; "/10klines"]], [])],
3337    "return last N lines of a file",
3338    "\
3339 If the parameter C<nrlines> is a positive number, this returns the last
3340 C<nrlines> lines of the file C<path>.
3341
3342 If the parameter C<nrlines> is a negative number, this returns lines
3343 from the file C<path>, starting with the C<-nrlines>th line.
3344
3345 If the parameter C<nrlines> is zero, this returns an empty list.");
3346
3347   ("df", (RString "output", []), 125, [],
3348    [], (* XXX Tricky to test because it depends on the exact format
3349         * of the 'df' command and other imponderables.
3350         *)
3351    "report file system disk space usage",
3352    "\
3353 This command runs the C<df> command to report disk space used.
3354
3355 This command is mostly useful for interactive sessions.  It
3356 is I<not> intended that you try to parse the output string.
3357 Use C<statvfs> from programs.");
3358
3359   ("df_h", (RString "output", []), 126, [],
3360    [], (* XXX Tricky to test because it depends on the exact format
3361         * of the 'df' command and other imponderables.
3362         *)
3363    "report file system disk space usage (human readable)",
3364    "\
3365 This command runs the C<df -h> command to report disk space used
3366 in human-readable format.
3367
3368 This command is mostly useful for interactive sessions.  It
3369 is I<not> intended that you try to parse the output string.
3370 Use C<statvfs> from programs.");
3371
3372   ("du", (RInt64 "sizekb", [Pathname "path"]), 127, [],
3373    [InitISOFS, Always, TestOutputInt (
3374       [["du"; "/directory"]], 2 (* ISO fs blocksize is 2K *))],
3375    "estimate file space usage",
3376    "\
3377 This command runs the C<du -s> command to estimate file space
3378 usage for C<path>.
3379
3380 C<path> can be a file or a directory.  If C<path> is a directory
3381 then the estimate includes the contents of the directory and all
3382 subdirectories (recursively).
3383
3384 The result is the estimated size in I<kilobytes>
3385 (ie. units of 1024 bytes).");
3386
3387   ("initrd_list", (RStringList "filenames", [Pathname "path"]), 128, [],
3388    [InitISOFS, Always, TestOutputList (
3389       [["initrd_list"; "/initrd"]], ["empty";"known-1";"known-2";"known-3";"known-4"; "known-5"])],
3390    "list files in an initrd",
3391    "\
3392 This command lists out files contained in an initrd.
3393
3394 The files are listed without any initial C</> character.  The
3395 files are listed in the order they appear (not necessarily
3396 alphabetical).  Directory names are listed as separate items.
3397
3398 Old Linux kernels (2.4 and earlier) used a compressed ext2
3399 filesystem as initrd.  We I<only> support the newer initramfs
3400 format (compressed cpio files).");
3401
3402   ("mount_loop", (RErr, [Pathname "file"; Pathname "mountpoint"]), 129, [],
3403    [],
3404    "mount a file using the loop device",
3405    "\
3406 This command lets you mount C<file> (a filesystem image
3407 in a file) on a mount point.  It is entirely equivalent to
3408 the command C<mount -o loop file mountpoint>.");
3409
3410   ("mkswap", (RErr, [Device "device"]), 130, [],
3411    [InitEmpty, Always, TestRun (
3412       [["part_disk"; "/dev/sda"; "mbr"];
3413        ["mkswap"; "/dev/sda1"]])],
3414    "create a swap partition",
3415    "\
3416 Create a swap partition on C<device>.");
3417
3418   ("mkswap_L", (RErr, [String "label"; Device "device"]), 131, [],
3419    [InitEmpty, Always, TestRun (
3420       [["part_disk"; "/dev/sda"; "mbr"];
3421        ["mkswap_L"; "hello"; "/dev/sda1"]])],
3422    "create a swap partition with a label",
3423    "\
3424 Create a swap partition on C<device> with label C<label>.
3425
3426 Note that you cannot attach a swap label to a block device
3427 (eg. C</dev/sda>), just to a partition.  This appears to be
3428 a limitation of the kernel or swap tools.");
3429
3430   ("mkswap_U", (RErr, [String "uuid"; Device "device"]), 132, [Optional "linuxfsuuid"],
3431    (let uuid = uuidgen () in
3432     [InitEmpty, Always, TestRun (
3433        [["part_disk"; "/dev/sda"; "mbr"];
3434         ["mkswap_U"; uuid; "/dev/sda1"]])]),
3435    "create a swap partition with an explicit UUID",
3436    "\
3437 Create a swap partition on C<device> with UUID C<uuid>.");
3438
3439   ("mknod", (RErr, [Int "mode"; Int "devmajor"; Int "devminor"; Pathname "path"]), 133, [Optional "mknod"],
3440    [InitBasicFS, Always, TestOutputStruct (
3441       [["mknod"; "0o10777"; "0"; "0"; "/node"];
3442        (* NB: default umask 022 means 0777 -> 0755 in these tests *)
3443        ["stat"; "/node"]], [CompareWithInt ("mode", 0o10755)]);
3444     InitBasicFS, Always, TestOutputStruct (
3445       [["mknod"; "0o60777"; "66"; "99"; "/node"];
3446        ["stat"; "/node"]], [CompareWithInt ("mode", 0o60755)])],
3447    "make block, character or FIFO devices",
3448    "\
3449 This call creates block or character special devices, or
3450 named pipes (FIFOs).
3451
3452 The C<mode> parameter should be the mode, using the standard
3453 constants.  C<devmajor> and C<devminor> are the
3454 device major and minor numbers, only used when creating block
3455 and character special devices.
3456
3457 Note that, just like L<mknod(2)>, the mode must be bitwise
3458 OR'd with S_IFBLK, S_IFCHR, S_IFIFO or S_IFSOCK (otherwise this call
3459 just creates a regular file).  These constants are
3460 available in the standard Linux header files, or you can use
3461 C<guestfs_mknod_b>, C<guestfs_mknod_c> or C<guestfs_mkfifo>
3462 which are wrappers around this command which bitwise OR
3463 in the appropriate constant for you.
3464
3465 The mode actually set is affected by the umask.");
3466
3467   ("mkfifo", (RErr, [Int "mode"; Pathname "path"]), 134, [Optional "mknod"],
3468    [InitBasicFS, Always, TestOutputStruct (
3469       [["mkfifo"; "0o777"; "/node"];
3470        ["stat"; "/node"]], [CompareWithInt ("mode", 0o10755)])],
3471    "make FIFO (named pipe)",
3472    "\
3473 This call creates a FIFO (named pipe) called C<path> with
3474 mode C<mode>.  It is just a convenient wrapper around
3475 C<guestfs_mknod>.
3476
3477 The mode actually set is affected by the umask.");
3478
3479   ("mknod_b", (RErr, [Int "mode"; Int "devmajor"; Int "devminor"; Pathname "path"]), 135, [Optional "mknod"],
3480    [InitBasicFS, Always, TestOutputStruct (
3481       [["mknod_b"; "0o777"; "99"; "66"; "/node"];
3482        ["stat"; "/node"]], [CompareWithInt ("mode", 0o60755)])],
3483    "make block device node",
3484    "\
3485 This call creates a block device node called C<path> with
3486 mode C<mode> and device major/minor C<devmajor> and C<devminor>.
3487 It is just a convenient wrapper around C<guestfs_mknod>.
3488
3489 The mode actually set is affected by the umask.");
3490
3491   ("mknod_c", (RErr, [Int "mode"; Int "devmajor"; Int "devminor"; Pathname "path"]), 136, [Optional "mknod"],
3492    [InitBasicFS, Always, TestOutputStruct (
3493       [["mknod_c"; "0o777"; "99"; "66"; "/node"];
3494        ["stat"; "/node"]], [CompareWithInt ("mode", 0o20755)])],
3495    "make char device node",
3496    "\
3497 This call creates a char device node called C<path> with
3498 mode C<mode> and device major/minor C<devmajor> and C<devminor>.
3499 It is just a convenient wrapper around C<guestfs_mknod>.
3500
3501 The mode actually set is affected by the umask.");
3502
3503   ("umask", (RInt "oldmask", [Int "mask"]), 137, [FishOutput FishOutputOctal],
3504    [InitEmpty, Always, TestOutputInt (
3505       [["umask"; "0o22"]], 0o22)],
3506    "set file mode creation mask (umask)",
3507    "\
3508 This function sets the mask used for creating new files and
3509 device nodes to C<mask & 0777>.
3510
3511 Typical umask values would be C<022> which creates new files
3512 with permissions like \"-rw-r--r--\" or \"-rwxr-xr-x\", and
3513 C<002> which creates new files with permissions like
3514 \"-rw-rw-r--\" or \"-rwxrwxr-x\".
3515
3516 The default umask is C<022>.  This is important because it
3517 means that directories and device nodes will be created with
3518 C<0644> or C<0755> mode even if you specify C<0777>.
3519
3520 See also C<guestfs_get_umask>,
3521 L<umask(2)>, C<guestfs_mknod>, C<guestfs_mkdir>.
3522
3523 This call returns the previous umask.");
3524
3525   ("readdir", (RStructList ("entries", "dirent"), [Pathname "dir"]), 138, [],
3526    [],
3527    "read directories entries",
3528    "\
3529 This returns the list of directory entries in directory C<dir>.
3530
3531 All entries in the directory are returned, including C<.> and
3532 C<..>.  The entries are I<not> sorted, but returned in the same
3533 order as the underlying filesystem.
3534
3535 Also this call returns basic file type information about each
3536 file.  The C<ftyp> field will contain one of the following characters:
3537
3538 =over 4
3539
3540 =item 'b'
3541
3542 Block special
3543
3544 =item 'c'
3545
3546 Char special
3547
3548 =item 'd'
3549
3550 Directory
3551
3552 =item 'f'
3553
3554 FIFO (named pipe)
3555
3556 =item 'l'
3557
3558 Symbolic link
3559
3560 =item 'r'
3561
3562 Regular file
3563
3564 =item 's'
3565
3566 Socket
3567
3568 =item 'u'
3569
3570 Unknown file type
3571
3572 =item '?'
3573
3574 The L<readdir(3)> call returned a C<d_type> field with an
3575 unexpected value
3576
3577 =back
3578
3579 This function is primarily intended for use by programs.  To
3580 get a simple list of names, use C<guestfs_ls>.  To get a printable
3581 directory for human consumption, use C<guestfs_ll>.");
3582
3583   ("sfdiskM", (RErr, [Device "device"; StringList "lines"]), 139, [DangerWillRobinson],
3584    [],
3585    "create partitions on a block device",
3586    "\
3587 This is a simplified interface to the C<guestfs_sfdisk>
3588 command, where partition sizes are specified in megabytes
3589 only (rounded to the nearest cylinder) and you don't need
3590 to specify the cyls, heads and sectors parameters which
3591 were rarely if ever used anyway.
3592
3593 See also: C<guestfs_sfdisk>, the L<sfdisk(8)> manpage
3594 and C<guestfs_part_disk>");
3595
3596   ("zfile", (RString "description", [String "meth"; Pathname "path"]), 140, [DeprecatedBy "file"],
3597    [],
3598    "determine file type inside a compressed file",
3599    "\
3600 This command runs C<file> after first decompressing C<path>
3601 using C<method>.
3602
3603 C<method> must be one of C<gzip>, C<compress> or C<bzip2>.
3604
3605 Since 1.0.63, use C<guestfs_file> instead which can now
3606 process compressed files.");
3607
3608   ("getxattrs", (RStructList ("xattrs", "xattr"), [Pathname "path"]), 141, [Optional "linuxxattrs"],
3609    [],
3610    "list extended attributes of a file or directory",
3611    "\
3612 This call lists the extended attributes of the file or directory
3613 C<path>.
3614
3615 At the system call level, this is a combination of the
3616 L<listxattr(2)> and L<getxattr(2)> calls.
3617
3618 See also: C<guestfs_lgetxattrs>, L<attr(5)>.");
3619
3620   ("lgetxattrs", (RStructList ("xattrs", "xattr"), [Pathname "path"]), 142, [Optional "linuxxattrs"],
3621    [],
3622    "list extended attributes of a file or directory",
3623    "\
3624 This is the same as C<guestfs_getxattrs>, but if C<path>
3625 is a symbolic link, then it returns the extended attributes
3626 of the link itself.");
3627
3628   ("setxattr", (RErr, [String "xattr";
3629                        String "val"; Int "vallen"; (* will be BufferIn *)
3630                        Pathname "path"]), 143, [Optional "linuxxattrs"],
3631    [],
3632    "set extended attribute of a file or directory",
3633    "\
3634 This call sets the extended attribute named C<xattr>
3635 of the file C<path> to the value C<val> (of length C<vallen>).
3636 The value is arbitrary 8 bit data.
3637
3638 See also: C<guestfs_lsetxattr>, L<attr(5)>.");
3639
3640   ("lsetxattr", (RErr, [String "xattr";
3641                         String "val"; Int "vallen"; (* will be BufferIn *)
3642                         Pathname "path"]), 144, [Optional "linuxxattrs"],
3643    [],
3644    "set extended attribute of a file or directory",
3645    "\
3646 This is the same as C<guestfs_setxattr>, but if C<path>
3647 is a symbolic link, then it sets an extended attribute
3648 of the link itself.");
3649
3650   ("removexattr", (RErr, [String "xattr"; Pathname "path"]), 145, [Optional "linuxxattrs"],
3651    [],
3652    "remove extended attribute of a file or directory",
3653    "\
3654 This call removes the extended attribute named C<xattr>
3655 of the file C<path>.
3656
3657 See also: C<guestfs_lremovexattr>, L<attr(5)>.");
3658
3659   ("lremovexattr", (RErr, [String "xattr"; Pathname "path"]), 146, [Optional "linuxxattrs"],
3660    [],
3661    "remove extended attribute of a file or directory",
3662    "\
3663 This is the same as C<guestfs_removexattr>, but if C<path>
3664 is a symbolic link, then it removes an extended attribute
3665 of the link itself.");
3666
3667   ("mountpoints", (RHashtable "mps", []), 147, [],
3668    [],
3669    "show mountpoints",
3670    "\
3671 This call is similar to C<guestfs_mounts>.  That call returns
3672 a list of devices.  This one returns a hash table (map) of
3673 device name to directory where the device is mounted.");
3674
3675   ("mkmountpoint", (RErr, [String "exemptpath"]), 148, [],
3676    (* This is a special case: while you would expect a parameter
3677     * of type "Pathname", that doesn't work, because it implies
3678     * NEED_ROOT in the generated calling code in stubs.c, and
3679     * this function cannot use NEED_ROOT.
3680     *)
3681    [],
3682    "create a mountpoint",
3683    "\
3684 C<guestfs_mkmountpoint> and C<guestfs_rmmountpoint> are
3685 specialized calls that can be used to create extra mountpoints
3686 before mounting the first filesystem.
3687
3688 These calls are I<only> necessary in some very limited circumstances,
3689 mainly the case where you want to mount a mix of unrelated and/or
3690 read-only filesystems together.
3691
3692 For example, live CDs often contain a \"Russian doll\" nest of
3693 filesystems, an ISO outer layer, with a squashfs image inside, with
3694 an ext2/3 image inside that.  You can unpack this as follows
3695 in guestfish:
3696
3697  add-ro Fedora-11-i686-Live.iso
3698  run
3699  mkmountpoint /cd
3700  mkmountpoint /squash
3701  mkmountpoint /ext3
3702  mount /dev/sda /cd
3703  mount-loop /cd/LiveOS/squashfs.img /squash
3704  mount-loop /squash/LiveOS/ext3fs.img /ext3
3705
3706 The inner filesystem is now unpacked under the /ext3 mountpoint.");
3707
3708   ("rmmountpoint", (RErr, [String "exemptpath"]), 149, [],
3709    [],
3710    "remove a mountpoint",
3711    "\
3712 This calls removes a mountpoint that was previously created
3713 with C<guestfs_mkmountpoint>.  See C<guestfs_mkmountpoint>
3714 for full details.");
3715
3716   ("read_file", (RBufferOut "content", [Pathname "path"]), 150, [ProtocolLimitWarning],
3717    [InitISOFS, Always, TestOutputBuffer (
3718       [["read_file"; "/known-4"]], "abc\ndef\nghi");
3719     (* Test various near large, large and too large files (RHBZ#589039). *)
3720     InitBasicFS, Always, TestLastFail (
3721       [["touch"; "/a"];
3722        ["truncate_size"; "/a"; "4194303"]; (* GUESTFS_MESSAGE_MAX - 1 *)
3723        ["read_file"; "/a"]]);
3724     InitBasicFS, Always, TestLastFail (
3725       [["touch"; "/a"];
3726        ["truncate_size"; "/a"; "4194304"]; (* GUESTFS_MESSAGE_MAX *)
3727        ["read_file"; "/a"]]);
3728     InitBasicFS, Always, TestLastFail (
3729       [["touch"; "/a"];
3730        ["truncate_size"; "/a"; "41943040"]; (* GUESTFS_MESSAGE_MAX * 10 *)
3731        ["read_file"; "/a"]])],
3732    "read a file",
3733    "\
3734 This calls returns the contents of the file C<path> as a
3735 buffer.
3736
3737 Unlike C<guestfs_cat>, this function can correctly
3738 handle files that contain embedded ASCII NUL characters.
3739 However unlike C<guestfs_download>, this function is limited
3740 in the total size of file that can be handled.");
3741
3742   ("grep", (RStringList "lines", [String "regex"; Pathname "path"]), 151, [ProtocolLimitWarning],
3743    [InitISOFS, Always, TestOutputList (
3744       [["grep"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"]);
3745     InitISOFS, Always, TestOutputList (
3746       [["grep"; "nomatch"; "/test-grep.txt"]], []);
3747     (* Test for RHBZ#579608, absolute symbolic links. *)
3748     InitISOFS, Always, TestOutputList (
3749       [["grep"; "nomatch"; "/abssymlink"]], [])],
3750    "return lines matching a pattern",
3751    "\
3752 This calls the external C<grep> program and returns the
3753 matching lines.");
3754
3755   ("egrep", (RStringList "lines", [String "regex"; Pathname "path"]), 152, [ProtocolLimitWarning],
3756    [InitISOFS, Always, TestOutputList (
3757       [["egrep"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"])],
3758    "return lines matching a pattern",
3759    "\
3760 This calls the external C<egrep> program and returns the
3761 matching lines.");
3762
3763   ("fgrep", (RStringList "lines", [String "pattern"; Pathname "path"]), 153, [ProtocolLimitWarning],
3764    [InitISOFS, Always, TestOutputList (
3765       [["fgrep"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"])],
3766    "return lines matching a pattern",
3767    "\
3768 This calls the external C<fgrep> program and returns the
3769 matching lines.");
3770
3771   ("grepi", (RStringList "lines", [String "regex"; Pathname "path"]), 154, [ProtocolLimitWarning],
3772    [InitISOFS, Always, TestOutputList (
3773       [["grepi"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"; "ABC"])],
3774    "return lines matching a pattern",
3775    "\
3776 This calls the external C<grep -i> program and returns the
3777 matching lines.");
3778
3779   ("egrepi", (RStringList "lines", [String "regex"; Pathname "path"]), 155, [ProtocolLimitWarning],
3780    [InitISOFS, Always, TestOutputList (
3781       [["egrepi"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"; "ABC"])],
3782    "return lines matching a pattern",
3783    "\
3784 This calls the external C<egrep -i> program and returns the
3785 matching lines.");
3786
3787   ("fgrepi", (RStringList "lines", [String "pattern"; Pathname "path"]), 156, [ProtocolLimitWarning],
3788    [InitISOFS, Always, TestOutputList (
3789       [["fgrepi"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"; "ABC"])],
3790    "return lines matching a pattern",
3791    "\
3792 This calls the external C<fgrep -i> program and returns the
3793 matching lines.");
3794
3795   ("zgrep", (RStringList "lines", [String "regex"; Pathname "path"]), 157, [ProtocolLimitWarning],
3796    [InitISOFS, Always, TestOutputList (
3797       [["zgrep"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"])],
3798    "return lines matching a pattern",
3799    "\
3800 This calls the external C<zgrep> program and returns the
3801 matching lines.");
3802
3803   ("zegrep", (RStringList "lines", [String "regex"; Pathname "path"]), 158, [ProtocolLimitWarning],
3804    [InitISOFS, Always, TestOutputList (
3805       [["zegrep"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"])],
3806    "return lines matching a pattern",
3807    "\
3808 This calls the external C<zegrep> program and returns the
3809 matching lines.");
3810
3811   ("zfgrep", (RStringList "lines", [String "pattern"; Pathname "path"]), 159, [ProtocolLimitWarning],
3812    [InitISOFS, Always, TestOutputList (
3813       [["zfgrep"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"])],
3814    "return lines matching a pattern",
3815    "\
3816 This calls the external C<zfgrep> program and returns the
3817 matching lines.");
3818
3819   ("zgrepi", (RStringList "lines", [String "regex"; Pathname "path"]), 160, [ProtocolLimitWarning],
3820    [InitISOFS, Always, TestOutputList (
3821       [["zgrepi"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"; "ABC"])],
3822    "return lines matching a pattern",
3823    "\
3824 This calls the external C<zgrep -i> program and returns the
3825 matching lines.");
3826
3827   ("zegrepi", (RStringList "lines", [String "regex"; Pathname "path"]), 161, [ProtocolLimitWarning],
3828    [InitISOFS, Always, TestOutputList (
3829       [["zegrepi"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"; "ABC"])],
3830    "return lines matching a pattern",
3831    "\
3832 This calls the external C<zegrep -i> program and returns the
3833 matching lines.");
3834
3835   ("zfgrepi", (RStringList "lines", [String "pattern"; Pathname "path"]), 162, [ProtocolLimitWarning],
3836    [InitISOFS, Always, TestOutputList (
3837       [["zfgrepi"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"; "ABC"])],
3838    "return lines matching a pattern",
3839    "\
3840 This calls the external C<zfgrep -i> program and returns the
3841 matching lines.");
3842
3843   ("realpath", (RString "rpath", [Pathname "path"]), 163, [Optional "realpath"],
3844    [InitISOFS, Always, TestOutput (
3845       [["realpath"; "/../directory"]], "/directory")],
3846    "canonicalized absolute pathname",
3847    "\
3848 Return the canonicalized absolute pathname of C<path>.  The
3849 returned path has no C<.>, C<..> or symbolic link path elements.");
3850
3851   ("ln", (RErr, [String "target"; Pathname "linkname"]), 164, [],
3852    [InitBasicFS, Always, TestOutputStruct (
3853       [["touch"; "/a"];
3854        ["ln"; "/a"; "/b"];
3855        ["stat"; "/b"]], [CompareWithInt ("nlink", 2)])],
3856    "create a hard link",
3857    "\
3858 This command creates a hard link using the C<ln> command.");
3859
3860   ("ln_f", (RErr, [String "target"; Pathname "linkname"]), 165, [],
3861    [InitBasicFS, Always, TestOutputStruct (
3862       [["touch"; "/a"];
3863        ["touch"; "/b"];
3864        ["ln_f"; "/a"; "/b"];
3865        ["stat"; "/b"]], [CompareWithInt ("nlink", 2)])],
3866    "create a hard link",
3867    "\
3868 This command creates a hard link using the C<ln -f> command.
3869 The C<-f> option removes the link (C<linkname>) if it exists already.");
3870
3871   ("ln_s", (RErr, [String "target"; Pathname "linkname"]), 166, [],
3872    [InitBasicFS, Always, TestOutputStruct (
3873       [["touch"; "/a"];
3874        ["ln_s"; "a"; "/b"];
3875        ["lstat"; "/b"]], [CompareWithInt ("mode", 0o120777)])],
3876    "create a symbolic link",
3877    "\
3878 This command creates a symbolic link using the C<ln -s> command.");
3879
3880   ("ln_sf", (RErr, [String "target"; Pathname "linkname"]), 167, [],
3881    [InitBasicFS, Always, TestOutput (
3882       [["mkdir_p"; "/a/b"];
3883        ["touch"; "/a/b/c"];
3884        ["ln_sf"; "../d"; "/a/b/c"];
3885        ["readlink"; "/a/b/c"]], "../d")],
3886    "create a symbolic link",
3887    "\
3888 This command creates a symbolic link using the C<ln -sf> command,
3889 The C<-f> option removes the link (C<linkname>) if it exists already.");
3890
3891   ("readlink", (RString "link", [Pathname "path"]), 168, [],
3892    [] (* XXX tested above *),
3893    "read the target of a symbolic link",
3894    "\
3895 This command reads the target of a symbolic link.");
3896
3897   ("fallocate", (RErr, [Pathname "path"; Int "len"]), 169, [DeprecatedBy "fallocate64"],
3898    [InitBasicFS, Always, TestOutputStruct (
3899       [["fallocate"; "/a"; "1000000"];
3900        ["stat"; "/a"]], [CompareWithInt ("size", 1_000_000)])],
3901    "preallocate a file in the guest filesystem",
3902    "\
3903 This command preallocates a file (containing zero bytes) named
3904 C<path> of size C<len> bytes.  If the file exists already, it
3905 is overwritten.
3906
3907 Do not confuse this with the guestfish-specific
3908 C<alloc> command which allocates a file in the host and
3909 attaches it as a device.");
3910
3911   ("swapon_device", (RErr, [Device "device"]), 170, [],
3912    [InitPartition, Always, TestRun (
3913       [["mkswap"; "/dev/sda1"];
3914        ["swapon_device"; "/dev/sda1"];
3915        ["swapoff_device"; "/dev/sda1"]])],
3916    "enable swap on device",
3917    "\
3918 This command enables the libguestfs appliance to use the
3919 swap device or partition named C<device>.  The increased
3920 memory is made available for all commands, for example
3921 those run using C<guestfs_command> or C<guestfs_sh>.
3922
3923 Note that you should not swap to existing guest swap
3924 partitions unless you know what you are doing.  They may
3925 contain hibernation information, or other information that
3926 the guest doesn't want you to trash.  You also risk leaking
3927 information about the host to the guest this way.  Instead,
3928 attach a new host device to the guest and swap on that.");
3929
3930   ("swapoff_device", (RErr, [Device "device"]), 171, [],
3931    [], (* XXX tested by swapon_device *)
3932    "disable swap on device",
3933    "\
3934 This command disables the libguestfs appliance swap
3935 device or partition named C<device>.
3936 See C<guestfs_swapon_device>.");
3937
3938   ("swapon_file", (RErr, [Pathname "file"]), 172, [],
3939    [InitBasicFS, Always, TestRun (
3940       [["fallocate"; "/swap"; "8388608"];
3941        ["mkswap_file"; "/swap"];
3942        ["swapon_file"; "/swap"];
3943        ["swapoff_file"; "/swap"]])],
3944    "enable swap on file",
3945    "\
3946 This command enables swap to a file.
3947 See C<guestfs_swapon_device> for other notes.");
3948
3949   ("swapoff_file", (RErr, [Pathname "file"]), 173, [],
3950    [], (* XXX tested by swapon_file *)
3951    "disable swap on file",
3952    "\
3953 This command disables the libguestfs appliance swap on file.");
3954
3955   ("swapon_label", (RErr, [String "label"]), 174, [],
3956    [InitEmpty, Always, TestRun (
3957       [["part_disk"; "/dev/sdb"; "mbr"];
3958        ["mkswap_L"; "swapit"; "/dev/sdb1"];
3959        ["swapon_label"; "swapit"];
3960        ["swapoff_label"; "swapit"];
3961        ["zero"; "/dev/sdb"];
3962        ["blockdev_rereadpt"; "/dev/sdb"]])],
3963    "enable swap on labeled swap partition",
3964    "\
3965 This command enables swap to a labeled swap partition.
3966 See C<guestfs_swapon_device> for other notes.");
3967
3968   ("swapoff_label", (RErr, [String "label"]), 175, [],
3969    [], (* XXX tested by swapon_label *)
3970    "disable swap on labeled swap partition",
3971    "\
3972 This command disables the libguestfs appliance swap on
3973 labeled swap partition.");
3974
3975   ("swapon_uuid", (RErr, [String "uuid"]), 176, [Optional "linuxfsuuid"],
3976    (let uuid = uuidgen () in
3977     [InitEmpty, Always, TestRun (
3978        [["mkswap_U"; uuid; "/dev/sdb"];
3979         ["swapon_uuid"; uuid];
3980         ["swapoff_uuid"; uuid]])]),
3981    "enable swap on swap partition by UUID",
3982    "\
3983 This command enables swap to a swap partition with the given UUID.
3984 See C<guestfs_swapon_device> for other notes.");
3985
3986   ("swapoff_uuid", (RErr, [String "uuid"]), 177, [Optional "linuxfsuuid"],
3987    [], (* XXX tested by swapon_uuid *)
3988    "disable swap on swap partition by UUID",
3989    "\
3990 This command disables the libguestfs appliance swap partition
3991 with the given UUID.");
3992
3993   ("mkswap_file", (RErr, [Pathname "path"]), 178, [],
3994    [InitBasicFS, Always, TestRun (
3995       [["fallocate"; "/swap"; "8388608"];
3996        ["mkswap_file"; "/swap"]])],
3997    "create a swap file",
3998    "\
3999 Create a swap file.
4000
4001 This command just writes a swap file signature to an existing
4002 file.  To create the file itself, use something like C<guestfs_fallocate>.");
4003
4004   ("inotify_init", (RErr, [Int "maxevents"]), 179, [Optional "inotify"],
4005    [InitISOFS, Always, TestRun (
4006       [["inotify_init"; "0"]])],
4007    "create an inotify handle",
4008    "\
4009 This command creates a new inotify handle.
4010 The inotify subsystem can be used to notify events which happen to
4011 objects in the guest filesystem.
4012
4013 C<maxevents> is the maximum number of events which will be
4014 queued up between calls to C<guestfs_inotify_read> or
4015 C<guestfs_inotify_files>.
4016 If this is passed as C<0>, then the kernel (or previously set)
4017 default is used.  For Linux 2.6.29 the default was 16384 events.
4018 Beyond this limit, the kernel throws away events, but records
4019 the fact that it threw them away by setting a flag
4020 C<IN_Q_OVERFLOW> in the returned structure list (see
4021 C<guestfs_inotify_read>).
4022
4023 Before any events are generated, you have to add some
4024 watches to the internal watch list.  See:
4025 C<guestfs_inotify_add_watch>,
4026 C<guestfs_inotify_rm_watch> and
4027 C<guestfs_inotify_watch_all>.
4028
4029 Queued up events should be read periodically by calling
4030 C<guestfs_inotify_read>
4031 (or C<guestfs_inotify_files> which is just a helpful
4032 wrapper around C<guestfs_inotify_read>).  If you don't
4033 read the events out often enough then you risk the internal
4034 queue overflowing.
4035
4036 The handle should be closed after use by calling
4037 C<guestfs_inotify_close>.  This also removes any
4038 watches automatically.
4039
4040 See also L<inotify(7)> for an overview of the inotify interface
4041 as exposed by the Linux kernel, which is roughly what we expose
4042 via libguestfs.  Note that there is one global inotify handle
4043 per libguestfs instance.");
4044
4045   ("inotify_add_watch", (RInt64 "wd", [Pathname "path"; Int "mask"]), 180, [Optional "inotify"],
4046    [InitBasicFS, Always, TestOutputList (
4047       [["inotify_init"; "0"];
4048        ["inotify_add_watch"; "/"; "1073741823"];
4049        ["touch"; "/a"];
4050        ["touch"; "/b"];
4051        ["inotify_files"]], ["a"; "b"])],
4052    "add an inotify watch",
4053    "\
4054 Watch C<path> for the events listed in C<mask>.
4055
4056 Note that if C<path> is a directory then events within that
4057 directory are watched, but this does I<not> happen recursively
4058 (in subdirectories).
4059
4060 Note for non-C or non-Linux callers: the inotify events are
4061 defined by the Linux kernel ABI and are listed in
4062 C</usr/include/sys/inotify.h>.");
4063
4064   ("inotify_rm_watch", (RErr, [Int(*XXX64*) "wd"]), 181, [Optional "inotify"],
4065    [],
4066    "remove an inotify watch",
4067    "\
4068 Remove a previously defined inotify watch.
4069 See C<guestfs_inotify_add_watch>.");
4070
4071   ("inotify_read", (RStructList ("events", "inotify_event"), []), 182, [Optional "inotify"],
4072    [],
4073    "return list of inotify events",
4074    "\
4075 Return the complete queue of events that have happened
4076 since the previous read call.
4077
4078 If no events have happened, this returns an empty list.
4079
4080 I<Note>: In order to make sure that all events have been
4081 read, you must call this function repeatedly until it
4082 returns an empty list.  The reason is that the call will
4083 read events up to the maximum appliance-to-host message
4084 size and leave remaining events in the queue.");
4085
4086   ("inotify_files", (RStringList "paths", []), 183, [Optional "inotify"],
4087    [],
4088    "return list of watched files that had events",
4089    "\
4090 This function is a helpful wrapper around C<guestfs_inotify_read>
4091 which just returns a list of pathnames of objects that were
4092 touched.  The returned pathnames are sorted and deduplicated.");
4093
4094   ("inotify_close", (RErr, []), 184, [Optional "inotify"],
4095    [],
4096    "close the inotify handle",
4097    "\
4098 This closes the inotify handle which was previously
4099 opened by inotify_init.  It removes all watches, throws
4100 away any pending events, and deallocates all resources.");
4101
4102   ("setcon", (RErr, [String "context"]), 185, [Optional "selinux"],
4103    [],
4104    "set SELinux security context",
4105    "\
4106 This sets the SELinux security context of the daemon
4107 to the string C<context>.
4108
4109 See the documentation about SELINUX in L<guestfs(3)>.");
4110
4111   ("getcon", (RString "context", []), 186, [Optional "selinux"],
4112    [],
4113    "get SELinux security context",
4114    "\
4115 This gets the SELinux security context of the daemon.
4116
4117 See the documentation about SELINUX in L<guestfs(3)>,
4118 and C<guestfs_setcon>");
4119
4120   ("mkfs_b", (RErr, [String "fstype"; Int "blocksize"; Device "device"]), 187, [],
4121    [InitEmpty, Always, TestOutput (
4122       [["part_disk"; "/dev/sda"; "mbr"];
4123        ["mkfs_b"; "ext2"; "4096"; "/dev/sda1"];
4124        ["mount_options"; ""; "/dev/sda1"; "/"];
4125        ["write"; "/new"; "new file contents"];
4126        ["cat"; "/new"]], "new file contents");
4127     InitEmpty, Always, TestRun (
4128       [["part_disk"; "/dev/sda"; "mbr"];
4129        ["mkfs_b"; "vfat"; "32768"; "/dev/sda1"]]);
4130     InitEmpty, Always, TestLastFail (
4131       [["part_disk"; "/dev/sda"; "mbr"];
4132        ["mkfs_b"; "vfat"; "32769"; "/dev/sda1"]]);
4133     InitEmpty, Always, TestLastFail (
4134       [["part_disk"; "/dev/sda"; "mbr"];
4135        ["mkfs_b"; "vfat"; "33280"; "/dev/sda1"]]);
4136     InitEmpty, IfAvailable "ntfsprogs", TestRun (
4137       [["part_disk"; "/dev/sda"; "mbr"];
4138        ["mkfs_b"; "ntfs"; "32768"; "/dev/sda1"]])],
4139    "make a filesystem with block size",
4140    "\
4141 This call is similar to C<guestfs_mkfs>, but it allows you to
4142 control the block size of the resulting filesystem.  Supported
4143 block sizes depend on the filesystem type, but typically they
4144 are C<1024>, C<2048> or C<4096> only.
4145
4146 For VFAT and NTFS the C<blocksize> parameter is treated as
4147 the requested cluster size.");
4148
4149   ("mke2journal", (RErr, [Int "blocksize"; Device "device"]), 188, [],
4150    [InitEmpty, Always, TestOutput (
4151       [["sfdiskM"; "/dev/sda"; ",100 ,"];
4152        ["mke2journal"; "4096"; "/dev/sda1"];
4153        ["mke2fs_J"; "ext2"; "4096"; "/dev/sda2"; "/dev/sda1"];
4154        ["mount_options"; ""; "/dev/sda2"; "/"];
4155        ["write"; "/new"; "new file contents"];
4156        ["cat"; "/new"]], "new file contents")],
4157    "make ext2/3/4 external journal",
4158    "\
4159 This creates an ext2 external journal on C<device>.  It is equivalent
4160 to the command:
4161
4162  mke2fs -O journal_dev -b blocksize device");
4163
4164   ("mke2journal_L", (RErr, [Int "blocksize"; String "label"; Device "device"]), 189, [],
4165    [InitEmpty, Always, TestOutput (
4166       [["sfdiskM"; "/dev/sda"; ",100 ,"];
4167        ["mke2journal_L"; "4096"; "JOURNAL"; "/dev/sda1"];
4168        ["mke2fs_JL"; "ext2"; "4096"; "/dev/sda2"; "JOURNAL"];
4169        ["mount_options"; ""; "/dev/sda2"; "/"];
4170        ["write"; "/new"; "new file contents"];
4171        ["cat"; "/new"]], "new file contents")],
4172    "make ext2/3/4 external journal with label",
4173    "\
4174 This creates an ext2 external journal on C<device> with label C<label>.");
4175
4176   ("mke2journal_U", (RErr, [Int "blocksize"; String "uuid"; Device "device"]), 190, [Optional "linuxfsuuid"],
4177    (let uuid = uuidgen () in
4178     [InitEmpty, Always, TestOutput (
4179        [["sfdiskM"; "/dev/sda"; ",100 ,"];
4180         ["mke2journal_U"; "4096"; uuid; "/dev/sda1"];
4181         ["mke2fs_JU"; "ext2"; "4096"; "/dev/sda2"; uuid];
4182         ["mount_options"; ""; "/dev/sda2"; "/"];
4183         ["write"; "/new"; "new file contents"];
4184         ["cat"; "/new"]], "new file contents")]),
4185    "make ext2/3/4 external journal with UUID",
4186    "\
4187 This creates an ext2 external journal on C<device> with UUID C<uuid>.");
4188
4189   ("mke2fs_J", (RErr, [String "fstype"; Int "blocksize"; Device "device"; Device "journal"]), 191, [],
4190    [],
4191    "make ext2/3/4 filesystem with external journal",
4192    "\
4193 This creates an ext2/3/4 filesystem on C<device> with
4194 an external journal on C<journal>.  It is equivalent
4195 to the command:
4196
4197  mke2fs -t fstype -b blocksize -J device=<journal> <device>
4198
4199 See also C<guestfs_mke2journal>.");
4200
4201   ("mke2fs_JL", (RErr, [String "fstype"; Int "blocksize"; Device "device"; String "label"]), 192, [],
4202    [],
4203    "make ext2/3/4 filesystem with external journal",
4204    "\
4205 This creates an ext2/3/4 filesystem on C<device> with
4206 an external journal on the journal labeled C<label>.
4207
4208 See also C<guestfs_mke2journal_L>.");
4209
4210   ("mke2fs_JU", (RErr, [String "fstype"; Int "blocksize"; Device "device"; String "uuid"]), 193, [Optional "linuxfsuuid"],
4211    [],
4212    "make ext2/3/4 filesystem with external journal",
4213    "\
4214 This creates an ext2/3/4 filesystem on C<device> with
4215 an external journal on the journal with UUID C<uuid>.
4216
4217 See also C<guestfs_mke2journal_U>.");
4218
4219   ("modprobe", (RErr, [String "modulename"]), 194, [Optional "linuxmodules"],
4220    [InitNone, Always, TestRun [["modprobe"; "fat"]]],
4221    "load a kernel module",
4222    "\
4223 This loads a kernel module in the appliance.
4224
4225 The kernel module must have been whitelisted when libguestfs
4226 was built (see C<appliance/kmod.whitelist.in> in the source).");
4227
4228   ("echo_daemon", (RString "output", [StringList "words"]), 195, [],
4229    [InitNone, Always, TestOutput (
4230       [["echo_daemon"; "This is a test"]], "This is a test"
4231     )],
4232    "echo arguments back to the client",
4233    "\
4234 This command concatenates the list of C<words> passed with single spaces
4235 between them and returns the resulting string.
4236
4237 You can use this command to test the connection through to the daemon.
4238
4239 See also C<guestfs_ping_daemon>.");
4240
4241   ("find0", (RErr, [Pathname "directory"; FileOut "files"]), 196, [],
4242    [], (* There is a regression test for this. *)
4243    "find all files and directories, returning NUL-separated list",
4244    "\
4245 This command lists out all files and directories, recursively,
4246 starting at C<directory>, placing the resulting list in the
4247 external file called C<files>.
4248
4249 This command works the same way as C<guestfs_find> with the
4250 following exceptions:
4251
4252 =over 4
4253
4254 =item *
4255
4256 The resulting list is written to an external file.
4257
4258 =item *
4259
4260 Items (filenames) in the result are separated
4261 by C<\\0> characters.  See L<find(1)> option I<-print0>.
4262
4263 =item *
4264
4265 This command is not limited in the number of names that it
4266 can return.
4267
4268 =item *
4269
4270 The result list is not sorted.
4271
4272 =back");
4273
4274   ("case_sensitive_path", (RString "rpath", [Pathname "path"]), 197, [],
4275    [InitISOFS, Always, TestOutput (
4276       [["case_sensitive_path"; "/DIRECTORY"]], "/directory");
4277     InitISOFS, Always, TestOutput (
4278       [["case_sensitive_path"; "/DIRECTORY/"]], "/directory");
4279     InitISOFS, Always, TestOutput (
4280       [["case_sensitive_path"; "/Known-1"]], "/known-1");
4281     InitISOFS, Always, TestLastFail (
4282       [["case_sensitive_path"; "/Known-1/"]]);
4283     InitBasicFS, Always, TestOutput (
4284       [["mkdir"; "/a"];
4285        ["mkdir"; "/a/bbb"];
4286        ["touch"; "/a/bbb/c"];
4287        ["case_sensitive_path"; "/A/bbB/C"]], "/a/bbb/c");
4288     InitBasicFS, Always, TestOutput (
4289       [["mkdir"; "/a"];
4290        ["mkdir"; "/a/bbb"];
4291        ["touch"; "/a/bbb/c"];
4292        ["case_sensitive_path"; "/A////bbB/C"]], "/a/bbb/c");
4293     InitBasicFS, Always, TestLastFail (
4294       [["mkdir"; "/a"];
4295        ["mkdir"; "/a/bbb"];
4296        ["touch"; "/a/bbb/c"];
4297        ["case_sensitive_path"; "/A/bbb/../bbb/C"]])],
4298    "return true path on case-insensitive filesystem",
4299    "\
4300 This can be used to resolve case insensitive paths on
4301 a filesystem which is case sensitive.  The use case is
4302 to resolve paths which you have read from Windows configuration
4303 files or the Windows Registry, to the true path.
4304
4305 The command handles a peculiarity of the Linux ntfs-3g
4306 filesystem driver (and probably others), which is that although
4307 the underlying filesystem is case-insensitive, the driver
4308 exports the filesystem to Linux as case-sensitive.
4309
4310 One consequence of this is that special directories such
4311 as C<c:\\windows> may appear as C</WINDOWS> or C</windows>
4312 (or other things) depending on the precise details of how
4313 they were created.  In Windows itself this would not be
4314 a problem.
4315
4316 Bug or feature?  You decide:
4317 L<http://www.tuxera.com/community/ntfs-3g-faq/#posixfilenames1>
4318
4319 This function resolves the true case of each element in the
4320 path and returns the case-sensitive path.
4321
4322 Thus C<guestfs_case_sensitive_path> (\"/Windows/System32\")
4323 might return C<\"/WINDOWS/system32\"> (the exact return value
4324 would depend on details of how the directories were originally
4325 created under Windows).
4326
4327 I<Note>:
4328 This function does not handle drive names, backslashes etc.
4329
4330 See also C<guestfs_realpath>.");
4331
4332   ("vfs_type", (RString "fstype", [Device "device"]), 198, [],
4333    [InitBasicFS, Always, TestOutput (
4334       [["vfs_type"; "/dev/sda1"]], "ext2")],
4335    "get the Linux VFS type corresponding to a mounted device",
4336    "\
4337 This command gets the filesystem type corresponding to
4338 the filesystem on C<device>.
4339
4340 For most filesystems, the result is the name of the Linux
4341 VFS module which would be used to mount this filesystem
4342 if you mounted it without specifying the filesystem type.
4343 For example a string such as C<ext3> or C<ntfs>.");
4344
4345   ("truncate", (RErr, [Pathname "path"]), 199, [],
4346    [InitBasicFS, Always, TestOutputStruct (
4347       [["write"; "/test"; "some stuff so size is not zero"];
4348        ["truncate"; "/test"];
4349        ["stat"; "/test"]], [CompareWithInt ("size", 0)])],
4350    "truncate a file to zero size",
4351    "\
4352 This command truncates C<path> to a zero-length file.  The
4353 file must exist already.");
4354
4355   ("truncate_size", (RErr, [Pathname "path"; Int64 "size"]), 200, [],
4356    [InitBasicFS, Always, TestOutputStruct (
4357       [["touch"; "/test"];
4358        ["truncate_size"; "/test"; "1000"];
4359        ["stat"; "/test"]], [CompareWithInt ("size", 1000)])],
4360    "truncate a file to a particular size",
4361    "\
4362 This command truncates C<path> to size C<size> bytes.  The file
4363 must exist already.
4364
4365 If the current file size is less than C<size> then
4366 the file is extended to the required size with zero bytes.
4367 This creates a sparse file (ie. disk blocks are not allocated
4368 for the file until you write to it).  To create a non-sparse
4369 file of zeroes, use C<guestfs_fallocate64> instead.");
4370
4371   ("utimens", (RErr, [Pathname "path"; Int64 "atsecs"; Int64 "atnsecs"; Int64 "mtsecs"; Int64 "mtnsecs"]), 201, [],
4372    [InitBasicFS, Always, TestOutputStruct (
4373       [["touch"; "/test"];
4374        ["utimens"; "/test"; "12345"; "67890"; "9876"; "5432"];
4375        ["stat"; "/test"]], [CompareWithInt ("mtime", 9876)])],
4376    "set timestamp of a file with nanosecond precision",
4377    "\
4378 This command sets the timestamps of a file with nanosecond
4379 precision.
4380
4381 C<atsecs, atnsecs> are the last access time (atime) in secs and
4382 nanoseconds from the epoch.
4383
4384 C<mtsecs, mtnsecs> are the last modification time (mtime) in
4385 secs and nanoseconds from the epoch.
4386
4387 If the C<*nsecs> field contains the special value C<-1> then
4388 the corresponding timestamp is set to the current time.  (The
4389 C<*secs> field is ignored in this case).
4390
4391 If the C<*nsecs> field contains the special value C<-2> then
4392 the corresponding timestamp is left unchanged.  (The
4393 C<*secs> field is ignored in this case).");
4394
4395   ("mkdir_mode", (RErr, [Pathname "path"; Int "mode"]), 202, [],
4396    [InitBasicFS, Always, TestOutputStruct (
4397       [["mkdir_mode"; "/test"; "0o111"];
4398        ["stat"; "/test"]], [CompareWithInt ("mode", 0o40111)])],
4399    "create a directory with a particular mode",
4400    "\
4401 This command creates a directory, setting the initial permissions
4402 of the directory to C<mode>.
4403
4404 For common Linux filesystems, the actual mode which is set will
4405 be C<mode & ~umask & 01777>.  Non-native-Linux filesystems may
4406 interpret the mode in other ways.
4407
4408 See also C<guestfs_mkdir>, C<guestfs_umask>");
4409
4410   ("lchown", (RErr, [Int "owner"; Int "group"; Pathname "path"]), 203, [],
4411    [], (* XXX *)
4412    "change file owner and group",
4413    "\
4414 Change the file owner to C<owner> and group to C<group>.
4415 This is like C<guestfs_chown> but if C<path> is a symlink then
4416 the link itself is changed, not the target.
4417
4418 Only numeric uid and gid are supported.  If you want to use
4419 names, you will need to locate and parse the password file
4420 yourself (Augeas support makes this relatively easy).");
4421
4422   ("lstatlist", (RStructList ("statbufs", "stat"), [Pathname "path"; StringList "names"]), 204, [],
4423    [], (* XXX *)
4424    "lstat on multiple files",
4425    "\
4426 This call allows you to perform the C<guestfs_lstat> operation
4427 on multiple files, where all files are in the directory C<path>.
4428 C<names> is the list of files from this directory.
4429
4430 On return you get a list of stat structs, with a one-to-one
4431 correspondence to the C<names> list.  If any name did not exist
4432 or could not be lstat'd, then the C<ino> field of that structure
4433 is set to C<-1>.
4434
4435 This call is intended for programs that want to efficiently
4436 list a directory contents without making many round-trips.
4437 See also C<guestfs_lxattrlist> for a similarly efficient call
4438 for getting extended attributes.  Very long directory listings
4439 might cause the protocol message size to be exceeded, causing
4440 this call to fail.  The caller must split up such requests
4441 into smaller groups of names.");
4442
4443   ("lxattrlist", (RStructList ("xattrs", "xattr"), [Pathname "path"; StringList "names"]), 205, [Optional "linuxxattrs"],
4444    [], (* XXX *)
4445    "lgetxattr on multiple files",
4446    "\
4447 This call allows you to get the extended attributes
4448 of multiple files, where all files are in the directory C<path>.
4449 C<names> is the list of files from this directory.
4450
4451 On return you get a flat list of xattr structs which must be
4452 interpreted sequentially.  The first xattr struct always has a zero-length
4453 C<attrname>.  C<attrval> in this struct is zero-length
4454 to indicate there was an error doing C<lgetxattr> for this
4455 file, I<or> is a C string which is a decimal number
4456 (the number of following attributes for this file, which could
4457 be C<\"0\">).  Then after the first xattr struct are the
4458 zero or more attributes for the first named file.
4459 This repeats for the second and subsequent files.
4460
4461 This call is intended for programs that want to efficiently
4462 list a directory contents without making many round-trips.
4463 See also C<guestfs_lstatlist> for a similarly efficient call
4464 for getting standard stats.  Very long directory listings
4465 might cause the protocol message size to be exceeded, causing
4466 this call to fail.  The caller must split up such requests
4467 into smaller groups of names.");
4468
4469   ("readlinklist", (RStringList "links", [Pathname "path"; StringList "names"]), 206, [],
4470    [], (* XXX *)
4471    "readlink on multiple files",
4472    "\
4473 This call allows you to do a C<readlink> operation
4474 on multiple files, where all files are in the directory C<path>.
4475 C<names> is the list of files from this directory.
4476
4477 On return you get a list of strings, with a one-to-one
4478 correspondence to the C<names> list.  Each string is the
4479 value of the symbolic link.
4480
4481 If the C<readlink(2)> operation fails on any name, then
4482 the corresponding result string is the empty string C<\"\">.
4483 However the whole operation is completed even if there
4484 were C<readlink(2)> errors, and so you can call this
4485 function with names where you don't know if they are
4486 symbolic links already (albeit slightly less efficient).
4487
4488 This call is intended for programs that want to efficiently
4489 list a directory contents without making many round-trips.
4490 Very long directory listings might cause the protocol
4491 message size to be exceeded, causing
4492 this call to fail.  The caller must split up such requests
4493 into smaller groups of names.");
4494
4495   ("pread", (RBufferOut "content", [Pathname "path"; Int "count"; Int64 "offset"]), 207, [ProtocolLimitWarning],
4496    [InitISOFS, Always, TestOutputBuffer (
4497       [["pread"; "/known-4"; "1"; "3"]], "\n");
4498     InitISOFS, Always, TestOutputBuffer (
4499       [["pread"; "/empty"; "0"; "100"]], "")],
4500    "read part of a file",
4501    "\
4502 This command lets you read part of a file.  It reads C<count>
4503 bytes of the file, starting at C<offset>, from file C<path>.
4504
4505 This may read fewer bytes than requested.  For further details
4506 see the L<pread(2)> system call.
4507
4508 See also C<guestfs_pwrite>.");
4509
4510   ("part_init", (RErr, [Device "device"; String "parttype"]), 208, [],
4511    [InitEmpty, Always, TestRun (
4512       [["part_init"; "/dev/sda"; "gpt"]])],
4513    "create an empty partition table",
4514    "\
4515 This creates an empty partition table on C<device> of one of the
4516 partition types listed below.  Usually C<parttype> should be
4517 either C<msdos> or C<gpt> (for large disks).
4518
4519 Initially there are no partitions.  Following this, you should
4520 call C<guestfs_part_add> for each partition required.
4521
4522 Possible values for C<parttype> are:
4523
4524 =over 4
4525
4526 =item B<efi> | B<gpt>
4527
4528 Intel EFI / GPT partition table.
4529
4530 This is recommended for >= 2 TB partitions that will be accessed
4531 from Linux and Intel-based Mac OS X.  It also has limited backwards
4532 compatibility with the C<mbr> format.
4533
4534 =item B<mbr> | B<msdos>
4535
4536 The standard PC \"Master Boot Record\" (MBR) format used
4537 by MS-DOS and Windows.  This partition type will B<only> work
4538 for device sizes up to 2 TB.  For large disks we recommend
4539 using C<gpt>.
4540
4541 =back
4542
4543 Other partition table types that may work but are not
4544 supported include:
4545
4546 =over 4
4547
4548 =item B<aix>
4549
4550 AIX disk labels.
4551
4552 =item B<amiga> | B<rdb>
4553
4554 Amiga \"Rigid Disk Block\" format.
4555
4556 =item B<bsd>
4557
4558 BSD disk labels.
4559
4560 =item B<dasd>
4561
4562 DASD, used on IBM mainframes.
4563
4564 =item B<dvh>
4565
4566 MIPS/SGI volumes.
4567
4568 =item B<mac>
4569
4570 Old Mac partition format.  Modern Macs use C<gpt>.
4571
4572 =item B<pc98>
4573
4574 NEC PC-98 format, common in Japan apparently.
4575
4576 =item B<sun>
4577
4578 Sun disk labels.
4579
4580 =back");
4581
4582   ("part_add", (RErr, [Device "device"; String "prlogex"; Int64 "startsect"; Int64 "endsect"]), 209, [],
4583    [InitEmpty, Always, TestRun (
4584       [["part_init"; "/dev/sda"; "mbr"];
4585        ["part_add"; "/dev/sda"; "primary"; "1"; "-1"]]);
4586     InitEmpty, Always, TestRun (
4587       [["part_init"; "/dev/sda"; "gpt"];
4588        ["part_add"; "/dev/sda"; "primary"; "34"; "127"];
4589        ["part_add"; "/dev/sda"; "primary"; "128"; "-34"]]);
4590     InitEmpty, Always, TestRun (
4591       [["part_init"; "/dev/sda"; "mbr"];
4592        ["part_add"; "/dev/sda"; "primary"; "32"; "127"];
4593        ["part_add"; "/dev/sda"; "primary"; "128"; "255"];
4594        ["part_add"; "/dev/sda"; "primary"; "256"; "511"];
4595        ["part_add"; "/dev/sda"; "primary"; "512"; "-1"]])],
4596    "add a partition to the device",
4597    "\
4598 This command adds a partition to C<device>.  If there is no partition
4599 table on the device, call C<guestfs_part_init> first.
4600
4601 The C<prlogex> parameter is the type of partition.  Normally you
4602 should pass C<p> or C<primary> here, but MBR partition tables also
4603 support C<l> (or C<logical>) and C<e> (or C<extended>) partition
4604 types.
4605
4606 C<startsect> and C<endsect> are the start and end of the partition
4607 in I<sectors>.  C<endsect> may be negative, which means it counts
4608 backwards from the end of the disk (C<-1> is the last sector).
4609
4610 Creating a partition which covers the whole disk is not so easy.
4611 Use C<guestfs_part_disk> to do that.");
4612
4613   ("part_disk", (RErr, [Device "device"; String "parttype"]), 210, [DangerWillRobinson],
4614    [InitEmpty, Always, TestRun (
4615       [["part_disk"; "/dev/sda"; "mbr"]]);
4616     InitEmpty, Always, TestRun (
4617       [["part_disk"; "/dev/sda"; "gpt"]])],
4618    "partition whole disk with a single primary partition",
4619    "\
4620 This command is simply a combination of C<guestfs_part_init>
4621 followed by C<guestfs_part_add> to create a single primary partition
4622 covering the whole disk.
4623
4624 C<parttype> is the partition table type, usually C<mbr> or C<gpt>,
4625 but other possible values are described in C<guestfs_part_init>.");
4626
4627   ("part_set_bootable", (RErr, [Device "device"; Int "partnum"; Bool "bootable"]), 211, [],
4628    [InitEmpty, Always, TestRun (
4629       [["part_disk"; "/dev/sda"; "mbr"];
4630        ["part_set_bootable"; "/dev/sda"; "1"; "true"]])],
4631    "make a partition bootable",
4632    "\
4633 This sets the bootable flag on partition numbered C<partnum> on
4634 device C<device>.  Note that partitions are numbered from 1.
4635
4636 The bootable flag is used by some operating systems (notably
4637 Windows) to determine which partition to boot from.  It is by
4638 no means universally recognized.");
4639
4640   ("part_set_name", (RErr, [Device "device"; Int "partnum"; String "name"]), 212, [],
4641    [InitEmpty, Always, TestRun (
4642       [["part_disk"; "/dev/sda"; "gpt"];
4643        ["part_set_name"; "/dev/sda"; "1"; "thepartname"]])],
4644    "set partition name",
4645    "\
4646 This sets the partition name on partition numbered C<partnum> on
4647 device C<device>.  Note that partitions are numbered from 1.
4648
4649 The partition name can only be set on certain types of partition
4650 table.  This works on C<gpt> but not on C<mbr> partitions.");
4651
4652   ("part_list", (RStructList ("partitions", "partition"), [Device "device"]), 213, [],
4653    [], (* XXX Add a regression test for this. *)
4654    "list partitions on a device",
4655    "\
4656 This command parses the partition table on C<device> and
4657 returns the list of partitions found.
4658
4659 The fields in the returned structure are:
4660
4661 =over 4
4662
4663 =item B<part_num>
4664
4665 Partition number, counting from 1.
4666
4667 =item B<part_start>
4668
4669 Start of the partition I<in bytes>.  To get sectors you have to
4670 divide by the device's sector size, see C<guestfs_blockdev_getss>.
4671
4672 =item B<part_end>
4673
4674 End of the partition in bytes.
4675
4676 =item B<part_size>
4677
4678 Size of the partition in bytes.
4679
4680 =back");
4681
4682   ("part_get_parttype", (RString "parttype", [Device "device"]), 214, [],
4683    [InitEmpty, Always, TestOutput (
4684       [["part_disk"; "/dev/sda"; "gpt"];
4685        ["part_get_parttype"; "/dev/sda"]], "gpt")],
4686    "get the partition table type",
4687    "\
4688 This command examines the partition table on C<device> and
4689 returns the partition table type (format) being used.
4690
4691 Common return values include: C<msdos> (a DOS/Windows style MBR
4692 partition table), C<gpt> (a GPT/EFI-style partition table).  Other
4693 values are possible, although unusual.  See C<guestfs_part_init>
4694 for a full list.");
4695
4696   ("fill", (RErr, [Int "c"; Int "len"; Pathname "path"]), 215, [Progress],
4697    [InitBasicFS, Always, TestOutputBuffer (
4698       [["fill"; "0x63"; "10"; "/test"];
4699        ["read_file"; "/test"]], "cccccccccc")],
4700    "fill a file with octets",
4701    "\
4702 This command creates a new file called C<path>.  The initial
4703 content of the file is C<len> octets of C<c>, where C<c>
4704 must be a number in the range C<[0..255]>.
4705
4706 To fill a file with zero bytes (sparsely), it is
4707 much more efficient to use C<guestfs_truncate_size>.
4708 To create a file with a pattern of repeating bytes
4709 use C<guestfs_fill_pattern>.");
4710
4711   ("available", (RErr, [StringList "groups"]), 216, [],
4712    [InitNone, Always, TestRun [["available"; ""]]],
4713    "test availability of some parts of the API",
4714    "\
4715 This command is used to check the availability of some
4716 groups of functionality in the appliance, which not all builds of
4717 the libguestfs appliance will be able to provide.
4718
4719 The libguestfs groups, and the functions that those
4720 groups correspond to, are listed in L<guestfs(3)/AVAILABILITY>.
4721 You can also fetch this list at runtime by calling
4722 C<guestfs_available_all_groups>.
4723
4724 The argument C<groups> is a list of group names, eg:
4725 C<[\"inotify\", \"augeas\"]> would check for the availability of
4726 the Linux inotify functions and Augeas (configuration file
4727 editing) functions.
4728
4729 The command returns no error if I<all> requested groups are available.
4730
4731 It fails with an error if one or more of the requested
4732 groups is unavailable in the appliance.
4733
4734 If an unknown group name is included in the
4735 list of groups then an error is always returned.
4736
4737 I<Notes:>
4738
4739 =over 4
4740
4741 =item *
4742
4743 You must call C<guestfs_launch> before calling this function.
4744
4745 The reason is because we don't know what groups are
4746 supported by the appliance/daemon until it is running and can
4747 be queried.
4748
4749 =item *
4750
4751 If a group of functions is available, this does not necessarily
4752 mean that they will work.  You still have to check for errors
4753 when calling individual API functions even if they are
4754 available.
4755
4756 =item *
4757
4758 It is usually the job of distro packagers to build
4759 complete functionality into the libguestfs appliance.
4760 Upstream libguestfs, if built from source with all
4761 requirements satisfied, will support everything.
4762
4763 =item *
4764
4765 This call was added in version C<1.0.80>.  In previous
4766 versions of libguestfs all you could do would be to speculatively
4767 execute a command to find out if the daemon implemented it.
4768 See also C<guestfs_version>.
4769
4770 =back");
4771
4772   ("dd", (RErr, [Dev_or_Path "src"; Dev_or_Path "dest"]), 217, [],
4773    [InitBasicFS, Always, TestOutputBuffer (
4774       [["write"; "/src"; "hello, world"];
4775        ["dd"; "/src"; "/dest"];
4776        ["read_file"; "/dest"]], "hello, world")],
4777    "copy from source to destination using dd",
4778    "\
4779 This command copies from one source device or file C<src>
4780 to another destination device or file C<dest>.  Normally you
4781 would use this to copy to or from a device or partition, for
4782 example to duplicate a filesystem.
4783
4784 If the destination is a device, it must be as large or larger
4785 than the source file or device, otherwise the copy will fail.
4786 This command cannot do partial copies (see C<guestfs_copy_size>).");
4787
4788   ("filesize", (RInt64 "size", [Pathname "file"]), 218, [],
4789    [InitBasicFS, Always, TestOutputInt (
4790       [["write"; "/file"; "hello, world"];
4791        ["filesize"; "/file"]], 12)],
4792    "return the size of the file in bytes",
4793    "\
4794 This command returns the size of C<file> in bytes.
4795
4796 To get other stats about a file, use C<guestfs_stat>, C<guestfs_lstat>,
4797 C<guestfs_is_dir>, C<guestfs_is_file> etc.
4798 To get the size of block devices, use C<guestfs_blockdev_getsize64>.");
4799
4800   ("lvrename", (RErr, [String "logvol"; String "newlogvol"]), 219, [],
4801    [InitBasicFSonLVM, Always, TestOutputList (
4802       [["lvrename"; "/dev/VG/LV"; "/dev/VG/LV2"];
4803        ["lvs"]], ["/dev/VG/LV2"])],
4804    "rename an LVM logical volume",
4805    "\
4806 Rename a logical volume C<logvol> with the new name C<newlogvol>.");
4807
4808   ("vgrename", (RErr, [String "volgroup"; String "newvolgroup"]), 220, [],
4809    [InitBasicFSonLVM, Always, TestOutputList (
4810       [["umount"; "/"];
4811        ["vg_activate"; "false"; "VG"];
4812        ["vgrename"; "VG"; "VG2"];
4813        ["vg_activate"; "true"; "VG2"];
4814        ["mount_options"; ""; "/dev/VG2/LV"; "/"];
4815        ["vgs"]], ["VG2"])],
4816    "rename an LVM volume group",
4817    "\
4818 Rename a volume group C<volgroup> with the new name C<newvolgroup>.");
4819
4820   ("initrd_cat", (RBufferOut "content", [Pathname "initrdpath"; String "filename"]), 221, [ProtocolLimitWarning],
4821    [InitISOFS, Always, TestOutputBuffer (
4822       [["initrd_cat"; "/initrd"; "known-4"]], "abc\ndef\nghi")],
4823    "list the contents of a single file in an initrd",
4824    "\
4825 This command unpacks the file C<filename> from the initrd file
4826 called C<initrdpath>.  The filename must be given I<without> the
4827 initial C</> character.
4828
4829 For example, in guestfish you could use the following command
4830 to examine the boot script (usually called C</init>)
4831 contained in a Linux initrd or initramfs image:
4832
4833  initrd-cat /boot/initrd-<version>.img init
4834
4835 See also C<guestfs_initrd_list>.");
4836
4837   ("pvuuid", (RString "uuid", [Device "device"]), 222, [],
4838    [],
4839    "get the UUID of a physical volume",
4840    "\
4841 This command returns the UUID of the LVM PV C<device>.");
4842
4843   ("vguuid", (RString "uuid", [String "vgname"]), 223, [],
4844    [],
4845    "get the UUID of a volume group",
4846    "\
4847 This command returns the UUID of the LVM VG named C<vgname>.");
4848
4849   ("lvuuid", (RString "uuid", [Device "device"]), 224, [],
4850    [],
4851    "get the UUID of a logical volume",
4852    "\
4853 This command returns the UUID of the LVM LV C<device>.");
4854
4855   ("vgpvuuids", (RStringList "uuids", [String "vgname"]), 225, [],
4856    [],
4857    "get the PV UUIDs containing the volume group",
4858    "\
4859 Given a VG called C<vgname>, this returns the UUIDs of all
4860 the physical volumes that this volume group resides on.
4861
4862 You can use this along with C<guestfs_pvs> and C<guestfs_pvuuid>
4863 calls to associate physical volumes and volume groups.
4864
4865 See also C<guestfs_vglvuuids>.");
4866
4867   ("vglvuuids", (RStringList "uuids", [String "vgname"]), 226, [],
4868    [],
4869    "get the LV UUIDs of all LVs in the volume group",
4870    "\
4871 Given a VG called C<vgname>, this returns the UUIDs of all
4872 the logical volumes created in this volume group.
4873
4874 You can use this along with C<guestfs_lvs> and C<guestfs_lvuuid>
4875 calls to associate logical volumes and volume groups.
4876
4877 See also C<guestfs_vgpvuuids>.");
4878
4879   ("copy_size", (RErr, [Dev_or_Path "src"; Dev_or_Path "dest"; Int64 "size"]), 227, [Progress],
4880    [InitBasicFS, Always, TestOutputBuffer (
4881       [["write"; "/src"; "hello, world"];
4882        ["copy_size"; "/src"; "/dest"; "5"];
4883        ["read_file"; "/dest"]], "hello")],
4884    "copy size bytes from source to destination using dd",
4885    "\
4886 This command copies exactly C<size> bytes from one source device
4887 or file C<src> to another destination device or file C<dest>.
4888
4889 Note this will fail if the source is too short or if the destination
4890 is not large enough.");
4891
4892   ("zero_device", (RErr, [Device "device"]), 228, [DangerWillRobinson; Progress],
4893    [InitBasicFSonLVM, Always, TestRun (
4894       [["zero_device"; "/dev/VG/LV"]])],
4895    "write zeroes to an entire device",
4896    "\
4897 This command writes zeroes over the entire C<device>.  Compare
4898 with C<guestfs_zero> which just zeroes the first few blocks of
4899 a device.");
4900
4901   ("txz_in", (RErr, [FileIn "tarball"; Pathname "directory"]), 229, [Optional "xz"],
4902    [InitBasicFS, Always, TestOutput (
4903       [["txz_in"; "../images/helloworld.tar.xz"; "/"];
4904        ["cat"; "/hello"]], "hello\n")],
4905    "unpack compressed tarball to directory",
4906    "\
4907 This command uploads and unpacks local file C<tarball> (an
4908 I<xz compressed> tar file) into C<directory>.");
4909
4910   ("txz_out", (RErr, [Pathname "directory"; FileOut "tarball"]), 230, [Optional "xz"],
4911    [],
4912    "pack directory into compressed tarball",
4913    "\
4914 This command packs the contents of C<directory> and downloads
4915 it to local file C<tarball> (as an xz compressed tar archive).");
4916
4917   ("ntfsresize", (RErr, [Device "device"]), 231, [Optional "ntfsprogs"],
4918    [],
4919    "resize an NTFS filesystem",
4920    "\
4921 This command resizes an NTFS filesystem, expanding or
4922 shrinking it to the size of the underlying device.
4923 See also L<ntfsresize(8)>.");
4924
4925   ("vgscan", (RErr, []), 232, [],
4926    [InitEmpty, Always, TestRun (
4927       [["vgscan"]])],
4928    "rescan for LVM physical volumes, volume groups and logical volumes",
4929    "\
4930 This rescans all block devices and rebuilds the list of LVM
4931 physical volumes, volume groups and logical volumes.");
4932
4933   ("part_del", (RErr, [Device "device"; Int "partnum"]), 233, [],
4934    [InitEmpty, Always, TestRun (
4935       [["part_init"; "/dev/sda"; "mbr"];
4936        ["part_add"; "/dev/sda"; "primary"; "1"; "-1"];
4937        ["part_del"; "/dev/sda"; "1"]])],
4938    "delete a partition",
4939    "\
4940 This command deletes the partition numbered C<partnum> on C<device>.
4941
4942 Note that in the case of MBR partitioning, deleting an
4943 extended partition also deletes any logical partitions
4944 it contains.");
4945
4946   ("part_get_bootable", (RBool "bootable", [Device "device"; Int "partnum"]), 234, [],
4947    [InitEmpty, Always, TestOutputTrue (
4948       [["part_init"; "/dev/sda"; "mbr"];
4949        ["part_add"; "/dev/sda"; "primary"; "1"; "-1"];
4950        ["part_set_bootable"; "/dev/sda"; "1"; "true"];
4951        ["part_get_bootable"; "/dev/sda"; "1"]])],
4952    "return true if a partition is bootable",
4953    "\
4954 This command returns true if the partition C<partnum> on
4955 C<device> has the bootable flag set.
4956
4957 See also C<guestfs_part_set_bootable>.");
4958
4959   ("part_get_mbr_id", (RInt "idbyte", [Device "device"; Int "partnum"]), 235, [FishOutput FishOutputHexadecimal],
4960    [InitEmpty, Always, TestOutputInt (
4961       [["part_init"; "/dev/sda"; "mbr"];
4962        ["part_add"; "/dev/sda"; "primary"; "1"; "-1"];
4963        ["part_set_mbr_id"; "/dev/sda"; "1"; "0x7f"];
4964        ["part_get_mbr_id"; "/dev/sda"; "1"]], 0x7f)],
4965    "get the MBR type byte (ID byte) from a partition",
4966    "\
4967 Returns the MBR type byte (also known as the ID byte) from
4968 the numbered partition C<partnum>.
4969
4970 Note that only MBR (old DOS-style) partitions have type bytes.
4971 You will get undefined results for other partition table
4972 types (see C<guestfs_part_get_parttype>).");
4973
4974   ("part_set_mbr_id", (RErr, [Device "device"; Int "partnum"; Int "idbyte"]), 236, [],
4975    [], (* tested by part_get_mbr_id *)
4976    "set the MBR type byte (ID byte) of a partition",
4977    "\
4978 Sets the MBR type byte (also known as the ID byte) of
4979 the numbered partition C<partnum> to C<idbyte>.  Note
4980 that the type bytes quoted in most documentation are
4981 in fact hexadecimal numbers, but usually documented
4982 without any leading \"0x\" which might be confusing.
4983
4984 Note that only MBR (old DOS-style) partitions have type bytes.
4985 You will get undefined results for other partition table
4986 types (see C<guestfs_part_get_parttype>).");
4987
4988   ("checksum_device", (RString "checksum", [String "csumtype"; Device "device"]), 237, [],
4989    [InitISOFS, Always, TestOutput (
4990       [["checksum_device"; "md5"; "/dev/sdd"]],
4991       (Digest.to_hex (Digest.file "images/test.iso")))],
4992    "compute MD5, SHAx or CRC checksum of the contents of a device",
4993    "\
4994 This call computes the MD5, SHAx or CRC checksum of the
4995 contents of the device named C<device>.  For the types of
4996 checksums supported see the C<guestfs_checksum> command.");
4997
4998   ("lvresize_free", (RErr, [Device "lv"; Int "percent"]), 238, [Optional "lvm2"],
4999    [InitNone, Always, TestRun (
5000       [["part_disk"; "/dev/sda"; "mbr"];
5001        ["pvcreate"; "/dev/sda1"];
5002        ["vgcreate"; "VG"; "/dev/sda1"];
5003        ["lvcreate"; "LV"; "VG"; "10"];
5004        ["lvresize_free"; "/dev/VG/LV"; "100"]])],
5005    "expand an LV to fill free space",
5006    "\
5007 This expands an existing logical volume C<lv> so that it fills
5008 C<pc>% of the remaining free space in the volume group.  Commonly
5009 you would call this with pc = 100 which expands the logical volume
5010 as much as possible, using all remaining free space in the volume
5011 group.");
5012
5013   ("aug_clear", (RErr, [String "augpath"]), 239, [Optional "augeas"],
5014    [], (* XXX Augeas code needs tests. *)
5015    "clear Augeas path",
5016    "\
5017 Set the value associated with C<path> to C<NULL>.  This
5018 is the same as the L<augtool(1)> C<clear> command.");
5019
5020   ("get_umask", (RInt "mask", []), 240, [FishOutput FishOutputOctal],
5021    [InitEmpty, Always, TestOutputInt (
5022       [["get_umask"]], 0o22)],
5023    "get the current umask",
5024    "\
5025 Return the current umask.  By default the umask is C<022>
5026 unless it has been set by calling C<guestfs_umask>.");
5027
5028   ("debug_upload", (RErr, [FileIn "filename"; String "tmpname"; Int "mode"]), 241, [],
5029    [],
5030    "upload a file to the appliance (internal use only)",
5031    "\
5032 The C<guestfs_debug_upload> command uploads a file to
5033 the libguestfs appliance.
5034
5035 There is no comprehensive help for this command.  You have
5036 to look at the file C<daemon/debug.c> in the libguestfs source
5037 to find out what it is for.");
5038
5039   ("base64_in", (RErr, [FileIn "base64file"; Pathname "filename"]), 242, [],
5040    [InitBasicFS, Always, TestOutput (
5041       [["base64_in"; "../images/hello.b64"; "/hello"];
5042        ["cat"; "/hello"]], "hello\n")],
5043    "upload base64-encoded data to file",
5044    "\
5045 This command uploads base64-encoded data from C<base64file>
5046 to C<filename>.");
5047
5048   ("base64_out", (RErr, [Pathname "filename"; FileOut "base64file"]), 243, [],
5049    [],
5050    "download file and encode as base64",
5051    "\
5052 This command downloads the contents of C<filename>, writing
5053 it out to local file C<base64file> encoded as base64.");
5054
5055   ("checksums_out", (RErr, [String "csumtype"; Pathname "directory"; FileOut "sumsfile"]), 244, [],
5056    [],
5057    "compute MD5, SHAx or CRC checksum of files in a directory",
5058    "\
5059 This command computes the checksums of all regular files in
5060 C<directory> and then emits a list of those checksums to
5061 the local output file C<sumsfile>.
5062
5063 This can be used for verifying the integrity of a virtual
5064 machine.  However to be properly secure you should pay
5065 attention to the output of the checksum command (it uses
5066 the ones from GNU coreutils).  In particular when the
5067 filename is not printable, coreutils uses a special
5068 backslash syntax.  For more information, see the GNU
5069 coreutils info file.");
5070
5071   ("fill_pattern", (RErr, [String "pattern"; Int "len"; Pathname "path"]), 245, [Progress],
5072    [InitBasicFS, Always, TestOutputBuffer (
5073       [["fill_pattern"; "abcdefghijklmnopqrstuvwxyz"; "28"; "/test"];
5074        ["read_file"; "/test"]], "abcdefghijklmnopqrstuvwxyzab")],
5075    "fill a file with a repeating pattern of bytes",
5076    "\
5077 This function is like C<guestfs_fill> except that it creates
5078 a new file of length C<len> containing the repeating pattern
5079 of bytes in C<pattern>.  The pattern is truncated if necessary
5080 to ensure the length of the file is exactly C<len> bytes.");
5081
5082   ("write", (RErr, [Pathname "path"; BufferIn "content"]), 246, [ProtocolLimitWarning],
5083    [InitBasicFS, Always, TestOutput (
5084       [["write"; "/new"; "new file contents"];
5085        ["cat"; "/new"]], "new file contents");
5086     InitBasicFS, Always, TestOutput (
5087       [["write"; "/new"; "\nnew file contents\n"];
5088        ["cat"; "/new"]], "\nnew file contents\n");
5089     InitBasicFS, Always, TestOutput (
5090       [["write"; "/new"; "\n\n"];
5091        ["cat"; "/new"]], "\n\n");
5092     InitBasicFS, Always, TestOutput (
5093       [["write"; "/new"; ""];
5094        ["cat"; "/new"]], "");
5095     InitBasicFS, Always, TestOutput (
5096       [["write"; "/new"; "\n\n\n"];
5097        ["cat"; "/new"]], "\n\n\n");
5098     InitBasicFS, Always, TestOutput (
5099       [["write"; "/new"; "\n"];
5100        ["cat"; "/new"]], "\n")],
5101    "create a new file",
5102    "\
5103 This call creates a file called C<path>.  The content of the
5104 file is the string C<content> (which can contain any 8 bit data).");
5105
5106   ("pwrite", (RInt "nbytes", [Pathname "path"; BufferIn "content"; Int64 "offset"]), 247, [ProtocolLimitWarning],
5107    [InitBasicFS, Always, TestOutput (
5108       [["write"; "/new"; "new file contents"];
5109        ["pwrite"; "/new"; "data"; "4"];
5110        ["cat"; "/new"]], "new data contents");
5111     InitBasicFS, Always, TestOutput (
5112       [["write"; "/new"; "new file contents"];
5113        ["pwrite"; "/new"; "is extended"; "9"];
5114        ["cat"; "/new"]], "new file is extended");
5115     InitBasicFS, Always, TestOutput (
5116       [["write"; "/new"; "new file contents"];
5117        ["pwrite"; "/new"; ""; "4"];
5118        ["cat"; "/new"]], "new file contents")],
5119    "write to part of a file",
5120    "\
5121 This command writes to part of a file.  It writes the data
5122 buffer C<content> to the file C<path> starting at offset C<offset>.
5123
5124 This command implements the L<pwrite(2)> system call, and like
5125 that system call it may not write the full data requested.  The
5126 return value is the number of bytes that were actually written
5127 to the file.  This could even be 0, although short writes are
5128 unlikely for regular files in ordinary circumstances.
5129
5130 See also C<guestfs_pread>.");
5131
5132   ("resize2fs_size", (RErr, [Device "device"; Int64 "size"]), 248, [],
5133    [],
5134    "resize an ext2, ext3 or ext4 filesystem (with size)",
5135    "\
5136 This command is the same as C<guestfs_resize2fs> except that it
5137 allows you to specify the new size (in bytes) explicitly.");
5138
5139   ("pvresize_size", (RErr, [Device "device"; Int64 "size"]), 249, [Optional "lvm2"],
5140    [],
5141    "resize an LVM physical volume (with size)",
5142    "\
5143 This command is the same as C<guestfs_pvresize> except that it
5144 allows you to specify the new size (in bytes) explicitly.");
5145
5146   ("ntfsresize_size", (RErr, [Device "device"; Int64 "size"]), 250, [Optional "ntfsprogs"],
5147    [],
5148    "resize an NTFS filesystem (with size)",
5149    "\
5150 This command is the same as C<guestfs_ntfsresize> except that it
5151 allows you to specify the new size (in bytes) explicitly.");
5152
5153   ("available_all_groups", (RStringList "groups", []), 251, [],
5154    [InitNone, Always, TestRun [["available_all_groups"]]],
5155    "return a list of all optional groups",
5156    "\
5157 This command returns a list of all optional groups that this
5158 daemon knows about.  Note this returns both supported and unsupported
5159 groups.  To find out which ones the daemon can actually support
5160 you have to call C<guestfs_available> on each member of the
5161 returned list.
5162
5163 See also C<guestfs_available> and L<guestfs(3)/AVAILABILITY>.");
5164
5165   ("fallocate64", (RErr, [Pathname "path"; Int64 "len"]), 252, [],
5166    [InitBasicFS, Always, TestOutputStruct (
5167       [["fallocate64"; "/a"; "1000000"];
5168        ["stat"; "/a"]], [CompareWithInt ("size", 1_000_000)])],
5169    "preallocate a file in the guest filesystem",
5170    "\
5171 This command preallocates a file (containing zero bytes) named
5172 C<path> of size C<len> bytes.  If the file exists already, it
5173 is overwritten.
5174
5175 Note that this call allocates disk blocks for the file.
5176 To create a sparse file use C<guestfs_truncate_size> instead.
5177
5178 The deprecated call C<guestfs_fallocate> does the same,
5179 but owing to an oversight it only allowed 30 bit lengths
5180 to be specified, effectively limiting the maximum size
5181 of files created through that call to 1GB.
5182
5183 Do not confuse this with the guestfish-specific
5184 C<alloc> and C<sparse> commands which create
5185 a file in the host and attach it as a device.");
5186
5187   ("vfs_label", (RString "label", [Device "device"]), 253, [],
5188    [InitBasicFS, Always, TestOutput (
5189        [["set_e2label"; "/dev/sda1"; "LTEST"];
5190         ["vfs_label"; "/dev/sda1"]], "LTEST")],
5191    "get the filesystem label",
5192    "\
5193 This returns the filesystem label of the filesystem on
5194 C<device>.
5195
5196 If the filesystem is unlabeled, this returns the empty string.
5197
5198 To find a filesystem from the label, use C<guestfs_findfs_label>.");
5199
5200   ("vfs_uuid", (RString "uuid", [Device "device"]), 254, [],
5201    (let uuid = uuidgen () in
5202     [InitBasicFS, Always, TestOutput (
5203        [["set_e2uuid"; "/dev/sda1"; uuid];
5204         ["vfs_uuid"; "/dev/sda1"]], uuid)]),
5205    "get the filesystem UUID",
5206    "\
5207 This returns the filesystem UUID of the filesystem on
5208 C<device>.
5209
5210 If the filesystem does not have a UUID, this returns the empty string.
5211
5212 To find a filesystem from the UUID, use C<guestfs_findfs_uuid>.");
5213
5214   ("lvm_set_filter", (RErr, [DeviceList "devices"]), 255, [Optional "lvm2"],
5215    (* Can't be tested with the current framework because
5216     * the VG is being used by the mounted filesystem, so
5217     * the vgchange -an command we do first will fail.
5218     *)
5219     [],
5220    "set LVM device filter",
5221    "\
5222 This sets the LVM device filter so that LVM will only be
5223 able to \"see\" the block devices in the list C<devices>,
5224 and will ignore all other attached block devices.
5225
5226 Where disk image(s) contain duplicate PVs or VGs, this
5227 command is useful to get LVM to ignore the duplicates, otherwise
5228 LVM can get confused.  Note also there are two types
5229 of duplication possible: either cloned PVs/VGs which have
5230 identical UUIDs; or VGs that are not cloned but just happen
5231 to have the same name.  In normal operation you cannot
5232 create this situation, but you can do it outside LVM, eg.
5233 by cloning disk images or by bit twiddling inside the LVM
5234 metadata.
5235
5236 This command also clears the LVM cache and performs a volume
5237 group scan.
5238
5239 You can filter whole block devices or individual partitions.
5240
5241 You cannot use this if any VG is currently in use (eg.
5242 contains a mounted filesystem), even if you are not
5243 filtering out that VG.");
5244
5245   ("lvm_clear_filter", (RErr, []), 256, [],
5246    [], (* see note on lvm_set_filter *)
5247    "clear LVM device filter",
5248    "\
5249 This undoes the effect of C<guestfs_lvm_set_filter>.  LVM
5250 will be able to see every block device.
5251
5252 This command also clears the LVM cache and performs a volume
5253 group scan.");
5254
5255   ("luks_open", (RErr, [Device "device"; Key "key"; String "mapname"]), 257, [Optional "luks"],
5256    [],
5257    "open a LUKS-encrypted block device",
5258    "\
5259 This command opens a block device which has been encrypted
5260 according to the Linux Unified Key Setup (LUKS) standard.
5261
5262 C<device> is the encrypted block device or partition.
5263
5264 The caller must supply one of the keys associated with the
5265 LUKS block device, in the C<key> parameter.
5266
5267 This creates a new block device called C</dev/mapper/mapname>.
5268 Reads and writes to this block device are decrypted from and
5269 encrypted to the underlying C<device> respectively.
5270
5271 If this block device contains LVM volume groups, then
5272 calling C<guestfs_vgscan> followed by C<guestfs_vg_activate_all>
5273 will make them visible.");
5274
5275   ("luks_open_ro", (RErr, [Device "device"; Key "key"; String "mapname"]), 258, [Optional "luks"],
5276    [],
5277    "open a LUKS-encrypted block device read-only",
5278    "\
5279 This is the same as C<guestfs_luks_open> except that a read-only
5280 mapping is created.");
5281
5282   ("luks_close", (RErr, [Device "device"]), 259, [Optional "luks"],
5283    [],
5284    "close a LUKS device",
5285    "\
5286 This closes a LUKS device that was created earlier by
5287 C<guestfs_luks_open> or C<guestfs_luks_open_ro>.  The
5288 C<device> parameter must be the name of the LUKS mapping
5289 device (ie. C</dev/mapper/mapname>) and I<not> the name
5290 of the underlying block device.");
5291
5292   ("luks_format", (RErr, [Device "device"; Key "key"; Int "keyslot"]), 260, [Optional "luks"; DangerWillRobinson],
5293    [],
5294    "format a block device as a LUKS encrypted device",
5295    "\
5296 This command erases existing data on C<device> and formats
5297 the device as a LUKS encrypted device.  C<key> is the
5298 initial key, which is added to key slot C<slot>.  (LUKS
5299 supports 8 key slots, numbered 0-7).");
5300
5301   ("luks_format_cipher", (RErr, [Device "device"; Key "key"; Int "keyslot"; String "cipher"]), 261, [Optional "luks"; DangerWillRobinson],
5302    [],
5303    "format a block device as a LUKS encrypted device",
5304    "\
5305 This command is the same as C<guestfs_luks_format> but
5306 it also allows you to set the C<cipher> used.");
5307
5308   ("luks_add_key", (RErr, [Device "device"; Key "key"; Key "newkey"; Int "keyslot"]), 262, [Optional "luks"],
5309    [],
5310    "add a key on a LUKS encrypted device",
5311    "\
5312 This command adds a new key on LUKS device C<device>.
5313 C<key> is any existing key, and is used to access the device.
5314 C<newkey> is the new key to add.  C<keyslot> is the key slot
5315 that will be replaced.
5316
5317 Note that if C<keyslot> already contains a key, then this
5318 command will fail.  You have to use C<guestfs_luks_kill_slot>
5319 first to remove that key.");
5320
5321   ("luks_kill_slot", (RErr, [Device "device"; Key "key"; Int "keyslot"]), 263, [Optional "luks"],
5322    [],
5323    "remove a key from a LUKS encrypted device",
5324    "\
5325 This command deletes the key in key slot C<keyslot> from the
5326 encrypted LUKS device C<device>.  C<key> must be one of the
5327 I<other> keys.");
5328
5329   ("is_lv", (RBool "lvflag", [Device "device"]), 264, [Optional "lvm2"],
5330    [InitBasicFSonLVM, IfAvailable "lvm2", TestOutputTrue (
5331       [["is_lv"; "/dev/VG/LV"]]);
5332     InitBasicFSonLVM, IfAvailable "lvm2", TestOutputFalse (
5333       [["is_lv"; "/dev/sda1"]])],
5334    "test if device is a logical volume",
5335    "\
5336 This command tests whether C<device> is a logical volume, and
5337 returns true iff this is the case.");
5338
5339   ("findfs_uuid", (RString "device", [String "uuid"]), 265, [],
5340    [],
5341    "find a filesystem by UUID",
5342    "\
5343 This command searches the filesystems and returns the one
5344 which has the given UUID.  An error is returned if no such
5345 filesystem can be found.
5346
5347 To find the UUID of a filesystem, use C<guestfs_vfs_uuid>.");
5348
5349   ("findfs_label", (RString "device", [String "label"]), 266, [],
5350    [],
5351    "find a filesystem by label",
5352    "\
5353 This command searches the filesystems and returns the one
5354 which has the given label.  An error is returned if no such
5355 filesystem can be found.
5356
5357 To find the label of a filesystem, use C<guestfs_vfs_label>.");
5358
5359 ]
5360
5361 let all_functions = non_daemon_functions @ daemon_functions
5362
5363 (* In some places we want the functions to be displayed sorted
5364  * alphabetically, so this is useful:
5365  *)
5366 let all_functions_sorted =
5367   List.sort (fun (n1,_,_,_,_,_,_) (n2,_,_,_,_,_,_) ->
5368                compare n1 n2) all_functions
5369
5370 (* This is used to generate the src/MAX_PROC_NR file which
5371  * contains the maximum procedure number, a surrogate for the
5372  * ABI version number.  See src/Makefile.am for the details.
5373  *)
5374 let max_proc_nr =
5375   let proc_nrs = List.map (
5376     fun (_, _, proc_nr, _, _, _, _) -> proc_nr
5377   ) daemon_functions in
5378   List.fold_left max 0 proc_nrs
5379
5380 (* Field types for structures. *)
5381 type field =
5382   | FChar                       (* C 'char' (really, a 7 bit byte). *)
5383   | FString                     (* nul-terminated ASCII string, NOT NULL. *)
5384   | FBuffer                     (* opaque buffer of bytes, (char *, int) pair *)
5385   | FUInt32
5386   | FInt32
5387   | FUInt64
5388   | FInt64
5389   | FBytes                      (* Any int measure that counts bytes. *)
5390   | FUUID                       (* 32 bytes long, NOT nul-terminated. *)
5391   | FOptPercent                 (* [0..100], or -1 meaning "not present". *)
5392
5393 (* Because we generate extra parsing code for LVM command line tools,
5394  * we have to pull out the LVM columns separately here.
5395  *)
5396 let lvm_pv_cols = [
5397   "pv_name", FString;
5398   "pv_uuid", FUUID;
5399   "pv_fmt", FString;
5400   "pv_size", FBytes;
5401   "dev_size", FBytes;
5402   "pv_free", FBytes;
5403   "pv_used", FBytes;
5404   "pv_attr", FString (* XXX *);
5405   "pv_pe_count", FInt64;
5406   "pv_pe_alloc_count", FInt64;
5407   "pv_tags", FString;
5408   "pe_start", FBytes;
5409   "pv_mda_count", FInt64;
5410   "pv_mda_free", FBytes;
5411   (* Not in Fedora 10:
5412      "pv_mda_size", FBytes;
5413   *)
5414 ]
5415 let lvm_vg_cols = [
5416   "vg_name", FString;
5417   "vg_uuid", FUUID;
5418   "vg_fmt", FString;
5419   "vg_attr", FString (* XXX *);
5420   "vg_size", FBytes;
5421   "vg_free", FBytes;
5422   "vg_sysid", FString;
5423   "vg_extent_size", FBytes;
5424   "vg_extent_count", FInt64;
5425   "vg_free_count", FInt64;
5426   "max_lv", FInt64;
5427   "max_pv", FInt64;
5428   "pv_count", FInt64;
5429   "lv_count", FInt64;
5430   "snap_count", FInt64;
5431   "vg_seqno", FInt64;
5432   "vg_tags", FString;
5433   "vg_mda_count", FInt64;
5434   "vg_mda_free", FBytes;
5435   (* Not in Fedora 10:
5436      "vg_mda_size", FBytes;
5437   *)
5438 ]
5439 let lvm_lv_cols = [
5440   "lv_name", FString;
5441   "lv_uuid", FUUID;
5442   "lv_attr", FString (* XXX *);
5443   "lv_major", FInt64;
5444   "lv_minor", FInt64;
5445   "lv_kernel_major", FInt64;
5446   "lv_kernel_minor", FInt64;
5447   "lv_size", FBytes;
5448   "seg_count", FInt64;
5449   "origin", FString;
5450   "snap_percent", FOptPercent;
5451   "copy_percent", FOptPercent;
5452   "move_pv", FString;
5453   "lv_tags", FString;
5454   "mirror_log", FString;
5455   "modules", FString;
5456 ]
5457
5458 (* Names and fields in all structures (in RStruct and RStructList)
5459  * that we support.
5460  *)
5461 let structs = [
5462   (* The old RIntBool return type, only ever used for aug_defnode.  Do
5463    * not use this struct in any new code.
5464    *)
5465   "int_bool", [
5466     "i", FInt32;                (* for historical compatibility *)
5467     "b", FInt32;                (* for historical compatibility *)
5468   ];
5469
5470   (* LVM PVs, VGs, LVs. *)
5471   "lvm_pv", lvm_pv_cols;
5472   "lvm_vg", lvm_vg_cols;
5473   "lvm_lv", lvm_lv_cols;
5474
5475   (* Column names and types from stat structures.
5476    * NB. Can't use things like 'st_atime' because glibc header files
5477    * define some of these as macros.  Ugh.
5478    *)
5479   "stat", [
5480     "dev", FInt64;
5481     "ino", FInt64;
5482     "mode", FInt64;
5483     "nlink", FInt64;
5484     "uid", FInt64;
5485     "gid", FInt64;
5486     "rdev", FInt64;
5487     "size", FInt64;
5488     "blksize", FInt64;
5489     "blocks", FInt64;
5490     "atime", FInt64;
5491     "mtime", FInt64;
5492     "ctime", FInt64;
5493   ];
5494   "statvfs", [
5495     "bsize", FInt64;
5496     "frsize", FInt64;
5497     "blocks", FInt64;
5498     "bfree", FInt64;
5499     "bavail", FInt64;
5500     "files", FInt64;
5501     "ffree", FInt64;
5502     "favail", FInt64;
5503     "fsid", FInt64;
5504     "flag", FInt64;
5505     "namemax", FInt64;
5506   ];
5507
5508   (* Column names in dirent structure. *)
5509   "dirent", [
5510     "ino", FInt64;
5511     (* 'b' 'c' 'd' 'f' (FIFO) 'l' 'r' (regular file) 's' 'u' '?' *)
5512     "ftyp", FChar;
5513     "name", FString;
5514   ];
5515
5516   (* Version numbers. *)
5517   "version", [
5518     "major", FInt64;
5519     "minor", FInt64;
5520     "release", FInt64;
5521     "extra", FString;
5522   ];
5523
5524   (* Extended attribute. *)
5525   "xattr", [
5526     "attrname", FString;
5527     "attrval", FBuffer;
5528   ];
5529
5530   (* Inotify events. *)
5531   "inotify_event", [
5532     "in_wd", FInt64;
5533     "in_mask", FUInt32;
5534     "in_cookie", FUInt32;
5535     "in_name", FString;
5536   ];
5537
5538   (* Partition table entry. *)
5539   "partition", [
5540     "part_num", FInt32;
5541     "part_start", FBytes;
5542     "part_end", FBytes;
5543     "part_size", FBytes;
5544   ];
5545 ] (* end of structs *)
5546
5547 (* Ugh, Java has to be different ..
5548  * These names are also used by the Haskell bindings.
5549  *)
5550 let java_structs = [
5551   "int_bool", "IntBool";
5552   "lvm_pv", "PV";
5553   "lvm_vg", "VG";
5554   "lvm_lv", "LV";
5555   "stat", "Stat";
5556   "statvfs", "StatVFS";
5557   "dirent", "Dirent";
5558   "version", "Version";
5559   "xattr", "XAttr";
5560   "inotify_event", "INotifyEvent";
5561   "partition", "Partition";
5562 ]
5563
5564 (* What structs are actually returned. *)
5565 type rstructs_used_t = RStructOnly | RStructListOnly | RStructAndList
5566
5567 (* Returns a list of RStruct/RStructList structs that are returned
5568  * by any function.  Each element of returned list is a pair:
5569  *
5570  * (structname, RStructOnly)
5571  *    == there exists function which returns RStruct (_, structname)
5572  * (structname, RStructListOnly)
5573  *    == there exists function which returns RStructList (_, structname)
5574  * (structname, RStructAndList)
5575  *    == there are functions returning both RStruct (_, structname)
5576  *                                      and RStructList (_, structname)
5577  *)
5578 let rstructs_used_by functions =
5579   (* ||| is a "logical OR" for rstructs_used_t *)
5580   let (|||) a b =
5581     match a, b with
5582     | RStructAndList, _
5583     | _, RStructAndList -> RStructAndList
5584     | RStructOnly, RStructListOnly
5585     | RStructListOnly, RStructOnly -> RStructAndList
5586     | RStructOnly, RStructOnly -> RStructOnly
5587     | RStructListOnly, RStructListOnly -> RStructListOnly
5588   in
5589
5590   let h = Hashtbl.create 13 in
5591
5592   (* if elem->oldv exists, update entry using ||| operator,
5593    * else just add elem->newv to the hash
5594    *)
5595   let update elem newv =
5596     try  let oldv = Hashtbl.find h elem in
5597          Hashtbl.replace h elem (newv ||| oldv)
5598     with Not_found -> Hashtbl.add h elem newv
5599   in
5600
5601   List.iter (
5602     fun (_, style, _, _, _, _, _) ->
5603       match fst style with
5604       | RStruct (_, structname) -> update structname RStructOnly
5605       | RStructList (_, structname) -> update structname RStructListOnly
5606       | _ -> ()
5607   ) functions;
5608
5609   (* return key->values as a list of (key,value) *)
5610   Hashtbl.fold (fun key value xs -> (key, value) :: xs) h []
5611
5612 (* Used for testing language bindings. *)
5613 type callt =
5614   | CallString of string
5615   | CallOptString of string option
5616   | CallStringList of string list
5617   | CallInt of int
5618   | CallInt64 of int64
5619   | CallBool of bool
5620   | CallBuffer of string
5621
5622 (* Used to memoize the result of pod2text. *)
5623 let pod2text_memo_filename = "src/.pod2text.data"
5624 let pod2text_memo : ((int * string * string), string list) Hashtbl.t =
5625   try
5626     let chan = open_in pod2text_memo_filename in
5627     let v = input_value chan in
5628     close_in chan;
5629     v
5630   with
5631     _ -> Hashtbl.create 13
5632 let pod2text_memo_updated () =
5633   let chan = open_out pod2text_memo_filename in
5634   output_value chan pod2text_memo;
5635   close_out chan
5636
5637 (* Useful functions.
5638  * Note we don't want to use any external OCaml libraries which
5639  * makes this a bit harder than it should be.
5640  *)
5641 module StringMap = Map.Make (String)
5642
5643 let failwithf fs = ksprintf failwith fs
5644
5645 let unique = let i = ref 0 in fun () -> incr i; !i
5646
5647 let replace_char s c1 c2 =
5648   let s2 = String.copy s in
5649   let r = ref false in
5650   for i = 0 to String.length s2 - 1 do
5651     if String.unsafe_get s2 i = c1 then (
5652       String.unsafe_set s2 i c2;
5653       r := true
5654     )
5655   done;
5656   if not !r then s else s2
5657
5658 let isspace c =
5659   c = ' '
5660   (* || c = '\f' *) || c = '\n' || c = '\r' || c = '\t' (* || c = '\v' *)
5661
5662 let triml ?(test = isspace) str =
5663   let i = ref 0 in
5664   let n = ref (String.length str) in
5665   while !n > 0 && test str.[!i]; do
5666     decr n;
5667     incr i
5668   done;
5669   if !i = 0 then str
5670   else String.sub str !i !n
5671
5672 let trimr ?(test = isspace) str =
5673   let n = ref (String.length str) in
5674   while !n > 0 && test str.[!n-1]; do
5675     decr n
5676   done;
5677   if !n = String.length str then str
5678   else String.sub str 0 !n
5679
5680 let trim ?(test = isspace) str =
5681   trimr ~test (triml ~test str)
5682
5683 let rec find s sub =
5684   let len = String.length s in
5685   let sublen = String.length sub in
5686   let rec loop i =
5687     if i <= len-sublen then (
5688       let rec loop2 j =
5689         if j < sublen then (
5690           if s.[i+j] = sub.[j] then loop2 (j+1)
5691           else -1
5692         ) else
5693           i (* found *)
5694       in
5695       let r = loop2 0 in
5696       if r = -1 then loop (i+1) else r
5697     ) else
5698       -1 (* not found *)
5699   in
5700   loop 0
5701
5702 let rec replace_str s s1 s2 =
5703   let len = String.length s in
5704   let sublen = String.length s1 in
5705   let i = find s s1 in
5706   if i = -1 then s
5707   else (
5708     let s' = String.sub s 0 i in
5709     let s'' = String.sub s (i+sublen) (len-i-sublen) in
5710     s' ^ s2 ^ replace_str s'' s1 s2
5711   )
5712
5713 let rec string_split sep str =
5714   let len = String.length str in
5715   let seplen = String.length sep in
5716   let i = find str sep in
5717   if i = -1 then [str]
5718   else (
5719     let s' = String.sub str 0 i in
5720     let s'' = String.sub str (i+seplen) (len-i-seplen) in
5721     s' :: string_split sep s''
5722   )
5723
5724 let files_equal n1 n2 =
5725   let cmd = sprintf "cmp -s %s %s" (Filename.quote n1) (Filename.quote n2) in
5726   match Sys.command cmd with
5727   | 0 -> true
5728   | 1 -> false
5729   | i -> failwithf "%s: failed with error code %d" cmd i
5730
5731 let rec filter_map f = function
5732   | [] -> []
5733   | x :: xs ->
5734       match f x with
5735       | Some y -> y :: filter_map f xs
5736       | None -> filter_map f xs
5737
5738 let rec find_map f = function
5739   | [] -> raise Not_found
5740   | x :: xs ->
5741       match f x with
5742       | Some y -> y
5743       | None -> find_map f xs
5744
5745 let iteri f xs =
5746   let rec loop i = function
5747     | [] -> ()
5748     | x :: xs -> f i x; loop (i+1) xs
5749   in
5750   loop 0 xs
5751
5752 let mapi f xs =
5753   let rec loop i = function
5754     | [] -> []
5755     | x :: xs -> let r = f i x in r :: loop (i+1) xs
5756   in
5757   loop 0 xs
5758
5759 let count_chars c str =
5760   let count = ref 0 in
5761   for i = 0 to String.length str - 1 do
5762     if c = String.unsafe_get str i then incr count
5763   done;
5764   !count
5765
5766 let explode str =
5767   let r = ref [] in
5768   for i = 0 to String.length str - 1 do
5769     let c = String.unsafe_get str i in
5770     r := c :: !r;
5771   done;
5772   List.rev !r
5773
5774 let map_chars f str =
5775   List.map f (explode str)
5776
5777 let name_of_argt = function
5778   | Pathname n | Device n | Dev_or_Path n | String n | OptString n
5779   | StringList n | DeviceList n | Bool n | Int n | Int64 n
5780   | FileIn n | FileOut n | BufferIn n | Key n -> n
5781
5782 let java_name_of_struct typ =
5783   try List.assoc typ java_structs
5784   with Not_found ->
5785     failwithf
5786       "java_name_of_struct: no java_structs entry corresponding to %s" typ
5787
5788 let cols_of_struct typ =
5789   try List.assoc typ structs
5790   with Not_found ->
5791     failwithf "cols_of_struct: unknown struct %s" typ
5792
5793 let seq_of_test = function
5794   | TestRun s | TestOutput (s, _) | TestOutputList (s, _)
5795   | TestOutputListOfDevices (s, _)
5796   | TestOutputInt (s, _) | TestOutputIntOp (s, _, _)
5797   | TestOutputTrue s | TestOutputFalse s
5798   | TestOutputLength (s, _) | TestOutputBuffer (s, _)
5799   | TestOutputStruct (s, _)
5800   | TestLastFail s -> s
5801
5802 (* Handling for function flags. *)
5803 let progress_message =
5804   "This long-running command can generate progress notification messages
5805 so that the caller can display a progress bar or indicator.
5806 To receive these messages, the caller must register a progress
5807 callback.  See L<guestfs(3)/guestfs_set_progress_callback>."
5808
5809 let protocol_limit_warning =
5810   "Because of the message protocol, there is a transfer limit
5811 of somewhere between 2MB and 4MB.  See L<guestfs(3)/PROTOCOL LIMITS>."
5812
5813 let danger_will_robinson =
5814   "B<This command is dangerous.  Without careful use you
5815 can easily destroy all your data>."
5816
5817 let deprecation_notice flags =
5818   try
5819     let alt =
5820       find_map (function DeprecatedBy str -> Some str | _ -> None) flags in
5821     let txt =
5822       sprintf "This function is deprecated.
5823 In new code, use the C<%s> call instead.
5824
5825 Deprecated functions will not be removed from the API, but the
5826 fact that they are deprecated indicates that there are problems
5827 with correct use of these functions." alt in
5828     Some txt
5829   with
5830     Not_found -> None
5831
5832 (* Create list of optional groups. *)
5833 let optgroups =
5834   let h = Hashtbl.create 13 in
5835   List.iter (
5836     fun (name, _, _, flags, _, _, _) ->
5837       List.iter (
5838         function
5839         | Optional group ->
5840             let names = try Hashtbl.find h group with Not_found -> [] in
5841             Hashtbl.replace h group (name :: names)
5842         | _ -> ()
5843       ) flags
5844   ) daemon_functions;
5845   let groups = Hashtbl.fold (fun k _ ks -> k :: ks) h [] in
5846   let groups =
5847     List.map (
5848       fun group -> group, List.sort compare (Hashtbl.find h group)
5849     ) groups in
5850   List.sort (fun x y -> compare (fst x) (fst y)) groups
5851
5852 (* Check function names etc. for consistency. *)
5853 let check_functions () =
5854   let contains_uppercase str =
5855     let len = String.length str in
5856     let rec loop i =
5857       if i >= len then false
5858       else (
5859         let c = str.[i] in
5860         if c >= 'A' && c <= 'Z' then true
5861         else loop (i+1)
5862       )
5863     in
5864     loop 0
5865   in
5866
5867   (* Check function names. *)
5868   List.iter (
5869     fun (name, _, _, _, _, _, _) ->
5870       if String.length name >= 7 && String.sub name 0 7 = "guestfs" then
5871         failwithf "function name %s does not need 'guestfs' prefix" name;
5872       if name = "" then
5873         failwithf "function name is empty";
5874       if name.[0] < 'a' || name.[0] > 'z' then
5875         failwithf "function name %s must start with lowercase a-z" name;
5876       if String.contains name '-' then
5877         failwithf "function name %s should not contain '-', use '_' instead."
5878           name
5879   ) all_functions;
5880
5881   (* Check function parameter/return names. *)
5882   List.iter (
5883     fun (name, style, _, _, _, _, _) ->
5884       let check_arg_ret_name n =
5885         if contains_uppercase n then
5886           failwithf "%s param/ret %s should not contain uppercase chars"
5887             name n;
5888         if String.contains n '-' || String.contains n '_' then
5889           failwithf "%s param/ret %s should not contain '-' or '_'"
5890             name n;
5891         if n = "value" then
5892           failwithf "%s has a param/ret called 'value', which causes conflicts in the OCaml bindings, use something like 'val' or a more descriptive name" name;
5893         if n = "int" || n = "char" || n = "short" || n = "long" then
5894           failwithf "%s has a param/ret which conflicts with a C type (eg. 'int', 'char' etc.)" name;
5895         if n = "i" || n = "n" then
5896           failwithf "%s has a param/ret called 'i' or 'n', which will cause some conflicts in the generated code" name;
5897         if n = "argv" || n = "args" then
5898           failwithf "%s has a param/ret called 'argv' or 'args', which will cause some conflicts in the generated code" name;
5899
5900         (* List Haskell, OCaml and C keywords here.
5901          * http://www.haskell.org/haskellwiki/Keywords
5902          * http://caml.inria.fr/pub/docs/manual-ocaml/lex.html#operator-char
5903          * http://en.wikipedia.org/wiki/C_syntax#Reserved_keywords
5904          * Formatted via: cat c haskell ocaml|sort -u|grep -vE '_|^val$' \
5905          *   |perl -pe 's/(.+)/"$1";/'|fmt -70
5906          * Omitting _-containing words, since they're handled above.
5907          * Omitting the OCaml reserved word, "val", is ok,
5908          * and saves us from renaming several parameters.
5909          *)
5910         let reserved = [
5911           "and"; "as"; "asr"; "assert"; "auto"; "begin"; "break"; "case";
5912           "char"; "class"; "const"; "constraint"; "continue"; "data";
5913           "default"; "deriving"; "do"; "done"; "double"; "downto"; "else";
5914           "end"; "enum"; "exception"; "extern"; "external"; "false"; "float";
5915           "for"; "forall"; "foreign"; "fun"; "function"; "functor"; "goto";
5916           "hiding"; "if"; "import"; "in"; "include"; "infix"; "infixl";
5917           "infixr"; "inherit"; "initializer"; "inline"; "instance"; "int";
5918           "interface";
5919           "land"; "lazy"; "let"; "long"; "lor"; "lsl"; "lsr"; "lxor";
5920           "match"; "mdo"; "method"; "mod"; "module"; "mutable"; "new";
5921           "newtype"; "object"; "of"; "open"; "or"; "private"; "qualified";
5922           "rec"; "register"; "restrict"; "return"; "short"; "sig"; "signed";
5923           "sizeof"; "static"; "struct"; "switch"; "then"; "to"; "true"; "try";
5924           "type"; "typedef"; "union"; "unsigned"; "virtual"; "void";
5925           "volatile"; "when"; "where"; "while";
5926           ] in
5927         if List.mem n reserved then
5928           failwithf "%s has param/ret using reserved word %s" name n;
5929       in
5930
5931       (match fst style with
5932        | RErr -> ()
5933        | RInt n | RInt64 n | RBool n
5934        | RConstString n | RConstOptString n | RString n
5935        | RStringList n | RStruct (n, _) | RStructList (n, _)
5936        | RHashtable n | RBufferOut n ->
5937            check_arg_ret_name n
5938       );
5939       List.iter (fun arg -> check_arg_ret_name (name_of_argt arg)) (snd style)
5940   ) all_functions;
5941
5942   (* Check short descriptions. *)
5943   List.iter (
5944     fun (name, _, _, _, _, shortdesc, _) ->
5945       if shortdesc.[0] <> Char.lowercase shortdesc.[0] then
5946         failwithf "short description of %s should begin with lowercase." name;
5947       let c = shortdesc.[String.length shortdesc-1] in
5948       if c = '\n' || c = '.' then
5949         failwithf "short description of %s should not end with . or \\n." name
5950   ) all_functions;
5951
5952   (* Check long descriptions. *)
5953   List.iter (
5954     fun (name, _, _, _, _, _, longdesc) ->
5955       if longdesc.[String.length longdesc-1] = '\n' then
5956         failwithf "long description of %s should not end with \\n." name
5957   ) all_functions;
5958
5959   (* Check proc_nrs. *)
5960   List.iter (
5961     fun (name, _, proc_nr, _, _, _, _) ->
5962       if proc_nr <= 0 then
5963         failwithf "daemon function %s should have proc_nr > 0" name
5964   ) daemon_functions;
5965
5966   List.iter (
5967     fun (name, _, proc_nr, _, _, _, _) ->
5968       if proc_nr <> -1 then
5969         failwithf "non-daemon function %s should have proc_nr -1" name
5970   ) non_daemon_functions;
5971
5972   let proc_nrs =
5973     List.map (fun (name, _, proc_nr, _, _, _, _) -> name, proc_nr)
5974       daemon_functions in
5975   let proc_nrs =
5976     List.sort (fun (_,nr1) (_,nr2) -> compare nr1 nr2) proc_nrs in
5977   let rec loop = function
5978     | [] -> ()
5979     | [_] -> ()
5980     | (name1,nr1) :: ((name2,nr2) :: _ as rest) when nr1 < nr2 ->
5981         loop rest
5982     | (name1,nr1) :: (name2,nr2) :: _ ->
5983         failwithf "%s and %s have conflicting procedure numbers (%d, %d)"
5984           name1 name2 nr1 nr2
5985   in
5986   loop proc_nrs;
5987
5988   (* Check tests. *)
5989   List.iter (
5990     function
5991       (* Ignore functions that have no tests.  We generate a
5992        * warning when the user does 'make check' instead.
5993        *)
5994     | name, _, _, _, [], _, _ -> ()
5995     | name, _, _, _, tests, _, _ ->
5996         let funcs =
5997           List.map (
5998             fun (_, _, test) ->
5999               match seq_of_test test with
6000               | [] ->
6001                   failwithf "%s has a test containing an empty sequence" name
6002               | cmds -> List.map List.hd cmds
6003           ) tests in
6004         let funcs = List.flatten funcs in
6005
6006         let tested = List.mem name funcs in
6007
6008         if not tested then
6009           failwithf "function %s has tests but does not test itself" name
6010   ) all_functions
6011
6012 (* 'pr' prints to the current output file. *)
6013 let chan = ref Pervasives.stdout
6014 let lines = ref 0
6015 let pr fs =
6016   ksprintf
6017     (fun str ->
6018        let i = count_chars '\n' str in
6019        lines := !lines + i;
6020        output_string !chan str
6021     ) fs
6022
6023 let copyright_years =
6024   let this_year = 1900 + (localtime (time ())).tm_year in
6025   if this_year > 2009 then sprintf "2009-%04d" this_year else "2009"
6026
6027 (* Generate a header block in a number of standard styles. *)
6028 type comment_style =
6029     CStyle | CPlusPlusStyle | HashStyle | OCamlStyle | HaskellStyle
6030 type license = GPLv2plus | LGPLv2plus
6031
6032 let generate_header ?(extra_inputs = []) comment license =
6033   let inputs = "src/generator.ml" :: extra_inputs in
6034   let c = match comment with
6035     | CStyle ->         pr "/* "; " *"
6036     | CPlusPlusStyle -> pr "// "; "//"
6037     | HashStyle ->      pr "# ";  "#"
6038     | OCamlStyle ->     pr "(* "; " *"
6039     | HaskellStyle ->   pr "{- "; "  " in
6040   pr "libguestfs generated file\n";
6041   pr "%s WARNING: THIS FILE IS GENERATED FROM:\n" c;
6042   List.iter (pr "%s   %s\n" c) inputs;
6043   pr "%s ANY CHANGES YOU MAKE TO THIS FILE WILL BE LOST.\n" c;
6044   pr "%s\n" c;
6045   pr "%s Copyright (C) %s Red Hat Inc.\n" c copyright_years;
6046   pr "%s\n" c;
6047   (match license with
6048    | GPLv2plus ->
6049        pr "%s This program is free software; you can redistribute it and/or modify\n" c;
6050        pr "%s it under the terms of the GNU General Public License as published by\n" c;
6051        pr "%s the Free Software Foundation; either version 2 of the License, or\n" c;
6052        pr "%s (at your option) any later version.\n" c;
6053        pr "%s\n" c;
6054        pr "%s This program is distributed in the hope that it will be useful,\n" c;
6055        pr "%s but WITHOUT ANY WARRANTY; without even the implied warranty of\n" c;
6056        pr "%s MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the\n" c;
6057        pr "%s GNU General Public License for more details.\n" c;
6058        pr "%s\n" c;
6059        pr "%s You should have received a copy of the GNU General Public License along\n" c;
6060        pr "%s with this program; if not, write to the Free Software Foundation, Inc.,\n" c;
6061        pr "%s 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA.\n" c;
6062
6063    | LGPLv2plus ->
6064        pr "%s This library is free software; you can redistribute it and/or\n" c;
6065        pr "%s modify it under the terms of the GNU Lesser General Public\n" c;
6066        pr "%s License as published by the Free Software Foundation; either\n" c;
6067        pr "%s version 2 of the License, or (at your option) any later version.\n" c;
6068        pr "%s\n" c;
6069        pr "%s This library is distributed in the hope that it will be useful,\n" c;
6070        pr "%s but WITHOUT ANY WARRANTY; without even the implied warranty of\n" c;
6071        pr "%s MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU\n" c;
6072        pr "%s Lesser General Public License for more details.\n" c;
6073        pr "%s\n" c;
6074        pr "%s You should have received a copy of the GNU Lesser General Public\n" c;
6075        pr "%s License along with this library; if not, write to the Free Software\n" c;
6076        pr "%s Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA\n" c;
6077   );
6078   (match comment with
6079    | CStyle -> pr " */\n"
6080    | CPlusPlusStyle
6081    | HashStyle -> ()
6082    | OCamlStyle -> pr " *)\n"
6083    | HaskellStyle -> pr "-}\n"
6084   );
6085   pr "\n"
6086
6087 (* Start of main code generation functions below this line. *)
6088
6089 (* Generate the pod documentation for the C API. *)
6090 let rec generate_actions_pod () =
6091   List.iter (
6092     fun (shortname, style, _, flags, _, _, longdesc) ->
6093       if not (List.mem NotInDocs flags) then (
6094         let name = "guestfs_" ^ shortname in
6095         pr "=head2 %s\n\n" name;
6096         pr " ";
6097         generate_prototype ~extern:false ~handle:"g" name style;
6098         pr "\n\n";
6099         pr "%s\n\n" longdesc;
6100         (match fst style with
6101          | RErr ->
6102              pr "This function returns 0 on success or -1 on error.\n\n"
6103          | RInt _ ->
6104              pr "On error this function returns -1.\n\n"
6105          | RInt64 _ ->
6106              pr "On error this function returns -1.\n\n"
6107          | RBool _ ->
6108              pr "This function returns a C truth value on success or -1 on error.\n\n"
6109          | RConstString _ ->
6110              pr "This function returns a string, or NULL on error.
6111 The string is owned by the guest handle and must I<not> be freed.\n\n"
6112          | RConstOptString _ ->
6113              pr "This function returns a string which may be NULL.
6114 There is no way to return an error from this function.
6115 The string is owned by the guest handle and must I<not> be freed.\n\n"
6116          | RString _ ->
6117              pr "This function returns a string, or NULL on error.
6118 I<The caller must free the returned string after use>.\n\n"
6119          | RStringList _ ->
6120              pr "This function returns a NULL-terminated array of strings
6121 (like L<environ(3)>), or NULL if there was an error.
6122 I<The caller must free the strings and the array after use>.\n\n"
6123          | RStruct (_, typ) ->
6124              pr "This function returns a C<struct guestfs_%s *>,
6125 or NULL if there was an error.
6126 I<The caller must call C<guestfs_free_%s> after use>.\n\n" typ typ
6127          | RStructList (_, typ) ->
6128              pr "This function returns a C<struct guestfs_%s_list *>
6129 (see E<lt>guestfs-structs.hE<gt>),
6130 or NULL if there was an error.
6131 I<The caller must call C<guestfs_free_%s_list> after use>.\n\n" typ typ
6132          | RHashtable _ ->
6133              pr "This function returns a NULL-terminated array of
6134 strings, or NULL if there was an error.
6135 The array of strings will always have length C<2n+1>, where
6136 C<n> keys and values alternate, followed by the trailing NULL entry.
6137 I<The caller must free the strings and the array after use>.\n\n"
6138          | RBufferOut _ ->
6139              pr "This function returns a buffer, or NULL on error.
6140 The size of the returned buffer is written to C<*size_r>.
6141 I<The caller must free the returned buffer after use>.\n\n"
6142         );
6143         if List.mem Progress flags then
6144           pr "%s\n\n" progress_message;
6145         if List.mem ProtocolLimitWarning flags then
6146           pr "%s\n\n" protocol_limit_warning;
6147         if List.mem DangerWillRobinson flags then
6148           pr "%s\n\n" danger_will_robinson;
6149         if List.exists (function Key _ -> true | _ -> false) (snd style) then
6150           pr "This function takes a key or passphrase parameter which
6151 could contain sensitive material.  Read the section
6152 L</KEYS AND PASSPHRASES> for more information.\n\n";
6153         match deprecation_notice flags with
6154         | None -> ()
6155         | Some txt -> pr "%s\n\n" txt
6156       )
6157   ) all_functions_sorted
6158
6159 and generate_structs_pod () =
6160   (* Structs documentation. *)
6161   List.iter (
6162     fun (typ, cols) ->
6163       pr "=head2 guestfs_%s\n" typ;
6164       pr "\n";
6165       pr " struct guestfs_%s {\n" typ;
6166       List.iter (
6167         function
6168         | name, FChar -> pr "   char %s;\n" name
6169         | name, FUInt32 -> pr "   uint32_t %s;\n" name
6170         | name, FInt32 -> pr "   int32_t %s;\n" name
6171         | name, (FUInt64|FBytes) -> pr "   uint64_t %s;\n" name
6172         | name, FInt64 -> pr "   int64_t %s;\n" name
6173         | name, FString -> pr "   char *%s;\n" name
6174         | name, FBuffer ->
6175             pr "   /* The next two fields describe a byte array. */\n";
6176             pr "   uint32_t %s_len;\n" name;
6177             pr "   char *%s;\n" name
6178         | name, FUUID ->
6179             pr "   /* The next field is NOT nul-terminated, be careful when printing it: */\n";
6180             pr "   char %s[32];\n" name
6181         | name, FOptPercent ->
6182             pr "   /* The next field is [0..100] or -1 meaning 'not present': */\n";
6183             pr "   float %s;\n" name
6184       ) cols;
6185       pr " };\n";
6186       pr " \n";
6187       pr " struct guestfs_%s_list {\n" typ;
6188       pr "   uint32_t len; /* Number of elements in list. */\n";
6189       pr "   struct guestfs_%s *val; /* Elements. */\n" typ;
6190       pr " };\n";
6191       pr " \n";
6192       pr " void guestfs_free_%s (struct guestfs_free_%s *);\n" typ typ;
6193       pr " void guestfs_free_%s_list (struct guestfs_free_%s_list *);\n"
6194         typ typ;
6195       pr "\n"
6196   ) structs
6197
6198 and generate_availability_pod () =
6199   (* Availability documentation. *)
6200   pr "=over 4\n";
6201   pr "\n";
6202   List.iter (
6203     fun (group, functions) ->
6204       pr "=item B<%s>\n" group;
6205       pr "\n";
6206       pr "The following functions:\n";
6207       List.iter (pr "L</guestfs_%s>\n") functions;
6208       pr "\n"
6209   ) optgroups;
6210   pr "=back\n";
6211   pr "\n"
6212
6213 (* Generate the protocol (XDR) file, 'guestfs_protocol.x' and
6214  * indirectly 'guestfs_protocol.h' and 'guestfs_protocol.c'.
6215  *
6216  * We have to use an underscore instead of a dash because otherwise
6217  * rpcgen generates incorrect code.
6218  *
6219  * This header is NOT exported to clients, but see also generate_structs_h.
6220  *)
6221 and generate_xdr () =
6222   generate_header CStyle LGPLv2plus;
6223
6224   (* This has to be defined to get around a limitation in Sun's rpcgen. *)
6225   pr "typedef string guestfs_str<>;\n";
6226   pr "\n";
6227
6228   (* Internal structures. *)
6229   List.iter (
6230     function
6231     | typ, cols ->
6232         pr "struct guestfs_int_%s {\n" typ;
6233         List.iter (function
6234                    | name, FChar -> pr "  char %s;\n" name
6235                    | name, FString -> pr "  string %s<>;\n" name
6236                    | name, FBuffer -> pr "  opaque %s<>;\n" name
6237                    | name, FUUID -> pr "  opaque %s[32];\n" name
6238                    | name, (FInt32|FUInt32) -> pr "  int %s;\n" name
6239                    | name, (FInt64|FUInt64|FBytes) -> pr "  hyper %s;\n" name
6240                    | name, FOptPercent -> pr "  float %s;\n" name
6241                   ) cols;
6242         pr "};\n";
6243         pr "\n";
6244         pr "typedef struct guestfs_int_%s guestfs_int_%s_list<>;\n" typ typ;
6245         pr "\n";
6246   ) structs;
6247
6248   List.iter (
6249     fun (shortname, style, _, _, _, _, _) ->
6250       let name = "guestfs_" ^ shortname in
6251
6252       (match snd style with
6253        | [] -> ()
6254        | args ->
6255            pr "struct %s_args {\n" name;
6256            List.iter (
6257              function
6258              | Pathname n | Device n | Dev_or_Path n | String n | Key n ->
6259                  pr "  string %s<>;\n" n
6260              | OptString n -> pr "  guestfs_str *%s;\n" n
6261              | StringList n | DeviceList n -> pr "  guestfs_str %s<>;\n" n
6262              | Bool n -> pr "  bool %s;\n" n
6263              | Int n -> pr "  int %s;\n" n
6264              | Int64 n -> pr "  hyper %s;\n" n
6265              | BufferIn n ->
6266                  pr "  opaque %s<>;\n" n
6267              | FileIn _ | FileOut _ -> ()
6268            ) args;
6269            pr "};\n\n"
6270       );
6271       (match fst style with
6272        | RErr -> ()
6273        | RInt n ->
6274            pr "struct %s_ret {\n" name;
6275            pr "  int %s;\n" n;
6276            pr "};\n\n"
6277        | RInt64 n ->
6278            pr "struct %s_ret {\n" name;
6279            pr "  hyper %s;\n" n;
6280            pr "};\n\n"
6281        | RBool n ->
6282            pr "struct %s_ret {\n" name;
6283            pr "  bool %s;\n" n;
6284            pr "};\n\n"
6285        | RConstString _ | RConstOptString _ ->
6286            failwithf "RConstString|RConstOptString cannot be used by daemon functions"
6287        | RString n ->
6288            pr "struct %s_ret {\n" name;
6289            pr "  string %s<>;\n" n;
6290            pr "};\n\n"
6291        | RStringList n ->
6292            pr "struct %s_ret {\n" name;
6293            pr "  guestfs_str %s<>;\n" n;
6294            pr "};\n\n"
6295        | RStruct (n, typ) ->
6296            pr "struct %s_ret {\n" name;
6297            pr "  guestfs_int_%s %s;\n" typ n;
6298            pr "};\n\n"
6299        | RStructList (n, typ) ->
6300            pr "struct %s_ret {\n" name;
6301            pr "  guestfs_int_%s_list %s;\n" typ n;
6302            pr "};\n\n"
6303        | RHashtable n ->
6304            pr "struct %s_ret {\n" name;
6305            pr "  guestfs_str %s<>;\n" n;
6306            pr "};\n\n"
6307        | RBufferOut n ->
6308            pr "struct %s_ret {\n" name;
6309            pr "  opaque %s<>;\n" n;
6310            pr "};\n\n"
6311       );
6312   ) daemon_functions;
6313
6314   (* Table of procedure numbers. *)
6315   pr "enum guestfs_procedure {\n";
6316   List.iter (
6317     fun (shortname, _, proc_nr, _, _, _, _) ->
6318       pr "  GUESTFS_PROC_%s = %d,\n" (String.uppercase shortname) proc_nr
6319   ) daemon_functions;
6320   pr "  GUESTFS_PROC_NR_PROCS\n";
6321   pr "};\n";
6322   pr "\n";
6323
6324   (* Having to choose a maximum message size is annoying for several
6325    * reasons (it limits what we can do in the API), but it (a) makes
6326    * the protocol a lot simpler, and (b) provides a bound on the size
6327    * of the daemon which operates in limited memory space.
6328    *)
6329   pr "const GUESTFS_MESSAGE_MAX = %d;\n" (4 * 1024 * 1024);
6330   pr "\n";
6331
6332   (* Message header, etc. *)
6333   pr "\
6334 /* The communication protocol is now documented in the guestfs(3)
6335  * manpage.
6336  */
6337
6338 const GUESTFS_PROGRAM = 0x2000F5F5;
6339 const GUESTFS_PROTOCOL_VERSION = 2;
6340
6341 /* These constants must be larger than any possible message length. */
6342 const GUESTFS_LAUNCH_FLAG = 0xf5f55ff5;
6343 const GUESTFS_CANCEL_FLAG = 0xffffeeee;
6344 const GUESTFS_PROGRESS_FLAG = 0xffff5555;
6345
6346 enum guestfs_message_direction {
6347   GUESTFS_DIRECTION_CALL = 0,        /* client -> daemon */
6348   GUESTFS_DIRECTION_REPLY = 1        /* daemon -> client */
6349 };
6350
6351 enum guestfs_message_status {
6352   GUESTFS_STATUS_OK = 0,
6353   GUESTFS_STATUS_ERROR = 1
6354 };
6355
6356 ";
6357
6358   pr "const GUESTFS_ERROR_LEN = %d;\n" (64 * 1024);
6359   pr "\n";
6360
6361   pr "\
6362 struct guestfs_message_error {
6363   int linux_errno;                   /* Linux errno if available. */
6364   string error_message<GUESTFS_ERROR_LEN>;
6365 };
6366
6367 struct guestfs_message_header {
6368   unsigned prog;                     /* GUESTFS_PROGRAM */
6369   unsigned vers;                     /* GUESTFS_PROTOCOL_VERSION */
6370   guestfs_procedure proc;            /* GUESTFS_PROC_x */
6371   guestfs_message_direction direction;
6372   unsigned serial;                   /* message serial number */
6373   guestfs_message_status status;
6374 };
6375
6376 const GUESTFS_MAX_CHUNK_SIZE = 8192;
6377
6378 struct guestfs_chunk {
6379   int cancel;                        /* if non-zero, transfer is cancelled */
6380   /* data size is 0 bytes if the transfer has finished successfully */
6381   opaque data<GUESTFS_MAX_CHUNK_SIZE>;
6382 };
6383
6384 /* Progress notifications.  Daemon self-limits these messages to
6385  * at most one per second.  The daemon can send these messages
6386  * at any time, and the caller should discard unexpected messages.
6387  * 'position' and 'total' have undefined units; however they may
6388  * have meaning for some calls.
6389  *
6390  * NB. guestfs___recv_from_daemon assumes the XDR-encoded
6391  * structure is 24 bytes long.
6392  */
6393 struct guestfs_progress {
6394   guestfs_procedure proc;            /* @0:  GUESTFS_PROC_x */
6395   unsigned serial;                   /* @4:  message serial number */
6396   unsigned hyper position;           /* @8:  0 <= position <= total */
6397   unsigned hyper total;              /* @16: total size of operation */
6398                                      /* @24: size of structure */
6399 };
6400 "
6401
6402 (* Generate the guestfs-structs.h file. *)
6403 and generate_structs_h () =
6404   generate_header CStyle LGPLv2plus;
6405
6406   (* This is a public exported header file containing various
6407    * structures.  The structures are carefully written to have
6408    * exactly the same in-memory format as the XDR structures that
6409    * we use on the wire to the daemon.  The reason for creating
6410    * copies of these structures here is just so we don't have to
6411    * export the whole of guestfs_protocol.h (which includes much
6412    * unrelated and XDR-dependent stuff that we don't want to be
6413    * public, or required by clients).
6414    *
6415    * To reiterate, we will pass these structures to and from the
6416    * client with a simple assignment or memcpy, so the format
6417    * must be identical to what rpcgen / the RFC defines.
6418    *)
6419
6420   (* Public structures. *)
6421   List.iter (
6422     fun (typ, cols) ->
6423       pr "struct guestfs_%s {\n" typ;
6424       List.iter (
6425         function
6426         | name, FChar -> pr "  char %s;\n" name
6427         | name, FString -> pr "  char *%s;\n" name
6428         | name, FBuffer ->
6429             pr "  uint32_t %s_len;\n" name;
6430             pr "  char *%s;\n" name
6431         | name, FUUID -> pr "  char %s[32]; /* this is NOT nul-terminated, be careful when printing */\n" name
6432         | name, FUInt32 -> pr "  uint32_t %s;\n" name
6433         | name, FInt32 -> pr "  int32_t %s;\n" name
6434         | name, (FUInt64|FBytes) -> pr "  uint64_t %s;\n" name
6435         | name, FInt64 -> pr "  int64_t %s;\n" name
6436         | name, FOptPercent -> pr "  float %s; /* [0..100] or -1 */\n" name
6437       ) cols;
6438       pr "};\n";
6439       pr "\n";
6440       pr "struct guestfs_%s_list {\n" typ;
6441       pr "  uint32_t len;\n";
6442       pr "  struct guestfs_%s *val;\n" typ;
6443       pr "};\n";
6444       pr "\n";
6445       pr "extern void guestfs_free_%s (struct guestfs_%s *);\n" typ typ;
6446       pr "extern void guestfs_free_%s_list (struct guestfs_%s_list *);\n" typ typ;
6447       pr "\n"
6448   ) structs
6449
6450 (* Generate the guestfs-actions.h file. *)
6451 and generate_actions_h () =
6452   generate_header CStyle LGPLv2plus;
6453   List.iter (
6454     fun (shortname, style, _, flags, _, _, _) ->
6455       let name = "guestfs_" ^ shortname in
6456
6457       let deprecated =
6458         List.exists (function DeprecatedBy _ -> true | _ -> false) flags in
6459       let test0 =
6460         String.length shortname >= 5 && String.sub shortname 0 5 = "test0" in
6461       let debug =
6462         String.length shortname >= 5 && String.sub shortname 0 5 = "debug" in
6463       if not deprecated && not test0 && not debug then
6464         pr "#define LIBGUESTFS_HAVE_%s 1\n" (String.uppercase shortname);
6465
6466       generate_prototype ~single_line:true ~newline:true ~handle:"g"
6467         name style
6468   ) all_functions_sorted
6469
6470 (* Generate the guestfs-internal-actions.h file. *)
6471 and generate_internal_actions_h () =
6472   generate_header CStyle LGPLv2plus;
6473   List.iter (
6474     fun (shortname, style, _, _, _, _, _) ->
6475       let name = "guestfs__" ^ shortname in
6476       generate_prototype ~single_line:true ~newline:true ~handle:"g"
6477         name style
6478   ) non_daemon_functions
6479
6480 (* Generate the client-side dispatch stubs. *)
6481 and generate_client_actions () =
6482   generate_header CStyle LGPLv2plus;
6483
6484   pr "\
6485 #include <stdio.h>
6486 #include <stdlib.h>
6487 #include <stdint.h>
6488 #include <string.h>
6489 #include <inttypes.h>
6490
6491 #include \"guestfs.h\"
6492 #include \"guestfs-internal.h\"
6493 #include \"guestfs-internal-actions.h\"
6494 #include \"guestfs_protocol.h\"
6495
6496 /* Check the return message from a call for validity. */
6497 static int
6498 check_reply_header (guestfs_h *g,
6499                     const struct guestfs_message_header *hdr,
6500                     unsigned int proc_nr, unsigned int serial)
6501 {
6502   if (hdr->prog != GUESTFS_PROGRAM) {
6503     error (g, \"wrong program (%%d/%%d)\", hdr->prog, GUESTFS_PROGRAM);
6504     return -1;
6505   }
6506   if (hdr->vers != GUESTFS_PROTOCOL_VERSION) {
6507     error (g, \"wrong protocol version (%%d/%%d)\",
6508            hdr->vers, GUESTFS_PROTOCOL_VERSION);
6509     return -1;
6510   }
6511   if (hdr->direction != GUESTFS_DIRECTION_REPLY) {
6512     error (g, \"unexpected message direction (%%d/%%d)\",
6513            hdr->direction, GUESTFS_DIRECTION_REPLY);
6514     return -1;
6515   }
6516   if (hdr->proc != proc_nr) {
6517     error (g, \"unexpected procedure number (%%d/%%d)\", hdr->proc, proc_nr);
6518     return -1;
6519   }
6520   if (hdr->serial != serial) {
6521     error (g, \"unexpected serial (%%d/%%d)\", hdr->serial, serial);
6522     return -1;
6523   }
6524
6525   return 0;
6526 }
6527
6528 /* Check we are in the right state to run a high-level action. */
6529 static int
6530 check_state (guestfs_h *g, const char *caller)
6531 {
6532   if (!guestfs__is_ready (g)) {
6533     if (guestfs__is_config (g) || guestfs__is_launching (g))
6534       error (g, \"%%s: call launch before using this function\\n(in guestfish, don't forget to use the 'run' command)\",
6535         caller);
6536     else
6537       error (g, \"%%s called from the wrong state, %%d != READY\",
6538         caller, guestfs__get_state (g));
6539     return -1;
6540   }
6541   return 0;
6542 }
6543
6544 ";
6545
6546   let error_code_of = function
6547     | RErr | RInt _ | RInt64 _ | RBool _ -> "-1"
6548     | RConstString _ | RConstOptString _
6549     | RString _ | RStringList _
6550     | RStruct _ | RStructList _
6551     | RHashtable _ | RBufferOut _ -> "NULL"
6552   in
6553
6554   (* Generate code to check String-like parameters are not passed in
6555    * as NULL (returning an error if they are).
6556    *)
6557   let check_null_strings shortname style =
6558     let pr_newline = ref false in
6559     List.iter (
6560       function
6561       (* parameters which should not be NULL *)
6562       | String n
6563       | Device n
6564       | Pathname n
6565       | Dev_or_Path n
6566       | FileIn n
6567       | FileOut n
6568       | BufferIn n
6569       | StringList n
6570       | DeviceList n
6571       | Key n ->
6572           pr "  if (%s == NULL) {\n" n;
6573           pr "    error (g, \"%%s: %%s: parameter cannot be NULL\",\n";
6574           pr "           \"%s\", \"%s\");\n" shortname n;
6575           pr "    return %s;\n" (error_code_of (fst style));
6576           pr "  }\n";
6577           pr_newline := true
6578
6579       (* can be NULL *)
6580       | OptString _
6581
6582       (* not applicable *)
6583       | Bool _
6584       | Int _
6585       | Int64 _ -> ()
6586     ) (snd style);
6587
6588     if !pr_newline then pr "\n";
6589   in
6590
6591   (* Generate code to generate guestfish call traces. *)
6592   let trace_call shortname style =
6593     pr "  if (guestfs__get_trace (g)) {\n";
6594
6595     let needs_i =
6596       List.exists (function
6597                    | StringList _ | DeviceList _ -> true
6598                    | _ -> false) (snd style) in
6599     if needs_i then (
6600       pr "    size_t i;\n";
6601       pr "\n"
6602     );
6603
6604     pr "    fprintf (stderr, \"%s\");\n" shortname;
6605     List.iter (
6606       function
6607       | String n                        (* strings *)
6608       | Device n
6609       | Pathname n
6610       | Dev_or_Path n
6611       | FileIn n
6612       | FileOut n
6613       | BufferIn n
6614       | Key n ->
6615           (* guestfish doesn't support string escaping, so neither do we *)
6616           pr "    fprintf (stderr, \" \\\"%%s\\\"\", %s);\n" n
6617       | OptString n ->                  (* string option *)
6618           pr "    if (%s) fprintf (stderr, \" \\\"%%s\\\"\", %s);\n" n n;
6619           pr "    else fprintf (stderr, \" null\");\n"
6620       | StringList n
6621       | DeviceList n ->                 (* string list *)
6622           pr "    fputc (' ', stderr);\n";
6623           pr "    fputc ('\"', stderr);\n";
6624           pr "    for (i = 0; %s[i]; ++i) {\n" n;
6625           pr "      if (i > 0) fputc (' ', stderr);\n";
6626           pr "      fputs (%s[i], stderr);\n" n;
6627           pr "    }\n";
6628           pr "    fputc ('\"', stderr);\n";
6629       | Bool n ->                       (* boolean *)
6630           pr "    fputs (%s ? \" true\" : \" false\", stderr);\n" n
6631       | Int n ->                        (* int *)
6632           pr "    fprintf (stderr, \" %%d\", %s);\n" n
6633       | Int64 n ->
6634           pr "    fprintf (stderr, \" %%\" PRIi64, %s);\n" n
6635     ) (snd style);
6636     pr "    fputc ('\\n', stderr);\n";
6637     pr "  }\n";
6638     pr "\n";
6639   in
6640
6641   (* For non-daemon functions, generate a wrapper around each function. *)
6642   List.iter (
6643     fun (shortname, style, _, _, _, _, _) ->
6644       let name = "guestfs_" ^ shortname in
6645
6646       generate_prototype ~extern:false ~semicolon:false ~newline:true
6647         ~handle:"g" name style;
6648       pr "{\n";
6649       check_null_strings shortname style;
6650       trace_call shortname style;
6651       pr "  return guestfs__%s " shortname;
6652       generate_c_call_args ~handle:"g" style;
6653       pr ";\n";
6654       pr "}\n";
6655       pr "\n"
6656   ) non_daemon_functions;
6657
6658   (* Client-side stubs for each function. *)
6659   List.iter (
6660     fun (shortname, style, _, _, _, _, _) ->
6661       let name = "guestfs_" ^ shortname in
6662       let error_code = error_code_of (fst style) in
6663
6664       (* Generate the action stub. *)
6665       generate_prototype ~extern:false ~semicolon:false ~newline:true
6666         ~handle:"g" name style;
6667
6668       pr "{\n";
6669
6670       (match snd style with
6671        | [] -> ()
6672        | _ -> pr "  struct %s_args args;\n" name
6673       );
6674
6675       pr "  guestfs_message_header hdr;\n";
6676       pr "  guestfs_message_error err;\n";
6677       let has_ret =
6678         match fst style with
6679         | RErr -> false
6680         | RConstString _ | RConstOptString _ ->
6681             failwithf "RConstString|RConstOptString cannot be used by daemon functions"
6682         | RInt _ | RInt64 _
6683         | RBool _ | RString _ | RStringList _
6684         | RStruct _ | RStructList _
6685         | RHashtable _ | RBufferOut _ ->
6686             pr "  struct %s_ret ret;\n" name;
6687             true in
6688
6689       pr "  int serial;\n";
6690       pr "  int r;\n";
6691       pr "\n";
6692       check_null_strings shortname style;
6693       trace_call shortname style;
6694       pr "  if (check_state (g, \"%s\") == -1) return %s;\n"
6695         shortname error_code;
6696       pr "  guestfs___set_busy (g);\n";
6697       pr "\n";
6698
6699       (* Send the main header and arguments. *)
6700       (match snd style with
6701        | [] ->
6702            pr "  serial = guestfs___send (g, GUESTFS_PROC_%s, NULL, NULL);\n"
6703              (String.uppercase shortname)
6704        | args ->
6705            List.iter (
6706              function
6707              | Pathname n | Device n | Dev_or_Path n | String n | Key n ->
6708                  pr "  args.%s = (char *) %s;\n" n n
6709              | OptString n ->
6710                  pr "  args.%s = %s ? (char **) &%s : NULL;\n" n n n
6711              | StringList n | DeviceList n ->
6712                  pr "  args.%s.%s_val = (char **) %s;\n" n n n;
6713                  pr "  for (args.%s.%s_len = 0; %s[args.%s.%s_len]; args.%s.%s_len++) ;\n" n n n n n n n;
6714              | Bool n ->
6715                  pr "  args.%s = %s;\n" n n
6716              | Int n ->
6717                  pr "  args.%s = %s;\n" n n
6718              | Int64 n ->
6719                  pr "  args.%s = %s;\n" n n
6720              | FileIn _ | FileOut _ -> ()
6721              | BufferIn n ->
6722                  pr "  /* Just catch grossly large sizes. XDR encoding will make this precise. */\n";
6723                  pr "  if (%s_size >= GUESTFS_MESSAGE_MAX) {\n" n;
6724                  pr "    error (g, \"%%s: size of input buffer too large\", \"%s\");\n"
6725                    shortname;
6726                  pr "    guestfs___end_busy (g);\n";
6727                  pr "    return %s;\n" error_code;
6728                  pr "  }\n";
6729                  pr "  args.%s.%s_val = (char *) %s;\n" n n n;
6730                  pr "  args.%s.%s_len = %s_size;\n" n n n
6731            ) args;
6732            pr "  serial = guestfs___send (g, GUESTFS_PROC_%s,\n"
6733              (String.uppercase shortname);
6734            pr "        (xdrproc_t) xdr_%s_args, (char *) &args);\n"
6735              name;
6736       );
6737       pr "  if (serial == -1) {\n";
6738       pr "    guestfs___end_busy (g);\n";
6739       pr "    return %s;\n" error_code;
6740       pr "  }\n";
6741       pr "\n";
6742
6743       (* Send any additional files (FileIn) requested. *)
6744       let need_read_reply_label = ref false in
6745       List.iter (
6746         function
6747         | FileIn n ->
6748             pr "  r = guestfs___send_file (g, %s);\n" n;
6749             pr "  if (r == -1) {\n";
6750             pr "    guestfs___end_busy (g);\n";
6751             pr "    return %s;\n" error_code;
6752             pr "  }\n";
6753             pr "  if (r == -2) /* daemon cancelled */\n";
6754             pr "    goto read_reply;\n";
6755             need_read_reply_label := true;
6756             pr "\n";
6757         | _ -> ()
6758       ) (snd style);
6759
6760       (* Wait for the reply from the remote end. *)
6761       if !need_read_reply_label then pr " read_reply:\n";
6762       pr "  memset (&hdr, 0, sizeof hdr);\n";
6763       pr "  memset (&err, 0, sizeof err);\n";
6764       if has_ret then pr "  memset (&ret, 0, sizeof ret);\n";
6765       pr "\n";
6766       pr "  r = guestfs___recv (g, \"%s\", &hdr, &err,\n        " shortname;
6767       if not has_ret then
6768         pr "NULL, NULL"
6769       else
6770         pr "(xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret" shortname;
6771       pr ");\n";
6772
6773       pr "  if (r == -1) {\n";
6774       pr "    guestfs___end_busy (g);\n";
6775       pr "    return %s;\n" error_code;
6776       pr "  }\n";
6777       pr "\n";
6778
6779       pr "  if (check_reply_header (g, &hdr, GUESTFS_PROC_%s, serial) == -1) {\n"
6780         (String.uppercase shortname);
6781       pr "    guestfs___end_busy (g);\n";
6782       pr "    return %s;\n" error_code;
6783       pr "  }\n";
6784       pr "\n";
6785
6786       pr "  if (hdr.status == GUESTFS_STATUS_ERROR) {\n";
6787       pr "    error (g, \"%%s: %%s\", \"%s\", err.error_message);\n" shortname;
6788       pr "    free (err.error_message);\n";
6789       pr "    guestfs___end_busy (g);\n";
6790       pr "    return %s;\n" error_code;
6791       pr "  }\n";
6792       pr "\n";
6793
6794       (* Expecting to receive further files (FileOut)? *)
6795       List.iter (
6796         function
6797         | FileOut n ->
6798             pr "  if (guestfs___recv_file (g, %s) == -1) {\n" n;
6799             pr "    guestfs___end_busy (g);\n";
6800             pr "    return %s;\n" error_code;
6801             pr "  }\n";
6802             pr "\n";
6803         | _ -> ()
6804       ) (snd style);
6805
6806       pr "  guestfs___end_busy (g);\n";
6807
6808       (match fst style with
6809        | RErr -> pr "  return 0;\n"
6810        | RInt n | RInt64 n | RBool n ->
6811            pr "  return ret.%s;\n" n
6812        | RConstString _ | RConstOptString _ ->
6813            failwithf "RConstString|RConstOptString cannot be used by daemon functions"
6814        | RString n ->
6815            pr "  return ret.%s; /* caller will free */\n" n
6816        | RStringList n | RHashtable n ->
6817            pr "  /* caller will free this, but we need to add a NULL entry */\n";
6818            pr "  ret.%s.%s_val =\n" n n;
6819            pr "    safe_realloc (g, ret.%s.%s_val,\n" n n;
6820            pr "                  sizeof (char *) * (ret.%s.%s_len + 1));\n"
6821              n n;
6822            pr "  ret.%s.%s_val[ret.%s.%s_len] = NULL;\n" n n n n;
6823            pr "  return ret.%s.%s_val;\n" n n
6824        | RStruct (n, _) ->
6825            pr "  /* caller will free this */\n";
6826            pr "  return safe_memdup (g, &ret.%s, sizeof (ret.%s));\n" n n
6827        | RStructList (n, _) ->
6828            pr "  /* caller will free this */\n";
6829            pr "  return safe_memdup (g, &ret.%s, sizeof (ret.%s));\n" n n
6830        | RBufferOut n ->
6831            pr "  /* RBufferOut is tricky: If the buffer is zero-length, then\n";
6832            pr "   * _val might be NULL here.  To make the API saner for\n";
6833            pr "   * callers, we turn this case into a unique pointer (using\n";
6834            pr "   * malloc(1)).\n";
6835            pr "   */\n";
6836            pr "  if (ret.%s.%s_len > 0) {\n" n n;
6837            pr "    *size_r = ret.%s.%s_len;\n" n n;
6838            pr "    return ret.%s.%s_val; /* caller will free */\n" n n;
6839            pr "  } else {\n";
6840            pr "    free (ret.%s.%s_val);\n" n n;
6841            pr "    char *p = safe_malloc (g, 1);\n";
6842            pr "    *size_r = ret.%s.%s_len;\n" n n;
6843            pr "    return p;\n";
6844            pr "  }\n";
6845       );
6846
6847       pr "}\n\n"
6848   ) daemon_functions;
6849
6850   (* Functions to free structures. *)
6851   pr "/* Structure-freeing functions.  These rely on the fact that the\n";
6852   pr " * structure format is identical to the XDR format.  See note in\n";
6853   pr " * generator.ml.\n";
6854   pr " */\n";
6855   pr "\n";
6856
6857   List.iter (
6858     fun (typ, _) ->
6859       pr "void\n";
6860       pr "guestfs_free_%s (struct guestfs_%s *x)\n" typ typ;
6861       pr "{\n";
6862       pr "  xdr_free ((xdrproc_t) xdr_guestfs_int_%s, (char *) x);\n" typ;
6863       pr "  free (x);\n";
6864       pr "}\n";
6865       pr "\n";
6866
6867       pr "void\n";
6868       pr "guestfs_free_%s_list (struct guestfs_%s_list *x)\n" typ typ;
6869       pr "{\n";
6870       pr "  xdr_free ((xdrproc_t) xdr_guestfs_int_%s_list, (char *) x);\n" typ;
6871       pr "  free (x);\n";
6872       pr "}\n";
6873       pr "\n";
6874
6875   ) structs;
6876
6877 (* Generate daemon/actions.h. *)
6878 and generate_daemon_actions_h () =
6879   generate_header CStyle GPLv2plus;
6880
6881   pr "#include \"../src/guestfs_protocol.h\"\n";
6882   pr "\n";
6883
6884   List.iter (
6885     fun (name, style, _, _, _, _, _) ->
6886       generate_prototype
6887         ~single_line:true ~newline:true ~in_daemon:true ~prefix:"do_"
6888         name style;
6889   ) daemon_functions
6890
6891 (* Generate the linker script which controls the visibility of
6892  * symbols in the public ABI and ensures no other symbols get
6893  * exported accidentally.
6894  *)
6895 and generate_linker_script () =
6896   generate_header HashStyle GPLv2plus;
6897
6898   let globals = [
6899     "guestfs_create";
6900     "guestfs_close";
6901     "guestfs_get_error_handler";
6902     "guestfs_get_out_of_memory_handler";
6903     "guestfs_get_private";
6904     "guestfs_last_error";
6905     "guestfs_set_close_callback";
6906     "guestfs_set_error_handler";
6907     "guestfs_set_launch_done_callback";
6908     "guestfs_set_log_message_callback";
6909     "guestfs_set_out_of_memory_handler";
6910     "guestfs_set_private";
6911     "guestfs_set_progress_callback";
6912     "guestfs_set_subprocess_quit_callback";
6913
6914     (* Unofficial parts of the API: the bindings code use these
6915      * functions, so it is useful to export them.
6916      *)
6917     "guestfs_safe_calloc";
6918     "guestfs_safe_malloc";
6919     "guestfs_safe_strdup";
6920     "guestfs_safe_memdup";
6921   ] in
6922   let functions =
6923     List.map (fun (name, _, _, _, _, _, _) -> "guestfs_" ^ name)
6924       all_functions in
6925   let structs =
6926     List.concat (
6927       List.map (fun (typ, _) ->
6928                   ["guestfs_free_" ^ typ; "guestfs_free_" ^ typ ^ "_list"])
6929         structs
6930     ) in
6931   let globals = List.sort compare (globals @ functions @ structs) in
6932
6933   pr "{\n";
6934   pr "    global:\n";
6935   List.iter (pr "        %s;\n") globals;
6936   pr "\n";
6937
6938   pr "    local:\n";
6939   pr "        *;\n";
6940   pr "};\n"
6941
6942 (* Generate the server-side stubs. *)
6943 and generate_daemon_actions () =
6944   generate_header CStyle GPLv2plus;
6945
6946   pr "#include <config.h>\n";
6947   pr "\n";
6948   pr "#include <stdio.h>\n";
6949   pr "#include <stdlib.h>\n";
6950   pr "#include <string.h>\n";
6951   pr "#include <inttypes.h>\n";
6952   pr "#include <rpc/types.h>\n";
6953   pr "#include <rpc/xdr.h>\n";
6954   pr "\n";
6955   pr "#include \"daemon.h\"\n";
6956   pr "#include \"c-ctype.h\"\n";
6957   pr "#include \"../src/guestfs_protocol.h\"\n";
6958   pr "#include \"actions.h\"\n";
6959   pr "\n";
6960
6961   List.iter (
6962     fun (name, style, _, _, _, _, _) ->
6963       (* Generate server-side stubs. *)
6964       pr "static void %s_stub (XDR *xdr_in)\n" name;
6965       pr "{\n";
6966       let error_code =
6967         match fst style with
6968         | RErr | RInt _ -> pr "  int r;\n"; "-1"
6969         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
6970         | RBool _ -> pr "  int r;\n"; "-1"
6971         | RConstString _ | RConstOptString _ ->
6972             failwithf "RConstString|RConstOptString cannot be used by daemon functions"
6973         | RString _ -> pr "  char *r;\n"; "NULL"
6974         | RStringList _ | RHashtable _ -> pr "  char **r;\n"; "NULL"
6975         | RStruct (_, typ) -> pr "  guestfs_int_%s *r;\n" typ; "NULL"
6976         | RStructList (_, typ) -> pr "  guestfs_int_%s_list *r;\n" typ; "NULL"
6977         | RBufferOut _ ->
6978             pr "  size_t size = 1;\n";
6979             pr "  char *r;\n";
6980             "NULL" in
6981
6982       (match snd style with
6983        | [] -> ()
6984        | args ->
6985            pr "  struct guestfs_%s_args args;\n" name;
6986            List.iter (
6987              function
6988              | Device n | Dev_or_Path n
6989              | Pathname n
6990              | String n
6991              | Key n -> ()
6992              | OptString n -> pr "  char *%s;\n" n
6993              | StringList n | DeviceList n -> pr "  char **%s;\n" n
6994              | Bool n -> pr "  int %s;\n" n
6995              | Int n -> pr "  int %s;\n" n
6996              | Int64 n -> pr "  int64_t %s;\n" n
6997              | FileIn _ | FileOut _ -> ()
6998              | BufferIn n ->
6999                  pr "  const char *%s;\n" n;
7000                  pr "  size_t %s_size;\n" n
7001            ) args
7002       );
7003       pr "\n";
7004
7005       let is_filein =
7006         List.exists (function FileIn _ -> true | _ -> false) (snd style) in
7007
7008       (match snd style with
7009        | [] -> ()
7010        | args ->
7011            pr "  memset (&args, 0, sizeof args);\n";
7012            pr "\n";
7013            pr "  if (!xdr_guestfs_%s_args (xdr_in, &args)) {\n" name;
7014            if is_filein then
7015              pr "    if (cancel_receive () != -2)\n";
7016            pr "      reply_with_error (\"daemon failed to decode procedure arguments\");\n";
7017            pr "    goto done;\n";
7018            pr "  }\n";
7019            let pr_args n =
7020              pr "  char *%s = args.%s;\n" n n
7021            in
7022            let pr_list_handling_code n =
7023              pr "  %s = realloc (args.%s.%s_val,\n" n n n;
7024              pr "                sizeof (char *) * (args.%s.%s_len+1));\n" n n;
7025              pr "  if (%s == NULL) {\n" n;
7026              if is_filein then
7027                pr "    if (cancel_receive () != -2)\n";
7028              pr "      reply_with_perror (\"realloc\");\n";
7029              pr "    goto done;\n";
7030              pr "  }\n";
7031              pr "  %s[args.%s.%s_len] = NULL;\n" n n n;
7032              pr "  args.%s.%s_val = %s;\n" n n n;
7033            in
7034            List.iter (
7035              function
7036              | Pathname n ->
7037                  pr_args n;
7038                  pr "  ABS_PATH (%s, %s, goto done);\n"
7039                    n (if is_filein then "cancel_receive ()" else "0");
7040              | Device n ->
7041                  pr_args n;
7042                  pr "  RESOLVE_DEVICE (%s, %s, goto done);\n"
7043                    n (if is_filein then "cancel_receive ()" else "0");
7044              | Dev_or_Path n ->
7045                  pr_args n;
7046                  pr "  REQUIRE_ROOT_OR_RESOLVE_DEVICE (%s, %s, goto done);\n"
7047                    n (if is_filein then "cancel_receive ()" else "0");
7048              | String n | Key n -> pr_args n
7049              | OptString n -> pr "  %s = args.%s ? *args.%s : NULL;\n" n n n
7050              | StringList n ->
7051                  pr_list_handling_code n;
7052              | DeviceList n ->
7053                  pr_list_handling_code n;
7054                  pr "  /* Ensure that each is a device,\n";
7055                  pr "   * and perform device name translation.\n";
7056                  pr "   */\n";
7057                  pr "  {\n";
7058                  pr "    size_t i;\n";
7059                  pr "    for (i = 0; %s[i] != NULL; ++i)\n" n;
7060                  pr "      RESOLVE_DEVICE (%s[i], %s, goto done);\n" n
7061                    (if is_filein then "cancel_receive ()" else "0");
7062                  pr "  }\n";
7063              | Bool n -> pr "  %s = args.%s;\n" n n
7064              | Int n -> pr "  %s = args.%s;\n" n n
7065              | Int64 n -> pr "  %s = args.%s;\n" n n
7066              | FileIn _ | FileOut _ -> ()
7067              | BufferIn n ->
7068                  pr "  %s = args.%s.%s_val;\n" n n n;
7069                  pr "  %s_size = args.%s.%s_len;\n" n n n
7070            ) args;
7071            pr "\n"
7072       );
7073
7074       (* this is used at least for do_equal *)
7075       if List.exists (function Pathname _ -> true | _ -> false) (snd style) then (
7076         (* Emit NEED_ROOT just once, even when there are two or
7077            more Pathname args *)
7078         pr "  NEED_ROOT (%s, goto done);\n"
7079           (if is_filein then "cancel_receive ()" else "0");
7080       );
7081
7082       (* Don't want to call the impl with any FileIn or FileOut
7083        * parameters, since these go "outside" the RPC protocol.
7084        *)
7085       let args' =
7086         List.filter (function FileIn _ | FileOut _ -> false | _ -> true)
7087           (snd style) in
7088       pr "  r = do_%s " name;
7089       generate_c_call_args (fst style, args');
7090       pr ";\n";
7091
7092       (match fst style with
7093        | RErr | RInt _ | RInt64 _ | RBool _
7094        | RConstString _ | RConstOptString _
7095        | RString _ | RStringList _ | RHashtable _
7096        | RStruct (_, _) | RStructList (_, _) ->
7097            pr "  if (r == %s)\n" error_code;
7098            pr "    /* do_%s has already called reply_with_error */\n" name;
7099            pr "    goto done;\n";
7100            pr "\n"
7101        | RBufferOut _ ->
7102            pr "  /* size == 0 && r == NULL could be a non-error case (just\n";
7103            pr "   * an ordinary zero-length buffer), so be careful ...\n";
7104            pr "   */\n";
7105            pr "  if (size == 1 && r == %s)\n" error_code;
7106            pr "    /* do_%s has already called reply_with_error */\n" name;
7107            pr "    goto done;\n";
7108            pr "\n"
7109       );
7110
7111       (* If there are any FileOut parameters, then the impl must
7112        * send its own reply.
7113        *)
7114       let no_reply =
7115         List.exists (function FileOut _ -> true | _ -> false) (snd style) in
7116       if no_reply then
7117         pr "  /* do_%s has already sent a reply */\n" name
7118       else (
7119         match fst style with
7120         | RErr -> pr "  reply (NULL, NULL);\n"
7121         | RInt n | RInt64 n | RBool n ->
7122             pr "  struct guestfs_%s_ret ret;\n" name;
7123             pr "  ret.%s = r;\n" n;
7124             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
7125               name
7126         | RConstString _ | RConstOptString _ ->
7127             failwithf "RConstString|RConstOptString cannot be used by daemon functions"
7128         | RString n ->
7129             pr "  struct guestfs_%s_ret ret;\n" name;
7130             pr "  ret.%s = r;\n" n;
7131             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
7132               name;
7133             pr "  free (r);\n"
7134         | RStringList n | RHashtable n ->
7135             pr "  struct guestfs_%s_ret ret;\n" name;
7136             pr "  ret.%s.%s_len = count_strings (r);\n" n n;
7137             pr "  ret.%s.%s_val = r;\n" n n;
7138             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
7139               name;
7140             pr "  free_strings (r);\n"
7141         | RStruct (n, _) ->
7142             pr "  struct guestfs_%s_ret ret;\n" name;
7143             pr "  ret.%s = *r;\n" n;
7144             pr "  reply ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
7145               name;
7146             pr "  xdr_free ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
7147               name
7148         | RStructList (n, _) ->
7149             pr "  struct guestfs_%s_ret ret;\n" name;
7150             pr "  ret.%s = *r;\n" n;
7151             pr "  reply ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
7152               name;
7153             pr "  xdr_free ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
7154               name
7155         | RBufferOut n ->
7156             pr "  struct guestfs_%s_ret ret;\n" name;
7157             pr "  ret.%s.%s_val = r;\n" n n;
7158             pr "  ret.%s.%s_len = size;\n" n n;
7159             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
7160               name;
7161             pr "  free (r);\n"
7162       );
7163
7164       (* Free the args. *)
7165       pr "done:\n";
7166       (match snd style with
7167        | [] -> ()
7168        | _ ->
7169            pr "  xdr_free ((xdrproc_t) xdr_guestfs_%s_args, (char *) &args);\n"
7170              name
7171       );
7172       pr "  return;\n";
7173       pr "}\n\n";
7174   ) daemon_functions;
7175
7176   (* Dispatch function. *)
7177   pr "void dispatch_incoming_message (XDR *xdr_in)\n";
7178   pr "{\n";
7179   pr "  switch (proc_nr) {\n";
7180
7181   List.iter (
7182     fun (name, style, _, _, _, _, _) ->
7183       pr "    case GUESTFS_PROC_%s:\n" (String.uppercase name);
7184       pr "      %s_stub (xdr_in);\n" name;
7185       pr "      break;\n"
7186   ) daemon_functions;
7187
7188   pr "    default:\n";
7189   pr "      reply_with_error (\"dispatch_incoming_message: unknown procedure number %%d, set LIBGUESTFS_PATH to point to the matching libguestfs appliance directory\", proc_nr);\n";
7190   pr "  }\n";
7191   pr "}\n";
7192   pr "\n";
7193
7194   (* LVM columns and tokenization functions. *)
7195   (* XXX This generates crap code.  We should rethink how we
7196    * do this parsing.
7197    *)
7198   List.iter (
7199     function
7200     | typ, cols ->
7201         pr "static const char *lvm_%s_cols = \"%s\";\n"
7202           typ (String.concat "," (List.map fst cols));
7203         pr "\n";
7204
7205         pr "static int lvm_tokenize_%s (char *str, guestfs_int_lvm_%s *r)\n" typ typ;
7206         pr "{\n";
7207         pr "  char *tok, *p, *next;\n";
7208         pr "  size_t i, j;\n";
7209         pr "\n";
7210         (*
7211           pr "  fprintf (stderr, \"%%s: <<%%s>>\\n\", __func__, str);\n";
7212           pr "\n";
7213         *)
7214         pr "  if (!str) {\n";
7215         pr "    fprintf (stderr, \"%%s: failed: passed a NULL string\\n\", __func__);\n";
7216         pr "    return -1;\n";
7217         pr "  }\n";
7218         pr "  if (!*str || c_isspace (*str)) {\n";
7219         pr "    fprintf (stderr, \"%%s: failed: passed a empty string or one beginning with whitespace\\n\", __func__);\n";
7220         pr "    return -1;\n";
7221         pr "  }\n";
7222         pr "  tok = str;\n";
7223         List.iter (
7224           fun (name, coltype) ->
7225             pr "  if (!tok) {\n";
7226             pr "    fprintf (stderr, \"%%s: failed: string finished early, around token %%s\\n\", __func__, \"%s\");\n" name;
7227             pr "    return -1;\n";
7228             pr "  }\n";
7229             pr "  p = strchrnul (tok, ',');\n";
7230             pr "  if (*p) next = p+1; else next = NULL;\n";
7231             pr "  *p = '\\0';\n";
7232             (match coltype with
7233              | FString ->
7234                  pr "  r->%s = strdup (tok);\n" name;
7235                  pr "  if (r->%s == NULL) {\n" name;
7236                  pr "    perror (\"strdup\");\n";
7237                  pr "    return -1;\n";
7238                  pr "  }\n"
7239              | FUUID ->
7240                  pr "  for (i = j = 0; i < 32; ++j) {\n";
7241                  pr "    if (tok[j] == '\\0') {\n";
7242                  pr "      fprintf (stderr, \"%%s: failed to parse UUID from '%%s'\\n\", __func__, tok);\n";
7243                  pr "      return -1;\n";
7244                  pr "    } else if (tok[j] != '-')\n";
7245                  pr "      r->%s[i++] = tok[j];\n" name;
7246                  pr "  }\n";
7247              | FBytes ->
7248                  pr "  if (sscanf (tok, \"%%\"SCNu64, &r->%s) != 1) {\n" name;
7249                  pr "    fprintf (stderr, \"%%s: failed to parse size '%%s' from token %%s\\n\", __func__, tok, \"%s\");\n" name;
7250                  pr "    return -1;\n";
7251                  pr "  }\n";
7252              | FInt64 ->
7253                  pr "  if (sscanf (tok, \"%%\"SCNi64, &r->%s) != 1) {\n" name;
7254                  pr "    fprintf (stderr, \"%%s: failed to parse int '%%s' from token %%s\\n\", __func__, tok, \"%s\");\n" name;
7255                  pr "    return -1;\n";
7256                  pr "  }\n";
7257              | FOptPercent ->
7258                  pr "  if (tok[0] == '\\0')\n";
7259                  pr "    r->%s = -1;\n" name;
7260                  pr "  else if (sscanf (tok, \"%%f\", &r->%s) != 1) {\n" name;
7261                  pr "    fprintf (stderr, \"%%s: failed to parse float '%%s' from token %%s\\n\", __func__, tok, \"%s\");\n" name;
7262                  pr "    return -1;\n";
7263                  pr "  }\n";
7264              | FBuffer | FInt32 | FUInt32 | FUInt64 | FChar ->
7265                  assert false (* can never be an LVM column *)
7266             );
7267             pr "  tok = next;\n";
7268         ) cols;
7269
7270         pr "  if (tok != NULL) {\n";
7271         pr "    fprintf (stderr, \"%%s: failed: extra tokens at end of string\\n\", __func__);\n";
7272         pr "    return -1;\n";
7273         pr "  }\n";
7274         pr "  return 0;\n";
7275         pr "}\n";
7276         pr "\n";
7277
7278         pr "guestfs_int_lvm_%s_list *\n" typ;
7279         pr "parse_command_line_%ss (void)\n" typ;
7280         pr "{\n";
7281         pr "  char *out, *err;\n";
7282         pr "  char *p, *pend;\n";
7283         pr "  int r, i;\n";
7284         pr "  guestfs_int_lvm_%s_list *ret;\n" typ;
7285         pr "  void *newp;\n";
7286         pr "\n";
7287         pr "  ret = malloc (sizeof *ret);\n";
7288         pr "  if (!ret) {\n";
7289         pr "    reply_with_perror (\"malloc\");\n";
7290         pr "    return NULL;\n";
7291         pr "  }\n";
7292         pr "\n";
7293         pr "  ret->guestfs_int_lvm_%s_list_len = 0;\n" typ;
7294         pr "  ret->guestfs_int_lvm_%s_list_val = NULL;\n" typ;
7295         pr "\n";
7296         pr "  r = command (&out, &err,\n";
7297         pr "           \"lvm\", \"%ss\",\n" typ;
7298         pr "           \"-o\", lvm_%s_cols, \"--unbuffered\", \"--noheadings\",\n" typ;
7299         pr "           \"--nosuffix\", \"--separator\", \",\", \"--units\", \"b\", NULL);\n";
7300         pr "  if (r == -1) {\n";
7301         pr "    reply_with_error (\"%%s\", err);\n";
7302         pr "    free (out);\n";
7303         pr "    free (err);\n";
7304         pr "    free (ret);\n";
7305         pr "    return NULL;\n";
7306         pr "  }\n";
7307         pr "\n";
7308         pr "  free (err);\n";
7309         pr "\n";
7310         pr "  /* Tokenize each line of the output. */\n";
7311         pr "  p = out;\n";
7312         pr "  i = 0;\n";
7313         pr "  while (p) {\n";
7314         pr "    pend = strchr (p, '\\n');       /* Get the next line of output. */\n";
7315         pr "    if (pend) {\n";
7316         pr "      *pend = '\\0';\n";
7317         pr "      pend++;\n";
7318         pr "    }\n";
7319         pr "\n";
7320         pr "    while (*p && c_isspace (*p))    /* Skip any leading whitespace. */\n";
7321         pr "      p++;\n";
7322         pr "\n";
7323         pr "    if (!*p) {                      /* Empty line?  Skip it. */\n";
7324         pr "      p = pend;\n";
7325         pr "      continue;\n";
7326         pr "    }\n";
7327         pr "\n";
7328         pr "    /* Allocate some space to store this next entry. */\n";
7329         pr "    newp = realloc (ret->guestfs_int_lvm_%s_list_val,\n" typ;
7330         pr "                sizeof (guestfs_int_lvm_%s) * (i+1));\n" typ;
7331         pr "    if (newp == NULL) {\n";
7332         pr "      reply_with_perror (\"realloc\");\n";
7333         pr "      free (ret->guestfs_int_lvm_%s_list_val);\n" typ;
7334         pr "      free (ret);\n";
7335         pr "      free (out);\n";
7336         pr "      return NULL;\n";
7337         pr "    }\n";
7338         pr "    ret->guestfs_int_lvm_%s_list_val = newp;\n" typ;
7339         pr "\n";
7340         pr "    /* Tokenize the next entry. */\n";
7341         pr "    r = lvm_tokenize_%s (p, &ret->guestfs_int_lvm_%s_list_val[i]);\n" typ typ;
7342         pr "    if (r == -1) {\n";
7343         pr "      reply_with_error (\"failed to parse output of '%ss' command\");\n" typ;
7344         pr "      free (ret->guestfs_int_lvm_%s_list_val);\n" typ;
7345         pr "      free (ret);\n";
7346         pr "      free (out);\n";
7347         pr "      return NULL;\n";
7348         pr "    }\n";
7349         pr "\n";
7350         pr "    ++i;\n";
7351         pr "    p = pend;\n";
7352         pr "  }\n";
7353         pr "\n";
7354         pr "  ret->guestfs_int_lvm_%s_list_len = i;\n" typ;
7355         pr "\n";
7356         pr "  free (out);\n";
7357         pr "  return ret;\n";
7358         pr "}\n"
7359
7360   ) ["pv", lvm_pv_cols; "vg", lvm_vg_cols; "lv", lvm_lv_cols]
7361
7362 (* Generate a list of function names, for debugging in the daemon.. *)
7363 and generate_daemon_names () =
7364   generate_header CStyle GPLv2plus;
7365
7366   pr "#include <config.h>\n";
7367   pr "\n";
7368   pr "#include \"daemon.h\"\n";
7369   pr "\n";
7370
7371   pr "/* This array is indexed by proc_nr.  See guestfs_protocol.x. */\n";
7372   pr "const char *function_names[] = {\n";
7373   List.iter (
7374     fun (name, _, proc_nr, _, _, _, _) -> pr "  [%d] = \"%s\",\n" proc_nr name
7375   ) daemon_functions;
7376   pr "};\n";
7377
7378 (* Generate the optional groups for the daemon to implement
7379  * guestfs_available.
7380  *)
7381 and generate_daemon_optgroups_c () =
7382   generate_header CStyle GPLv2plus;
7383
7384   pr "#include <config.h>\n";
7385   pr "\n";
7386   pr "#include \"daemon.h\"\n";
7387   pr "#include \"optgroups.h\"\n";
7388   pr "\n";
7389
7390   pr "struct optgroup optgroups[] = {\n";
7391   List.iter (
7392     fun (group, _) ->
7393       pr "  { \"%s\", optgroup_%s_available },\n" group group
7394   ) optgroups;
7395   pr "  { NULL, NULL }\n";
7396   pr "};\n"
7397
7398 and generate_daemon_optgroups_h () =
7399   generate_header CStyle GPLv2plus;
7400
7401   List.iter (
7402     fun (group, _) ->
7403       pr "extern int optgroup_%s_available (void);\n" group
7404   ) optgroups
7405
7406 (* Generate the tests. *)
7407 and generate_tests () =
7408   generate_header CStyle GPLv2plus;
7409
7410   pr "\
7411 #include <stdio.h>
7412 #include <stdlib.h>
7413 #include <string.h>
7414 #include <unistd.h>
7415 #include <sys/types.h>
7416 #include <fcntl.h>
7417
7418 #include \"guestfs.h\"
7419 #include \"guestfs-internal.h\"
7420
7421 static guestfs_h *g;
7422 static int suppress_error = 0;
7423
7424 static void print_error (guestfs_h *g, void *data, const char *msg)
7425 {
7426   if (!suppress_error)
7427     fprintf (stderr, \"%%s\\n\", msg);
7428 }
7429
7430 /* FIXME: nearly identical code appears in fish.c */
7431 static void print_strings (char *const *argv)
7432 {
7433   size_t argc;
7434
7435   for (argc = 0; argv[argc] != NULL; ++argc)
7436     printf (\"\\t%%s\\n\", argv[argc]);
7437 }
7438
7439 /*
7440 static void print_table (char const *const *argv)
7441 {
7442   size_t i;
7443
7444   for (i = 0; argv[i] != NULL; i += 2)
7445     printf (\"%%s: %%s\\n\", argv[i], argv[i+1]);
7446 }
7447 */
7448
7449 static int
7450 is_available (const char *group)
7451 {
7452   const char *groups[] = { group, NULL };
7453   int r;
7454
7455   suppress_error = 1;
7456   r = guestfs_available (g, (char **) groups);
7457   suppress_error = 0;
7458
7459   return r == 0;
7460 }
7461
7462 static void
7463 incr (guestfs_h *g, void *iv)
7464 {
7465   int *i = (int *) iv;
7466   (*i)++;
7467 }
7468
7469 ";
7470
7471   (* Generate a list of commands which are not tested anywhere. *)
7472   pr "static void no_test_warnings (void)\n";
7473   pr "{\n";
7474
7475   let hash : (string, bool) Hashtbl.t = Hashtbl.create 13 in
7476   List.iter (
7477     fun (_, _, _, _, tests, _, _) ->
7478       let tests = filter_map (
7479         function
7480         | (_, (Always|If _|Unless _|IfAvailable _), test) -> Some test
7481         | (_, Disabled, _) -> None
7482       ) tests in
7483       let seq = List.concat (List.map seq_of_test tests) in
7484       let cmds_tested = List.map List.hd seq in
7485       List.iter (fun cmd -> Hashtbl.replace hash cmd true) cmds_tested
7486   ) all_functions;
7487
7488   List.iter (
7489     fun (name, _, _, _, _, _, _) ->
7490       if not (Hashtbl.mem hash name) then
7491         pr "  fprintf (stderr, \"warning: \\\"guestfs_%s\\\" has no tests\\n\");\n" name
7492   ) all_functions;
7493
7494   pr "}\n";
7495   pr "\n";
7496
7497   (* Generate the actual tests.  Note that we generate the tests
7498    * in reverse order, deliberately, so that (in general) the
7499    * newest tests run first.  This makes it quicker and easier to
7500    * debug them.
7501    *)
7502   let test_names =
7503     List.map (
7504       fun (name, _, _, flags, tests, _, _) ->
7505         mapi (generate_one_test name flags) tests
7506     ) (List.rev all_functions) in
7507   let test_names = List.concat test_names in
7508   let nr_tests = List.length test_names in
7509
7510   pr "\
7511 int main (int argc, char *argv[])
7512 {
7513   char c = 0;
7514   unsigned long int n_failed = 0;
7515   const char *filename;
7516   int fd;
7517   int nr_tests, test_num = 0;
7518
7519   setbuf (stdout, NULL);
7520
7521   no_test_warnings ();
7522
7523   g = guestfs_create ();
7524   if (g == NULL) {
7525     printf (\"guestfs_create FAILED\\n\");
7526     exit (EXIT_FAILURE);
7527   }
7528
7529   guestfs_set_error_handler (g, print_error, NULL);
7530
7531   guestfs_set_path (g, \"../appliance\");
7532
7533   filename = \"test1.img\";
7534   fd = open (filename, O_WRONLY|O_CREAT|O_NOCTTY|O_NONBLOCK|O_TRUNC, 0666);
7535   if (fd == -1) {
7536     perror (filename);
7537     exit (EXIT_FAILURE);
7538   }
7539   if (lseek (fd, %d, SEEK_SET) == -1) {
7540     perror (\"lseek\");
7541     close (fd);
7542     unlink (filename);
7543     exit (EXIT_FAILURE);
7544   }
7545   if (write (fd, &c, 1) == -1) {
7546     perror (\"write\");
7547     close (fd);
7548     unlink (filename);
7549     exit (EXIT_FAILURE);
7550   }
7551   if (close (fd) == -1) {
7552     perror (filename);
7553     unlink (filename);
7554     exit (EXIT_FAILURE);
7555   }
7556   if (guestfs_add_drive (g, filename) == -1) {
7557     printf (\"guestfs_add_drive %%s FAILED\\n\", filename);
7558     exit (EXIT_FAILURE);
7559   }
7560
7561   filename = \"test2.img\";
7562   fd = open (filename, O_WRONLY|O_CREAT|O_NOCTTY|O_NONBLOCK|O_TRUNC, 0666);
7563   if (fd == -1) {
7564     perror (filename);
7565     exit (EXIT_FAILURE);
7566   }
7567   if (lseek (fd, %d, SEEK_SET) == -1) {
7568     perror (\"lseek\");
7569     close (fd);
7570     unlink (filename);
7571     exit (EXIT_FAILURE);
7572   }
7573   if (write (fd, &c, 1) == -1) {
7574     perror (\"write\");
7575     close (fd);
7576     unlink (filename);
7577     exit (EXIT_FAILURE);
7578   }
7579   if (close (fd) == -1) {
7580     perror (filename);
7581     unlink (filename);
7582     exit (EXIT_FAILURE);
7583   }
7584   if (guestfs_add_drive (g, filename) == -1) {
7585     printf (\"guestfs_add_drive %%s FAILED\\n\", filename);
7586     exit (EXIT_FAILURE);
7587   }
7588
7589   filename = \"test3.img\";
7590   fd = open (filename, O_WRONLY|O_CREAT|O_NOCTTY|O_NONBLOCK|O_TRUNC, 0666);
7591   if (fd == -1) {
7592     perror (filename);
7593     exit (EXIT_FAILURE);
7594   }
7595   if (lseek (fd, %d, SEEK_SET) == -1) {
7596     perror (\"lseek\");
7597     close (fd);
7598     unlink (filename);
7599     exit (EXIT_FAILURE);
7600   }
7601   if (write (fd, &c, 1) == -1) {
7602     perror (\"write\");
7603     close (fd);
7604     unlink (filename);
7605     exit (EXIT_FAILURE);
7606   }
7607   if (close (fd) == -1) {
7608     perror (filename);
7609     unlink (filename);
7610     exit (EXIT_FAILURE);
7611   }
7612   if (guestfs_add_drive (g, filename) == -1) {
7613     printf (\"guestfs_add_drive %%s FAILED\\n\", filename);
7614     exit (EXIT_FAILURE);
7615   }
7616
7617   if (guestfs_add_drive_ro (g, \"../images/test.iso\") == -1) {
7618     printf (\"guestfs_add_drive_ro ../images/test.iso FAILED\\n\");
7619     exit (EXIT_FAILURE);
7620   }
7621
7622   /* Set a timeout in case qemu hangs during launch (RHBZ#505329). */
7623   alarm (600);
7624
7625   if (guestfs_launch (g) == -1) {
7626     printf (\"guestfs_launch FAILED\\n\");
7627     exit (EXIT_FAILURE);
7628   }
7629
7630   /* Cancel previous alarm. */
7631   alarm (0);
7632
7633   nr_tests = %d;
7634
7635 " (500 * 1024 * 1024) (50 * 1024 * 1024) (10 * 1024 * 1024) nr_tests;
7636
7637   iteri (
7638     fun i test_name ->
7639       pr "  test_num++;\n";
7640       pr "  if (guestfs_get_verbose (g))\n";
7641       pr "    printf (\"-------------------------------------------------------------------------------\\n\");\n";
7642       pr "  printf (\"%%3d/%%3d %s\\n\", test_num, nr_tests);\n" test_name;
7643       pr "  if (%s () == -1) {\n" test_name;
7644       pr "    printf (\"%s FAILED\\n\");\n" test_name;
7645       pr "    n_failed++;\n";
7646       pr "  }\n";
7647   ) test_names;
7648   pr "\n";
7649
7650   pr "  /* Check close callback is called. */
7651   int close_sentinel = 1;
7652   guestfs_set_close_callback (g, incr, &close_sentinel);
7653
7654   guestfs_close (g);
7655
7656   if (close_sentinel != 2) {
7657     fprintf (stderr, \"close callback was not called\\n\");
7658     exit (EXIT_FAILURE);
7659   }
7660
7661   unlink (\"test1.img\");
7662   unlink (\"test2.img\");
7663   unlink (\"test3.img\");
7664
7665 ";
7666
7667   pr "  if (n_failed > 0) {\n";
7668   pr "    printf (\"***** %%lu / %%d tests FAILED *****\\n\", n_failed, nr_tests);\n";
7669   pr "    exit (EXIT_FAILURE);\n";
7670   pr "  }\n";
7671   pr "\n";
7672
7673   pr "  exit (EXIT_SUCCESS);\n";
7674   pr "}\n"
7675
7676 and generate_one_test name flags i (init, prereq, test) =
7677   let test_name = sprintf "test_%s_%d" name i in
7678
7679   pr "\
7680 static int %s_skip (void)
7681 {
7682   const char *str;
7683
7684   str = getenv (\"TEST_ONLY\");
7685   if (str)
7686     return strstr (str, \"%s\") == NULL;
7687   str = getenv (\"SKIP_%s\");
7688   if (str && STREQ (str, \"1\")) return 1;
7689   str = getenv (\"SKIP_TEST_%s\");
7690   if (str && STREQ (str, \"1\")) return 1;
7691   return 0;
7692 }
7693
7694 " test_name name (String.uppercase test_name) (String.uppercase name);
7695
7696   (match prereq with
7697    | Disabled | Always | IfAvailable _ -> ()
7698    | If code | Unless code ->
7699        pr "static int %s_prereq (void)\n" test_name;
7700        pr "{\n";
7701        pr "  %s\n" code;
7702        pr "}\n";
7703        pr "\n";
7704   );
7705
7706   pr "\
7707 static int %s (void)
7708 {
7709   if (%s_skip ()) {
7710     printf (\"        %%s skipped (reason: environment variable set)\\n\", \"%s\");
7711     return 0;
7712   }
7713
7714 " test_name test_name test_name;
7715
7716   (* Optional functions should only be tested if the relevant
7717    * support is available in the daemon.
7718    *)
7719   List.iter (
7720     function
7721     | Optional group ->
7722         pr "  if (!is_available (\"%s\")) {\n" group;
7723         pr "    printf (\"        %%s skipped (reason: group %%s not available in daemon)\\n\", \"%s\", \"%s\");\n" test_name group;
7724         pr "    return 0;\n";
7725         pr "  }\n";
7726     | _ -> ()
7727   ) flags;
7728
7729   (match prereq with
7730    | Disabled ->
7731        pr "  printf (\"        %%s skipped (reason: test disabled in generator)\\n\", \"%s\");\n" test_name
7732    | If _ ->
7733        pr "  if (! %s_prereq ()) {\n" test_name;
7734        pr "    printf (\"        %%s skipped (reason: test prerequisite)\\n\", \"%s\");\n" test_name;
7735        pr "    return 0;\n";
7736        pr "  }\n";
7737        pr "\n";
7738        generate_one_test_body name i test_name init test;
7739    | Unless _ ->
7740        pr "  if (%s_prereq ()) {\n" test_name;
7741        pr "    printf (\"        %%s skipped (reason: test prerequisite)\\n\", \"%s\");\n" test_name;
7742        pr "    return 0;\n";
7743        pr "  }\n";
7744        pr "\n";
7745        generate_one_test_body name i test_name init test;
7746    | IfAvailable group ->
7747        pr "  if (!is_available (\"%s\")) {\n" group;
7748        pr "    printf (\"        %%s skipped (reason: %%s not available)\\n\", \"%s\", \"%s\");\n" test_name group;
7749        pr "    return 0;\n";
7750        pr "  }\n";
7751        pr "\n";
7752        generate_one_test_body name i test_name init test;
7753    | Always ->
7754        generate_one_test_body name i test_name init test
7755   );
7756
7757   pr "  return 0;\n";
7758   pr "}\n";
7759   pr "\n";
7760   test_name
7761
7762 and generate_one_test_body name i test_name init test =
7763   (match init with
7764    | InitNone (* XXX at some point, InitNone and InitEmpty became
7765                * folded together as the same thing.  Really we should
7766                * make InitNone do nothing at all, but the tests may
7767                * need to be checked to make sure this is OK.
7768                *)
7769    | InitEmpty ->
7770        pr "  /* InitNone|InitEmpty for %s */\n" test_name;
7771        List.iter (generate_test_command_call test_name)
7772          [["blockdev_setrw"; "/dev/sda"];
7773           ["umount_all"];
7774           ["lvm_remove_all"]]
7775    | InitPartition ->
7776        pr "  /* InitPartition for %s: create /dev/sda1 */\n" test_name;
7777        List.iter (generate_test_command_call test_name)
7778          [["blockdev_setrw"; "/dev/sda"];
7779           ["umount_all"];
7780           ["lvm_remove_all"];
7781           ["part_disk"; "/dev/sda"; "mbr"]]
7782    | InitBasicFS ->
7783        pr "  /* InitBasicFS for %s: create ext2 on /dev/sda1 */\n" test_name;
7784        List.iter (generate_test_command_call test_name)
7785          [["blockdev_setrw"; "/dev/sda"];
7786           ["umount_all"];
7787           ["lvm_remove_all"];
7788           ["part_disk"; "/dev/sda"; "mbr"];
7789           ["mkfs"; "ext2"; "/dev/sda1"];
7790           ["mount_options"; ""; "/dev/sda1"; "/"]]
7791    | InitBasicFSonLVM ->
7792        pr "  /* InitBasicFSonLVM for %s: create ext2 on /dev/VG/LV */\n"
7793          test_name;
7794        List.iter (generate_test_command_call test_name)
7795          [["blockdev_setrw"; "/dev/sda"];
7796           ["umount_all"];
7797           ["lvm_remove_all"];
7798           ["part_disk"; "/dev/sda"; "mbr"];
7799           ["pvcreate"; "/dev/sda1"];
7800           ["vgcreate"; "VG"; "/dev/sda1"];
7801           ["lvcreate"; "LV"; "VG"; "8"];
7802           ["mkfs"; "ext2"; "/dev/VG/LV"];
7803           ["mount_options"; ""; "/dev/VG/LV"; "/"]]
7804    | InitISOFS ->
7805        pr "  /* InitISOFS for %s */\n" test_name;
7806        List.iter (generate_test_command_call test_name)
7807          [["blockdev_setrw"; "/dev/sda"];
7808           ["umount_all"];
7809           ["lvm_remove_all"];
7810           ["mount_ro"; "/dev/sdd"; "/"]]
7811   );
7812
7813   let get_seq_last = function
7814     | [] ->
7815         failwithf "%s: you cannot use [] (empty list) when expecting a command"
7816           test_name
7817     | seq ->
7818         let seq = List.rev seq in
7819         List.rev (List.tl seq), List.hd seq
7820   in
7821
7822   match test with
7823   | TestRun seq ->
7824       pr "  /* TestRun for %s (%d) */\n" name i;
7825       List.iter (generate_test_command_call test_name) seq
7826   | TestOutput (seq, expected) ->
7827       pr "  /* TestOutput for %s (%d) */\n" name i;
7828       pr "  const char *expected = \"%s\";\n" (c_quote expected);
7829       let seq, last = get_seq_last seq in
7830       let test () =
7831         pr "    if (STRNEQ (r, expected)) {\n";
7832         pr "      fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r);\n" test_name;
7833         pr "      return -1;\n";
7834         pr "    }\n"
7835       in
7836       List.iter (generate_test_command_call test_name) seq;
7837       generate_test_command_call ~test test_name last
7838   | TestOutputList (seq, expected) ->
7839       pr "  /* TestOutputList for %s (%d) */\n" name i;
7840       let seq, last = get_seq_last seq in
7841       let test () =
7842         iteri (
7843           fun i str ->
7844             pr "    if (!r[%d]) {\n" i;
7845             pr "      fprintf (stderr, \"%s: short list returned from command\\n\");\n" test_name;
7846             pr "      print_strings (r);\n";
7847             pr "      return -1;\n";
7848             pr "    }\n";
7849             pr "    {\n";
7850             pr "      const char *expected = \"%s\";\n" (c_quote str);
7851             pr "      if (STRNEQ (r[%d], expected)) {\n" i;
7852             pr "        fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r[%d]);\n" test_name i;
7853             pr "        return -1;\n";
7854             pr "      }\n";
7855             pr "    }\n"
7856         ) expected;
7857         pr "    if (r[%d] != NULL) {\n" (List.length expected);
7858         pr "      fprintf (stderr, \"%s: extra elements returned from command\\n\");\n"
7859           test_name;
7860         pr "      print_strings (r);\n";
7861         pr "      return -1;\n";
7862         pr "    }\n"
7863       in
7864       List.iter (generate_test_command_call test_name) seq;
7865       generate_test_command_call ~test test_name last
7866   | TestOutputListOfDevices (seq, expected) ->
7867       pr "  /* TestOutputListOfDevices for %s (%d) */\n" name i;
7868       let seq, last = get_seq_last seq in
7869       let test () =
7870         iteri (
7871           fun i str ->
7872             pr "    if (!r[%d]) {\n" i;
7873             pr "      fprintf (stderr, \"%s: short list returned from command\\n\");\n" test_name;
7874             pr "      print_strings (r);\n";
7875             pr "      return -1;\n";
7876             pr "    }\n";
7877             pr "    {\n";
7878             pr "      const char *expected = \"%s\";\n" (c_quote str);
7879             pr "      r[%d][5] = 's';\n" i;
7880             pr "      if (STRNEQ (r[%d], expected)) {\n" i;
7881             pr "        fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r[%d]);\n" test_name i;
7882             pr "        return -1;\n";
7883             pr "      }\n";
7884             pr "    }\n"
7885         ) expected;
7886         pr "    if (r[%d] != NULL) {\n" (List.length expected);
7887         pr "      fprintf (stderr, \"%s: extra elements returned from command\\n\");\n"
7888           test_name;
7889         pr "      print_strings (r);\n";
7890         pr "      return -1;\n";
7891         pr "    }\n"
7892       in
7893       List.iter (generate_test_command_call test_name) seq;
7894       generate_test_command_call ~test test_name last
7895   | TestOutputInt (seq, expected) ->
7896       pr "  /* TestOutputInt for %s (%d) */\n" name i;
7897       let seq, last = get_seq_last seq in
7898       let test () =
7899         pr "    if (r != %d) {\n" expected;
7900         pr "      fprintf (stderr, \"%s: expected %d but got %%d\\n\","
7901           test_name expected;
7902         pr "               (int) r);\n";
7903         pr "      return -1;\n";
7904         pr "    }\n"
7905       in
7906       List.iter (generate_test_command_call test_name) seq;
7907       generate_test_command_call ~test test_name last
7908   | TestOutputIntOp (seq, op, expected) ->
7909       pr "  /* TestOutputIntOp for %s (%d) */\n" name i;
7910       let seq, last = get_seq_last seq in
7911       let test () =
7912         pr "    if (! (r %s %d)) {\n" op expected;
7913         pr "      fprintf (stderr, \"%s: expected %s %d but got %%d\\n\","
7914           test_name op expected;
7915         pr "               (int) r);\n";
7916         pr "      return -1;\n";
7917         pr "    }\n"
7918       in
7919       List.iter (generate_test_command_call test_name) seq;
7920       generate_test_command_call ~test test_name last
7921   | TestOutputTrue seq ->
7922       pr "  /* TestOutputTrue for %s (%d) */\n" name i;
7923       let seq, last = get_seq_last seq in
7924       let test () =
7925         pr "    if (!r) {\n";
7926         pr "      fprintf (stderr, \"%s: expected true, got false\\n\");\n"
7927           test_name;
7928         pr "      return -1;\n";
7929         pr "    }\n"
7930       in
7931       List.iter (generate_test_command_call test_name) seq;
7932       generate_test_command_call ~test test_name last
7933   | TestOutputFalse seq ->
7934       pr "  /* TestOutputFalse for %s (%d) */\n" name i;
7935       let seq, last = get_seq_last seq in
7936       let test () =
7937         pr "    if (r) {\n";
7938         pr "      fprintf (stderr, \"%s: expected false, got true\\n\");\n"
7939           test_name;
7940         pr "      return -1;\n";
7941         pr "    }\n"
7942       in
7943       List.iter (generate_test_command_call test_name) seq;
7944       generate_test_command_call ~test test_name last
7945   | TestOutputLength (seq, expected) ->
7946       pr "  /* TestOutputLength for %s (%d) */\n" name i;
7947       let seq, last = get_seq_last seq in
7948       let test () =
7949         pr "    int j;\n";
7950         pr "    for (j = 0; j < %d; ++j)\n" expected;
7951         pr "      if (r[j] == NULL) {\n";
7952         pr "        fprintf (stderr, \"%s: short list returned\\n\");\n"
7953           test_name;
7954         pr "        print_strings (r);\n";
7955         pr "        return -1;\n";
7956         pr "      }\n";
7957         pr "    if (r[j] != NULL) {\n";
7958         pr "      fprintf (stderr, \"%s: long list returned\\n\");\n"
7959           test_name;
7960         pr "      print_strings (r);\n";
7961         pr "      return -1;\n";
7962         pr "    }\n"
7963       in
7964       List.iter (generate_test_command_call test_name) seq;
7965       generate_test_command_call ~test test_name last
7966   | TestOutputBuffer (seq, expected) ->
7967       pr "  /* TestOutputBuffer for %s (%d) */\n" name i;
7968       pr "  const char *expected = \"%s\";\n" (c_quote expected);
7969       let seq, last = get_seq_last seq in
7970       let len = String.length expected in
7971       let test () =
7972         pr "    if (size != %d) {\n" len;
7973         pr "      fprintf (stderr, \"%s: returned size of buffer wrong, expected %d but got %%zu\\n\", size);\n" test_name len;
7974         pr "      return -1;\n";
7975         pr "    }\n";
7976         pr "    if (STRNEQLEN (r, expected, size)) {\n";
7977         pr "      fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r);\n" test_name;
7978         pr "      return -1;\n";
7979         pr "    }\n"
7980       in
7981       List.iter (generate_test_command_call test_name) seq;
7982       generate_test_command_call ~test test_name last
7983   | TestOutputStruct (seq, checks) ->
7984       pr "  /* TestOutputStruct for %s (%d) */\n" name i;
7985       let seq, last = get_seq_last seq in
7986       let test () =
7987         List.iter (
7988           function
7989           | CompareWithInt (field, expected) ->
7990               pr "    if (r->%s != %d) {\n" field expected;
7991               pr "      fprintf (stderr, \"%s: %s was %%d, expected %d\\n\",\n"
7992                 test_name field expected;
7993               pr "               (int) r->%s);\n" field;
7994               pr "      return -1;\n";
7995               pr "    }\n"
7996           | CompareWithIntOp (field, op, expected) ->
7997               pr "    if (!(r->%s %s %d)) {\n" field op expected;
7998               pr "      fprintf (stderr, \"%s: %s was %%d, expected %s %d\\n\",\n"
7999                 test_name field op expected;
8000               pr "               (int) r->%s);\n" field;
8001               pr "      return -1;\n";
8002               pr "    }\n"
8003           | CompareWithString (field, expected) ->
8004               pr "    if (STRNEQ (r->%s, \"%s\")) {\n" field expected;
8005               pr "      fprintf (stderr, \"%s: %s was \"%%s\", expected \"%s\"\\n\",\n"
8006                 test_name field expected;
8007               pr "               r->%s);\n" field;
8008               pr "      return -1;\n";
8009               pr "    }\n"
8010           | CompareFieldsIntEq (field1, field2) ->
8011               pr "    if (r->%s != r->%s) {\n" field1 field2;
8012               pr "      fprintf (stderr, \"%s: %s (%%d) <> %s (%%d)\\n\",\n"
8013                 test_name field1 field2;
8014               pr "               (int) r->%s, (int) r->%s);\n" field1 field2;
8015               pr "      return -1;\n";
8016               pr "    }\n"
8017           | CompareFieldsStrEq (field1, field2) ->
8018               pr "    if (STRNEQ (r->%s, r->%s)) {\n" field1 field2;
8019               pr "      fprintf (stderr, \"%s: %s (\"%%s\") <> %s (\"%%s\")\\n\",\n"
8020                 test_name field1 field2;
8021               pr "               r->%s, r->%s);\n" field1 field2;
8022               pr "      return -1;\n";
8023               pr "    }\n"
8024         ) checks
8025       in
8026       List.iter (generate_test_command_call test_name) seq;
8027       generate_test_command_call ~test test_name last
8028   | TestLastFail seq ->
8029       pr "  /* TestLastFail for %s (%d) */\n" name i;
8030       let seq, last = get_seq_last seq in
8031       List.iter (generate_test_command_call test_name) seq;
8032       generate_test_command_call test_name ~expect_error:true last
8033
8034 (* Generate the code to run a command, leaving the result in 'r'.
8035  * If you expect to get an error then you should set expect_error:true.
8036  *)
8037 and generate_test_command_call ?(expect_error = false) ?test test_name cmd =
8038   match cmd with
8039   | [] -> assert false
8040   | name :: args ->
8041       (* Look up the command to find out what args/ret it has. *)
8042       let style =
8043         try
8044           let _, style, _, _, _, _, _ =
8045             List.find (fun (n, _, _, _, _, _, _) -> n = name) all_functions in
8046           style
8047         with Not_found ->
8048           failwithf "%s: in test, command %s was not found" test_name name in
8049
8050       if List.length (snd style) <> List.length args then
8051         failwithf "%s: in test, wrong number of args given to %s"
8052           test_name name;
8053
8054       pr "  {\n";
8055
8056       List.iter (
8057         function
8058         | OptString n, "NULL" -> ()
8059         | Pathname n, arg
8060         | Device n, arg
8061         | Dev_or_Path n, arg
8062         | String n, arg
8063         | OptString n, arg
8064         | Key n, arg ->
8065             pr "    const char *%s = \"%s\";\n" n (c_quote arg);
8066         | BufferIn n, arg ->
8067             pr "    const char *%s = \"%s\";\n" n (c_quote arg);
8068             pr "    size_t %s_size = %d;\n" n (String.length arg)
8069         | Int _, _
8070         | Int64 _, _
8071         | Bool _, _
8072         | FileIn _, _ | FileOut _, _ -> ()
8073         | StringList n, "" | DeviceList n, "" ->
8074             pr "    const char *const %s[1] = { NULL };\n" n
8075         | StringList n, arg | DeviceList n, arg ->
8076             let strs = string_split " " arg in
8077             iteri (
8078               fun i str ->
8079                 pr "    const char *%s_%d = \"%s\";\n" n i (c_quote str);
8080             ) strs;
8081             pr "    const char *const %s[] = {\n" n;
8082             iteri (
8083               fun i _ -> pr "      %s_%d,\n" n i
8084             ) strs;
8085             pr "      NULL\n";
8086             pr "    };\n";
8087       ) (List.combine (snd style) args);
8088
8089       let error_code =
8090         match fst style with
8091         | RErr | RInt _ | RBool _ -> pr "    int r;\n"; "-1"
8092         | RInt64 _ -> pr "    int64_t r;\n"; "-1"
8093         | RConstString _ | RConstOptString _ ->
8094             pr "    const char *r;\n"; "NULL"
8095         | RString _ -> pr "    char *r;\n"; "NULL"
8096         | RStringList _ | RHashtable _ ->
8097             pr "    char **r;\n";
8098             pr "    size_t i;\n";
8099             "NULL"
8100         | RStruct (_, typ) ->
8101             pr "    struct guestfs_%s *r;\n" typ; "NULL"
8102         | RStructList (_, typ) ->
8103             pr "    struct guestfs_%s_list *r;\n" typ; "NULL"
8104         | RBufferOut _ ->
8105             pr "    char *r;\n";
8106             pr "    size_t size;\n";
8107             "NULL" in
8108
8109       pr "    suppress_error = %d;\n" (if expect_error then 1 else 0);
8110       pr "    r = guestfs_%s (g" name;
8111
8112       (* Generate the parameters. *)
8113       List.iter (
8114         function
8115         | OptString _, "NULL" -> pr ", NULL"
8116         | Pathname n, _
8117         | Device n, _ | Dev_or_Path n, _
8118         | String n, _
8119         | OptString n, _
8120         | Key n, _ ->
8121             pr ", %s" n
8122         | BufferIn n, _ ->
8123             pr ", %s, %s_size" n n
8124         | FileIn _, arg | FileOut _, arg ->
8125             pr ", \"%s\"" (c_quote arg)
8126         | StringList n, _ | DeviceList n, _ ->
8127             pr ", (char **) %s" n
8128         | Int _, arg ->
8129             let i =
8130               try int_of_string arg
8131               with Failure "int_of_string" ->
8132                 failwithf "%s: expecting an int, but got '%s'" test_name arg in
8133             pr ", %d" i
8134         | Int64 _, arg ->
8135             let i =
8136               try Int64.of_string arg
8137               with Failure "int_of_string" ->
8138                 failwithf "%s: expecting an int64, but got '%s'" test_name arg in
8139             pr ", %Ld" i
8140         | Bool _, arg ->
8141             let b = bool_of_string arg in pr ", %d" (if b then 1 else 0)
8142       ) (List.combine (snd style) args);
8143
8144       (match fst style with
8145        | RBufferOut _ -> pr ", &size"
8146        | _ -> ()
8147       );
8148
8149       pr ");\n";
8150
8151       if not expect_error then
8152         pr "    if (r == %s)\n" error_code
8153       else
8154         pr "    if (r != %s)\n" error_code;
8155       pr "      return -1;\n";
8156
8157       (* Insert the test code. *)
8158       (match test with
8159        | None -> ()
8160        | Some f -> f ()
8161       );
8162
8163       (match fst style with
8164        | RErr | RInt _ | RInt64 _ | RBool _
8165        | RConstString _ | RConstOptString _ -> ()
8166        | RString _ | RBufferOut _ -> pr "    free (r);\n"
8167        | RStringList _ | RHashtable _ ->
8168            pr "    for (i = 0; r[i] != NULL; ++i)\n";
8169            pr "      free (r[i]);\n";
8170            pr "    free (r);\n"
8171        | RStruct (_, typ) ->
8172            pr "    guestfs_free_%s (r);\n" typ
8173        | RStructList (_, typ) ->
8174            pr "    guestfs_free_%s_list (r);\n" typ
8175       );
8176
8177       pr "  }\n"
8178
8179 and c_quote str =
8180   let str = replace_str str "\r" "\\r" in
8181   let str = replace_str str "\n" "\\n" in
8182   let str = replace_str str "\t" "\\t" in
8183   let str = replace_str str "\000" "\\0" in
8184   str
8185
8186 (* Generate a lot of different functions for guestfish. *)
8187 and generate_fish_cmds () =
8188   generate_header CStyle GPLv2plus;
8189
8190   let all_functions =
8191     List.filter (
8192       fun (_, _, _, flags, _, _, _) -> not (List.mem NotInFish flags)
8193     ) all_functions in
8194   let all_functions_sorted =
8195     List.filter (
8196       fun (_, _, _, flags, _, _, _) -> not (List.mem NotInFish flags)
8197     ) all_functions_sorted in
8198
8199   pr "#include <config.h>\n";
8200   pr "\n";
8201   pr "#include <stdio.h>\n";
8202   pr "#include <stdlib.h>\n";
8203   pr "#include <string.h>\n";
8204   pr "#include <inttypes.h>\n";
8205   pr "\n";
8206   pr "#include <guestfs.h>\n";
8207   pr "#include \"c-ctype.h\"\n";
8208   pr "#include \"full-write.h\"\n";
8209   pr "#include \"xstrtol.h\"\n";
8210   pr "#include \"fish.h\"\n";
8211   pr "\n";
8212   pr "/* Valid suffixes allowed for numbers.  See Gnulib xstrtol function. */\n";
8213   pr "static const char *xstrtol_suffixes = \"0kKMGTPEZY\";\n";
8214   pr "\n";
8215
8216   (* list_commands function, which implements guestfish -h *)
8217   pr "void list_commands (void)\n";
8218   pr "{\n";
8219   pr "  printf (\"    %%-16s     %%s\\n\", _(\"Command\"), _(\"Description\"));\n";
8220   pr "  list_builtin_commands ();\n";
8221   List.iter (
8222     fun (name, _, _, flags, _, shortdesc, _) ->
8223       let name = replace_char name '_' '-' in
8224       pr "  printf (\"%%-20s %%s\\n\", \"%s\", _(\"%s\"));\n"
8225         name shortdesc
8226   ) all_functions_sorted;
8227   pr "  printf (\"    %%s\\n\",";
8228   pr "          _(\"Use -h <cmd> / help <cmd> to show detailed help for a command.\"));\n";
8229   pr "}\n";
8230   pr "\n";
8231
8232   (* display_command function, which implements guestfish -h cmd *)
8233   pr "int display_command (const char *cmd)\n";
8234   pr "{\n";
8235   List.iter (
8236     fun (name, style, _, flags, _, shortdesc, longdesc) ->
8237       let name2 = replace_char name '_' '-' in
8238       let alias =
8239         try find_map (function FishAlias n -> Some n | _ -> None) flags
8240         with Not_found -> name in
8241       let longdesc = replace_str longdesc "C<guestfs_" "C<" in
8242       let synopsis =
8243         match snd style with
8244         | [] -> name2
8245         | args ->
8246             let args = List.filter (function Key _ -> false | _ -> true) args in
8247             sprintf "%s %s"
8248               name2 (String.concat " " (List.map name_of_argt args)) in
8249
8250       let warnings =
8251         if List.exists (function Key _ -> true | _ -> false) (snd style) then
8252           "\n\nThis command has one or more key or passphrase parameters.
8253 Guestfish will prompt for these separately."
8254         else "" in
8255
8256       let warnings =
8257         warnings ^
8258           if List.mem ProtocolLimitWarning flags then
8259             ("\n\n" ^ protocol_limit_warning)
8260           else "" in
8261
8262       (* For DangerWillRobinson commands, we should probably have
8263        * guestfish prompt before allowing you to use them (especially
8264        * in interactive mode). XXX
8265        *)
8266       let warnings =
8267         warnings ^
8268           if List.mem DangerWillRobinson flags then
8269             ("\n\n" ^ danger_will_robinson)
8270           else "" in
8271
8272       let warnings =
8273         warnings ^
8274           match deprecation_notice flags with
8275           | None -> ""
8276           | Some txt -> "\n\n" ^ txt in
8277
8278       let describe_alias =
8279         if name <> alias then
8280           sprintf "\n\nYou can use '%s' as an alias for this command." alias
8281         else "" in
8282
8283       pr "  if (";
8284       pr "STRCASEEQ (cmd, \"%s\")" name;
8285       if name <> name2 then
8286         pr " || STRCASEEQ (cmd, \"%s\")" name2;
8287       if name <> alias then
8288         pr " || STRCASEEQ (cmd, \"%s\")" alias;
8289       pr ") {\n";
8290       pr "    pod2text (\"%s\", _(\"%s\"), %S);\n"
8291         name2 shortdesc
8292         ("=head1 SYNOPSIS\n\n " ^ synopsis ^ "\n\n" ^
8293          "=head1 DESCRIPTION\n\n" ^
8294          longdesc ^ warnings ^ describe_alias);
8295       pr "    return 0;\n";
8296       pr "  }\n";
8297       pr "  else\n"
8298   ) all_functions;
8299   pr "    return display_builtin_command (cmd);\n";
8300   pr "}\n";
8301   pr "\n";
8302
8303   let emit_print_list_function typ =
8304     pr "static void print_%s_list (struct guestfs_%s_list *%ss)\n"
8305       typ typ typ;
8306     pr "{\n";
8307     pr "  unsigned int i;\n";
8308     pr "\n";
8309     pr "  for (i = 0; i < %ss->len; ++i) {\n" typ;
8310     pr "    printf (\"[%%d] = {\\n\", i);\n";
8311     pr "    print_%s_indent (&%ss->val[i], \"  \");\n" typ typ;
8312     pr "    printf (\"}\\n\");\n";
8313     pr "  }\n";
8314     pr "}\n";
8315     pr "\n";
8316   in
8317
8318   (* print_* functions *)
8319   List.iter (
8320     fun (typ, cols) ->
8321       let needs_i =
8322         List.exists (function (_, (FUUID|FBuffer)) -> true | _ -> false) cols in
8323
8324       pr "static void print_%s_indent (struct guestfs_%s *%s, const char *indent)\n" typ typ typ;
8325       pr "{\n";
8326       if needs_i then (
8327         pr "  unsigned int i;\n";
8328         pr "\n"
8329       );
8330       List.iter (
8331         function
8332         | name, FString ->
8333             pr "  printf (\"%%s%s: %%s\\n\", indent, %s->%s);\n" name typ name
8334         | name, FUUID ->
8335             pr "  printf (\"%%s%s: \", indent);\n" name;
8336             pr "  for (i = 0; i < 32; ++i)\n";
8337             pr "    printf (\"%%c\", %s->%s[i]);\n" typ name;
8338             pr "  printf (\"\\n\");\n"
8339         | name, FBuffer ->
8340             pr "  printf (\"%%s%s: \", indent);\n" name;
8341             pr "  for (i = 0; i < %s->%s_len; ++i)\n" typ name;
8342             pr "    if (c_isprint (%s->%s[i]))\n" typ name;
8343             pr "      printf (\"%%c\", %s->%s[i]);\n" typ name;
8344             pr "    else\n";
8345             pr "      printf (\"\\\\x%%02x\", %s->%s[i]);\n" typ name;
8346             pr "  printf (\"\\n\");\n"
8347         | name, (FUInt64|FBytes) ->
8348             pr "  printf (\"%%s%s: %%\" PRIu64 \"\\n\", indent, %s->%s);\n"
8349               name typ name
8350         | name, FInt64 ->
8351             pr "  printf (\"%%s%s: %%\" PRIi64 \"\\n\", indent, %s->%s);\n"
8352               name typ name
8353         | name, FUInt32 ->
8354             pr "  printf (\"%%s%s: %%\" PRIu32 \"\\n\", indent, %s->%s);\n"
8355               name typ name
8356         | name, FInt32 ->
8357             pr "  printf (\"%%s%s: %%\" PRIi32 \"\\n\", indent, %s->%s);\n"
8358               name typ name
8359         | name, FChar ->
8360             pr "  printf (\"%%s%s: %%c\\n\", indent, %s->%s);\n"
8361               name typ name
8362         | name, FOptPercent ->
8363             pr "  if (%s->%s >= 0) printf (\"%%s%s: %%g %%%%\\n\", indent, %s->%s);\n"
8364               typ name name typ name;
8365             pr "  else printf (\"%%s%s: \\n\", indent);\n" name
8366       ) cols;
8367       pr "}\n";
8368       pr "\n";
8369   ) structs;
8370
8371   (* Emit a print_TYPE_list function definition only if that function is used. *)
8372   List.iter (
8373     function
8374     | typ, (RStructListOnly | RStructAndList) ->
8375         (* generate the function for typ *)
8376         emit_print_list_function typ
8377     | typ, _ -> () (* empty *)
8378   ) (rstructs_used_by all_functions);
8379
8380   (* Emit a print_TYPE function definition only if that function is used. *)
8381   List.iter (
8382     function
8383     | typ, (RStructOnly | RStructAndList) ->
8384         pr "static void print_%s (struct guestfs_%s *%s)\n" typ typ typ;
8385         pr "{\n";
8386         pr "  print_%s_indent (%s, \"\");\n" typ typ;
8387         pr "}\n";
8388         pr "\n";
8389     | typ, _ -> () (* empty *)
8390   ) (rstructs_used_by all_functions);
8391
8392   (* run_<action> actions *)
8393   List.iter (
8394     fun (name, style, _, flags, _, _, _) ->
8395       pr "static int run_%s (const char *cmd, int argc, char *argv[])\n" name;
8396       pr "{\n";
8397       (match fst style with
8398        | RErr
8399        | RInt _
8400        | RBool _ -> pr "  int r;\n"
8401        | RInt64 _ -> pr "  int64_t r;\n"
8402        | RConstString _ | RConstOptString _ -> pr "  const char *r;\n"
8403        | RString _ -> pr "  char *r;\n"
8404        | RStringList _ | RHashtable _ -> pr "  char **r;\n"
8405        | RStruct (_, typ) -> pr "  struct guestfs_%s *r;\n" typ
8406        | RStructList (_, typ) -> pr "  struct guestfs_%s_list *r;\n" typ
8407        | RBufferOut _ ->
8408            pr "  char *r;\n";
8409            pr "  size_t size;\n";
8410       );
8411       List.iter (
8412         function
8413         | Device n
8414         | String n
8415         | OptString n -> pr "  const char *%s;\n" n
8416         | Pathname n
8417         | Dev_or_Path n
8418         | FileIn n
8419         | FileOut n
8420         | Key n -> pr "  char *%s;\n" n
8421         | BufferIn n ->
8422             pr "  const char *%s;\n" n;
8423             pr "  size_t %s_size;\n" n
8424         | StringList n | DeviceList n -> pr "  char **%s;\n" n
8425         | Bool n -> pr "  int %s;\n" n
8426         | Int n -> pr "  int %s;\n" n
8427         | Int64 n -> pr "  int64_t %s;\n" n
8428       ) (snd style);
8429
8430       (* Check and convert parameters. *)
8431       let argc_expected =
8432         let args_no_keys =
8433           List.filter (function Key _ -> false | _ -> true) (snd style) in
8434         List.length args_no_keys in
8435       pr "  if (argc != %d) {\n" argc_expected;
8436       pr "    fprintf (stderr, _(\"%%s should have %%d parameter(s)\\n\"), cmd, %d);\n"
8437         argc_expected;
8438       pr "    fprintf (stderr, _(\"type 'help %%s' for help on %%s\\n\"), cmd, cmd);\n";
8439       pr "    return -1;\n";
8440       pr "  }\n";
8441
8442       let parse_integer fn fntyp rtyp range name =
8443         pr "  {\n";
8444         pr "    strtol_error xerr;\n";
8445         pr "    %s r;\n" fntyp;
8446         pr "\n";
8447         pr "    xerr = %s (argv[i++], NULL, 0, &r, xstrtol_suffixes);\n" fn;
8448         pr "    if (xerr != LONGINT_OK) {\n";
8449         pr "      fprintf (stderr,\n";
8450         pr "               _(\"%%s: %%s: invalid integer parameter (%%s returned %%d)\\n\"),\n";
8451         pr "               cmd, \"%s\", \"%s\", xerr);\n" name fn;
8452         pr "      return -1;\n";
8453         pr "    }\n";
8454         (match range with
8455          | None -> ()
8456          | Some (min, max, comment) ->
8457              pr "    /* %s */\n" comment;
8458              pr "    if (r < %s || r > %s) {\n" min max;
8459              pr "      fprintf (stderr, _(\"%%s: %%s: integer out of range\\n\"), cmd, \"%s\");\n"
8460                name;
8461              pr "      return -1;\n";
8462              pr "    }\n";
8463              pr "    /* The check above should ensure this assignment does not overflow. */\n";
8464         );
8465         pr "    %s = r;\n" name;
8466         pr "  }\n";
8467       in
8468
8469       if snd style <> [] then
8470         pr "  size_t i = 0;\n";
8471
8472       List.iter (
8473         function
8474         | Device name
8475         | String name ->
8476             pr "  %s = argv[i++];\n" name
8477         | Pathname name
8478         | Dev_or_Path name ->
8479             pr "  %s = resolve_win_path (argv[i++]);\n" name;
8480             pr "  if (%s == NULL) return -1;\n" name
8481         | OptString name ->
8482             pr "  %s = STRNEQ (argv[i], \"\") ? argv[i] : NULL;\n" name;
8483             pr "  i++;\n"
8484         | BufferIn name ->
8485             pr "  %s = argv[i];\n" name;
8486             pr "  %s_size = strlen (argv[i]);\n" name;
8487             pr "  i++;\n"
8488         | FileIn name ->
8489             pr "  %s = file_in (argv[i++]);\n" name;
8490             pr "  if (%s == NULL) return -1;\n" name
8491         | FileOut name ->
8492             pr "  %s = file_out (argv[i++]);\n" name;
8493             pr "  if (%s == NULL) return -1;\n" name
8494         | StringList name | DeviceList name ->
8495             pr "  %s = parse_string_list (argv[i++]);\n" name;
8496             pr "  if (%s == NULL) return -1;\n" name
8497         | Key name ->
8498             pr "  %s = read_key (\"%s\");\n" name name;
8499             pr "  if (%s == NULL) return -1;\n" name
8500         | Bool name ->
8501             pr "  %s = is_true (argv[i++]) ? 1 : 0;\n" name
8502         | Int name ->
8503             let range =
8504               let min = "(-(2LL<<30))"
8505               and max = "((2LL<<30)-1)"
8506               and comment =
8507                 "The Int type in the generator is a signed 31 bit int." in
8508               Some (min, max, comment) in
8509             parse_integer "xstrtoll" "long long" "int" range name
8510         | Int64 name ->
8511             parse_integer "xstrtoll" "long long" "int64_t" None name
8512       ) (snd style);
8513
8514       (* Call C API function. *)
8515       pr "  r = guestfs_%s " name;
8516       generate_c_call_args ~handle:"g" style;
8517       pr ";\n";
8518
8519       List.iter (
8520         function
8521         | Device _ | String _
8522         | OptString _ | Bool _
8523         | Int _ | Int64 _
8524         | BufferIn _ -> ()
8525         | Pathname name | Dev_or_Path name | FileOut name
8526         | Key name ->
8527             pr "  free (%s);\n" name
8528         | FileIn name ->
8529             pr "  free_file_in (%s);\n" name
8530         | StringList name | DeviceList name ->
8531             pr "  free_strings (%s);\n" name
8532       ) (snd style);
8533
8534       (* Any output flags? *)
8535       let fish_output =
8536         let flags = filter_map (
8537           function FishOutput flag -> Some flag | _ -> None
8538         ) flags in
8539         match flags with
8540         | [] -> None
8541         | [f] -> Some f
8542         | _ ->
8543             failwithf "%s: more than one FishOutput flag is not allowed" name in
8544
8545       (* Check return value for errors and display command results. *)
8546       (match fst style with
8547        | RErr -> pr "  return r;\n"
8548        | RInt _ ->
8549            pr "  if (r == -1) return -1;\n";
8550            (match fish_output with
8551             | None ->
8552                 pr "  printf (\"%%d\\n\", r);\n";
8553             | Some FishOutputOctal ->
8554                 pr "  printf (\"%%s%%o\\n\", r != 0 ? \"0\" : \"\", r);\n";
8555             | Some FishOutputHexadecimal ->
8556                 pr "  printf (\"%%s%%x\\n\", r != 0 ? \"0x\" : \"\", r);\n");
8557            pr "  return 0;\n"
8558        | RInt64 _ ->
8559            pr "  if (r == -1) return -1;\n";
8560            (match fish_output with
8561             | None ->
8562                 pr "  printf (\"%%\" PRIi64 \"\\n\", r);\n";
8563             | Some FishOutputOctal ->
8564                 pr "  printf (\"%%s%%\" PRIo64 \"\\n\", r != 0 ? \"0\" : \"\", r);\n";
8565             | Some FishOutputHexadecimal ->
8566                 pr "  printf (\"%%s%%\" PRIx64 \"\\n\", r != 0 ? \"0x\" : \"\", r);\n");
8567            pr "  return 0;\n"
8568        | RBool _ ->
8569            pr "  if (r == -1) return -1;\n";
8570            pr "  if (r) printf (\"true\\n\"); else printf (\"false\\n\");\n";
8571            pr "  return 0;\n"
8572        | RConstString _ ->
8573            pr "  if (r == NULL) return -1;\n";
8574            pr "  printf (\"%%s\\n\", r);\n";
8575            pr "  return 0;\n"
8576        | RConstOptString _ ->
8577            pr "  printf (\"%%s\\n\", r ? : \"(null)\");\n";
8578            pr "  return 0;\n"
8579        | RString _ ->
8580            pr "  if (r == NULL) return -1;\n";
8581            pr "  printf (\"%%s\\n\", r);\n";
8582            pr "  free (r);\n";
8583            pr "  return 0;\n"
8584        | RStringList _ ->
8585            pr "  if (r == NULL) return -1;\n";
8586            pr "  print_strings (r);\n";
8587            pr "  free_strings (r);\n";
8588            pr "  return 0;\n"
8589        | RStruct (_, typ) ->
8590            pr "  if (r == NULL) return -1;\n";
8591            pr "  print_%s (r);\n" typ;
8592            pr "  guestfs_free_%s (r);\n" typ;
8593            pr "  return 0;\n"
8594        | RStructList (_, typ) ->
8595            pr "  if (r == NULL) return -1;\n";
8596            pr "  print_%s_list (r);\n" typ;
8597            pr "  guestfs_free_%s_list (r);\n" typ;
8598            pr "  return 0;\n"
8599        | RHashtable _ ->
8600            pr "  if (r == NULL) return -1;\n";
8601            pr "  print_table (r);\n";
8602            pr "  free_strings (r);\n";
8603            pr "  return 0;\n"
8604        | RBufferOut _ ->
8605            pr "  if (r == NULL) return -1;\n";
8606            pr "  if (full_write (1, r, size) != size) {\n";
8607            pr "    perror (\"write\");\n";
8608            pr "    free (r);\n";
8609            pr "    return -1;\n";
8610            pr "  }\n";
8611            pr "  free (r);\n";
8612            pr "  return 0;\n"
8613       );
8614       pr "}\n";
8615       pr "\n"
8616   ) all_functions;
8617
8618   (* run_action function *)
8619   pr "int run_action (const char *cmd, int argc, char *argv[])\n";
8620   pr "{\n";
8621   List.iter (
8622     fun (name, _, _, flags, _, _, _) ->
8623       let name2 = replace_char name '_' '-' in
8624       let alias =
8625         try find_map (function FishAlias n -> Some n | _ -> None) flags
8626         with Not_found -> name in
8627       pr "  if (";
8628       pr "STRCASEEQ (cmd, \"%s\")" name;
8629       if name <> name2 then
8630         pr " || STRCASEEQ (cmd, \"%s\")" name2;
8631       if name <> alias then
8632         pr " || STRCASEEQ (cmd, \"%s\")" alias;
8633       pr ")\n";
8634       pr "    return run_%s (cmd, argc, argv);\n" name;
8635       pr "  else\n";
8636   ) all_functions;
8637   pr "    {\n";
8638   pr "      fprintf (stderr, _(\"%%s: unknown command\\n\"), cmd);\n";
8639   pr "      if (command_num == 1)\n";
8640   pr "        extended_help_message ();\n";
8641   pr "      return -1;\n";
8642   pr "    }\n";
8643   pr "  return 0;\n";
8644   pr "}\n";
8645   pr "\n"
8646
8647 (* Readline completion for guestfish. *)
8648 and generate_fish_completion () =
8649   generate_header CStyle GPLv2plus;
8650
8651   let all_functions =
8652     List.filter (
8653       fun (_, _, _, flags, _, _, _) -> not (List.mem NotInFish flags)
8654     ) all_functions in
8655
8656   pr "\
8657 #include <config.h>
8658
8659 #include <stdio.h>
8660 #include <stdlib.h>
8661 #include <string.h>
8662
8663 #ifdef HAVE_LIBREADLINE
8664 #include <readline/readline.h>
8665 #endif
8666
8667 #include \"fish.h\"
8668
8669 #ifdef HAVE_LIBREADLINE
8670
8671 static const char *const commands[] = {
8672   BUILTIN_COMMANDS_FOR_COMPLETION,
8673 ";
8674
8675   (* Get the commands, including the aliases.  They don't need to be
8676    * sorted - the generator() function just does a dumb linear search.
8677    *)
8678   let commands =
8679     List.map (
8680       fun (name, _, _, flags, _, _, _) ->
8681         let name2 = replace_char name '_' '-' in
8682         let alias =
8683           try find_map (function FishAlias n -> Some n | _ -> None) flags
8684           with Not_found -> name in
8685
8686         if name <> alias then [name2; alias] else [name2]
8687     ) all_functions in
8688   let commands = List.flatten commands in
8689
8690   List.iter (pr "  \"%s\",\n") commands;
8691
8692   pr "  NULL
8693 };
8694
8695 static char *
8696 generator (const char *text, int state)
8697 {
8698   static size_t index, len;
8699   const char *name;
8700
8701   if (!state) {
8702     index = 0;
8703     len = strlen (text);
8704   }
8705
8706   rl_attempted_completion_over = 1;
8707
8708   while ((name = commands[index]) != NULL) {
8709     index++;
8710     if (STRCASEEQLEN (name, text, len))
8711       return strdup (name);
8712   }
8713
8714   return NULL;
8715 }
8716
8717 #endif /* HAVE_LIBREADLINE */
8718
8719 #ifdef HAVE_RL_COMPLETION_MATCHES
8720 #define RL_COMPLETION_MATCHES rl_completion_matches
8721 #else
8722 #ifdef HAVE_COMPLETION_MATCHES
8723 #define RL_COMPLETION_MATCHES completion_matches
8724 #endif
8725 #endif /* else just fail if we don't have either symbol */
8726
8727 char **
8728 do_completion (const char *text, int start, int end)
8729 {
8730   char **matches = NULL;
8731
8732 #ifdef HAVE_LIBREADLINE
8733   rl_completion_append_character = ' ';
8734
8735   if (start == 0)
8736     matches = RL_COMPLETION_MATCHES (text, generator);
8737   else if (complete_dest_paths)
8738     matches = RL_COMPLETION_MATCHES (text, complete_dest_paths_generator);
8739 #endif
8740
8741   return matches;
8742 }
8743 ";
8744
8745 (* Generate the POD documentation for guestfish. *)
8746 and generate_fish_actions_pod () =
8747   let all_functions_sorted =
8748     List.filter (
8749       fun (_, _, _, flags, _, _, _) ->
8750         not (List.mem NotInFish flags || List.mem NotInDocs flags)
8751     ) all_functions_sorted in
8752
8753   let rex = Str.regexp "C<guestfs_\\([^>]+\\)>" in
8754
8755   List.iter (
8756     fun (name, style, _, flags, _, _, longdesc) ->
8757       let longdesc =
8758         Str.global_substitute rex (
8759           fun s ->
8760             let sub =
8761               try Str.matched_group 1 s
8762               with Not_found ->
8763                 failwithf "error substituting C<guestfs_...> in longdesc of function %s" name in
8764             "C<" ^ replace_char sub '_' '-' ^ ">"
8765         ) longdesc in
8766       let name = replace_char name '_' '-' in
8767       let alias =
8768         try find_map (function FishAlias n -> Some n | _ -> None) flags
8769         with Not_found -> name in
8770
8771       pr "=head2 %s" name;
8772       if name <> alias then
8773         pr " | %s" alias;
8774       pr "\n";
8775       pr "\n";
8776       pr " %s" name;
8777       List.iter (
8778         function
8779         | Pathname n | Device n | Dev_or_Path n | String n ->
8780             pr " %s" n
8781         | OptString n -> pr " %s" n
8782         | StringList n | DeviceList n -> pr " '%s ...'" n
8783         | Bool _ -> pr " true|false"
8784         | Int n -> pr " %s" n
8785         | Int64 n -> pr " %s" n
8786         | FileIn n | FileOut n -> pr " (%s|-)" n
8787         | BufferIn n -> pr " %s" n
8788         | Key _ -> () (* keys are entered at a prompt *)
8789       ) (snd style);
8790       pr "\n";
8791       pr "\n";
8792       pr "%s\n\n" longdesc;
8793
8794       if List.exists (function FileIn _ | FileOut _ -> true
8795                       | _ -> false) (snd style) then
8796         pr "Use C<-> instead of a filename to read/write from stdin/stdout.\n\n";
8797
8798       if List.exists (function Key _ -> true | _ -> false) (snd style) then
8799         pr "This command has one or more key or passphrase parameters.
8800 Guestfish will prompt for these separately.\n\n";
8801
8802       if List.mem ProtocolLimitWarning flags then
8803         pr "%s\n\n" protocol_limit_warning;
8804
8805       if List.mem DangerWillRobinson flags then
8806         pr "%s\n\n" danger_will_robinson;
8807
8808       match deprecation_notice flags with
8809       | None -> ()
8810       | Some txt -> pr "%s\n\n" txt
8811   ) all_functions_sorted
8812
8813 (* Generate a C function prototype. *)
8814 and generate_prototype ?(extern = true) ?(static = false) ?(semicolon = true)
8815     ?(single_line = false) ?(newline = false) ?(in_daemon = false)
8816     ?(prefix = "")
8817     ?handle name style =
8818   if extern then pr "extern ";
8819   if static then pr "static ";
8820   (match fst style with
8821    | RErr -> pr "int "
8822    | RInt _ -> pr "int "
8823    | RInt64 _ -> pr "int64_t "
8824    | RBool _ -> pr "int "
8825    | RConstString _ | RConstOptString _ -> pr "const char *"
8826    | RString _ | RBufferOut _ -> pr "char *"
8827    | RStringList _ | RHashtable _ -> pr "char **"
8828    | RStruct (_, typ) ->
8829        if not in_daemon then pr "struct guestfs_%s *" typ
8830        else pr "guestfs_int_%s *" typ
8831    | RStructList (_, typ) ->
8832        if not in_daemon then pr "struct guestfs_%s_list *" typ
8833        else pr "guestfs_int_%s_list *" typ
8834   );
8835   let is_RBufferOut = match fst style with RBufferOut _ -> true | _ -> false in
8836   pr "%s%s (" prefix name;
8837   if handle = None && List.length (snd style) = 0 && not is_RBufferOut then
8838     pr "void"
8839   else (
8840     let comma = ref false in
8841     (match handle with
8842      | None -> ()
8843      | Some handle -> pr "guestfs_h *%s" handle; comma := true
8844     );
8845     let next () =
8846       if !comma then (
8847         if single_line then pr ", " else pr ",\n\t\t"
8848       );
8849       comma := true
8850     in
8851     List.iter (
8852       function
8853       | Pathname n
8854       | Device n | Dev_or_Path n
8855       | String n
8856       | OptString n
8857       | Key n ->
8858           next ();
8859           pr "const char *%s" n
8860       | StringList n | DeviceList n ->
8861           next ();
8862           pr "char *const *%s" n
8863       | Bool n -> next (); pr "int %s" n
8864       | Int n -> next (); pr "int %s" n
8865       | Int64 n -> next (); pr "int64_t %s" n
8866       | FileIn n
8867       | FileOut n ->
8868           if not in_daemon then (next (); pr "const char *%s" n)
8869       | BufferIn n ->
8870           next ();
8871           pr "const char *%s" n;
8872           next ();
8873           pr "size_t %s_size" n
8874     ) (snd style);
8875     if is_RBufferOut then (next (); pr "size_t *size_r");
8876   );
8877   pr ")";
8878   if semicolon then pr ";";
8879   if newline then pr "\n"
8880
8881 (* Generate C call arguments, eg "(handle, foo, bar)" *)
8882 and generate_c_call_args ?handle ?(decl = false) style =
8883   pr "(";
8884   let comma = ref false in
8885   let next () =
8886     if !comma then pr ", ";
8887     comma := true
8888   in
8889   (match handle with
8890    | None -> ()
8891    | Some handle -> pr "%s" handle; comma := true
8892   );
8893   List.iter (
8894     function
8895     | BufferIn n ->
8896         next ();
8897         pr "%s, %s_size" n n
8898     | arg ->
8899         next ();
8900         pr "%s" (name_of_argt arg)
8901   ) (snd style);
8902   (* For RBufferOut calls, add implicit &size parameter. *)
8903   if not decl then (
8904     match fst style with
8905     | RBufferOut _ ->
8906         next ();
8907         pr "&size"
8908     | _ -> ()
8909   );
8910   pr ")"
8911
8912 (* Generate the OCaml bindings interface. *)
8913 and generate_ocaml_mli () =
8914   generate_header OCamlStyle LGPLv2plus;
8915
8916   pr "\
8917 (** For API documentation you should refer to the C API
8918     in the guestfs(3) manual page.  The OCaml API uses almost
8919     exactly the same calls. *)
8920
8921 type t
8922 (** A [guestfs_h] handle. *)
8923
8924 exception Error of string
8925 (** This exception is raised when there is an error. *)
8926
8927 exception Handle_closed of string
8928 (** This exception is raised if you use a {!Guestfs.t} handle
8929     after calling {!close} on it.  The string is the name of
8930     the function. *)
8931
8932 val create : unit -> t
8933 (** Create a {!Guestfs.t} handle. *)
8934
8935 val close : t -> unit
8936 (** Close the {!Guestfs.t} handle and free up all resources used
8937     by it immediately.
8938
8939     Handles are closed by the garbage collector when they become
8940     unreferenced, but callers can call this in order to provide
8941     predictable cleanup. *)
8942
8943 type progress_cb = int -> int -> int64 -> int64 -> unit
8944
8945 val set_progress_callback : t -> progress_cb -> unit
8946 (** [set_progress_callback g f] sets [f] as the progress callback function.
8947     For some long-running functions, [f] will be called repeatedly
8948     during the function with progress updates.
8949
8950     The callback is [f proc_nr serial position total].  See
8951     the description of [guestfs_set_progress_callback] in guestfs(3)
8952     for the meaning of these four numbers.
8953
8954     Note that if the closure captures a reference to the handle,
8955     this reference will prevent the handle from being
8956     automatically closed by the garbage collector.  There are
8957     three ways to avoid this: be careful not to capture the handle
8958     in the closure, or use a weak reference, or call
8959     {!Guestfs.clear_progress_callback} to remove the reference. *)
8960
8961 val clear_progress_callback : t -> unit
8962 (** [clear_progress_callback g] removes any progress callback function
8963     associated with the handle.  See {!Guestfs.set_progress_callback}. *)
8964
8965 ";
8966   generate_ocaml_structure_decls ();
8967
8968   (* The actions. *)
8969   List.iter (
8970     fun (name, style, _, _, _, shortdesc, _) ->
8971       generate_ocaml_prototype name style;
8972       pr "(** %s *)\n" shortdesc;
8973       pr "\n"
8974   ) all_functions_sorted
8975
8976 (* Generate the OCaml bindings implementation. *)
8977 and generate_ocaml_ml () =
8978   generate_header OCamlStyle LGPLv2plus;
8979
8980   pr "\
8981 type t
8982
8983 exception Error of string
8984 exception Handle_closed of string
8985
8986 external create : unit -> t = \"ocaml_guestfs_create\"
8987 external close : t -> unit = \"ocaml_guestfs_close\"
8988
8989 type progress_cb = int -> int -> int64 -> int64 -> unit
8990
8991 external set_progress_callback : t -> progress_cb -> unit
8992   = \"ocaml_guestfs_set_progress_callback\"
8993 external clear_progress_callback : t -> unit
8994   = \"ocaml_guestfs_clear_progress_callback\"
8995
8996 (* Give the exceptions names, so they can be raised from the C code. *)
8997 let () =
8998   Callback.register_exception \"ocaml_guestfs_error\" (Error \"\");
8999   Callback.register_exception \"ocaml_guestfs_closed\" (Handle_closed \"\")
9000
9001 ";
9002
9003   generate_ocaml_structure_decls ();
9004
9005   (* The actions. *)
9006   List.iter (
9007     fun (name, style, _, _, _, shortdesc, _) ->
9008       generate_ocaml_prototype ~is_external:true name style;
9009   ) all_functions_sorted
9010
9011 (* Generate the OCaml bindings C implementation. *)
9012 and generate_ocaml_c () =
9013   generate_header CStyle LGPLv2plus;
9014
9015   pr "\
9016 #include <stdio.h>
9017 #include <stdlib.h>
9018 #include <string.h>
9019
9020 #include <caml/config.h>
9021 #include <caml/alloc.h>
9022 #include <caml/callback.h>
9023 #include <caml/fail.h>
9024 #include <caml/memory.h>
9025 #include <caml/mlvalues.h>
9026 #include <caml/signals.h>
9027
9028 #include \"guestfs.h\"
9029
9030 #include \"guestfs_c.h\"
9031
9032 /* Copy a hashtable of string pairs into an assoc-list.  We return
9033  * the list in reverse order, but hashtables aren't supposed to be
9034  * ordered anyway.
9035  */
9036 static CAMLprim value
9037 copy_table (char * const * argv)
9038 {
9039   CAMLparam0 ();
9040   CAMLlocal5 (rv, pairv, kv, vv, cons);
9041   size_t i;
9042
9043   rv = Val_int (0);
9044   for (i = 0; argv[i] != NULL; i += 2) {
9045     kv = caml_copy_string (argv[i]);
9046     vv = caml_copy_string (argv[i+1]);
9047     pairv = caml_alloc (2, 0);
9048     Store_field (pairv, 0, kv);
9049     Store_field (pairv, 1, vv);
9050     cons = caml_alloc (2, 0);
9051     Store_field (cons, 1, rv);
9052     rv = cons;
9053     Store_field (cons, 0, pairv);
9054   }
9055
9056   CAMLreturn (rv);
9057 }
9058
9059 ";
9060
9061   (* Struct copy functions. *)
9062
9063   let emit_ocaml_copy_list_function typ =
9064     pr "static CAMLprim value\n";
9065     pr "copy_%s_list (const struct guestfs_%s_list *%ss)\n" typ typ typ;
9066     pr "{\n";
9067     pr "  CAMLparam0 ();\n";
9068     pr "  CAMLlocal2 (rv, v);\n";
9069     pr "  unsigned int i;\n";
9070     pr "\n";
9071     pr "  if (%ss->len == 0)\n" typ;
9072     pr "    CAMLreturn (Atom (0));\n";
9073     pr "  else {\n";
9074     pr "    rv = caml_alloc (%ss->len, 0);\n" typ;
9075     pr "    for (i = 0; i < %ss->len; ++i) {\n" typ;
9076     pr "      v = copy_%s (&%ss->val[i]);\n" typ typ;
9077     pr "      caml_modify (&Field (rv, i), v);\n";
9078     pr "    }\n";
9079     pr "    CAMLreturn (rv);\n";
9080     pr "  }\n";
9081     pr "}\n";
9082     pr "\n";
9083   in
9084
9085   List.iter (
9086     fun (typ, cols) ->
9087       let has_optpercent_col =
9088         List.exists (function (_, FOptPercent) -> true | _ -> false) cols in
9089
9090       pr "static CAMLprim value\n";
9091       pr "copy_%s (const struct guestfs_%s *%s)\n" typ typ typ;
9092       pr "{\n";
9093       pr "  CAMLparam0 ();\n";
9094       if has_optpercent_col then
9095         pr "  CAMLlocal3 (rv, v, v2);\n"
9096       else
9097         pr "  CAMLlocal2 (rv, v);\n";
9098       pr "\n";
9099       pr "  rv = caml_alloc (%d, 0);\n" (List.length cols);
9100       iteri (
9101         fun i col ->
9102           (match col with
9103            | name, FString ->
9104                pr "  v = caml_copy_string (%s->%s);\n" typ name
9105            | name, FBuffer ->
9106                pr "  v = caml_alloc_string (%s->%s_len);\n" typ name;
9107                pr "  memcpy (String_val (v), %s->%s, %s->%s_len);\n"
9108                  typ name typ name
9109            | name, FUUID ->
9110                pr "  v = caml_alloc_string (32);\n";
9111                pr "  memcpy (String_val (v), %s->%s, 32);\n" typ name
9112            | name, (FBytes|FInt64|FUInt64) ->
9113                pr "  v = caml_copy_int64 (%s->%s);\n" typ name
9114            | name, (FInt32|FUInt32) ->
9115                pr "  v = caml_copy_int32 (%s->%s);\n" typ name
9116            | name, FOptPercent ->
9117                pr "  if (%s->%s >= 0) { /* Some %s */\n" typ name name;
9118                pr "    v2 = caml_copy_double (%s->%s);\n" typ name;
9119                pr "    v = caml_alloc (1, 0);\n";
9120                pr "    Store_field (v, 0, v2);\n";
9121                pr "  } else /* None */\n";
9122                pr "    v = Val_int (0);\n";
9123            | name, FChar ->
9124                pr "  v = Val_int (%s->%s);\n" typ name
9125           );
9126           pr "  Store_field (rv, %d, v);\n" i
9127       ) cols;
9128       pr "  CAMLreturn (rv);\n";
9129       pr "}\n";
9130       pr "\n";
9131   ) structs;
9132
9133   (* Emit a copy_TYPE_list function definition only if that function is used. *)
9134   List.iter (
9135     function
9136     | typ, (RStructListOnly | RStructAndList) ->
9137         (* generate the function for typ *)
9138         emit_ocaml_copy_list_function typ
9139     | typ, _ -> () (* empty *)
9140   ) (rstructs_used_by all_functions);
9141
9142   (* The wrappers. *)
9143   List.iter (
9144     fun (name, style, _, _, _, _, _) ->
9145       pr "/* Automatically generated wrapper for function\n";
9146       pr " * ";
9147       generate_ocaml_prototype name style;
9148       pr " */\n";
9149       pr "\n";
9150
9151       let params =
9152         "gv" :: List.map (fun arg -> name_of_argt arg ^ "v") (snd style) in
9153
9154       let needs_extra_vs =
9155         match fst style with RConstOptString _ -> true | _ -> false in
9156
9157       pr "/* Emit prototype to appease gcc's -Wmissing-prototypes. */\n";
9158       pr "CAMLprim value ocaml_guestfs_%s (value %s" name (List.hd params);
9159       List.iter (pr ", value %s") (List.tl params); pr ");\n";
9160       pr "\n";
9161
9162       pr "CAMLprim value\n";
9163       pr "ocaml_guestfs_%s (value %s" name (List.hd params);
9164       List.iter (pr ", value %s") (List.tl params);
9165       pr ")\n";
9166       pr "{\n";
9167
9168       (match params with
9169        | [p1; p2; p3; p4; p5] ->
9170            pr "  CAMLparam5 (%s);\n" (String.concat ", " params)
9171        | p1 :: p2 :: p3 :: p4 :: p5 :: rest ->
9172            pr "  CAMLparam5 (%s);\n" (String.concat ", " [p1; p2; p3; p4; p5]);
9173            pr "  CAMLxparam%d (%s);\n"
9174              (List.length rest) (String.concat ", " rest)
9175        | ps ->
9176            pr "  CAMLparam%d (%s);\n" (List.length ps) (String.concat ", " ps)
9177       );
9178       if not needs_extra_vs then
9179         pr "  CAMLlocal1 (rv);\n"
9180       else
9181         pr "  CAMLlocal3 (rv, v, v2);\n";
9182       pr "\n";
9183
9184       pr "  guestfs_h *g = Guestfs_val (gv);\n";
9185       pr "  if (g == NULL)\n";
9186       pr "    ocaml_guestfs_raise_closed (\"%s\");\n" name;
9187       pr "\n";
9188
9189       List.iter (
9190         function
9191         | Pathname n
9192         | Device n | Dev_or_Path n
9193         | String n
9194         | FileIn n
9195         | FileOut n
9196         | Key n ->
9197             (* Copy strings in case the GC moves them: RHBZ#604691 *)
9198             pr "  char *%s = guestfs_safe_strdup (g, String_val (%sv));\n" n n
9199         | OptString n ->
9200             pr "  char *%s =\n" n;
9201             pr "    %sv != Val_int (0) ?" n;
9202             pr "      guestfs_safe_strdup (g, String_val (Field (%sv, 0))) : NULL;\n" n
9203         | BufferIn n ->
9204             pr "  size_t %s_size = caml_string_length (%sv);\n" n n;
9205             pr "  char *%s = guestfs_safe_memdup (g, String_val (%sv), %s_size);\n" n n n
9206         | StringList n | DeviceList n ->
9207             pr "  char **%s = ocaml_guestfs_strings_val (g, %sv);\n" n n
9208         | Bool n ->
9209             pr "  int %s = Bool_val (%sv);\n" n n
9210         | Int n ->
9211             pr "  int %s = Int_val (%sv);\n" n n
9212         | Int64 n ->
9213             pr "  int64_t %s = Int64_val (%sv);\n" n n
9214       ) (snd style);
9215       let error_code =
9216         match fst style with
9217         | RErr -> pr "  int r;\n"; "-1"
9218         | RInt _ -> pr "  int r;\n"; "-1"
9219         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
9220         | RBool _ -> pr "  int r;\n"; "-1"
9221         | RConstString _ | RConstOptString _ ->
9222             pr "  const char *r;\n"; "NULL"
9223         | RString _ -> pr "  char *r;\n"; "NULL"
9224         | RStringList _ ->
9225             pr "  size_t i;\n";
9226             pr "  char **r;\n";
9227             "NULL"
9228         | RStruct (_, typ) ->
9229             pr "  struct guestfs_%s *r;\n" typ; "NULL"
9230         | RStructList (_, typ) ->
9231             pr "  struct guestfs_%s_list *r;\n" typ; "NULL"
9232         | RHashtable _ ->
9233             pr "  size_t i;\n";
9234             pr "  char **r;\n";
9235             "NULL"
9236         | RBufferOut _ ->
9237             pr "  char *r;\n";
9238             pr "  size_t size;\n";
9239             "NULL" in
9240       pr "\n";
9241
9242       pr "  caml_enter_blocking_section ();\n";
9243       pr "  r = guestfs_%s " name;
9244       generate_c_call_args ~handle:"g" style;
9245       pr ";\n";
9246       pr "  caml_leave_blocking_section ();\n";
9247
9248       (* Free strings if we copied them above. *)
9249       List.iter (
9250         function
9251         | Pathname n | Device n | Dev_or_Path n | String n | OptString n
9252         | FileIn n | FileOut n | BufferIn n | Key n ->
9253             pr "  free (%s);\n" n
9254         | StringList n | DeviceList n ->
9255             pr "  ocaml_guestfs_free_strings (%s);\n" n;
9256         | Bool _ | Int _ | Int64 _ -> ()
9257       ) (snd style);
9258
9259       pr "  if (r == %s)\n" error_code;
9260       pr "    ocaml_guestfs_raise_error (g, \"%s\");\n" name;
9261       pr "\n";
9262
9263       (match fst style with
9264        | RErr -> pr "  rv = Val_unit;\n"
9265        | RInt _ -> pr "  rv = Val_int (r);\n"
9266        | RInt64 _ ->
9267            pr "  rv = caml_copy_int64 (r);\n"
9268        | RBool _ -> pr "  rv = Val_bool (r);\n"
9269        | RConstString _ ->
9270            pr "  rv = caml_copy_string (r);\n"
9271        | RConstOptString _ ->
9272            pr "  if (r) { /* Some string */\n";
9273            pr "    v = caml_alloc (1, 0);\n";
9274            pr "    v2 = caml_copy_string (r);\n";
9275            pr "    Store_field (v, 0, v2);\n";
9276            pr "  } else /* None */\n";
9277            pr "    v = Val_int (0);\n";
9278        | RString _ ->
9279            pr "  rv = caml_copy_string (r);\n";
9280            pr "  free (r);\n"
9281        | RStringList _ ->
9282            pr "  rv = caml_copy_string_array ((const char **) r);\n";
9283            pr "  for (i = 0; r[i] != NULL; ++i) free (r[i]);\n";
9284            pr "  free (r);\n"
9285        | RStruct (_, typ) ->
9286            pr "  rv = copy_%s (r);\n" typ;
9287            pr "  guestfs_free_%s (r);\n" typ;
9288        | RStructList (_, typ) ->
9289            pr "  rv = copy_%s_list (r);\n" typ;
9290            pr "  guestfs_free_%s_list (r);\n" typ;
9291        | RHashtable _ ->
9292            pr "  rv = copy_table (r);\n";
9293            pr "  for (i = 0; r[i] != NULL; ++i) free (r[i]);\n";
9294            pr "  free (r);\n";
9295        | RBufferOut _ ->
9296            pr "  rv = caml_alloc_string (size);\n";
9297            pr "  memcpy (String_val (rv), r, size);\n";
9298       );
9299
9300       pr "  CAMLreturn (rv);\n";
9301       pr "}\n";
9302       pr "\n";
9303
9304       if List.length params > 5 then (
9305         pr "/* Emit prototype to appease gcc's -Wmissing-prototypes. */\n";
9306         pr "CAMLprim value ";
9307         pr "ocaml_guestfs_%s_byte (value *argv, int argn);\n" name;
9308         pr "CAMLprim value\n";
9309         pr "ocaml_guestfs_%s_byte (value *argv, int argn)\n" name;
9310         pr "{\n";
9311         pr "  return ocaml_guestfs_%s (argv[0]" name;
9312         iteri (fun i _ -> pr ", argv[%d]" i) (List.tl params);
9313         pr ");\n";
9314         pr "}\n";
9315         pr "\n"
9316       )
9317   ) all_functions_sorted
9318
9319 and generate_ocaml_structure_decls () =
9320   List.iter (
9321     fun (typ, cols) ->
9322       pr "type %s = {\n" typ;
9323       List.iter (
9324         function
9325         | name, FString -> pr "  %s : string;\n" name
9326         | name, FBuffer -> pr "  %s : string;\n" name
9327         | name, FUUID -> pr "  %s : string;\n" name
9328         | name, (FBytes|FInt64|FUInt64) -> pr "  %s : int64;\n" name
9329         | name, (FInt32|FUInt32) -> pr "  %s : int32;\n" name
9330         | name, FChar -> pr "  %s : char;\n" name
9331         | name, FOptPercent -> pr "  %s : float option;\n" name
9332       ) cols;
9333       pr "}\n";
9334       pr "\n"
9335   ) structs
9336
9337 and generate_ocaml_prototype ?(is_external = false) name style =
9338   if is_external then pr "external " else pr "val ";
9339   pr "%s : t -> " name;
9340   List.iter (
9341     function
9342     | Pathname _ | Device _ | Dev_or_Path _ | String _ | FileIn _ | FileOut _
9343     | BufferIn _ | Key _ -> pr "string -> "
9344     | OptString _ -> pr "string option -> "
9345     | StringList _ | DeviceList _ -> pr "string array -> "
9346     | Bool _ -> pr "bool -> "
9347     | Int _ -> pr "int -> "
9348     | Int64 _ -> pr "int64 -> "
9349   ) (snd style);
9350   (match fst style with
9351    | RErr -> pr "unit" (* all errors are turned into exceptions *)
9352    | RInt _ -> pr "int"
9353    | RInt64 _ -> pr "int64"
9354    | RBool _ -> pr "bool"
9355    | RConstString _ -> pr "string"
9356    | RConstOptString _ -> pr "string option"
9357    | RString _ | RBufferOut _ -> pr "string"
9358    | RStringList _ -> pr "string array"
9359    | RStruct (_, typ) -> pr "%s" typ
9360    | RStructList (_, typ) -> pr "%s array" typ
9361    | RHashtable _ -> pr "(string * string) list"
9362   );
9363   if is_external then (
9364     pr " = ";
9365     if List.length (snd style) + 1 > 5 then
9366       pr "\"ocaml_guestfs_%s_byte\" " name;
9367     pr "\"ocaml_guestfs_%s\"" name
9368   );
9369   pr "\n"
9370
9371 (* Generate Perl xs code, a sort of crazy variation of C with macros. *)
9372 and generate_perl_xs () =
9373   generate_header CStyle LGPLv2plus;
9374
9375   pr "\
9376 #include \"EXTERN.h\"
9377 #include \"perl.h\"
9378 #include \"XSUB.h\"
9379
9380 #include <guestfs.h>
9381
9382 #ifndef PRId64
9383 #define PRId64 \"lld\"
9384 #endif
9385
9386 static SV *
9387 my_newSVll(long long val) {
9388 #ifdef USE_64_BIT_ALL
9389   return newSViv(val);
9390 #else
9391   char buf[100];
9392   int len;
9393   len = snprintf(buf, 100, \"%%\" PRId64, val);
9394   return newSVpv(buf, len);
9395 #endif
9396 }
9397
9398 #ifndef PRIu64
9399 #define PRIu64 \"llu\"
9400 #endif
9401
9402 static SV *
9403 my_newSVull(unsigned long long val) {
9404 #ifdef USE_64_BIT_ALL
9405   return newSVuv(val);
9406 #else
9407   char buf[100];
9408   int len;
9409   len = snprintf(buf, 100, \"%%\" PRIu64, val);
9410   return newSVpv(buf, len);
9411 #endif
9412 }
9413
9414 /* http://www.perlmonks.org/?node_id=680842 */
9415 static char **
9416 XS_unpack_charPtrPtr (SV *arg) {
9417   char **ret;
9418   AV *av;
9419   I32 i;
9420
9421   if (!arg || !SvOK (arg) || !SvROK (arg) || SvTYPE (SvRV (arg)) != SVt_PVAV)
9422     croak (\"array reference expected\");
9423
9424   av = (AV *)SvRV (arg);
9425   ret = malloc ((av_len (av) + 1 + 1) * sizeof (char *));
9426   if (!ret)
9427     croak (\"malloc failed\");
9428
9429   for (i = 0; i <= av_len (av); i++) {
9430     SV **elem = av_fetch (av, i, 0);
9431
9432     if (!elem || !*elem)
9433       croak (\"missing element in list\");
9434
9435     ret[i] = SvPV_nolen (*elem);
9436   }
9437
9438   ret[i] = NULL;
9439
9440   return ret;
9441 }
9442
9443 #define PROGRESS_KEY \"_perl_progress_cb\"
9444
9445 static void
9446 _clear_progress_callback (guestfs_h *g)
9447 {
9448   guestfs_set_progress_callback (g, NULL, NULL);
9449   SV *cb = guestfs_get_private (g, PROGRESS_KEY);
9450   if (cb) {
9451     guestfs_set_private (g, PROGRESS_KEY, NULL);
9452     SvREFCNT_dec (cb);
9453   }
9454 }
9455
9456 /* http://www.perlmonks.org/?node=338857 */
9457 static void
9458 _progress_callback (guestfs_h *g, void *cb,
9459                     int proc_nr, int serial, uint64_t position, uint64_t total)
9460 {
9461   dSP;
9462   ENTER;
9463   SAVETMPS;
9464   PUSHMARK (SP);
9465   XPUSHs (sv_2mortal (newSViv (proc_nr)));
9466   XPUSHs (sv_2mortal (newSViv (serial)));
9467   XPUSHs (sv_2mortal (my_newSVull (position)));
9468   XPUSHs (sv_2mortal (my_newSVull (total)));
9469   PUTBACK;
9470   call_sv ((SV *) cb, G_VOID | G_DISCARD | G_EVAL);
9471   FREETMPS;
9472   LEAVE;
9473 }
9474
9475 static void
9476 _close_handle (guestfs_h *g)
9477 {
9478   assert (g != NULL);
9479   _clear_progress_callback (g);
9480   guestfs_close (g);
9481 }
9482
9483 MODULE = Sys::Guestfs  PACKAGE = Sys::Guestfs
9484
9485 PROTOTYPES: ENABLE
9486
9487 guestfs_h *
9488 _create ()
9489    CODE:
9490       RETVAL = guestfs_create ();
9491       if (!RETVAL)
9492         croak (\"could not create guestfs handle\");
9493       guestfs_set_error_handler (RETVAL, NULL, NULL);
9494  OUTPUT:
9495       RETVAL
9496
9497 void
9498 DESTROY (sv)
9499       SV *sv;
9500  PPCODE:
9501       /* For the 'g' argument above we do the conversion explicitly and
9502        * don't rely on the typemap, because if the handle has been
9503        * explicitly closed we don't want the typemap conversion to
9504        * display an error.
9505        */
9506       HV *hv = (HV *) SvRV (sv);
9507       SV **svp = hv_fetch (hv, \"_g\", 2, 0);
9508       if (svp != NULL) {
9509         guestfs_h *g = (guestfs_h *) SvIV (*svp);
9510         _close_handle (g);
9511       }
9512
9513 void
9514 close (g)
9515       guestfs_h *g;
9516  PPCODE:
9517       _close_handle (g);
9518       /* Avoid double-free in DESTROY method. */
9519       HV *hv = (HV *) SvRV (ST(0));
9520       (void) hv_delete (hv, \"_g\", 2, G_DISCARD);
9521
9522 void
9523 set_progress_callback (g, cb)
9524       guestfs_h *g;
9525       SV *cb;
9526  PPCODE:
9527       _clear_progress_callback (g);
9528       SvREFCNT_inc (cb);
9529       guestfs_set_private (g, PROGRESS_KEY, cb);
9530       guestfs_set_progress_callback (g, _progress_callback, cb);
9531
9532 void
9533 clear_progress_callback (g)
9534       guestfs_h *g;
9535  PPCODE:
9536       _clear_progress_callback (g);
9537
9538 ";
9539
9540   List.iter (
9541     fun (name, style, _, _, _, _, _) ->
9542       (match fst style with
9543        | RErr -> pr "void\n"
9544        | RInt _ -> pr "SV *\n"
9545        | RInt64 _ -> pr "SV *\n"
9546        | RBool _ -> pr "SV *\n"
9547        | RConstString _ -> pr "SV *\n"
9548        | RConstOptString _ -> pr "SV *\n"
9549        | RString _ -> pr "SV *\n"
9550        | RBufferOut _ -> pr "SV *\n"
9551        | RStringList _
9552        | RStruct _ | RStructList _
9553        | RHashtable _ ->
9554            pr "void\n" (* all lists returned implictly on the stack *)
9555       );
9556       (* Call and arguments. *)
9557       pr "%s (g" name;
9558       List.iter (
9559         fun arg -> pr ", %s" (name_of_argt arg)
9560       ) (snd style);
9561       pr ")\n";
9562       pr "      guestfs_h *g;\n";
9563       iteri (
9564         fun i ->
9565           function
9566           | Pathname n | Device n | Dev_or_Path n | String n
9567           | FileIn n | FileOut n | Key n ->
9568               pr "      char *%s;\n" n
9569           | BufferIn n ->
9570               pr "      char *%s;\n" n;
9571               pr "      size_t %s_size = SvCUR (ST(%d));\n" n (i+1)
9572           | OptString n ->
9573               (* http://www.perlmonks.org/?node_id=554277
9574                * Note that the implicit handle argument means we have
9575                * to add 1 to the ST(x) operator.
9576                *)
9577               pr "      char *%s = SvOK(ST(%d)) ? SvPV_nolen(ST(%d)) : NULL;\n" n (i+1) (i+1)
9578           | StringList n | DeviceList n -> pr "      char **%s;\n" n
9579           | Bool n -> pr "      int %s;\n" n
9580           | Int n -> pr "      int %s;\n" n
9581           | Int64 n -> pr "      int64_t %s;\n" n
9582       ) (snd style);
9583
9584       let do_cleanups () =
9585         List.iter (
9586           function
9587           | Pathname _ | Device _ | Dev_or_Path _ | String _ | OptString _
9588           | Bool _ | Int _ | Int64 _
9589           | FileIn _ | FileOut _
9590           | BufferIn _ | Key _ -> ()
9591           | StringList n | DeviceList n -> pr "      free (%s);\n" n
9592         ) (snd style)
9593       in
9594
9595       (* Code. *)
9596       (match fst style with
9597        | RErr ->
9598            pr "PREINIT:\n";
9599            pr "      int r;\n";
9600            pr " PPCODE:\n";
9601            pr "      r = guestfs_%s " name;
9602            generate_c_call_args ~handle:"g" style;
9603            pr ";\n";
9604            do_cleanups ();
9605            pr "      if (r == -1)\n";
9606            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9607        | RInt n
9608        | RBool n ->
9609            pr "PREINIT:\n";
9610            pr "      int %s;\n" n;
9611            pr "   CODE:\n";
9612            pr "      %s = guestfs_%s " n name;
9613            generate_c_call_args ~handle:"g" style;
9614            pr ";\n";
9615            do_cleanups ();
9616            pr "      if (%s == -1)\n" n;
9617            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9618            pr "      RETVAL = newSViv (%s);\n" n;
9619            pr " OUTPUT:\n";
9620            pr "      RETVAL\n"
9621        | RInt64 n ->
9622            pr "PREINIT:\n";
9623            pr "      int64_t %s;\n" n;
9624            pr "   CODE:\n";
9625            pr "      %s = guestfs_%s " n name;
9626            generate_c_call_args ~handle:"g" style;
9627            pr ";\n";
9628            do_cleanups ();
9629            pr "      if (%s == -1)\n" n;
9630            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9631            pr "      RETVAL = my_newSVll (%s);\n" n;
9632            pr " OUTPUT:\n";
9633            pr "      RETVAL\n"
9634        | RConstString n ->
9635            pr "PREINIT:\n";
9636            pr "      const char *%s;\n" n;
9637            pr "   CODE:\n";
9638            pr "      %s = guestfs_%s " n name;
9639            generate_c_call_args ~handle:"g" style;
9640            pr ";\n";
9641            do_cleanups ();
9642            pr "      if (%s == NULL)\n" n;
9643            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9644            pr "      RETVAL = newSVpv (%s, 0);\n" n;
9645            pr " OUTPUT:\n";
9646            pr "      RETVAL\n"
9647        | RConstOptString n ->
9648            pr "PREINIT:\n";
9649            pr "      const char *%s;\n" n;
9650            pr "   CODE:\n";
9651            pr "      %s = guestfs_%s " n name;
9652            generate_c_call_args ~handle:"g" style;
9653            pr ";\n";
9654            do_cleanups ();
9655            pr "      if (%s == NULL)\n" n;
9656            pr "        RETVAL = &PL_sv_undef;\n";
9657            pr "      else\n";
9658            pr "        RETVAL = newSVpv (%s, 0);\n" n;
9659            pr " OUTPUT:\n";
9660            pr "      RETVAL\n"
9661        | RString n ->
9662            pr "PREINIT:\n";
9663            pr "      char *%s;\n" n;
9664            pr "   CODE:\n";
9665            pr "      %s = guestfs_%s " n name;
9666            generate_c_call_args ~handle:"g" style;
9667            pr ";\n";
9668            do_cleanups ();
9669            pr "      if (%s == NULL)\n" n;
9670            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9671            pr "      RETVAL = newSVpv (%s, 0);\n" n;
9672            pr "      free (%s);\n" n;
9673            pr " OUTPUT:\n";
9674            pr "      RETVAL\n"
9675        | RStringList n | RHashtable n ->
9676            pr "PREINIT:\n";
9677            pr "      char **%s;\n" n;
9678            pr "      size_t i, n;\n";
9679            pr " PPCODE:\n";
9680            pr "      %s = guestfs_%s " n name;
9681            generate_c_call_args ~handle:"g" style;
9682            pr ";\n";
9683            do_cleanups ();
9684            pr "      if (%s == NULL)\n" n;
9685            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9686            pr "      for (n = 0; %s[n] != NULL; ++n) /**/;\n" n;
9687            pr "      EXTEND (SP, n);\n";
9688            pr "      for (i = 0; i < n; ++i) {\n";
9689            pr "        PUSHs (sv_2mortal (newSVpv (%s[i], 0)));\n" n;
9690            pr "        free (%s[i]);\n" n;
9691            pr "      }\n";
9692            pr "      free (%s);\n" n;
9693        | RStruct (n, typ) ->
9694            let cols = cols_of_struct typ in
9695            generate_perl_struct_code typ cols name style n do_cleanups
9696        | RStructList (n, typ) ->
9697            let cols = cols_of_struct typ in
9698            generate_perl_struct_list_code typ cols name style n do_cleanups
9699        | RBufferOut n ->
9700            pr "PREINIT:\n";
9701            pr "      char *%s;\n" n;
9702            pr "      size_t size;\n";
9703            pr "   CODE:\n";
9704            pr "      %s = guestfs_%s " n name;
9705            generate_c_call_args ~handle:"g" style;
9706            pr ";\n";
9707            do_cleanups ();
9708            pr "      if (%s == NULL)\n" n;
9709            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9710            pr "      RETVAL = newSVpvn (%s, size);\n" n;
9711            pr "      free (%s);\n" n;
9712            pr " OUTPUT:\n";
9713            pr "      RETVAL\n"
9714       );
9715
9716       pr "\n"
9717   ) all_functions
9718
9719 and generate_perl_struct_list_code typ cols name style n do_cleanups =
9720   pr "PREINIT:\n";
9721   pr "      struct guestfs_%s_list *%s;\n" typ n;
9722   pr "      size_t i;\n";
9723   pr "      HV *hv;\n";
9724   pr " PPCODE:\n";
9725   pr "      %s = guestfs_%s " n name;
9726   generate_c_call_args ~handle:"g" style;
9727   pr ";\n";
9728   do_cleanups ();
9729   pr "      if (%s == NULL)\n" n;
9730   pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9731   pr "      EXTEND (SP, %s->len);\n" n;
9732   pr "      for (i = 0; i < %s->len; ++i) {\n" n;
9733   pr "        hv = newHV ();\n";
9734   List.iter (
9735     function
9736     | name, FString ->
9737         pr "        (void) hv_store (hv, \"%s\", %d, newSVpv (%s->val[i].%s, 0), 0);\n"
9738           name (String.length name) n name
9739     | name, FUUID ->
9740         pr "        (void) hv_store (hv, \"%s\", %d, newSVpv (%s->val[i].%s, 32), 0);\n"
9741           name (String.length name) n name
9742     | name, FBuffer ->
9743         pr "        (void) hv_store (hv, \"%s\", %d, newSVpvn (%s->val[i].%s, %s->val[i].%s_len), 0);\n"
9744           name (String.length name) n name n name
9745     | name, (FBytes|FUInt64) ->
9746         pr "        (void) hv_store (hv, \"%s\", %d, my_newSVull (%s->val[i].%s), 0);\n"
9747           name (String.length name) n name
9748     | name, FInt64 ->
9749         pr "        (void) hv_store (hv, \"%s\", %d, my_newSVll (%s->val[i].%s), 0);\n"
9750           name (String.length name) n name
9751     | name, (FInt32|FUInt32) ->
9752         pr "        (void) hv_store (hv, \"%s\", %d, newSVnv (%s->val[i].%s), 0);\n"
9753           name (String.length name) n name
9754     | name, FChar ->
9755         pr "        (void) hv_store (hv, \"%s\", %d, newSVpv (&%s->val[i].%s, 1), 0);\n"
9756           name (String.length name) n name
9757     | name, FOptPercent ->
9758         pr "        (void) hv_store (hv, \"%s\", %d, newSVnv (%s->val[i].%s), 0);\n"
9759           name (String.length name) n name
9760   ) cols;
9761   pr "        PUSHs (sv_2mortal (newRV ((SV *) hv)));\n";
9762   pr "      }\n";
9763   pr "      guestfs_free_%s_list (%s);\n" typ n
9764
9765 and generate_perl_struct_code typ cols name style n do_cleanups =
9766   pr "PREINIT:\n";
9767   pr "      struct guestfs_%s *%s;\n" typ n;
9768   pr " PPCODE:\n";
9769   pr "      %s = guestfs_%s " n name;
9770   generate_c_call_args ~handle:"g" style;
9771   pr ";\n";
9772   do_cleanups ();
9773   pr "      if (%s == NULL)\n" n;
9774   pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9775   pr "      EXTEND (SP, 2 * %d);\n" (List.length cols);
9776   List.iter (
9777     fun ((name, _) as col) ->
9778       pr "      PUSHs (sv_2mortal (newSVpv (\"%s\", 0)));\n" name;
9779
9780       match col with
9781       | name, FString ->
9782           pr "      PUSHs (sv_2mortal (newSVpv (%s->%s, 0)));\n"
9783             n name
9784       | name, FBuffer ->
9785           pr "      PUSHs (sv_2mortal (newSVpvn (%s->%s, %s->%s_len)));\n"
9786             n name n name
9787       | name, FUUID ->
9788           pr "      PUSHs (sv_2mortal (newSVpv (%s->%s, 32)));\n"
9789             n name
9790       | name, (FBytes|FUInt64) ->
9791           pr "      PUSHs (sv_2mortal (my_newSVull (%s->%s)));\n"
9792             n name
9793       | name, FInt64 ->
9794           pr "      PUSHs (sv_2mortal (my_newSVll (%s->%s)));\n"
9795             n name
9796       | name, (FInt32|FUInt32) ->
9797           pr "      PUSHs (sv_2mortal (newSVnv (%s->%s)));\n"
9798             n name
9799       | name, FChar ->
9800           pr "      PUSHs (sv_2mortal (newSVpv (&%s->%s, 1)));\n"
9801             n name
9802       | name, FOptPercent ->
9803           pr "      PUSHs (sv_2mortal (newSVnv (%s->%s)));\n"
9804             n name
9805   ) cols;
9806   pr "      free (%s);\n" n
9807
9808 (* Generate Sys/Guestfs.pm. *)
9809 and generate_perl_pm () =
9810   generate_header HashStyle LGPLv2plus;
9811
9812   pr "\
9813 =pod
9814
9815 =head1 NAME
9816
9817 Sys::Guestfs - Perl bindings for libguestfs
9818
9819 =head1 SYNOPSIS
9820
9821  use Sys::Guestfs;
9822
9823  my $h = Sys::Guestfs->new ();
9824  $h->add_drive ('guest.img');
9825  $h->launch ();
9826  $h->mount ('/dev/sda1', '/');
9827  $h->touch ('/hello');
9828  $h->sync ();
9829
9830 =head1 DESCRIPTION
9831
9832 The C<Sys::Guestfs> module provides a Perl XS binding to the
9833 libguestfs API for examining and modifying virtual machine
9834 disk images.
9835
9836 Amongst the things this is good for: making batch configuration
9837 changes to guests, getting disk used/free statistics (see also:
9838 virt-df), migrating between virtualization systems (see also:
9839 virt-p2v), performing partial backups, performing partial guest
9840 clones, cloning guests and changing registry/UUID/hostname info, and
9841 much else besides.
9842
9843 Libguestfs uses Linux kernel and qemu code, and can access any type of
9844 guest filesystem that Linux and qemu can, including but not limited
9845 to: ext2/3/4, btrfs, FAT and NTFS, LVM, many different disk partition
9846 schemes, qcow, qcow2, vmdk.
9847
9848 Libguestfs provides ways to enumerate guest storage (eg. partitions,
9849 LVs, what filesystem is in each LV, etc.).  It can also run commands
9850 in the context of the guest.  Also you can access filesystems over
9851 FUSE.
9852
9853 See also L<Sys::Guestfs::Lib(3)> for a set of useful library
9854 functions for using libguestfs from Perl, including integration
9855 with libvirt.
9856
9857 =head1 ERRORS
9858
9859 All errors turn into calls to C<croak> (see L<Carp(3)>).
9860
9861 =head1 METHODS
9862
9863 =over 4
9864
9865 =cut
9866
9867 package Sys::Guestfs;
9868
9869 use strict;
9870 use warnings;
9871
9872 # This version number changes whenever a new function
9873 # is added to the libguestfs API.  It is not directly
9874 # related to the libguestfs version number.
9875 use vars qw($VERSION);
9876 $VERSION = '0.%d';
9877
9878 require XSLoader;
9879 XSLoader::load ('Sys::Guestfs');
9880
9881 =item $h = Sys::Guestfs->new ();
9882
9883 Create a new guestfs handle.
9884
9885 =cut
9886
9887 sub new {
9888   my $proto = shift;
9889   my $class = ref ($proto) || $proto;
9890
9891   my $g = Sys::Guestfs::_create ();
9892   my $self = { _g => $g };
9893   bless $self, $class;
9894   return $self;
9895 }
9896
9897 =item $h->close ();
9898
9899 Explicitly close the guestfs handle.
9900
9901 B<Note:> You should not usually call this function.  The handle will
9902 be closed implicitly when its reference count goes to zero (eg.
9903 when it goes out of scope or the program ends).  This call is
9904 only required in some exceptional cases, such as where the program
9905 may contain cached references to the handle 'somewhere' and you
9906 really have to have the close happen right away.  After calling
9907 C<close> the program must not call any method (including C<close>)
9908 on the handle (but the implicit call to C<DESTROY> that happens
9909 when the final reference is cleaned up is OK).
9910
9911 =item $h->set_progress_callback (\\&cb);
9912
9913 Set the progress notification callback for this handle
9914 to the Perl closure C<cb>.
9915
9916 C<cb> will be called whenever a long-running operation
9917 generates a progress notification message.  The 4 parameters
9918 to the function are: C<proc_nr>, C<serial>, C<position>
9919 and C<total>.
9920
9921 You should carefully read the documentation for
9922 L<guestfs(3)/guestfs_set_progress_callback> before using
9923 this function.
9924
9925 =item $h->clear_progress_callback ();
9926
9927 This removes any progress callback function associated with
9928 the handle.
9929
9930 =cut
9931
9932 " max_proc_nr;
9933
9934   (* Actions.  We only need to print documentation for these as
9935    * they are pulled in from the XS code automatically.
9936    *)
9937   List.iter (
9938     fun (name, style, _, flags, _, _, longdesc) ->
9939       if not (List.mem NotInDocs flags) then (
9940         let longdesc = replace_str longdesc "C<guestfs_" "C<$h-E<gt>" in
9941         pr "=item ";
9942         generate_perl_prototype name style;
9943         pr "\n\n";
9944         pr "%s\n\n" longdesc;
9945         if List.mem ProtocolLimitWarning flags then
9946           pr "%s\n\n" protocol_limit_warning;
9947         if List.mem DangerWillRobinson flags then
9948           pr "%s\n\n" danger_will_robinson;
9949         match deprecation_notice flags with
9950         | None -> ()
9951         | Some txt -> pr "%s\n\n" txt
9952       )
9953   ) all_functions_sorted;
9954
9955   (* End of file. *)
9956   pr "\
9957 =cut
9958
9959 1;
9960
9961 =back
9962
9963 =head1 AVAILABILITY
9964
9965 From time to time we add new libguestfs APIs.  Also some libguestfs
9966 APIs won't be available in all builds of libguestfs (the Fedora
9967 build is full-featured, but other builds may disable features).
9968 How do you test whether the APIs that your Perl program needs are
9969 available in the version of C<Sys::Guestfs> that you are using?
9970
9971 To test if a particular function is available in the C<Sys::Guestfs>
9972 class, use the ordinary Perl UNIVERSAL method C<can(METHOD)>
9973 (see L<perlobj(1)>).  For example:
9974
9975  use Sys::Guestfs;
9976  if (defined (Sys::Guestfs->can (\"set_verbose\"))) {
9977    print \"\\$h->set_verbose is available\\n\";
9978  }
9979
9980 To test if particular features are supported by the current
9981 build, use the L</available> method like the example below.  Note
9982 that the appliance must be launched first.
9983
9984  $h->available ( [\"augeas\"] );
9985
9986 Since the L</available> method croaks if the feature is not supported,
9987 you might also want to wrap this in an eval and return a boolean.
9988 In fact this has already been done for you: use
9989 L<Sys::Guestfs::Lib(3)/feature_available>.
9990
9991 For further discussion on this topic, refer to
9992 L<guestfs(3)/AVAILABILITY>.
9993
9994 =head1 STORING DATA IN THE HANDLE
9995
9996 The handle returned from L</new> is a hash reference.  The hash
9997 normally contains a single element:
9998
9999  {
10000    _g => [private data used by libguestfs]
10001  }
10002
10003 Callers can add other elements to this hash to store data for their own
10004 purposes.  The data lasts for the lifetime of the handle.
10005
10006 Any fields whose names begin with an underscore are reserved
10007 for private use by libguestfs.  We may add more in future.
10008
10009 It is recommended that callers prefix the name of their field(s)
10010 with some unique string, to avoid conflicts with other users.
10011
10012 =head1 COPYRIGHT
10013
10014 Copyright (C) %s Red Hat Inc.
10015
10016 =head1 LICENSE
10017
10018 Please see the file COPYING.LIB for the full license.
10019
10020 =head1 SEE ALSO
10021
10022 L<guestfs(3)>,
10023 L<guestfish(1)>,
10024 L<http://libguestfs.org>,
10025 L<Sys::Guestfs::Lib(3)>.
10026
10027 =cut
10028 " copyright_years
10029
10030 and generate_perl_prototype name style =
10031   (match fst style with
10032    | RErr -> ()
10033    | RBool n
10034    | RInt n
10035    | RInt64 n
10036    | RConstString n
10037    | RConstOptString n
10038    | RString n
10039    | RBufferOut n -> pr "$%s = " n
10040    | RStruct (n,_)
10041    | RHashtable n -> pr "%%%s = " n
10042    | RStringList n
10043    | RStructList (n,_) -> pr "@%s = " n
10044   );
10045   pr "$h->%s (" name;
10046   let comma = ref false in
10047   List.iter (
10048     fun arg ->
10049       if !comma then pr ", ";
10050       comma := true;
10051       match arg with
10052       | Pathname n | Device n | Dev_or_Path n | String n
10053       | OptString n | Bool n | Int n | Int64 n | FileIn n | FileOut n
10054       | BufferIn n | Key n ->
10055           pr "$%s" n
10056       | StringList n | DeviceList n ->
10057           pr "\\@%s" n
10058   ) (snd style);
10059   pr ");"
10060
10061 (* Generate Python C module. *)
10062 and generate_python_c () =
10063   generate_header CStyle LGPLv2plus;
10064
10065   pr "\
10066 #define PY_SSIZE_T_CLEAN 1
10067 #include <Python.h>
10068
10069 #if PY_VERSION_HEX < 0x02050000
10070 typedef int Py_ssize_t;
10071 #define PY_SSIZE_T_MAX INT_MAX
10072 #define PY_SSIZE_T_MIN INT_MIN
10073 #endif
10074
10075 #include <stdio.h>
10076 #include <stdlib.h>
10077 #include <assert.h>
10078
10079 #include \"guestfs.h\"
10080
10081 #ifndef HAVE_PYCAPSULE_NEW
10082 typedef struct {
10083   PyObject_HEAD
10084   guestfs_h *g;
10085 } Pyguestfs_Object;
10086 #endif
10087
10088 static guestfs_h *
10089 get_handle (PyObject *obj)
10090 {
10091   assert (obj);
10092   assert (obj != Py_None);
10093 #ifndef HAVE_PYCAPSULE_NEW
10094   return ((Pyguestfs_Object *) obj)->g;
10095 #else
10096   return (guestfs_h*) PyCapsule_GetPointer(obj, \"guestfs_h\");
10097 #endif
10098 }
10099
10100 static PyObject *
10101 put_handle (guestfs_h *g)
10102 {
10103   assert (g);
10104 #ifndef HAVE_PYCAPSULE_NEW
10105   return
10106     PyCObject_FromVoidPtrAndDesc ((void *) g, (char *) \"guestfs_h\", NULL);
10107 #else
10108   return PyCapsule_New ((void *) g, \"guestfs_h\", NULL);
10109 #endif
10110 }
10111
10112 /* This list should be freed (but not the strings) after use. */
10113 static char **
10114 get_string_list (PyObject *obj)
10115 {
10116   size_t i, len;
10117   char **r;
10118
10119   assert (obj);
10120
10121   if (!PyList_Check (obj)) {
10122     PyErr_SetString (PyExc_RuntimeError, \"expecting a list parameter\");
10123     return NULL;
10124   }
10125
10126   Py_ssize_t slen = PyList_Size (obj);
10127   if (slen == -1) {
10128     PyErr_SetString (PyExc_RuntimeError, \"get_string_list: PyList_Size failure\");
10129     return NULL;
10130   }
10131   len = (size_t) slen;
10132   r = malloc (sizeof (char *) * (len+1));
10133   if (r == NULL) {
10134     PyErr_SetString (PyExc_RuntimeError, \"get_string_list: out of memory\");
10135     return NULL;
10136   }
10137
10138   for (i = 0; i < len; ++i)
10139     r[i] = PyString_AsString (PyList_GetItem (obj, i));
10140   r[len] = NULL;
10141
10142   return r;
10143 }
10144
10145 static PyObject *
10146 put_string_list (char * const * const argv)
10147 {
10148   PyObject *list;
10149   int argc, i;
10150
10151   for (argc = 0; argv[argc] != NULL; ++argc)
10152     ;
10153
10154   list = PyList_New (argc);
10155   for (i = 0; i < argc; ++i)
10156     PyList_SetItem (list, i, PyString_FromString (argv[i]));
10157
10158   return list;
10159 }
10160
10161 static PyObject *
10162 put_table (char * const * const argv)
10163 {
10164   PyObject *list, *item;
10165   int argc, i;
10166
10167   for (argc = 0; argv[argc] != NULL; ++argc)
10168     ;
10169
10170   list = PyList_New (argc >> 1);
10171   for (i = 0; i < argc; i += 2) {
10172     item = PyTuple_New (2);
10173     PyTuple_SetItem (item, 0, PyString_FromString (argv[i]));
10174     PyTuple_SetItem (item, 1, PyString_FromString (argv[i+1]));
10175     PyList_SetItem (list, i >> 1, item);
10176   }
10177
10178   return list;
10179 }
10180
10181 static void
10182 free_strings (char **argv)
10183 {
10184   int argc;
10185
10186   for (argc = 0; argv[argc] != NULL; ++argc)
10187     free (argv[argc]);
10188   free (argv);
10189 }
10190
10191 static PyObject *
10192 py_guestfs_create (PyObject *self, PyObject *args)
10193 {
10194   guestfs_h *g;
10195
10196   g = guestfs_create ();
10197   if (g == NULL) {
10198     PyErr_SetString (PyExc_RuntimeError,
10199                      \"guestfs.create: failed to allocate handle\");
10200     return NULL;
10201   }
10202   guestfs_set_error_handler (g, NULL, NULL);
10203   /* This can return NULL, but in that case put_handle will have
10204    * set the Python error string.
10205    */
10206   return put_handle (g);
10207 }
10208
10209 static PyObject *
10210 py_guestfs_close (PyObject *self, PyObject *args)
10211 {
10212   PyObject *py_g;
10213   guestfs_h *g;
10214
10215   if (!PyArg_ParseTuple (args, (char *) \"O:guestfs_close\", &py_g))
10216     return NULL;
10217   g = get_handle (py_g);
10218
10219   guestfs_close (g);
10220
10221   Py_INCREF (Py_None);
10222   return Py_None;
10223 }
10224
10225 ";
10226
10227   let emit_put_list_function typ =
10228     pr "static PyObject *\n";
10229     pr "put_%s_list (struct guestfs_%s_list *%ss)\n" typ typ typ;
10230     pr "{\n";
10231     pr "  PyObject *list;\n";
10232     pr "  size_t i;\n";
10233     pr "\n";
10234     pr "  list = PyList_New (%ss->len);\n" typ;
10235     pr "  for (i = 0; i < %ss->len; ++i)\n" typ;
10236     pr "    PyList_SetItem (list, i, put_%s (&%ss->val[i]));\n" typ typ;
10237     pr "  return list;\n";
10238     pr "};\n";
10239     pr "\n"
10240   in
10241
10242   (* Structures, turned into Python dictionaries. *)
10243   List.iter (
10244     fun (typ, cols) ->
10245       pr "static PyObject *\n";
10246       pr "put_%s (struct guestfs_%s *%s)\n" typ typ typ;
10247       pr "{\n";
10248       pr "  PyObject *dict;\n";
10249       pr "\n";
10250       pr "  dict = PyDict_New ();\n";
10251       List.iter (
10252         function
10253         | name, FString ->
10254             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
10255             pr "                        PyString_FromString (%s->%s));\n"
10256               typ name
10257         | name, FBuffer ->
10258             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
10259             pr "                        PyString_FromStringAndSize (%s->%s, %s->%s_len));\n"
10260               typ name typ name
10261         | name, FUUID ->
10262             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
10263             pr "                        PyString_FromStringAndSize (%s->%s, 32));\n"
10264               typ name
10265         | name, (FBytes|FUInt64) ->
10266             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
10267             pr "                        PyLong_FromUnsignedLongLong (%s->%s));\n"
10268               typ name
10269         | name, FInt64 ->
10270             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
10271             pr "                        PyLong_FromLongLong (%s->%s));\n"
10272               typ name
10273         | name, FUInt32 ->
10274             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
10275             pr "                        PyLong_FromUnsignedLong (%s->%s));\n"
10276               typ name
10277         | name, FInt32 ->
10278             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
10279             pr "                        PyLong_FromLong (%s->%s));\n"
10280               typ name
10281         | name, FOptPercent ->
10282             pr "  if (%s->%s >= 0)\n" typ name;
10283             pr "    PyDict_SetItemString (dict, \"%s\",\n" name;
10284             pr "                          PyFloat_FromDouble ((double) %s->%s));\n"
10285               typ name;
10286             pr "  else {\n";
10287             pr "    Py_INCREF (Py_None);\n";
10288             pr "    PyDict_SetItemString (dict, \"%s\", Py_None);\n" name;
10289             pr "  }\n"
10290         | name, FChar ->
10291             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
10292             pr "                        PyString_FromStringAndSize (&dirent->%s, 1));\n" name
10293       ) cols;
10294       pr "  return dict;\n";
10295       pr "};\n";
10296       pr "\n";
10297
10298   ) structs;
10299
10300   (* Emit a put_TYPE_list function definition only if that function is used. *)
10301   List.iter (
10302     function
10303     | typ, (RStructListOnly | RStructAndList) ->
10304         (* generate the function for typ *)
10305         emit_put_list_function typ
10306     | typ, _ -> () (* empty *)
10307   ) (rstructs_used_by all_functions);
10308
10309   (* Python wrapper functions. *)
10310   List.iter (
10311     fun (name, style, _, _, _, _, _) ->
10312       pr "static PyObject *\n";
10313       pr "py_guestfs_%s (PyObject *self, PyObject *args)\n" name;
10314       pr "{\n";
10315
10316       pr "  PyObject *py_g;\n";
10317       pr "  guestfs_h *g;\n";
10318       pr "  PyObject *py_r;\n";
10319
10320       let error_code =
10321         match fst style with
10322         | RErr | RInt _ | RBool _ -> pr "  int r;\n"; "-1"
10323         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
10324         | RConstString _ | RConstOptString _ ->
10325             pr "  const char *r;\n"; "NULL"
10326         | RString _ -> pr "  char *r;\n"; "NULL"
10327         | RStringList _ | RHashtable _ -> pr "  char **r;\n"; "NULL"
10328         | RStruct (_, typ) -> pr "  struct guestfs_%s *r;\n" typ; "NULL"
10329         | RStructList (_, typ) ->
10330             pr "  struct guestfs_%s_list *r;\n" typ; "NULL"
10331         | RBufferOut _ ->
10332             pr "  char *r;\n";
10333             pr "  size_t size;\n";
10334             "NULL" in
10335
10336       List.iter (
10337         function
10338         | Pathname n | Device n | Dev_or_Path n | String n | Key n
10339         | FileIn n | FileOut n ->
10340             pr "  const char *%s;\n" n
10341         | OptString n -> pr "  const char *%s;\n" n
10342         | BufferIn n ->
10343             pr "  const char *%s;\n" n;
10344             pr "  Py_ssize_t %s_size;\n" n
10345         | StringList n | DeviceList n ->
10346             pr "  PyObject *py_%s;\n" n;
10347             pr "  char **%s;\n" n
10348         | Bool n -> pr "  int %s;\n" n
10349         | Int n -> pr "  int %s;\n" n
10350         | Int64 n -> pr "  long long %s;\n" n
10351       ) (snd style);
10352
10353       pr "\n";
10354
10355       (* Convert the parameters. *)
10356       pr "  if (!PyArg_ParseTuple (args, (char *) \"O";
10357       List.iter (
10358         function
10359         | Pathname _ | Device _ | Dev_or_Path _ | String _ | Key _
10360         | FileIn _ | FileOut _ -> pr "s"
10361         | OptString _ -> pr "z"
10362         | StringList _ | DeviceList _ -> pr "O"
10363         | Bool _ -> pr "i" (* XXX Python has booleans? *)
10364         | Int _ -> pr "i"
10365         | Int64 _ -> pr "L" (* XXX Whoever thought it was a good idea to
10366                              * emulate C's int/long/long long in Python?
10367                              *)
10368         | BufferIn _ -> pr "s#"
10369       ) (snd style);
10370       pr ":guestfs_%s\",\n" name;
10371       pr "                         &py_g";
10372       List.iter (
10373         function
10374         | Pathname n | Device n | Dev_or_Path n | String n | Key n
10375         | FileIn n | FileOut n -> pr ", &%s" n
10376         | OptString n -> pr ", &%s" n
10377         | StringList n | DeviceList n -> pr ", &py_%s" n
10378         | Bool n -> pr ", &%s" n
10379         | Int n -> pr ", &%s" n
10380         | Int64 n -> pr ", &%s" n
10381         | BufferIn n -> pr ", &%s, &%s_size" n n
10382       ) (snd style);
10383
10384       pr "))\n";
10385       pr "    return NULL;\n";
10386
10387       pr "  g = get_handle (py_g);\n";
10388       List.iter (
10389         function
10390         | Pathname _ | Device _ | Dev_or_Path _ | String _ | Key _
10391         | FileIn _ | FileOut _ | OptString _ | Bool _ | Int _ | Int64 _
10392         | BufferIn _ -> ()
10393         | StringList n | DeviceList n ->
10394             pr "  %s = get_string_list (py_%s);\n" n n;
10395             pr "  if (!%s) return NULL;\n" n
10396       ) (snd style);
10397
10398       pr "\n";
10399
10400       pr "  r = guestfs_%s " name;
10401       generate_c_call_args ~handle:"g" style;
10402       pr ";\n";
10403
10404       List.iter (
10405         function
10406         | Pathname _ | Device _ | Dev_or_Path _ | String _ | Key _
10407         | FileIn _ | FileOut _ | OptString _ | Bool _ | Int _ | Int64 _
10408         | BufferIn _ -> ()
10409         | StringList n | DeviceList n ->
10410             pr "  free (%s);\n" n
10411       ) (snd style);
10412
10413       pr "  if (r == %s) {\n" error_code;
10414       pr "    PyErr_SetString (PyExc_RuntimeError, guestfs_last_error (g));\n";
10415       pr "    return NULL;\n";
10416       pr "  }\n";
10417       pr "\n";
10418
10419       (match fst style with
10420        | RErr ->
10421            pr "  Py_INCREF (Py_None);\n";
10422            pr "  py_r = Py_None;\n"
10423        | RInt _
10424        | RBool _ -> pr "  py_r = PyInt_FromLong ((long) r);\n"
10425        | RInt64 _ -> pr "  py_r = PyLong_FromLongLong (r);\n"
10426        | RConstString _ -> pr "  py_r = PyString_FromString (r);\n"
10427        | RConstOptString _ ->
10428            pr "  if (r)\n";
10429            pr "    py_r = PyString_FromString (r);\n";
10430            pr "  else {\n";
10431            pr "    Py_INCREF (Py_None);\n";
10432            pr "    py_r = Py_None;\n";
10433            pr "  }\n"
10434        | RString _ ->
10435            pr "  py_r = PyString_FromString (r);\n";
10436            pr "  free (r);\n"
10437        | RStringList _ ->
10438            pr "  py_r = put_string_list (r);\n";
10439            pr "  free_strings (r);\n"
10440        | RStruct (_, typ) ->
10441            pr "  py_r = put_%s (r);\n" typ;
10442            pr "  guestfs_free_%s (r);\n" typ
10443        | RStructList (_, typ) ->
10444            pr "  py_r = put_%s_list (r);\n" typ;
10445            pr "  guestfs_free_%s_list (r);\n" typ
10446        | RHashtable n ->
10447            pr "  py_r = put_table (r);\n";
10448            pr "  free_strings (r);\n"
10449        | RBufferOut _ ->
10450            pr "  py_r = PyString_FromStringAndSize (r, size);\n";
10451            pr "  free (r);\n"
10452       );
10453
10454       pr "  return py_r;\n";
10455       pr "}\n";
10456       pr "\n"
10457   ) all_functions;
10458
10459   (* Table of functions. *)
10460   pr "static PyMethodDef methods[] = {\n";
10461   pr "  { (char *) \"create\", py_guestfs_create, METH_VARARGS, NULL },\n";
10462   pr "  { (char *) \"close\", py_guestfs_close, METH_VARARGS, NULL },\n";
10463   List.iter (
10464     fun (name, _, _, _, _, _, _) ->
10465       pr "  { (char *) \"%s\", py_guestfs_%s, METH_VARARGS, NULL },\n"
10466         name name
10467   ) all_functions;
10468   pr "  { NULL, NULL, 0, NULL }\n";
10469   pr "};\n";
10470   pr "\n";
10471
10472   (* Init function. *)
10473   pr "\
10474 void
10475 initlibguestfsmod (void)
10476 {
10477   static int initialized = 0;
10478
10479   if (initialized) return;
10480   Py_InitModule ((char *) \"libguestfsmod\", methods);
10481   initialized = 1;
10482 }
10483 "
10484
10485 (* Generate Python module. *)
10486 and generate_python_py () =
10487   generate_header HashStyle LGPLv2plus;
10488
10489   pr "\
10490 u\"\"\"Python bindings for libguestfs
10491
10492 import guestfs
10493 g = guestfs.GuestFS ()
10494 g.add_drive (\"guest.img\")
10495 g.launch ()
10496 parts = g.list_partitions ()
10497
10498 The guestfs module provides a Python binding to the libguestfs API
10499 for examining and modifying virtual machine disk images.
10500
10501 Amongst the things this is good for: making batch configuration
10502 changes to guests, getting disk used/free statistics (see also:
10503 virt-df), migrating between virtualization systems (see also:
10504 virt-p2v), performing partial backups, performing partial guest
10505 clones, cloning guests and changing registry/UUID/hostname info, and
10506 much else besides.
10507
10508 Libguestfs uses Linux kernel and qemu code, and can access any type of
10509 guest filesystem that Linux and qemu can, including but not limited
10510 to: ext2/3/4, btrfs, FAT and NTFS, LVM, many different disk partition
10511 schemes, qcow, qcow2, vmdk.
10512
10513 Libguestfs provides ways to enumerate guest storage (eg. partitions,
10514 LVs, what filesystem is in each LV, etc.).  It can also run commands
10515 in the context of the guest.  Also you can access filesystems over
10516 FUSE.
10517
10518 Errors which happen while using the API are turned into Python
10519 RuntimeError exceptions.
10520
10521 To create a guestfs handle you usually have to perform the following
10522 sequence of calls:
10523
10524 # Create the handle, call add_drive at least once, and possibly
10525 # several times if the guest has multiple block devices:
10526 g = guestfs.GuestFS ()
10527 g.add_drive (\"guest.img\")
10528
10529 # Launch the qemu subprocess and wait for it to become ready:
10530 g.launch ()
10531
10532 # Now you can issue commands, for example:
10533 logvols = g.lvs ()
10534
10535 \"\"\"
10536
10537 import libguestfsmod
10538
10539 class GuestFS:
10540     \"\"\"Instances of this class are libguestfs API handles.\"\"\"
10541
10542     def __init__ (self):
10543         \"\"\"Create a new libguestfs handle.\"\"\"
10544         self._o = libguestfsmod.create ()
10545
10546     def __del__ (self):
10547         libguestfsmod.close (self._o)
10548
10549 ";
10550
10551   List.iter (
10552     fun (name, style, _, flags, _, _, longdesc) ->
10553       pr "    def %s " name;
10554       generate_py_call_args ~handle:"self" (snd style);
10555       pr ":\n";
10556
10557       if not (List.mem NotInDocs flags) then (
10558         let doc = replace_str longdesc "C<guestfs_" "C<g." in
10559         let doc =
10560           match fst style with
10561           | RErr | RInt _ | RInt64 _ | RBool _
10562           | RConstOptString _ | RConstString _
10563           | RString _ | RBufferOut _ -> doc
10564           | RStringList _ ->
10565               doc ^ "\n\nThis function returns a list of strings."
10566           | RStruct (_, typ) ->
10567               doc ^ sprintf "\n\nThis function returns a dictionary, with keys matching the various fields in the guestfs_%s structure." typ
10568           | RStructList (_, typ) ->
10569               doc ^ sprintf "\n\nThis function returns a list of %ss.  Each %s is represented as a dictionary." typ typ
10570           | RHashtable _ ->
10571               doc ^ "\n\nThis function returns a dictionary." in
10572         let doc =
10573           if List.mem ProtocolLimitWarning flags then
10574             doc ^ "\n\n" ^ protocol_limit_warning
10575           else doc in
10576         let doc =
10577           if List.mem DangerWillRobinson flags then
10578             doc ^ "\n\n" ^ danger_will_robinson
10579           else doc in
10580         let doc =
10581           match deprecation_notice flags with
10582           | None -> doc
10583           | Some txt -> doc ^ "\n\n" ^ txt in
10584         let doc = pod2text ~width:60 name doc in
10585         let doc = List.map (fun line -> replace_str line "\\" "\\\\") doc in
10586         let doc = String.concat "\n        " doc in
10587         pr "        u\"\"\"%s\"\"\"\n" doc;
10588       );
10589       pr "        return libguestfsmod.%s " name;
10590       generate_py_call_args ~handle:"self._o" (snd style);
10591       pr "\n";
10592       pr "\n";
10593   ) all_functions
10594
10595 (* Generate Python call arguments, eg "(handle, foo, bar)" *)
10596 and generate_py_call_args ~handle args =
10597   pr "(%s" handle;
10598   List.iter (fun arg -> pr ", %s" (name_of_argt arg)) args;
10599   pr ")"
10600
10601 (* Useful if you need the longdesc POD text as plain text.  Returns a
10602  * list of lines.
10603  *
10604  * Because this is very slow (the slowest part of autogeneration),
10605  * we memoize the results.
10606  *)
10607 and pod2text ~width name longdesc =
10608   let key = width, name, longdesc in
10609   try Hashtbl.find pod2text_memo key
10610   with Not_found ->
10611     let filename, chan = Filename.open_temp_file "gen" ".tmp" in
10612     fprintf chan "=head1 %s\n\n%s\n" name longdesc;
10613     close_out chan;
10614     let cmd = sprintf "pod2text -w %d %s" width (Filename.quote filename) in
10615     let chan = open_process_in cmd in
10616     let lines = ref [] in
10617     let rec loop i =
10618       let line = input_line chan in
10619       if i = 1 then             (* discard the first line of output *)
10620         loop (i+1)
10621       else (
10622         let line = triml line in
10623         lines := line :: !lines;
10624         loop (i+1)
10625       ) in
10626     let lines = try loop 1 with End_of_file -> List.rev !lines in
10627     unlink filename;
10628     (match close_process_in chan with
10629      | WEXITED 0 -> ()
10630      | WEXITED i ->
10631          failwithf "pod2text: process exited with non-zero status (%d)" i
10632      | WSIGNALED i | WSTOPPED i ->
10633          failwithf "pod2text: process signalled or stopped by signal %d" i
10634     );
10635     Hashtbl.add pod2text_memo key lines;
10636     pod2text_memo_updated ();
10637     lines
10638
10639 (* Generate ruby bindings. *)
10640 and generate_ruby_c () =
10641   generate_header CStyle LGPLv2plus;
10642
10643   pr "\
10644 #include <stdio.h>
10645 #include <stdlib.h>
10646
10647 #include <ruby.h>
10648
10649 #include \"guestfs.h\"
10650
10651 #include \"extconf.h\"
10652
10653 /* For Ruby < 1.9 */
10654 #ifndef RARRAY_LEN
10655 #define RARRAY_LEN(r) (RARRAY((r))->len)
10656 #endif
10657
10658 static VALUE m_guestfs;                 /* guestfs module */
10659 static VALUE c_guestfs;                 /* guestfs_h handle */
10660 static VALUE e_Error;                   /* used for all errors */
10661
10662 static void ruby_guestfs_free (void *p)
10663 {
10664   if (!p) return;
10665   guestfs_close ((guestfs_h *) p);
10666 }
10667
10668 static VALUE ruby_guestfs_create (VALUE m)
10669 {
10670   guestfs_h *g;
10671
10672   g = guestfs_create ();
10673   if (!g)
10674     rb_raise (e_Error, \"failed to create guestfs handle\");
10675
10676   /* Don't print error messages to stderr by default. */
10677   guestfs_set_error_handler (g, NULL, NULL);
10678
10679   /* Wrap it, and make sure the close function is called when the
10680    * handle goes away.
10681    */
10682   return Data_Wrap_Struct (c_guestfs, NULL, ruby_guestfs_free, g);
10683 }
10684
10685 static VALUE ruby_guestfs_close (VALUE gv)
10686 {
10687   guestfs_h *g;
10688   Data_Get_Struct (gv, guestfs_h, g);
10689
10690   ruby_guestfs_free (g);
10691   DATA_PTR (gv) = NULL;
10692
10693   return Qnil;
10694 }
10695
10696 ";
10697
10698   List.iter (
10699     fun (name, style, _, _, _, _, _) ->
10700       pr "static VALUE ruby_guestfs_%s (VALUE gv" name;
10701       List.iter (fun arg -> pr ", VALUE %sv" (name_of_argt arg)) (snd style);
10702       pr ")\n";
10703       pr "{\n";
10704       pr "  guestfs_h *g;\n";
10705       pr "  Data_Get_Struct (gv, guestfs_h, g);\n";
10706       pr "  if (!g)\n";
10707       pr "    rb_raise (rb_eArgError, \"%%s: used handle after closing it\", \"%s\");\n"
10708         name;
10709       pr "\n";
10710
10711       List.iter (
10712         function
10713         | Pathname n | Device n | Dev_or_Path n | String n | Key n
10714         | FileIn n | FileOut n ->
10715             pr "  Check_Type (%sv, T_STRING);\n" n;
10716             pr "  const char *%s = StringValueCStr (%sv);\n" n n;
10717             pr "  if (!%s)\n" n;
10718             pr "    rb_raise (rb_eTypeError, \"expected string for parameter %%s of %%s\",\n";
10719             pr "              \"%s\", \"%s\");\n" n name
10720         | BufferIn n ->
10721             pr "  Check_Type (%sv, T_STRING);\n" n;
10722             pr "  const char *%s = RSTRING (%sv)->ptr;\n" n n;
10723             pr "  if (!%s)\n" n;
10724             pr "    rb_raise (rb_eTypeError, \"expected string for parameter %%s of %%s\",\n";
10725             pr "              \"%s\", \"%s\");\n" n name;
10726             pr "  size_t %s_size = RSTRING (%sv)->len;\n" n n
10727         | OptString n ->
10728             pr "  const char *%s = !NIL_P (%sv) ? StringValueCStr (%sv) : NULL;\n" n n n
10729         | StringList n | DeviceList n ->
10730             pr "  char **%s;\n" n;
10731             pr "  Check_Type (%sv, T_ARRAY);\n" n;
10732             pr "  {\n";
10733             pr "    size_t i, len;\n";
10734             pr "    len = RARRAY_LEN (%sv);\n" n;
10735             pr "    %s = guestfs_safe_malloc (g, sizeof (char *) * (len+1));\n"
10736               n;
10737             pr "    for (i = 0; i < len; ++i) {\n";
10738             pr "      VALUE v = rb_ary_entry (%sv, i);\n" n;
10739             pr "      %s[i] = StringValueCStr (v);\n" n;
10740             pr "    }\n";
10741             pr "    %s[len] = NULL;\n" n;
10742             pr "  }\n";
10743         | Bool n ->
10744             pr "  int %s = RTEST (%sv);\n" n n
10745         | Int n ->
10746             pr "  int %s = NUM2INT (%sv);\n" n n
10747         | Int64 n ->
10748             pr "  long long %s = NUM2LL (%sv);\n" n n
10749       ) (snd style);
10750       pr "\n";
10751
10752       let error_code =
10753         match fst style with
10754         | RErr | RInt _ | RBool _ -> pr "  int r;\n"; "-1"
10755         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
10756         | RConstString _ | RConstOptString _ ->
10757             pr "  const char *r;\n"; "NULL"
10758         | RString _ -> pr "  char *r;\n"; "NULL"
10759         | RStringList _ | RHashtable _ -> pr "  char **r;\n"; "NULL"
10760         | RStruct (_, typ) -> pr "  struct guestfs_%s *r;\n" typ; "NULL"
10761         | RStructList (_, typ) ->
10762             pr "  struct guestfs_%s_list *r;\n" typ; "NULL"
10763         | RBufferOut _ ->
10764             pr "  char *r;\n";
10765             pr "  size_t size;\n";
10766             "NULL" in
10767       pr "\n";
10768
10769       pr "  r = guestfs_%s " name;
10770       generate_c_call_args ~handle:"g" style;
10771       pr ";\n";
10772
10773       List.iter (
10774         function
10775         | Pathname _ | Device _ | Dev_or_Path _ | String _ | Key _
10776         | FileIn _ | FileOut _ | OptString _ | Bool _ | Int _ | Int64 _
10777         | BufferIn _ -> ()
10778         | StringList n | DeviceList n ->
10779             pr "  free (%s);\n" n
10780       ) (snd style);
10781
10782       pr "  if (r == %s)\n" error_code;
10783       pr "    rb_raise (e_Error, \"%%s\", guestfs_last_error (g));\n";
10784       pr "\n";
10785
10786       (match fst style with
10787        | RErr ->
10788            pr "  return Qnil;\n"
10789        | RInt _ | RBool _ ->
10790            pr "  return INT2NUM (r);\n"
10791        | RInt64 _ ->
10792            pr "  return ULL2NUM (r);\n"
10793        | RConstString _ ->
10794            pr "  return rb_str_new2 (r);\n";
10795        | RConstOptString _ ->
10796            pr "  if (r)\n";
10797            pr "    return rb_str_new2 (r);\n";
10798            pr "  else\n";
10799            pr "    return Qnil;\n";
10800        | RString _ ->
10801            pr "  VALUE rv = rb_str_new2 (r);\n";
10802            pr "  free (r);\n";
10803            pr "  return rv;\n";
10804        | RStringList _ ->
10805            pr "  size_t i, len = 0;\n";
10806            pr "  for (i = 0; r[i] != NULL; ++i) len++;\n";
10807            pr "  VALUE rv = rb_ary_new2 (len);\n";
10808            pr "  for (i = 0; r[i] != NULL; ++i) {\n";
10809            pr "    rb_ary_push (rv, rb_str_new2 (r[i]));\n";
10810            pr "    free (r[i]);\n";
10811            pr "  }\n";
10812            pr "  free (r);\n";
10813            pr "  return rv;\n"
10814        | RStruct (_, typ) ->
10815            let cols = cols_of_struct typ in
10816            generate_ruby_struct_code typ cols
10817        | RStructList (_, typ) ->
10818            let cols = cols_of_struct typ in
10819            generate_ruby_struct_list_code typ cols
10820        | RHashtable _ ->
10821            pr "  VALUE rv = rb_hash_new ();\n";
10822            pr "  size_t i;\n";
10823            pr "  for (i = 0; r[i] != NULL; i+=2) {\n";
10824            pr "    rb_hash_aset (rv, rb_str_new2 (r[i]), rb_str_new2 (r[i+1]));\n";
10825            pr "    free (r[i]);\n";
10826            pr "    free (r[i+1]);\n";
10827            pr "  }\n";
10828            pr "  free (r);\n";
10829            pr "  return rv;\n"
10830        | RBufferOut _ ->
10831            pr "  VALUE rv = rb_str_new (r, size);\n";
10832            pr "  free (r);\n";
10833            pr "  return rv;\n";
10834       );
10835
10836       pr "}\n";
10837       pr "\n"
10838   ) all_functions;
10839
10840   pr "\
10841 /* Initialize the module. */
10842 void Init__guestfs ()
10843 {
10844   m_guestfs = rb_define_module (\"Guestfs\");
10845   c_guestfs = rb_define_class_under (m_guestfs, \"Guestfs\", rb_cObject);
10846   e_Error = rb_define_class_under (m_guestfs, \"Error\", rb_eStandardError);
10847
10848 #ifdef HAVE_RB_DEFINE_ALLOC_FUNC
10849   rb_define_alloc_func (c_guestfs, ruby_guestfs_create);
10850 #endif
10851
10852   rb_define_module_function (m_guestfs, \"create\", ruby_guestfs_create, 0);
10853   rb_define_method (c_guestfs, \"close\", ruby_guestfs_close, 0);
10854
10855 ";
10856   (* Define the rest of the methods. *)
10857   List.iter (
10858     fun (name, style, _, _, _, _, _) ->
10859       pr "  rb_define_method (c_guestfs, \"%s\",\n" name;
10860       pr "        ruby_guestfs_%s, %d);\n" name (List.length (snd style))
10861   ) all_functions;
10862
10863   pr "}\n"
10864
10865 (* Ruby code to return a struct. *)
10866 and generate_ruby_struct_code typ cols =
10867   pr "  VALUE rv = rb_hash_new ();\n";
10868   List.iter (
10869     function
10870     | name, FString ->
10871         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_str_new2 (r->%s));\n" name name
10872     | name, FBuffer ->
10873         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_str_new (r->%s, r->%s_len));\n" name name name
10874     | name, FUUID ->
10875         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_str_new (r->%s, 32));\n" name name
10876     | name, (FBytes|FUInt64) ->
10877         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), ULL2NUM (r->%s));\n" name name
10878     | name, FInt64 ->
10879         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), LL2NUM (r->%s));\n" name name
10880     | name, FUInt32 ->
10881         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), UINT2NUM (r->%s));\n" name name
10882     | name, FInt32 ->
10883         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), INT2NUM (r->%s));\n" name name
10884     | name, FOptPercent ->
10885         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_dbl2big (r->%s));\n" name name
10886     | name, FChar -> (* XXX wrong? *)
10887         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), ULL2NUM (r->%s));\n" name name
10888   ) cols;
10889   pr "  guestfs_free_%s (r);\n" typ;
10890   pr "  return rv;\n"
10891
10892 (* Ruby code to return a struct list. *)
10893 and generate_ruby_struct_list_code typ cols =
10894   pr "  VALUE rv = rb_ary_new2 (r->len);\n";
10895   pr "  size_t i;\n";
10896   pr "  for (i = 0; i < r->len; ++i) {\n";
10897   pr "    VALUE hv = rb_hash_new ();\n";
10898   List.iter (
10899     function
10900     | name, FString ->
10901         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_str_new2 (r->val[i].%s));\n" name name
10902     | name, FBuffer ->
10903         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_str_new (r->val[i].%s, r->val[i].%s_len));\n" name name name
10904     | name, FUUID ->
10905         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_str_new (r->val[i].%s, 32));\n" name name
10906     | name, (FBytes|FUInt64) ->
10907         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), ULL2NUM (r->val[i].%s));\n" name name
10908     | name, FInt64 ->
10909         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), LL2NUM (r->val[i].%s));\n" name name
10910     | name, FUInt32 ->
10911         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), UINT2NUM (r->val[i].%s));\n" name name
10912     | name, FInt32 ->
10913         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), INT2NUM (r->val[i].%s));\n" name name
10914     | name, FOptPercent ->
10915         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_dbl2big (r->val[i].%s));\n" name name
10916     | name, FChar -> (* XXX wrong? *)
10917         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), ULL2NUM (r->val[i].%s));\n" name name
10918   ) cols;
10919   pr "    rb_ary_push (rv, hv);\n";
10920   pr "  }\n";
10921   pr "  guestfs_free_%s_list (r);\n" typ;
10922   pr "  return rv;\n"
10923
10924 (* Generate Java bindings GuestFS.java file. *)
10925 and generate_java_java () =
10926   generate_header CStyle LGPLv2plus;
10927
10928   pr "\
10929 package com.redhat.et.libguestfs;
10930
10931 import java.util.HashMap;
10932 import com.redhat.et.libguestfs.LibGuestFSException;
10933 import com.redhat.et.libguestfs.PV;
10934 import com.redhat.et.libguestfs.VG;
10935 import com.redhat.et.libguestfs.LV;
10936 import com.redhat.et.libguestfs.Stat;
10937 import com.redhat.et.libguestfs.StatVFS;
10938 import com.redhat.et.libguestfs.IntBool;
10939 import com.redhat.et.libguestfs.Dirent;
10940
10941 /**
10942  * The GuestFS object is a libguestfs handle.
10943  *
10944  * @author rjones
10945  */
10946 public class GuestFS {
10947   // Load the native code.
10948   static {
10949     System.loadLibrary (\"guestfs_jni\");
10950   }
10951
10952   /**
10953    * The native guestfs_h pointer.
10954    */
10955   long g;
10956
10957   /**
10958    * Create a libguestfs handle.
10959    *
10960    * @throws LibGuestFSException
10961    */
10962   public GuestFS () throws LibGuestFSException
10963   {
10964     g = _create ();
10965   }
10966   private native long _create () throws LibGuestFSException;
10967
10968   /**
10969    * Close a libguestfs handle.
10970    *
10971    * You can also leave handles to be collected by the garbage
10972    * collector, but this method ensures that the resources used
10973    * by the handle are freed up immediately.  If you call any
10974    * other methods after closing the handle, you will get an
10975    * exception.
10976    *
10977    * @throws LibGuestFSException
10978    */
10979   public void close () throws LibGuestFSException
10980   {
10981     if (g != 0)
10982       _close (g);
10983     g = 0;
10984   }
10985   private native void _close (long g) throws LibGuestFSException;
10986
10987   public void finalize () throws LibGuestFSException
10988   {
10989     close ();
10990   }
10991
10992 ";
10993
10994   List.iter (
10995     fun (name, style, _, flags, _, shortdesc, longdesc) ->
10996       if not (List.mem NotInDocs flags); then (
10997         let doc = replace_str longdesc "C<guestfs_" "C<g." in
10998         let doc =
10999           if List.mem ProtocolLimitWarning flags then
11000             doc ^ "\n\n" ^ protocol_limit_warning
11001           else doc in
11002         let doc =
11003           if List.mem DangerWillRobinson flags then
11004             doc ^ "\n\n" ^ danger_will_robinson
11005           else doc in
11006         let doc =
11007           match deprecation_notice flags with
11008           | None -> doc
11009           | Some txt -> doc ^ "\n\n" ^ txt in
11010         let doc = pod2text ~width:60 name doc in
11011         let doc = List.map (            (* RHBZ#501883 *)
11012           function
11013           | "" -> "<p>"
11014           | nonempty -> nonempty
11015         ) doc in
11016         let doc = String.concat "\n   * " doc in
11017
11018         pr "  /**\n";
11019         pr "   * %s\n" shortdesc;
11020         pr "   * <p>\n";
11021         pr "   * %s\n" doc;
11022         pr "   * @throws LibGuestFSException\n";
11023         pr "   */\n";
11024         pr "  ";
11025       );
11026       generate_java_prototype ~public:true ~semicolon:false name style;
11027       pr "\n";
11028       pr "  {\n";
11029       pr "    if (g == 0)\n";
11030       pr "      throw new LibGuestFSException (\"%s: handle is closed\");\n"
11031         name;
11032       pr "    ";
11033       if fst style <> RErr then pr "return ";
11034       pr "_%s " name;
11035       generate_java_call_args ~handle:"g" (snd style);
11036       pr ";\n";
11037       pr "  }\n";
11038       pr "  ";
11039       generate_java_prototype ~privat:true ~native:true name style;
11040       pr "\n";
11041       pr "\n";
11042   ) all_functions;
11043
11044   pr "}\n"
11045
11046 (* Generate Java call arguments, eg "(handle, foo, bar)" *)
11047 and generate_java_call_args ~handle args =
11048   pr "(%s" handle;
11049   List.iter (fun arg -> pr ", %s" (name_of_argt arg)) args;
11050   pr ")"
11051
11052 and generate_java_prototype ?(public=false) ?(privat=false) ?(native=false)
11053     ?(semicolon=true) name style =
11054   if privat then pr "private ";
11055   if public then pr "public ";
11056   if native then pr "native ";
11057
11058   (* return type *)
11059   (match fst style with
11060    | RErr -> pr "void ";
11061    | RInt _ -> pr "int ";
11062    | RInt64 _ -> pr "long ";
11063    | RBool _ -> pr "boolean ";
11064    | RConstString _ | RConstOptString _ | RString _
11065    | RBufferOut _ -> pr "String ";
11066    | RStringList _ -> pr "String[] ";
11067    | RStruct (_, typ) ->
11068        let name = java_name_of_struct typ in
11069        pr "%s " name;
11070    | RStructList (_, typ) ->
11071        let name = java_name_of_struct typ in
11072        pr "%s[] " name;
11073    | RHashtable _ -> pr "HashMap<String,String> ";
11074   );
11075
11076   if native then pr "_%s " name else pr "%s " name;
11077   pr "(";
11078   let needs_comma = ref false in
11079   if native then (
11080     pr "long g";
11081     needs_comma := true
11082   );
11083
11084   (* args *)
11085   List.iter (
11086     fun arg ->
11087       if !needs_comma then pr ", ";
11088       needs_comma := true;
11089
11090       match arg with
11091       | Pathname n
11092       | Device n | Dev_or_Path n
11093       | String n
11094       | OptString n
11095       | FileIn n
11096       | FileOut n
11097       | Key n ->
11098           pr "String %s" n
11099       | BufferIn n ->
11100           pr "byte[] %s" n
11101       | StringList n | DeviceList n ->
11102           pr "String[] %s" n
11103       | Bool n ->
11104           pr "boolean %s" n
11105       | Int n ->
11106           pr "int %s" n
11107       | Int64 n ->
11108           pr "long %s" n
11109   ) (snd style);
11110
11111   pr ")\n";
11112   pr "    throws LibGuestFSException";
11113   if semicolon then pr ";"
11114
11115 and generate_java_struct jtyp cols () =
11116   generate_header CStyle LGPLv2plus;
11117
11118   pr "\
11119 package com.redhat.et.libguestfs;
11120
11121 /**
11122  * Libguestfs %s structure.
11123  *
11124  * @author rjones
11125  * @see GuestFS
11126  */
11127 public class %s {
11128 " jtyp jtyp;
11129
11130   List.iter (
11131     function
11132     | name, FString
11133     | name, FUUID
11134     | name, FBuffer -> pr "  public String %s;\n" name
11135     | name, (FBytes|FUInt64|FInt64) -> pr "  public long %s;\n" name
11136     | name, (FUInt32|FInt32) -> pr "  public int %s;\n" name
11137     | name, FChar -> pr "  public char %s;\n" name
11138     | name, FOptPercent ->
11139         pr "  /* The next field is [0..100] or -1 meaning 'not present': */\n";
11140         pr "  public float %s;\n" name
11141   ) cols;
11142
11143   pr "}\n"
11144
11145 and generate_java_c () =
11146   generate_header CStyle LGPLv2plus;
11147
11148   pr "\
11149 #include <stdio.h>
11150 #include <stdlib.h>
11151 #include <string.h>
11152
11153 #include \"com_redhat_et_libguestfs_GuestFS.h\"
11154 #include \"guestfs.h\"
11155
11156 /* Note that this function returns.  The exception is not thrown
11157  * until after the wrapper function returns.
11158  */
11159 static void
11160 throw_exception (JNIEnv *env, const char *msg)
11161 {
11162   jclass cl;
11163   cl = (*env)->FindClass (env,
11164                           \"com/redhat/et/libguestfs/LibGuestFSException\");
11165   (*env)->ThrowNew (env, cl, msg);
11166 }
11167
11168 JNIEXPORT jlong JNICALL
11169 Java_com_redhat_et_libguestfs_GuestFS__1create
11170   (JNIEnv *env, jobject obj)
11171 {
11172   guestfs_h *g;
11173
11174   g = guestfs_create ();
11175   if (g == NULL) {
11176     throw_exception (env, \"GuestFS.create: failed to allocate handle\");
11177     return 0;
11178   }
11179   guestfs_set_error_handler (g, NULL, NULL);
11180   return (jlong) (long) g;
11181 }
11182
11183 JNIEXPORT void JNICALL
11184 Java_com_redhat_et_libguestfs_GuestFS__1close
11185   (JNIEnv *env, jobject obj, jlong jg)
11186 {
11187   guestfs_h *g = (guestfs_h *) (long) jg;
11188   guestfs_close (g);
11189 }
11190
11191 ";
11192
11193   List.iter (
11194     fun (name, style, _, _, _, _, _) ->
11195       pr "JNIEXPORT ";
11196       (match fst style with
11197        | RErr -> pr "void ";
11198        | RInt _ -> pr "jint ";
11199        | RInt64 _ -> pr "jlong ";
11200        | RBool _ -> pr "jboolean ";
11201        | RConstString _ | RConstOptString _ | RString _
11202        | RBufferOut _ -> pr "jstring ";
11203        | RStruct _ | RHashtable _ ->
11204            pr "jobject ";
11205        | RStringList _ | RStructList _ ->
11206            pr "jobjectArray ";
11207       );
11208       pr "JNICALL\n";
11209       pr "Java_com_redhat_et_libguestfs_GuestFS_";
11210       pr "%s" (replace_str ("_" ^ name) "_" "_1");
11211       pr "\n";
11212       pr "  (JNIEnv *env, jobject obj, jlong jg";
11213       List.iter (
11214         function
11215         | Pathname n
11216         | Device n | Dev_or_Path n
11217         | String n
11218         | OptString n
11219         | FileIn n
11220         | FileOut n
11221         | Key n ->
11222             pr ", jstring j%s" n
11223         | BufferIn n ->
11224             pr ", jbyteArray j%s" n
11225         | StringList n | DeviceList n ->
11226             pr ", jobjectArray j%s" n
11227         | Bool n ->
11228             pr ", jboolean j%s" n
11229         | Int n ->
11230             pr ", jint j%s" n
11231         | Int64 n ->
11232             pr ", jlong j%s" n
11233       ) (snd style);
11234       pr ")\n";
11235       pr "{\n";
11236       pr "  guestfs_h *g = (guestfs_h *) (long) jg;\n";
11237       let error_code, no_ret =
11238         match fst style with
11239         | RErr -> pr "  int r;\n"; "-1", ""
11240         | RBool _
11241         | RInt _ -> pr "  int r;\n"; "-1", "0"
11242         | RInt64 _ -> pr "  int64_t r;\n"; "-1", "0"
11243         | RConstString _ -> pr "  const char *r;\n"; "NULL", "NULL"
11244         | RConstOptString _ -> pr "  const char *r;\n"; "NULL", "NULL"
11245         | RString _ ->
11246             pr "  jstring jr;\n";
11247             pr "  char *r;\n"; "NULL", "NULL"
11248         | RStringList _ ->
11249             pr "  jobjectArray jr;\n";
11250             pr "  int r_len;\n";
11251             pr "  jclass cl;\n";
11252             pr "  jstring jstr;\n";
11253             pr "  char **r;\n"; "NULL", "NULL"
11254         | RStruct (_, typ) ->
11255             pr "  jobject jr;\n";
11256             pr "  jclass cl;\n";
11257             pr "  jfieldID fl;\n";
11258             pr "  struct guestfs_%s *r;\n" typ; "NULL", "NULL"
11259         | RStructList (_, typ) ->
11260             pr "  jobjectArray jr;\n";
11261             pr "  jclass cl;\n";
11262             pr "  jfieldID fl;\n";
11263             pr "  jobject jfl;\n";
11264             pr "  struct guestfs_%s_list *r;\n" typ; "NULL", "NULL"
11265         | RHashtable _ -> pr "  char **r;\n"; "NULL", "NULL"
11266         | RBufferOut _ ->
11267             pr "  jstring jr;\n";
11268             pr "  char *r;\n";
11269             pr "  size_t size;\n";
11270             "NULL", "NULL" in
11271       List.iter (
11272         function
11273         | Pathname n
11274         | Device n | Dev_or_Path n
11275         | String n
11276         | OptString n
11277         | FileIn n
11278         | FileOut n
11279         | Key n ->
11280             pr "  const char *%s;\n" n
11281         | BufferIn n ->
11282             pr "  jbyte *%s;\n" n;
11283             pr "  size_t %s_size;\n" n
11284         | StringList n | DeviceList n ->
11285             pr "  int %s_len;\n" n;
11286             pr "  const char **%s;\n" n
11287         | Bool n
11288         | Int n ->
11289             pr "  int %s;\n" n
11290         | Int64 n ->
11291             pr "  int64_t %s;\n" n
11292       ) (snd style);
11293
11294       let needs_i =
11295         (match fst style with
11296          | RStringList _ | RStructList _ -> true
11297          | RErr | RBool _ | RInt _ | RInt64 _ | RConstString _
11298          | RConstOptString _
11299          | RString _ | RBufferOut _ | RStruct _ | RHashtable _ -> false) ||
11300           List.exists (function
11301                        | StringList _ -> true
11302                        | DeviceList _ -> true
11303                        | _ -> false) (snd style) in
11304       if needs_i then
11305         pr "  size_t i;\n";
11306
11307       pr "\n";
11308
11309       (* Get the parameters. *)
11310       List.iter (
11311         function
11312         | Pathname n
11313         | Device n | Dev_or_Path n
11314         | String n
11315         | FileIn n
11316         | FileOut n
11317         | Key n ->
11318             pr "  %s = (*env)->GetStringUTFChars (env, j%s, NULL);\n" n n
11319         | OptString n ->
11320             (* This is completely undocumented, but Java null becomes
11321              * a NULL parameter.
11322              *)
11323             pr "  %s = j%s ? (*env)->GetStringUTFChars (env, j%s, NULL) : NULL;\n" n n n
11324         | BufferIn n ->
11325             pr "  %s = (*env)->GetByteArrayElements (env, j%s, NULL);\n" n n;
11326             pr "  %s_size = (*env)->GetArrayLength (env, j%s);\n" n n
11327         | StringList n | DeviceList n ->
11328             pr "  %s_len = (*env)->GetArrayLength (env, j%s);\n" n n;
11329             pr "  %s = guestfs_safe_malloc (g, sizeof (char *) * (%s_len+1));\n" n n;
11330             pr "  for (i = 0; i < %s_len; ++i) {\n" n;
11331             pr "    jobject o = (*env)->GetObjectArrayElement (env, j%s, i);\n"
11332               n;
11333             pr "    %s[i] = (*env)->GetStringUTFChars (env, o, NULL);\n" n;
11334             pr "  }\n";
11335             pr "  %s[%s_len] = NULL;\n" n n;
11336         | Bool n
11337         | Int n
11338         | Int64 n ->
11339             pr "  %s = j%s;\n" n n
11340       ) (snd style);
11341
11342       (* Make the call. *)
11343       pr "  r = guestfs_%s " name;
11344       generate_c_call_args ~handle:"g" style;
11345       pr ";\n";
11346
11347       (* Release the parameters. *)
11348       List.iter (
11349         function
11350         | Pathname n
11351         | Device n | Dev_or_Path n
11352         | String n
11353         | FileIn n
11354         | FileOut n
11355         | Key n ->
11356             pr "  (*env)->ReleaseStringUTFChars (env, j%s, %s);\n" n n
11357         | OptString n ->
11358             pr "  if (j%s)\n" n;
11359             pr "    (*env)->ReleaseStringUTFChars (env, j%s, %s);\n" n n
11360         | BufferIn n ->
11361             pr "  (*env)->ReleaseByteArrayElements (env, j%s, %s, 0);\n" n n
11362         | StringList n | DeviceList n ->
11363             pr "  for (i = 0; i < %s_len; ++i) {\n" n;
11364             pr "    jobject o = (*env)->GetObjectArrayElement (env, j%s, i);\n"
11365               n;
11366             pr "    (*env)->ReleaseStringUTFChars (env, o, %s[i]);\n" n;
11367             pr "  }\n";
11368             pr "  free (%s);\n" n
11369         | Bool n
11370         | Int n
11371         | Int64 n -> ()
11372       ) (snd style);
11373
11374       (* Check for errors. *)
11375       pr "  if (r == %s) {\n" error_code;
11376       pr "    throw_exception (env, guestfs_last_error (g));\n";
11377       pr "    return %s;\n" no_ret;
11378       pr "  }\n";
11379
11380       (* Return value. *)
11381       (match fst style with
11382        | RErr -> ()
11383        | RInt _ -> pr "  return (jint) r;\n"
11384        | RBool _ -> pr "  return (jboolean) r;\n"
11385        | RInt64 _ -> pr "  return (jlong) r;\n"
11386        | RConstString _ -> pr "  return (*env)->NewStringUTF (env, r);\n"
11387        | RConstOptString _ ->
11388            pr "  return (*env)->NewStringUTF (env, r); /* XXX r NULL? */\n"
11389        | RString _ ->
11390            pr "  jr = (*env)->NewStringUTF (env, r);\n";
11391            pr "  free (r);\n";
11392            pr "  return jr;\n"
11393        | RStringList _ ->
11394            pr "  for (r_len = 0; r[r_len] != NULL; ++r_len) ;\n";
11395            pr "  cl = (*env)->FindClass (env, \"java/lang/String\");\n";
11396            pr "  jstr = (*env)->NewStringUTF (env, \"\");\n";
11397            pr "  jr = (*env)->NewObjectArray (env, r_len, cl, jstr);\n";
11398            pr "  for (i = 0; i < r_len; ++i) {\n";
11399            pr "    jstr = (*env)->NewStringUTF (env, r[i]);\n";
11400            pr "    (*env)->SetObjectArrayElement (env, jr, i, jstr);\n";
11401            pr "    free (r[i]);\n";
11402            pr "  }\n";
11403            pr "  free (r);\n";
11404            pr "  return jr;\n"
11405        | RStruct (_, typ) ->
11406            let jtyp = java_name_of_struct typ in
11407            let cols = cols_of_struct typ in
11408            generate_java_struct_return typ jtyp cols
11409        | RStructList (_, typ) ->
11410            let jtyp = java_name_of_struct typ in
11411            let cols = cols_of_struct typ in
11412            generate_java_struct_list_return typ jtyp cols
11413        | RHashtable _ ->
11414            (* XXX *)
11415            pr "  throw_exception (env, \"%s: internal error: please let us know how to make a Java HashMap from JNI bindings!\");\n" name;
11416            pr "  return NULL;\n"
11417        | RBufferOut _ ->
11418            pr "  jr = (*env)->NewStringUTF (env, r); /* XXX size */\n";
11419            pr "  free (r);\n";
11420            pr "  return jr;\n"
11421       );
11422
11423       pr "}\n";
11424       pr "\n"
11425   ) all_functions
11426
11427 and generate_java_struct_return typ jtyp cols =
11428   pr "  cl = (*env)->FindClass (env, \"com/redhat/et/libguestfs/%s\");\n" jtyp;
11429   pr "  jr = (*env)->AllocObject (env, cl);\n";
11430   List.iter (
11431     function
11432     | name, FString ->
11433         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
11434         pr "  (*env)->SetObjectField (env, jr, fl, (*env)->NewStringUTF (env, r->%s));\n" name;
11435     | name, FUUID ->
11436         pr "  {\n";
11437         pr "    char s[33];\n";
11438         pr "    memcpy (s, r->%s, 32);\n" name;
11439         pr "    s[32] = 0;\n";
11440         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
11441         pr "    (*env)->SetObjectField (env, jr, fl, (*env)->NewStringUTF (env, s));\n";
11442         pr "  }\n";
11443     | name, FBuffer ->
11444         pr "  {\n";
11445         pr "    int len = r->%s_len;\n" name;
11446         pr "    char s[len+1];\n";
11447         pr "    memcpy (s, r->%s, len);\n" name;
11448         pr "    s[len] = 0;\n";
11449         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
11450         pr "    (*env)->SetObjectField (env, jr, fl, (*env)->NewStringUTF (env, s));\n";
11451         pr "  }\n";
11452     | name, (FBytes|FUInt64|FInt64) ->
11453         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"J\");\n" name;
11454         pr "  (*env)->SetLongField (env, jr, fl, r->%s);\n" name;
11455     | name, (FUInt32|FInt32) ->
11456         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"I\");\n" name;
11457         pr "  (*env)->SetLongField (env, jr, fl, r->%s);\n" name;
11458     | name, FOptPercent ->
11459         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"F\");\n" name;
11460         pr "  (*env)->SetFloatField (env, jr, fl, r->%s);\n" name;
11461     | name, FChar ->
11462         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"C\");\n" name;
11463         pr "  (*env)->SetLongField (env, jr, fl, r->%s);\n" name;
11464   ) cols;
11465   pr "  free (r);\n";
11466   pr "  return jr;\n"
11467
11468 and generate_java_struct_list_return typ jtyp cols =
11469   pr "  cl = (*env)->FindClass (env, \"com/redhat/et/libguestfs/%s\");\n" jtyp;
11470   pr "  jr = (*env)->NewObjectArray (env, r->len, cl, NULL);\n";
11471   pr "  for (i = 0; i < r->len; ++i) {\n";
11472   pr "    jfl = (*env)->AllocObject (env, cl);\n";
11473   List.iter (
11474     function
11475     | name, FString ->
11476         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
11477         pr "    (*env)->SetObjectField (env, jfl, fl, (*env)->NewStringUTF (env, r->val[i].%s));\n" name;
11478     | name, FUUID ->
11479         pr "    {\n";
11480         pr "      char s[33];\n";
11481         pr "      memcpy (s, r->val[i].%s, 32);\n" name;
11482         pr "      s[32] = 0;\n";
11483         pr "      fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
11484         pr "      (*env)->SetObjectField (env, jfl, fl, (*env)->NewStringUTF (env, s));\n";
11485         pr "    }\n";
11486     | name, FBuffer ->
11487         pr "    {\n";
11488         pr "      int len = r->val[i].%s_len;\n" name;
11489         pr "      char s[len+1];\n";
11490         pr "      memcpy (s, r->val[i].%s, len);\n" name;
11491         pr "      s[len] = 0;\n";
11492         pr "      fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
11493         pr "      (*env)->SetObjectField (env, jfl, fl, (*env)->NewStringUTF (env, s));\n";
11494         pr "    }\n";
11495     | name, (FBytes|FUInt64|FInt64) ->
11496         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"J\");\n" name;
11497         pr "    (*env)->SetLongField (env, jfl, fl, r->val[i].%s);\n" name;
11498     | name, (FUInt32|FInt32) ->
11499         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"I\");\n" name;
11500         pr "    (*env)->SetLongField (env, jfl, fl, r->val[i].%s);\n" name;
11501     | name, FOptPercent ->
11502         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"F\");\n" name;
11503         pr "    (*env)->SetFloatField (env, jfl, fl, r->val[i].%s);\n" name;
11504     | name, FChar ->
11505         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"C\");\n" name;
11506         pr "    (*env)->SetLongField (env, jfl, fl, r->val[i].%s);\n" name;
11507   ) cols;
11508   pr "    (*env)->SetObjectArrayElement (env, jfl, i, jfl);\n";
11509   pr "  }\n";
11510   pr "  guestfs_free_%s_list (r);\n" typ;
11511   pr "  return jr;\n"
11512
11513 and generate_java_makefile_inc () =
11514   generate_header HashStyle GPLv2plus;
11515
11516   pr "java_built_sources = \\\n";
11517   List.iter (
11518     fun (typ, jtyp) ->
11519         pr "\tcom/redhat/et/libguestfs/%s.java \\\n" jtyp;
11520   ) java_structs;
11521   pr "\tcom/redhat/et/libguestfs/GuestFS.java\n"
11522
11523 and generate_haskell_hs () =
11524   generate_header HaskellStyle LGPLv2plus;
11525
11526   (* XXX We only know how to generate partial FFI for Haskell
11527    * at the moment.  Please help out!
11528    *)
11529   let can_generate style =
11530     match style with
11531     | RErr, _
11532     | RInt _, _
11533     | RInt64 _, _ -> true
11534     | RBool _, _
11535     | RConstString _, _
11536     | RConstOptString _, _
11537     | RString _, _
11538     | RStringList _, _
11539     | RStruct _, _
11540     | RStructList _, _
11541     | RHashtable _, _
11542     | RBufferOut _, _ -> false in
11543
11544   pr "\
11545 {-# INCLUDE <guestfs.h> #-}
11546 {-# LANGUAGE ForeignFunctionInterface #-}
11547
11548 module Guestfs (
11549   create";
11550
11551   (* List out the names of the actions we want to export. *)
11552   List.iter (
11553     fun (name, style, _, _, _, _, _) ->
11554       if can_generate style then pr ",\n  %s" name
11555   ) all_functions;
11556
11557   pr "
11558   ) where
11559
11560 -- Unfortunately some symbols duplicate ones already present
11561 -- in Prelude.  We don't know which, so we hard-code a list
11562 -- here.
11563 import Prelude hiding (truncate)
11564
11565 import Foreign
11566 import Foreign.C
11567 import Foreign.C.Types
11568 import IO
11569 import Control.Exception
11570 import Data.Typeable
11571
11572 data GuestfsS = GuestfsS            -- represents the opaque C struct
11573 type GuestfsP = Ptr GuestfsS        -- guestfs_h *
11574 type GuestfsH = ForeignPtr GuestfsS -- guestfs_h * with attached finalizer
11575
11576 -- XXX define properly later XXX
11577 data PV = PV
11578 data VG = VG
11579 data LV = LV
11580 data IntBool = IntBool
11581 data Stat = Stat
11582 data StatVFS = StatVFS
11583 data Hashtable = Hashtable
11584
11585 foreign import ccall unsafe \"guestfs_create\" c_create
11586   :: IO GuestfsP
11587 foreign import ccall unsafe \"&guestfs_close\" c_close
11588   :: FunPtr (GuestfsP -> IO ())
11589 foreign import ccall unsafe \"guestfs_set_error_handler\" c_set_error_handler
11590   :: GuestfsP -> Ptr CInt -> Ptr CInt -> IO ()
11591
11592 create :: IO GuestfsH
11593 create = do
11594   p <- c_create
11595   c_set_error_handler p nullPtr nullPtr
11596   h <- newForeignPtr c_close p
11597   return h
11598
11599 foreign import ccall unsafe \"guestfs_last_error\" c_last_error
11600   :: GuestfsP -> IO CString
11601
11602 -- last_error :: GuestfsH -> IO (Maybe String)
11603 -- last_error h = do
11604 --   str <- withForeignPtr h (\\p -> c_last_error p)
11605 --   maybePeek peekCString str
11606
11607 last_error :: GuestfsH -> IO (String)
11608 last_error h = do
11609   str <- withForeignPtr h (\\p -> c_last_error p)
11610   if (str == nullPtr)
11611     then return \"no error\"
11612     else peekCString str
11613
11614 ";
11615
11616   (* Generate wrappers for each foreign function. *)
11617   List.iter (
11618     fun (name, style, _, _, _, _, _) ->
11619       if can_generate style then (
11620         pr "foreign import ccall unsafe \"guestfs_%s\" c_%s\n" name name;
11621         pr "  :: ";
11622         generate_haskell_prototype ~handle:"GuestfsP" style;
11623         pr "\n";
11624         pr "\n";
11625         pr "%s :: " name;
11626         generate_haskell_prototype ~handle:"GuestfsH" ~hs:true style;
11627         pr "\n";
11628         pr "%s %s = do\n" name
11629           (String.concat " " ("h" :: List.map name_of_argt (snd style)));
11630         pr "  r <- ";
11631         (* Convert pointer arguments using with* functions. *)
11632         List.iter (
11633           function
11634           | FileIn n
11635           | FileOut n
11636           | Pathname n | Device n | Dev_or_Path n | String n | Key n ->
11637               pr "withCString %s $ \\%s -> " n n
11638           | BufferIn n ->
11639               pr "withCStringLen %s $ \\(%s, %s_size) -> " n n n
11640           | OptString n -> pr "maybeWith withCString %s $ \\%s -> " n n
11641           | StringList n | DeviceList n -> pr "withMany withCString %s $ \\%s -> withArray0 nullPtr %s $ \\%s -> " n n n n
11642           | Bool _ | Int _ | Int64 _ -> ()
11643         ) (snd style);
11644         (* Convert integer arguments. *)
11645         let args =
11646           List.map (
11647             function
11648             | Bool n -> sprintf "(fromBool %s)" n
11649             | Int n -> sprintf "(fromIntegral %s)" n
11650             | Int64 n -> sprintf "(fromIntegral %s)" n
11651             | FileIn n | FileOut n
11652             | Pathname n | Device n | Dev_or_Path n
11653             | String n | OptString n
11654             | StringList n | DeviceList n
11655             | Key n -> n
11656             | BufferIn n -> sprintf "%s (fromIntegral %s_size)" n n
11657           ) (snd style) in
11658         pr "withForeignPtr h (\\p -> c_%s %s)\n" name
11659           (String.concat " " ("p" :: args));
11660         (match fst style with
11661          | RErr | RInt _ | RInt64 _ | RBool _ ->
11662              pr "  if (r == -1)\n";
11663              pr "    then do\n";
11664              pr "      err <- last_error h\n";
11665              pr "      fail err\n";
11666          | RConstString _ | RConstOptString _ | RString _
11667          | RStringList _ | RStruct _
11668          | RStructList _ | RHashtable _ | RBufferOut _ ->
11669              pr "  if (r == nullPtr)\n";
11670              pr "    then do\n";
11671              pr "      err <- last_error h\n";
11672              pr "      fail err\n";
11673         );
11674         (match fst style with
11675          | RErr ->
11676              pr "    else return ()\n"
11677          | RInt _ ->
11678              pr "    else return (fromIntegral r)\n"
11679          | RInt64 _ ->
11680              pr "    else return (fromIntegral r)\n"
11681          | RBool _ ->
11682              pr "    else return (toBool r)\n"
11683          | RConstString _
11684          | RConstOptString _
11685          | RString _
11686          | RStringList _
11687          | RStruct _
11688          | RStructList _
11689          | RHashtable _
11690          | RBufferOut _ ->
11691              pr "    else return ()\n" (* XXXXXXXXXXXXXXXXXXXX *)
11692         );
11693         pr "\n";
11694       )
11695   ) all_functions
11696
11697 and generate_haskell_prototype ~handle ?(hs = false) style =
11698   pr "%s -> " handle;
11699   let string = if hs then "String" else "CString" in
11700   let int = if hs then "Int" else "CInt" in
11701   let bool = if hs then "Bool" else "CInt" in
11702   let int64 = if hs then "Integer" else "Int64" in
11703   List.iter (
11704     fun arg ->
11705       (match arg with
11706        | Pathname _ | Device _ | Dev_or_Path _ | String _ | Key _ ->
11707            pr "%s" string
11708        | BufferIn _ ->
11709            if hs then pr "String"
11710            else pr "CString -> CInt"
11711        | OptString _ -> if hs then pr "Maybe String" else pr "CString"
11712        | StringList _ | DeviceList _ -> if hs then pr "[String]" else pr "Ptr CString"
11713        | Bool _ -> pr "%s" bool
11714        | Int _ -> pr "%s" int
11715        | Int64 _ -> pr "%s" int
11716        | FileIn _ -> pr "%s" string
11717        | FileOut _ -> pr "%s" string
11718       );
11719       pr " -> ";
11720   ) (snd style);
11721   pr "IO (";
11722   (match fst style with
11723    | RErr -> if not hs then pr "CInt"
11724    | RInt _ -> pr "%s" int
11725    | RInt64 _ -> pr "%s" int64
11726    | RBool _ -> pr "%s" bool
11727    | RConstString _ -> pr "%s" string
11728    | RConstOptString _ -> pr "Maybe %s" string
11729    | RString _ -> pr "%s" string
11730    | RStringList _ -> pr "[%s]" string
11731    | RStruct (_, typ) ->
11732        let name = java_name_of_struct typ in
11733        pr "%s" name
11734    | RStructList (_, typ) ->
11735        let name = java_name_of_struct typ in
11736        pr "[%s]" name
11737    | RHashtable _ -> pr "Hashtable"
11738    | RBufferOut _ -> pr "%s" string
11739   );
11740   pr ")"
11741
11742 and generate_csharp () =
11743   generate_header CPlusPlusStyle LGPLv2plus;
11744
11745   (* XXX Make this configurable by the C# assembly users. *)
11746   let library = "libguestfs.so.0" in
11747
11748   pr "\
11749 // These C# bindings are highly experimental at present.
11750 //
11751 // Firstly they only work on Linux (ie. Mono).  In order to get them
11752 // to work on Windows (ie. .Net) you would need to port the library
11753 // itself to Windows first.
11754 //
11755 // The second issue is that some calls are known to be incorrect and
11756 // can cause Mono to segfault.  Particularly: calls which pass or
11757 // return string[], or return any structure value.  This is because
11758 // we haven't worked out the correct way to do this from C#.
11759 //
11760 // The third issue is that when compiling you get a lot of warnings.
11761 // We are not sure whether the warnings are important or not.
11762 //
11763 // Fourthly we do not routinely build or test these bindings as part
11764 // of the make && make check cycle, which means that regressions might
11765 // go unnoticed.
11766 //
11767 // Suggestions and patches are welcome.
11768
11769 // To compile:
11770 //
11771 // gmcs Libguestfs.cs
11772 // mono Libguestfs.exe
11773 //
11774 // (You'll probably want to add a Test class / static main function
11775 // otherwise this won't do anything useful).
11776
11777 using System;
11778 using System.IO;
11779 using System.Runtime.InteropServices;
11780 using System.Runtime.Serialization;
11781 using System.Collections;
11782
11783 namespace Guestfs
11784 {
11785   class Error : System.ApplicationException
11786   {
11787     public Error (string message) : base (message) {}
11788     protected Error (SerializationInfo info, StreamingContext context) {}
11789   }
11790
11791   class Guestfs
11792   {
11793     IntPtr _handle;
11794
11795     [DllImport (\"%s\")]
11796     static extern IntPtr guestfs_create ();
11797
11798     public Guestfs ()
11799     {
11800       _handle = guestfs_create ();
11801       if (_handle == IntPtr.Zero)
11802         throw new Error (\"could not create guestfs handle\");
11803     }
11804
11805     [DllImport (\"%s\")]
11806     static extern void guestfs_close (IntPtr h);
11807
11808     ~Guestfs ()
11809     {
11810       guestfs_close (_handle);
11811     }
11812
11813     [DllImport (\"%s\")]
11814     static extern string guestfs_last_error (IntPtr h);
11815
11816 " library library library;
11817
11818   (* Generate C# structure bindings.  We prefix struct names with
11819    * underscore because C# cannot have conflicting struct names and
11820    * method names (eg. "class stat" and "stat").
11821    *)
11822   List.iter (
11823     fun (typ, cols) ->
11824       pr "    [StructLayout (LayoutKind.Sequential)]\n";
11825       pr "    public class _%s {\n" typ;
11826       List.iter (
11827         function
11828         | name, FChar -> pr "      char %s;\n" name
11829         | name, FString -> pr "      string %s;\n" name
11830         | name, FBuffer ->
11831             pr "      uint %s_len;\n" name;
11832             pr "      string %s;\n" name
11833         | name, FUUID ->
11834             pr "      [MarshalAs (UnmanagedType.ByValTStr, SizeConst=16)]\n";
11835             pr "      string %s;\n" name
11836         | name, FUInt32 -> pr "      uint %s;\n" name
11837         | name, FInt32 -> pr "      int %s;\n" name
11838         | name, (FUInt64|FBytes) -> pr "      ulong %s;\n" name
11839         | name, FInt64 -> pr "      long %s;\n" name
11840         | name, FOptPercent -> pr "      float %s; /* [0..100] or -1 */\n" name
11841       ) cols;
11842       pr "    }\n";
11843       pr "\n"
11844   ) structs;
11845
11846   (* Generate C# function bindings. *)
11847   List.iter (
11848     fun (name, style, _, _, _, shortdesc, _) ->
11849       let rec csharp_return_type () =
11850         match fst style with
11851         | RErr -> "void"
11852         | RBool n -> "bool"
11853         | RInt n -> "int"
11854         | RInt64 n -> "long"
11855         | RConstString n
11856         | RConstOptString n
11857         | RString n
11858         | RBufferOut n -> "string"
11859         | RStruct (_,n) -> "_" ^ n
11860         | RHashtable n -> "Hashtable"
11861         | RStringList n -> "string[]"
11862         | RStructList (_,n) -> sprintf "_%s[]" n
11863
11864       and c_return_type () =
11865         match fst style with
11866         | RErr
11867         | RBool _
11868         | RInt _ -> "int"
11869         | RInt64 _ -> "long"
11870         | RConstString _
11871         | RConstOptString _
11872         | RString _
11873         | RBufferOut _ -> "string"
11874         | RStruct (_,n) -> "_" ^ n
11875         | RHashtable _
11876         | RStringList _ -> "string[]"
11877         | RStructList (_,n) -> sprintf "_%s[]" n
11878
11879       and c_error_comparison () =
11880         match fst style with
11881         | RErr
11882         | RBool _
11883         | RInt _
11884         | RInt64 _ -> "== -1"
11885         | RConstString _
11886         | RConstOptString _
11887         | RString _
11888         | RBufferOut _
11889         | RStruct (_,_)
11890         | RHashtable _
11891         | RStringList _
11892         | RStructList (_,_) -> "== null"
11893
11894       and generate_extern_prototype () =
11895         pr "    static extern %s guestfs_%s (IntPtr h"
11896           (c_return_type ()) name;
11897         List.iter (
11898           function
11899           | Pathname n | Device n | Dev_or_Path n | String n | OptString n
11900           | FileIn n | FileOut n
11901           | Key n
11902           | BufferIn n ->
11903               pr ", [In] string %s" n
11904           | StringList n | DeviceList n ->
11905               pr ", [In] string[] %s" n
11906           | Bool n ->
11907               pr ", bool %s" n
11908           | Int n ->
11909               pr ", int %s" n
11910           | Int64 n ->
11911               pr ", long %s" n
11912         ) (snd style);
11913         pr ");\n"
11914
11915       and generate_public_prototype () =
11916         pr "    public %s %s (" (csharp_return_type ()) name;
11917         let comma = ref false in
11918         let next () =
11919           if !comma then pr ", ";
11920           comma := true
11921         in
11922         List.iter (
11923           function
11924           | Pathname n | Device n | Dev_or_Path n | String n | OptString n
11925           | FileIn n | FileOut n
11926           | Key n
11927           | BufferIn n ->
11928               next (); pr "string %s" n
11929           | StringList n | DeviceList n ->
11930               next (); pr "string[] %s" n
11931           | Bool n ->
11932               next (); pr "bool %s" n
11933           | Int n ->
11934               next (); pr "int %s" n
11935           | Int64 n ->
11936               next (); pr "long %s" n
11937         ) (snd style);
11938         pr ")\n"
11939
11940       and generate_call () =
11941         pr "guestfs_%s (_handle" name;
11942         List.iter (fun arg -> pr ", %s" (name_of_argt arg)) (snd style);
11943         pr ");\n";
11944       in
11945
11946       pr "    [DllImport (\"%s\")]\n" library;
11947       generate_extern_prototype ();
11948       pr "\n";
11949       pr "    /// <summary>\n";
11950       pr "    /// %s\n" shortdesc;
11951       pr "    /// </summary>\n";
11952       generate_public_prototype ();
11953       pr "    {\n";
11954       pr "      %s r;\n" (c_return_type ());
11955       pr "      r = ";
11956       generate_call ();
11957       pr "      if (r %s)\n" (c_error_comparison ());
11958       pr "        throw new Error (guestfs_last_error (_handle));\n";
11959       (match fst style with
11960        | RErr -> ()
11961        | RBool _ ->
11962            pr "      return r != 0 ? true : false;\n"
11963        | RHashtable _ ->
11964            pr "      Hashtable rr = new Hashtable ();\n";
11965            pr "      for (size_t i = 0; i < r.Length; i += 2)\n";
11966            pr "        rr.Add (r[i], r[i+1]);\n";
11967            pr "      return rr;\n"
11968        | RInt _ | RInt64 _ | RConstString _ | RConstOptString _
11969        | RString _ | RBufferOut _ | RStruct _ | RStringList _
11970        | RStructList _ ->
11971            pr "      return r;\n"
11972       );
11973       pr "    }\n";
11974       pr "\n";
11975   ) all_functions_sorted;
11976
11977   pr "  }
11978 }
11979 "
11980
11981 and generate_php_h () =
11982   generate_header CStyle LGPLv2plus;
11983
11984   pr "\
11985 #ifndef PHP_GUESTFS_PHP_H
11986 #define PHP_GUESTFS_PHP_H 1
11987
11988 #ifdef ZTS
11989 #include \"TSRM.h\"
11990 #endif
11991
11992 #define PHP_GUESTFS_PHP_EXTNAME \"guestfs_php\"
11993 #define PHP_GUESTFS_PHP_VERSION \"1.0\"
11994
11995 PHP_MINIT_FUNCTION (guestfs_php);
11996
11997 #define PHP_GUESTFS_HANDLE_RES_NAME \"guestfs_h\"
11998
11999 PHP_FUNCTION (guestfs_create);
12000 PHP_FUNCTION (guestfs_last_error);
12001 ";
12002
12003   List.iter (
12004     fun (shortname, style, _, _, _, _, _) ->
12005       pr "PHP_FUNCTION (guestfs_%s);\n" shortname
12006   ) all_functions_sorted;
12007
12008   pr "\
12009
12010 extern zend_module_entry guestfs_php_module_entry;
12011 #define phpext_guestfs_php_ptr &guestfs_php_module_entry
12012
12013 #endif /* PHP_GUESTFS_PHP_H */
12014 "
12015
12016 and generate_php_c () =
12017   generate_header CStyle LGPLv2plus;
12018
12019   pr "\
12020 /* NOTE: Be very careful with all macros in PHP header files.  The
12021  * morons who wrote them aren't good at making them safe for inclusion
12022  * in arbitrary places in C code, eg. not using 'do ... while(0)'
12023  * or parenthesizing any of the arguments.
12024  */
12025
12026 /* NOTE (2): Some parts of the API can't be used on 32 bit platforms.
12027  * Any 64 bit numbers will be truncated.  There's no easy way around
12028  * this in PHP.
12029  */
12030
12031 #include <config.h>
12032
12033 #include <stdio.h>
12034 #include <stdlib.h>
12035
12036 #include <php.h>
12037 #include <php_guestfs_php.h>
12038
12039 #include \"guestfs.h\"
12040
12041 static int res_guestfs_h;
12042
12043 static void
12044 guestfs_php_handle_dtor (zend_rsrc_list_entry *rsrc TSRMLS_DC)
12045 {
12046   guestfs_h *g = (guestfs_h *) rsrc->ptr;
12047   if (g != NULL)
12048     guestfs_close (g);
12049 }
12050
12051 PHP_MINIT_FUNCTION (guestfs_php)
12052 {
12053   res_guestfs_h =
12054     zend_register_list_destructors_ex (guestfs_php_handle_dtor,
12055     NULL, PHP_GUESTFS_HANDLE_RES_NAME, module_number);
12056 }
12057
12058 static function_entry guestfs_php_functions[] = {
12059   PHP_FE (guestfs_create, NULL)
12060   PHP_FE (guestfs_last_error, NULL)
12061 ";
12062
12063   List.iter (
12064     fun (shortname, style, _, _, _, _, _) ->
12065       pr "  PHP_FE (guestfs_%s, NULL)\n" shortname
12066   ) all_functions_sorted;
12067
12068   pr "  { NULL, NULL, NULL }
12069 };
12070
12071 zend_module_entry guestfs_php_module_entry = {
12072 #if ZEND_MODULE_API_NO >= 20010901
12073   STANDARD_MODULE_HEADER,
12074 #endif
12075   PHP_GUESTFS_PHP_EXTNAME,
12076   guestfs_php_functions,
12077   PHP_MINIT (guestfs_php),
12078   NULL,
12079   NULL,
12080   NULL,
12081   NULL,
12082 #if ZEND_MODULE_API_NO >= 20010901
12083   PHP_GUESTFS_PHP_VERSION,
12084 #endif
12085   STANDARD_MODULE_PROPERTIES
12086 };
12087
12088 #ifdef COMPILE_DL_GUESTFS_PHP
12089 ZEND_GET_MODULE (guestfs_php)
12090 #endif
12091
12092 PHP_FUNCTION (guestfs_create)
12093 {
12094   guestfs_h *g = guestfs_create ();
12095   if (g == NULL) {
12096     RETURN_FALSE;
12097   }
12098
12099   guestfs_set_error_handler (g, NULL, NULL);
12100
12101   ZEND_REGISTER_RESOURCE (return_value, g, res_guestfs_h);
12102 }
12103
12104 PHP_FUNCTION (guestfs_last_error)
12105 {
12106   zval *z_g;
12107   guestfs_h *g;
12108
12109   if (zend_parse_parameters (ZEND_NUM_ARGS() TSRMLS_CC, \"r\",
12110                              &z_g) == FAILURE) {
12111     RETURN_FALSE;
12112   }
12113
12114   ZEND_FETCH_RESOURCE (g, guestfs_h *, &z_g, -1, PHP_GUESTFS_HANDLE_RES_NAME,
12115                        res_guestfs_h);
12116   if (g == NULL) {
12117     RETURN_FALSE;
12118   }
12119
12120   const char *err = guestfs_last_error (g);
12121   if (err) {
12122     RETURN_STRING (err, 1);
12123   } else {
12124     RETURN_NULL ();
12125   }
12126 }
12127
12128 ";
12129
12130   (* Now generate the PHP bindings for each action. *)
12131   List.iter (
12132     fun (shortname, style, _, _, _, _, _) ->
12133       pr "PHP_FUNCTION (guestfs_%s)\n" shortname;
12134       pr "{\n";
12135       pr "  zval *z_g;\n";
12136       pr "  guestfs_h *g;\n";
12137
12138       List.iter (
12139         function
12140         | String n | Device n | Pathname n | Dev_or_Path n
12141         | FileIn n | FileOut n | Key n
12142         | OptString n
12143         | BufferIn n ->
12144             pr "  char *%s;\n" n;
12145             pr "  int %s_size;\n" n
12146         | StringList n
12147         | DeviceList n ->
12148             pr "  zval *z_%s;\n" n;
12149             pr "  char **%s;\n" n;
12150         | Bool n ->
12151             pr "  zend_bool %s;\n" n
12152         | Int n | Int64 n ->
12153             pr "  long %s;\n" n
12154         ) (snd style);
12155
12156       pr "\n";
12157
12158       (* Parse the parameters. *)
12159       let param_string = String.concat "" (
12160         List.map (
12161           function
12162           | String n | Device n | Pathname n | Dev_or_Path n
12163           | FileIn n | FileOut n | BufferIn n | Key n -> "s"
12164           | OptString n -> "s!"
12165           | StringList n | DeviceList n -> "a"
12166           | Bool n -> "b"
12167           | Int n | Int64 n -> "l"
12168         ) (snd style)
12169       ) in
12170
12171       pr "  if (zend_parse_parameters (ZEND_NUM_ARGS() TSRMLS_CC, \"r%s\",\n"
12172         param_string;
12173       pr "        &z_g";
12174       List.iter (
12175         function
12176         | String n | Device n | Pathname n | Dev_or_Path n
12177         | FileIn n | FileOut n | BufferIn n | Key n
12178         | OptString n ->
12179             pr ", &%s, &%s_size" n n
12180         | StringList n | DeviceList n ->
12181             pr ", &z_%s" n
12182         | Bool n ->
12183             pr ", &%s" n
12184         | Int n | Int64 n ->
12185             pr ", &%s" n
12186       ) (snd style);
12187       pr ") == FAILURE) {\n";
12188       pr "    RETURN_FALSE;\n";
12189       pr "  }\n";
12190       pr "\n";
12191       pr "  ZEND_FETCH_RESOURCE (g, guestfs_h *, &z_g, -1, PHP_GUESTFS_HANDLE_RES_NAME,\n";
12192       pr "                       res_guestfs_h);\n";
12193       pr "  if (g == NULL) {\n";
12194       pr "    RETURN_FALSE;\n";
12195       pr "  }\n";
12196       pr "\n";
12197
12198       List.iter (
12199         function
12200         | String n | Device n | Pathname n | Dev_or_Path n
12201         | FileIn n | FileOut n | Key n
12202         | OptString n ->
12203             (* Just need to check the string doesn't contain any ASCII
12204              * NUL characters, which won't be supported by the C API.
12205              *)
12206             pr "  if (strlen (%s) != %s_size) {\n" n n;
12207             pr "    fprintf (stderr, \"libguestfs: %s: parameter '%s' contains embedded ASCII NUL.\\n\");\n" shortname n;
12208             pr "    RETURN_FALSE;\n";
12209             pr "  }\n";
12210             pr "\n"
12211         | BufferIn n -> ()
12212         | StringList n
12213         | DeviceList n ->
12214             (* Convert array to list of strings.
12215              * http://marc.info/?l=pecl-dev&m=112205192100631&w=2
12216              *)
12217             pr "  {\n";
12218             pr "    HashTable *a;\n";
12219             pr "    int n;\n";
12220             pr "    HashPosition p;\n";
12221             pr "    zval **d;\n";
12222             pr "    size_t c = 0;\n";
12223             pr "\n";
12224             pr "    a = Z_ARRVAL_P (z_%s);\n" n;
12225             pr "    n = zend_hash_num_elements (a);\n";
12226             pr "    %s = safe_emalloc (n + 1, sizeof (char *), 0);\n" n;
12227             pr "    for (zend_hash_internal_pointer_reset_ex (a, &p);\n";
12228             pr "         zend_hash_get_current_data_ex (a, (void **) &d, &p) == SUCCESS;\n";
12229             pr "         zend_hash_move_forward_ex (a, &p)) {\n";
12230             pr "      zval t = **d;\n";
12231             pr "      zval_copy_ctor (&t);\n";
12232             pr "      convert_to_string (&t);\n";
12233             pr "      %s[c] = Z_STRVAL (t);\n" n;
12234             pr "      c++;\n";
12235             pr "    }\n";
12236             pr "    %s[c] = NULL;\n" n;
12237             pr "  }\n";
12238             pr "\n"
12239         | Bool n | Int n | Int64 n -> ()
12240         ) (snd style);
12241
12242       (* Return value. *)
12243       let error_code =
12244         match fst style with
12245         | RErr -> pr "  int r;\n"; "-1"
12246         | RBool _
12247         | RInt _ -> pr "  int r;\n"; "-1"
12248         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
12249         | RConstString _ -> pr "  const char *r;\n"; "NULL"
12250         | RConstOptString _ -> pr "  const char *r;\n"; "NULL"
12251         | RString _ ->
12252             pr "  char *r;\n"; "NULL"
12253         | RStringList _ ->
12254             pr "  char **r;\n"; "NULL"
12255         | RStruct (_, typ) ->
12256             pr "  struct guestfs_%s *r;\n" typ; "NULL"
12257         | RStructList (_, typ) ->
12258             pr "  struct guestfs_%s_list *r;\n" typ; "NULL"
12259         | RHashtable _ ->
12260             pr "  char **r;\n"; "NULL"
12261         | RBufferOut _ ->
12262             pr "  char *r;\n";
12263             pr "  size_t size;\n";
12264             "NULL" in
12265
12266       (* Call the function. *)
12267       pr "  r = guestfs_%s " shortname;
12268       generate_c_call_args ~handle:"g" style;
12269       pr ";\n";
12270       pr "\n";
12271
12272       (* Free up parameters. *)
12273       List.iter (
12274         function
12275         | String n | Device n | Pathname n | Dev_or_Path n
12276         | FileIn n | FileOut n | Key n
12277         | OptString n -> ()
12278         | BufferIn n -> ()
12279         | StringList n
12280         | DeviceList n ->
12281             pr "  {\n";
12282             pr "    size_t c = 0;\n";
12283             pr "\n";
12284             pr "    for (c = 0; %s[c] != NULL; ++c)\n" n;
12285             pr "      efree (%s[c]);\n" n;
12286             pr "    efree (%s);\n" n;
12287             pr "  }\n";
12288             pr "\n"
12289         | Bool n | Int n | Int64 n -> ()
12290         ) (snd style);
12291
12292       (* Check for errors. *)
12293       pr "  if (r == %s) {\n" error_code;
12294       pr "    RETURN_FALSE;\n";
12295       pr "  }\n";
12296       pr "\n";
12297
12298       (* Convert the return value. *)
12299       (match fst style with
12300        | RErr ->
12301            pr "  RETURN_TRUE;\n"
12302        | RBool _ ->
12303            pr "  RETURN_BOOL (r);\n"
12304        | RInt _ ->
12305            pr "  RETURN_LONG (r);\n"
12306        | RInt64 _ ->
12307            pr "  RETURN_LONG (r);\n"
12308        | RConstString _ ->
12309            pr "  RETURN_STRING (r, 1);\n"
12310        | RConstOptString _ ->
12311            pr "  if (r) { RETURN_STRING (r, 1); }\n";
12312            pr "  else { RETURN_NULL (); }\n"
12313        | RString _ ->
12314            pr "  char *r_copy = estrdup (r);\n";
12315            pr "  free (r);\n";
12316            pr "  RETURN_STRING (r_copy, 0);\n"
12317        | RBufferOut _ ->
12318            pr "  char *r_copy = estrndup (r, size);\n";
12319            pr "  free (r);\n";
12320            pr "  RETURN_STRING (r_copy, 0);\n"
12321        | RStringList _ ->
12322            pr "  size_t c = 0;\n";
12323            pr "  array_init (return_value);\n";
12324            pr "  for (c = 0; r[c] != NULL; ++c) {\n";
12325            pr "    add_next_index_string (return_value, r[c], 1);\n";
12326            pr "    free (r[c]);\n";
12327            pr "  }\n";
12328            pr "  free (r);\n";
12329        | RHashtable _ ->
12330            pr "  size_t c = 0;\n";
12331            pr "  array_init (return_value);\n";
12332            pr "  for (c = 0; r[c] != NULL; c += 2) {\n";
12333            pr "    add_assoc_string (return_value, r[c], r[c+1], 1);\n";
12334            pr "    free (r[c]);\n";
12335            pr "    free (r[c+1]);\n";
12336            pr "  }\n";
12337            pr "  free (r);\n";
12338        | RStruct (_, typ) ->
12339            let cols = cols_of_struct typ in
12340            generate_php_struct_code typ cols
12341        | RStructList (_, typ) ->
12342            let cols = cols_of_struct typ in
12343            generate_php_struct_list_code typ cols
12344       );
12345
12346       pr "}\n";
12347       pr "\n"
12348   ) all_functions_sorted
12349
12350 and generate_php_struct_code typ cols =
12351   pr "  array_init (return_value);\n";
12352   List.iter (
12353     function
12354     | name, FString ->
12355         pr "  add_assoc_string (return_value, \"%s\", r->%s, 1);\n" name name
12356     | name, FBuffer ->
12357         pr "  add_assoc_stringl (return_value, \"%s\", r->%s, r->%s_len, 1);\n"
12358           name name name
12359     | name, FUUID ->
12360         pr "  add_assoc_stringl (return_value, \"%s\", r->%s, 32, 1);\n"
12361           name name
12362     | name, (FBytes|FUInt64|FInt64|FInt32|FUInt32) ->
12363         pr "  add_assoc_long (return_value, \"%s\", r->%s);\n"
12364           name name
12365     | name, FChar ->
12366         pr "  add_assoc_stringl (return_value, \"%s\", &r->%s, 1, 1);\n"
12367           name name
12368     | name, FOptPercent ->
12369         pr "  add_assoc_double (return_value, \"%s\", r->%s);\n"
12370           name name
12371   ) cols;
12372   pr "  guestfs_free_%s (r);\n" typ
12373
12374 and generate_php_struct_list_code typ cols =
12375   pr "  array_init (return_value);\n";
12376   pr "  size_t c = 0;\n";
12377   pr "  for (c = 0; c < r->len; ++c) {\n";
12378   pr "    zval *z_elem;\n";
12379   pr "    ALLOC_INIT_ZVAL (z_elem);\n";
12380   pr "    array_init (z_elem);\n";
12381   List.iter (
12382     function
12383     | name, FString ->
12384         pr "    add_assoc_string (z_elem, \"%s\", r->val[c].%s, 1);\n"
12385           name name
12386     | name, FBuffer ->
12387         pr "    add_assoc_stringl (z_elem, \"%s\", r->val[c].%s, r->val[c].%s_len, 1);\n"
12388           name name name
12389     | name, FUUID ->
12390         pr "    add_assoc_stringl (z_elem, \"%s\", r->val[c].%s, 32, 1);\n"
12391           name name
12392     | name, (FBytes|FUInt64|FInt64|FInt32|FUInt32) ->
12393         pr "    add_assoc_long (z_elem, \"%s\", r->val[c].%s);\n"
12394           name name
12395     | name, FChar ->
12396         pr "    add_assoc_stringl (z_elem, \"%s\", &r->val[c].%s, 1, 1);\n"
12397           name name
12398     | name, FOptPercent ->
12399         pr "    add_assoc_double (z_elem, \"%s\", r->val[c].%s);\n"
12400           name name
12401   ) cols;
12402   pr "    add_next_index_zval (return_value, z_elem);\n";
12403   pr "  }\n";
12404   pr "  guestfs_free_%s_list (r);\n" typ
12405
12406 and generate_bindtests () =
12407   generate_header CStyle LGPLv2plus;
12408
12409   pr "\
12410 #include <stdio.h>
12411 #include <stdlib.h>
12412 #include <inttypes.h>
12413 #include <string.h>
12414
12415 #include \"guestfs.h\"
12416 #include \"guestfs-internal.h\"
12417 #include \"guestfs-internal-actions.h\"
12418 #include \"guestfs_protocol.h\"
12419
12420 #define error guestfs_error
12421 #define safe_calloc guestfs_safe_calloc
12422 #define safe_malloc guestfs_safe_malloc
12423
12424 static void
12425 print_strings (char *const *argv)
12426 {
12427   size_t argc;
12428
12429   printf (\"[\");
12430   for (argc = 0; argv[argc] != NULL; ++argc) {
12431     if (argc > 0) printf (\", \");
12432     printf (\"\\\"%%s\\\"\", argv[argc]);
12433   }
12434   printf (\"]\\n\");
12435 }
12436
12437 /* The test0 function prints its parameters to stdout. */
12438 ";
12439
12440   let test0, tests =
12441     match test_functions with
12442     | [] -> assert false
12443     | test0 :: tests -> test0, tests in
12444
12445   let () =
12446     let (name, style, _, _, _, _, _) = test0 in
12447     generate_prototype ~extern:false ~semicolon:false ~newline:true
12448       ~handle:"g" ~prefix:"guestfs__" name style;
12449     pr "{\n";
12450     List.iter (
12451       function
12452       | Pathname n
12453       | Device n | Dev_or_Path n
12454       | String n
12455       | FileIn n
12456       | FileOut n
12457       | Key n -> pr "  printf (\"%%s\\n\", %s);\n" n
12458       | BufferIn n ->
12459           pr "  {\n";
12460           pr "    size_t i;\n";
12461           pr "    for (i = 0; i < %s_size; ++i)\n" n;
12462           pr "      printf (\"<%%02x>\", %s[i]);\n" n;
12463           pr "    printf (\"\\n\");\n";
12464           pr "  }\n";
12465       | OptString n -> pr "  printf (\"%%s\\n\", %s ? %s : \"null\");\n" n n
12466       | StringList n | DeviceList n -> pr "  print_strings (%s);\n" n
12467       | Bool n -> pr "  printf (\"%%s\\n\", %s ? \"true\" : \"false\");\n" n
12468       | Int n -> pr "  printf (\"%%d\\n\", %s);\n" n
12469       | Int64 n -> pr "  printf (\"%%\" PRIi64 \"\\n\", %s);\n" n
12470     ) (snd style);
12471     pr "  /* Java changes stdout line buffering so we need this: */\n";
12472     pr "  fflush (stdout);\n";
12473     pr "  return 0;\n";
12474     pr "}\n";
12475     pr "\n" in
12476
12477   List.iter (
12478     fun (name, style, _, _, _, _, _) ->
12479       if String.sub name (String.length name - 3) 3 <> "err" then (
12480         pr "/* Test normal return. */\n";
12481         generate_prototype ~extern:false ~semicolon:false ~newline:true
12482           ~handle:"g" ~prefix:"guestfs__" name style;
12483         pr "{\n";
12484         (match fst style with
12485          | RErr ->
12486              pr "  return 0;\n"
12487          | RInt _ ->
12488              pr "  int r;\n";
12489              pr "  sscanf (val, \"%%d\", &r);\n";
12490              pr "  return r;\n"
12491          | RInt64 _ ->
12492              pr "  int64_t r;\n";
12493              pr "  sscanf (val, \"%%\" SCNi64, &r);\n";
12494              pr "  return r;\n"
12495          | RBool _ ->
12496              pr "  return STREQ (val, \"true\");\n"
12497          | RConstString _
12498          | RConstOptString _ ->
12499              (* Can't return the input string here.  Return a static
12500               * string so we ensure we get a segfault if the caller
12501               * tries to free it.
12502               *)
12503              pr "  return \"static string\";\n"
12504          | RString _ ->
12505              pr "  return strdup (val);\n"
12506          | RStringList _ ->
12507              pr "  char **strs;\n";
12508              pr "  int n, i;\n";
12509              pr "  sscanf (val, \"%%d\", &n);\n";
12510              pr "  strs = safe_malloc (g, (n+1) * sizeof (char *));\n";
12511              pr "  for (i = 0; i < n; ++i) {\n";
12512              pr "    strs[i] = safe_malloc (g, 16);\n";
12513              pr "    snprintf (strs[i], 16, \"%%d\", i);\n";
12514              pr "  }\n";
12515              pr "  strs[n] = NULL;\n";
12516              pr "  return strs;\n"
12517          | RStruct (_, typ) ->
12518              pr "  struct guestfs_%s *r;\n" typ;
12519              pr "  r = safe_calloc (g, sizeof *r, 1);\n";
12520              pr "  return r;\n"
12521          | RStructList (_, typ) ->
12522              pr "  struct guestfs_%s_list *r;\n" typ;
12523              pr "  r = safe_calloc (g, sizeof *r, 1);\n";
12524              pr "  sscanf (val, \"%%d\", &r->len);\n";
12525              pr "  r->val = safe_calloc (g, r->len, sizeof *r->val);\n";
12526              pr "  return r;\n"
12527          | RHashtable _ ->
12528              pr "  char **strs;\n";
12529              pr "  int n, i;\n";
12530              pr "  sscanf (val, \"%%d\", &n);\n";
12531              pr "  strs = safe_malloc (g, (n*2+1) * sizeof (*strs));\n";
12532              pr "  for (i = 0; i < n; ++i) {\n";
12533              pr "    strs[i*2] = safe_malloc (g, 16);\n";
12534              pr "    strs[i*2+1] = safe_malloc (g, 16);\n";
12535              pr "    snprintf (strs[i*2], 16, \"%%d\", i);\n";
12536              pr "    snprintf (strs[i*2+1], 16, \"%%d\", i);\n";
12537              pr "  }\n";
12538              pr "  strs[n*2] = NULL;\n";
12539              pr "  return strs;\n"
12540          | RBufferOut _ ->
12541              pr "  return strdup (val);\n"
12542         );
12543         pr "}\n";
12544         pr "\n"
12545       ) else (
12546         pr "/* Test error return. */\n";
12547         generate_prototype ~extern:false ~semicolon:false ~newline:true
12548           ~handle:"g" ~prefix:"guestfs__" name style;
12549         pr "{\n";
12550         pr "  error (g, \"error\");\n";
12551         (match fst style with
12552          | RErr | RInt _ | RInt64 _ | RBool _ ->
12553              pr "  return -1;\n"
12554          | RConstString _ | RConstOptString _
12555          | RString _ | RStringList _ | RStruct _
12556          | RStructList _
12557          | RHashtable _
12558          | RBufferOut _ ->
12559              pr "  return NULL;\n"
12560         );
12561         pr "}\n";
12562         pr "\n"
12563       )
12564   ) tests
12565
12566 and generate_ocaml_bindtests () =
12567   generate_header OCamlStyle GPLv2plus;
12568
12569   pr "\
12570 let () =
12571   let g = Guestfs.create () in
12572 ";
12573
12574   let mkargs args =
12575     String.concat " " (
12576       List.map (
12577         function
12578         | CallString s -> "\"" ^ s ^ "\""
12579         | CallOptString None -> "None"
12580         | CallOptString (Some s) -> sprintf "(Some \"%s\")" s
12581         | CallStringList xs ->
12582             "[|" ^ String.concat ";" (List.map (sprintf "\"%s\"") xs) ^ "|]"
12583         | CallInt i when i >= 0 -> string_of_int i
12584         | CallInt i (* when i < 0 *) -> "(" ^ string_of_int i ^ ")"
12585         | CallInt64 i when i >= 0L -> Int64.to_string i ^ "L"
12586         | CallInt64 i (* when i < 0L *) -> "(" ^ Int64.to_string i ^ "L)"
12587         | CallBool b -> string_of_bool b
12588         | CallBuffer s -> sprintf "%S" s
12589       ) args
12590     )
12591   in
12592
12593   generate_lang_bindtests (
12594     fun f args -> pr "  Guestfs.%s g %s;\n" f (mkargs args)
12595   );
12596
12597   pr "print_endline \"EOF\"\n"
12598
12599 and generate_perl_bindtests () =
12600   pr "#!/usr/bin/perl -w\n";
12601   generate_header HashStyle GPLv2plus;
12602
12603   pr "\
12604 use strict;
12605
12606 use Sys::Guestfs;
12607
12608 my $g = Sys::Guestfs->new ();
12609 ";
12610
12611   let mkargs args =
12612     String.concat ", " (
12613       List.map (
12614         function
12615         | CallString s -> "\"" ^ s ^ "\""
12616         | CallOptString None -> "undef"
12617         | CallOptString (Some s) -> sprintf "\"%s\"" s
12618         | CallStringList xs ->
12619             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
12620         | CallInt i -> string_of_int i
12621         | CallInt64 i -> Int64.to_string i
12622         | CallBool b -> if b then "1" else "0"
12623         | CallBuffer s -> "\"" ^ c_quote s ^ "\""
12624       ) args
12625     )
12626   in
12627
12628   generate_lang_bindtests (
12629     fun f args -> pr "$g->%s (%s);\n" f (mkargs args)
12630   );
12631
12632   pr "print \"EOF\\n\"\n"
12633
12634 and generate_python_bindtests () =
12635   generate_header HashStyle GPLv2plus;
12636
12637   pr "\
12638 import guestfs
12639
12640 g = guestfs.GuestFS ()
12641 ";
12642
12643   let mkargs args =
12644     String.concat ", " (
12645       List.map (
12646         function
12647         | CallString s -> "\"" ^ s ^ "\""
12648         | CallOptString None -> "None"
12649         | CallOptString (Some s) -> sprintf "\"%s\"" s
12650         | CallStringList xs ->
12651             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
12652         | CallInt i -> string_of_int i
12653         | CallInt64 i -> Int64.to_string i
12654         | CallBool b -> if b then "1" else "0"
12655         | CallBuffer s -> "\"" ^ c_quote s ^ "\""
12656       ) args
12657     )
12658   in
12659
12660   generate_lang_bindtests (
12661     fun f args -> pr "g.%s (%s)\n" f (mkargs args)
12662   );
12663
12664   pr "print \"EOF\"\n"
12665
12666 and generate_ruby_bindtests () =
12667   generate_header HashStyle GPLv2plus;
12668
12669   pr "\
12670 require 'guestfs'
12671
12672 g = Guestfs::create()
12673 ";
12674
12675   let mkargs args =
12676     String.concat ", " (
12677       List.map (
12678         function
12679         | CallString s -> "\"" ^ s ^ "\""
12680         | CallOptString None -> "nil"
12681         | CallOptString (Some s) -> sprintf "\"%s\"" s
12682         | CallStringList xs ->
12683             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
12684         | CallInt i -> string_of_int i
12685         | CallInt64 i -> Int64.to_string i
12686         | CallBool b -> string_of_bool b
12687         | CallBuffer s -> "\"" ^ c_quote s ^ "\""
12688       ) args
12689     )
12690   in
12691
12692   generate_lang_bindtests (
12693     fun f args -> pr "g.%s(%s)\n" f (mkargs args)
12694   );
12695
12696   pr "print \"EOF\\n\"\n"
12697
12698 and generate_java_bindtests () =
12699   generate_header CStyle GPLv2plus;
12700
12701   pr "\
12702 import com.redhat.et.libguestfs.*;
12703
12704 public class Bindtests {
12705     public static void main (String[] argv)
12706     {
12707         try {
12708             GuestFS g = new GuestFS ();
12709 ";
12710
12711   let mkargs args =
12712     String.concat ", " (
12713       List.map (
12714         function
12715         | CallString s -> "\"" ^ s ^ "\""
12716         | CallOptString None -> "null"
12717         | CallOptString (Some s) -> sprintf "\"%s\"" s
12718         | CallStringList xs ->
12719             "new String[]{" ^
12720               String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "}"
12721         | CallInt i -> string_of_int i
12722         | CallInt64 i -> Int64.to_string i
12723         | CallBool b -> string_of_bool b
12724         | CallBuffer s ->
12725             "new byte[] { " ^ String.concat "," (
12726               map_chars (fun c -> string_of_int (Char.code c)) s
12727             ) ^ " }"
12728       ) args
12729     )
12730   in
12731
12732   generate_lang_bindtests (
12733     fun f args -> pr "            g.%s (%s);\n" f (mkargs args)
12734   );
12735
12736   pr "
12737             System.out.println (\"EOF\");
12738         }
12739         catch (Exception exn) {
12740             System.err.println (exn);
12741             System.exit (1);
12742         }
12743     }
12744 }
12745 "
12746
12747 and generate_haskell_bindtests () =
12748   generate_header HaskellStyle GPLv2plus;
12749
12750   pr "\
12751 module Bindtests where
12752 import qualified Guestfs
12753
12754 main = do
12755   g <- Guestfs.create
12756 ";
12757
12758   let mkargs args =
12759     String.concat " " (
12760       List.map (
12761         function
12762         | CallString s -> "\"" ^ s ^ "\""
12763         | CallOptString None -> "Nothing"
12764         | CallOptString (Some s) -> sprintf "(Just \"%s\")" s
12765         | CallStringList xs ->
12766             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
12767         | CallInt i when i < 0 -> "(" ^ string_of_int i ^ ")"
12768         | CallInt i -> string_of_int i
12769         | CallInt64 i when i < 0L -> "(" ^ Int64.to_string i ^ ")"
12770         | CallInt64 i -> Int64.to_string i
12771         | CallBool true -> "True"
12772         | CallBool false -> "False"
12773         | CallBuffer s -> "\"" ^ c_quote s ^ "\""
12774       ) args
12775     )
12776   in
12777
12778   generate_lang_bindtests (
12779     fun f args -> pr "  Guestfs.%s g %s\n" f (mkargs args)
12780   );
12781
12782   pr "  putStrLn \"EOF\"\n"
12783
12784 (* Language-independent bindings tests - we do it this way to
12785  * ensure there is parity in testing bindings across all languages.
12786  *)
12787 and generate_lang_bindtests call =
12788   call "test0" [CallString "abc"; CallOptString (Some "def");
12789                 CallStringList []; CallBool false;
12790                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
12791                 CallBuffer "abc\000abc"];
12792   call "test0" [CallString "abc"; CallOptString None;
12793                 CallStringList []; CallBool false;
12794                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
12795                 CallBuffer "abc\000abc"];
12796   call "test0" [CallString ""; CallOptString (Some "def");
12797                 CallStringList []; CallBool false;
12798                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
12799                 CallBuffer "abc\000abc"];
12800   call "test0" [CallString ""; CallOptString (Some "");
12801                 CallStringList []; CallBool false;
12802                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
12803                 CallBuffer "abc\000abc"];
12804   call "test0" [CallString "abc"; CallOptString (Some "def");
12805                 CallStringList ["1"]; CallBool false;
12806                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
12807                 CallBuffer "abc\000abc"];
12808   call "test0" [CallString "abc"; CallOptString (Some "def");
12809                 CallStringList ["1"; "2"]; CallBool false;
12810                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
12811                 CallBuffer "abc\000abc"];
12812   call "test0" [CallString "abc"; CallOptString (Some "def");
12813                 CallStringList ["1"]; CallBool true;
12814                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
12815                 CallBuffer "abc\000abc"];
12816   call "test0" [CallString "abc"; CallOptString (Some "def");
12817                 CallStringList ["1"]; CallBool false;
12818                 CallInt (-1); CallInt64 (-1L); CallString "123"; CallString "456";
12819                 CallBuffer "abc\000abc"];
12820   call "test0" [CallString "abc"; CallOptString (Some "def");
12821                 CallStringList ["1"]; CallBool false;
12822                 CallInt (-2); CallInt64 (-2L); CallString "123"; CallString "456";
12823                 CallBuffer "abc\000abc"];
12824   call "test0" [CallString "abc"; CallOptString (Some "def");
12825                 CallStringList ["1"]; CallBool false;
12826                 CallInt 1; CallInt64 1L; CallString "123"; CallString "456";
12827                 CallBuffer "abc\000abc"];
12828   call "test0" [CallString "abc"; CallOptString (Some "def");
12829                 CallStringList ["1"]; CallBool false;
12830                 CallInt 2; CallInt64 2L; CallString "123"; CallString "456";
12831                 CallBuffer "abc\000abc"];
12832   call "test0" [CallString "abc"; CallOptString (Some "def");
12833                 CallStringList ["1"]; CallBool false;
12834                 CallInt 4095; CallInt64 4095L; CallString "123"; CallString "456";
12835                 CallBuffer "abc\000abc"];
12836   call "test0" [CallString "abc"; CallOptString (Some "def");
12837                 CallStringList ["1"]; CallBool false;
12838                 CallInt 0; CallInt64 0L; CallString ""; CallString "";
12839                 CallBuffer "abc\000abc"]
12840
12841 (* XXX Add here tests of the return and error functions. *)
12842
12843 and generate_max_proc_nr () =
12844   pr "%d\n" max_proc_nr
12845
12846 let output_to filename k =
12847   let filename_new = filename ^ ".new" in
12848   chan := open_out filename_new;
12849   k ();
12850   close_out !chan;
12851   chan := Pervasives.stdout;
12852
12853   (* Is the new file different from the current file? *)
12854   if Sys.file_exists filename && files_equal filename filename_new then
12855     unlink filename_new                 (* same, so skip it *)
12856   else (
12857     (* different, overwrite old one *)
12858     (try chmod filename 0o644 with Unix_error _ -> ());
12859     rename filename_new filename;
12860     chmod filename 0o444;
12861     printf "written %s\n%!" filename;
12862   )
12863
12864 let perror msg = function
12865   | Unix_error (err, _, _) ->
12866       eprintf "%s: %s\n" msg (error_message err)
12867   | exn ->
12868       eprintf "%s: %s\n" msg (Printexc.to_string exn)
12869
12870 (* Main program. *)
12871 let () =
12872   let lock_fd =
12873     try openfile "HACKING" [O_RDWR] 0
12874     with
12875     | Unix_error (ENOENT, _, _) ->
12876         eprintf "\
12877 You are probably running this from the wrong directory.
12878 Run it from the top source directory using the command
12879   src/generator.ml
12880 ";
12881         exit 1
12882     | exn ->
12883         perror "open: HACKING" exn;
12884         exit 1 in
12885
12886   (* Acquire a lock so parallel builds won't try to run the generator
12887    * twice at the same time.  Subsequent builds will wait for the first
12888    * one to finish.  Note the lock is released implicitly when the
12889    * program exits.
12890    *)
12891   (try lockf lock_fd F_LOCK 1
12892    with exn ->
12893      perror "lock: HACKING" exn;
12894      exit 1);
12895
12896   check_functions ();
12897
12898   output_to "src/guestfs_protocol.x" generate_xdr;
12899   output_to "src/guestfs-structs.h" generate_structs_h;
12900   output_to "src/guestfs-actions.h" generate_actions_h;
12901   output_to "src/guestfs-internal-actions.h" generate_internal_actions_h;
12902   output_to "src/actions.c" generate_client_actions;
12903   output_to "src/bindtests.c" generate_bindtests;
12904   output_to "src/guestfs-structs.pod" generate_structs_pod;
12905   output_to "src/guestfs-actions.pod" generate_actions_pod;
12906   output_to "src/guestfs-availability.pod" generate_availability_pod;
12907   output_to "src/MAX_PROC_NR" generate_max_proc_nr;
12908   output_to "src/libguestfs.syms" generate_linker_script;
12909   output_to "daemon/actions.h" generate_daemon_actions_h;
12910   output_to "daemon/stubs.c" generate_daemon_actions;
12911   output_to "daemon/names.c" generate_daemon_names;
12912   output_to "daemon/optgroups.c" generate_daemon_optgroups_c;
12913   output_to "daemon/optgroups.h" generate_daemon_optgroups_h;
12914   output_to "capitests/tests.c" generate_tests;
12915   output_to "fish/cmds.c" generate_fish_cmds;
12916   output_to "fish/completion.c" generate_fish_completion;
12917   output_to "fish/guestfish-actions.pod" generate_fish_actions_pod;
12918   output_to "ocaml/guestfs.mli" generate_ocaml_mli;
12919   output_to "ocaml/guestfs.ml" generate_ocaml_ml;
12920   output_to "ocaml/guestfs_c_actions.c" generate_ocaml_c;
12921   output_to "ocaml/bindtests.ml" generate_ocaml_bindtests;
12922   output_to "perl/Guestfs.xs" generate_perl_xs;
12923   output_to "perl/lib/Sys/Guestfs.pm" generate_perl_pm;
12924   output_to "perl/bindtests.pl" generate_perl_bindtests;
12925   output_to "python/guestfs-py.c" generate_python_c;
12926   output_to "python/guestfs.py" generate_python_py;
12927   output_to "python/bindtests.py" generate_python_bindtests;
12928   output_to "ruby/ext/guestfs/_guestfs.c" generate_ruby_c;
12929   output_to "ruby/bindtests.rb" generate_ruby_bindtests;
12930   output_to "java/com/redhat/et/libguestfs/GuestFS.java" generate_java_java;
12931
12932   List.iter (
12933     fun (typ, jtyp) ->
12934       let cols = cols_of_struct typ in
12935       let filename = sprintf "java/com/redhat/et/libguestfs/%s.java" jtyp in
12936       output_to filename (generate_java_struct jtyp cols);
12937   ) java_structs;
12938
12939   output_to "java/Makefile.inc" generate_java_makefile_inc;
12940   output_to "java/com_redhat_et_libguestfs_GuestFS.c" generate_java_c;
12941   output_to "java/Bindtests.java" generate_java_bindtests;
12942   output_to "haskell/Guestfs.hs" generate_haskell_hs;
12943   output_to "haskell/Bindtests.hs" generate_haskell_bindtests;
12944   output_to "csharp/Libguestfs.cs" generate_csharp;
12945   output_to "php/extension/php_guestfs_php.h" generate_php_h;
12946   output_to "php/extension/guestfs_php.c" generate_php_c;
12947
12948   (* Always generate this file last, and unconditionally.  It's used
12949    * by the Makefile to know when we must re-run the generator.
12950    *)
12951   let chan = open_out "src/stamp-generator" in
12952   fprintf chan "1\n";
12953   close_out chan;
12954
12955   printf "generated %d lines of code\n" !lines