2f2e3911778c67275363ff387e7af0be62e644b1
[libguestfs.git] / src / generator.ml
1 #!/usr/bin/env ocaml
2 (* libguestfs
3  * Copyright (C) 2009-2010 Red Hat Inc.
4  *
5  * This program is free software; you can redistribute it and/or modify
6  * it under the terms of the GNU General Public License as published by
7  * the Free Software Foundation; either version 2 of the License, or
8  * (at your option) any later version.
9  *
10  * This program is distributed in the hope that it will be useful,
11  * but WITHOUT ANY WARRANTY; without even the implied warranty of
12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
13  * GNU General Public License for more details.
14  *
15  * You should have received a copy of the GNU General Public License
16  * along with this program; if not, write to the Free Software
17  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
18  *)
19
20 (* This script generates a large amount of code and documentation for
21  * all the daemon actions.
22  *
23  * To add a new action there are only two files you need to change,
24  * this one to describe the interface (see the big table of
25  * 'daemon_functions' below), and daemon/<somefile>.c to write the
26  * implementation.
27  *
28  * After editing this file, run it (./src/generator.ml) to regenerate
29  * all the output files.  'make' will rerun this automatically when
30  * necessary.  Note that if you are using a separate build directory
31  * you must run generator.ml from the _source_ directory.
32  *
33  * IMPORTANT: This script should NOT print any warnings.  If it prints
34  * warnings, you should treat them as errors.
35  *
36  * OCaml tips:
37  * (1) In emacs, install tuareg-mode to display and format OCaml code
38  * correctly.  'vim' comes with a good OCaml editing mode by default.
39  * (2) Read the resources at http://ocaml-tutorial.org/
40  *)
41
42 #load "unix.cma";;
43 #load "str.cma";;
44 #directory "+xml-light";;
45 #directory "+../pkg-lib/xml-light";; (* for GODI users *)
46 #load "xml-light.cma";;
47
48 open Unix
49 open Printf
50
51 type style = ret * args
52 and ret =
53     (* "RErr" as a return value means an int used as a simple error
54      * indication, ie. 0 or -1.
55      *)
56   | RErr
57
58     (* "RInt" as a return value means an int which is -1 for error
59      * or any value >= 0 on success.  Only use this for smallish
60      * positive ints (0 <= i < 2^30).
61      *)
62   | RInt of string
63
64     (* "RInt64" is the same as RInt, but is guaranteed to be able
65      * to return a full 64 bit value, _except_ that -1 means error
66      * (so -1 cannot be a valid, non-error return value).
67      *)
68   | RInt64 of string
69
70     (* "RBool" is a bool return value which can be true/false or
71      * -1 for error.
72      *)
73   | RBool of string
74
75     (* "RConstString" is a string that refers to a constant value.
76      * The return value must NOT be NULL (since NULL indicates
77      * an error).
78      *
79      * Try to avoid using this.  In particular you cannot use this
80      * for values returned from the daemon, because there is no
81      * thread-safe way to return them in the C API.
82      *)
83   | RConstString of string
84
85     (* "RConstOptString" is an even more broken version of
86      * "RConstString".  The returned string may be NULL and there
87      * is no way to return an error indication.  Avoid using this!
88      *)
89   | RConstOptString of string
90
91     (* "RString" is a returned string.  It must NOT be NULL, since
92      * a NULL return indicates an error.  The caller frees this.
93      *)
94   | RString of string
95
96     (* "RStringList" is a list of strings.  No string in the list
97      * can be NULL.  The caller frees the strings and the array.
98      *)
99   | RStringList of string
100
101     (* "RStruct" is a function which returns a single named structure
102      * or an error indication (in C, a struct, and in other languages
103      * with varying representations, but usually very efficient).  See
104      * after the function list below for the structures.
105      *)
106   | RStruct of string * string          (* name of retval, name of struct *)
107
108     (* "RStructList" is a function which returns either a list/array
109      * of structures (could be zero-length), or an error indication.
110      *)
111   | RStructList of string * string      (* name of retval, name of struct *)
112
113     (* Key-value pairs of untyped strings.  Turns into a hashtable or
114      * dictionary in languages which support it.  DON'T use this as a
115      * general "bucket" for results.  Prefer a stronger typed return
116      * value if one is available, or write a custom struct.  Don't use
117      * this if the list could potentially be very long, since it is
118      * inefficient.  Keys should be unique.  NULLs are not permitted.
119      *)
120   | RHashtable of string
121
122     (* "RBufferOut" is handled almost exactly like RString, but
123      * it allows the string to contain arbitrary 8 bit data including
124      * ASCII NUL.  In the C API this causes an implicit extra parameter
125      * to be added of type <size_t *size_r>.  The extra parameter
126      * returns the actual size of the return buffer in bytes.
127      *
128      * Other programming languages support strings with arbitrary 8 bit
129      * data.
130      *
131      * At the RPC layer we have to use the opaque<> type instead of
132      * string<>.  Returned data is still limited to the max message
133      * size (ie. ~ 2 MB).
134      *)
135   | RBufferOut of string
136
137 and args = argt list    (* Function parameters, guestfs handle is implicit. *)
138
139     (* Note in future we should allow a "variable args" parameter as
140      * the final parameter, to allow commands like
141      *   chmod mode file [file(s)...]
142      * This is not implemented yet, but many commands (such as chmod)
143      * are currently defined with the argument order keeping this future
144      * possibility in mind.
145      *)
146 and argt =
147   | String of string    (* const char *name, cannot be NULL *)
148   | Device of string    (* /dev device name, cannot be NULL *)
149   | Pathname of string  (* file name, cannot be NULL *)
150   | Dev_or_Path of string (* /dev device name or Pathname, cannot be NULL *)
151   | OptString of string (* const char *name, may be NULL *)
152   | StringList of string(* list of strings (each string cannot be NULL) *)
153   | DeviceList of string(* list of Device names (each cannot be NULL) *)
154   | Bool of string      (* boolean *)
155   | Int of string       (* int (smallish ints, signed, <= 31 bits) *)
156   | Int64 of string     (* any 64 bit int *)
157     (* These are treated as filenames (simple string parameters) in
158      * the C API and bindings.  But in the RPC protocol, we transfer
159      * the actual file content up to or down from the daemon.
160      * FileIn: local machine -> daemon (in request)
161      * FileOut: daemon -> local machine (in reply)
162      * In guestfish (only), the special name "-" means read from
163      * stdin or write to stdout.
164      *)
165   | FileIn of string
166   | FileOut of string
167     (* Opaque buffer which can contain arbitrary 8 bit data.
168      * In the C API, this is expressed as <const char *, size_t> pair.
169      * Most other languages have a string type which can contain
170      * ASCII NUL.  We use whatever type is appropriate for each
171      * language.
172      * Buffers are limited by the total message size.  To transfer
173      * large blocks of data, use FileIn/FileOut parameters instead.
174      * To return an arbitrary buffer, use RBufferOut.
175      *)
176   | BufferIn of string
177     (* Key material / passphrase.  Eventually we should treat this
178      * as sensitive and mlock it into physical RAM.  However this
179      * is highly complex because of all the places that XDR-encoded
180      * strings can end up.  So currently the only difference from
181      * 'String' is the way that guestfish requests these parameters
182      * from the user.
183      *)
184   | Key of string
185
186 type flags =
187   | ProtocolLimitWarning  (* display warning about protocol size limits *)
188   | DangerWillRobinson    (* flags particularly dangerous commands *)
189   | FishAlias of string   (* provide an alias for this cmd in guestfish *)
190   | FishOutput of fish_output_t (* how to display output in guestfish *)
191   | NotInFish             (* do not export via guestfish *)
192   | NotInDocs             (* do not add this function to documentation *)
193   | DeprecatedBy of string (* function is deprecated, use .. instead *)
194   | Optional of string    (* function is part of an optional group *)
195   | Progress              (* function can generate progress messages *)
196
197 and fish_output_t =
198   | FishOutputOctal       (* for int return, print in octal *)
199   | FishOutputHexadecimal (* for int return, print in hex *)
200
201 (* You can supply zero or as many tests as you want per API call.
202  *
203  * Note that the test environment has 3 block devices, of size 500MB,
204  * 50MB and 10MB (respectively /dev/sda, /dev/sdb, /dev/sdc), and
205  * a fourth ISO block device with some known files on it (/dev/sdd).
206  *
207  * Note for partitioning purposes, the 500MB device has 1015 cylinders.
208  * Number of cylinders was 63 for IDE emulated disks with precisely
209  * the same size.  How exactly this is calculated is a mystery.
210  *
211  * The ISO block device (/dev/sdd) comes from images/test.iso.
212  *
213  * To be able to run the tests in a reasonable amount of time,
214  * the virtual machine and block devices are reused between tests.
215  * So don't try testing kill_subprocess :-x
216  *
217  * Between each test we blockdev-setrw, umount-all, lvm-remove-all.
218  *
219  * Don't assume anything about the previous contents of the block
220  * devices.  Use 'Init*' to create some initial scenarios.
221  *
222  * You can add a prerequisite clause to any individual test.  This
223  * is a run-time check, which, if it fails, causes the test to be
224  * skipped.  Useful if testing a command which might not work on
225  * all variations of libguestfs builds.  A test that has prerequisite
226  * of 'Always' is run unconditionally.
227  *
228  * In addition, packagers can skip individual tests by setting the
229  * environment variables:     eg:
230  *   SKIP_TEST_<CMD>_<NUM>=1  SKIP_TEST_COMMAND_3=1  (skips test #3 of command)
231  *   SKIP_TEST_<CMD>=1        SKIP_TEST_ZEROFREE=1   (skips all zerofree tests)
232  *)
233 type tests = (test_init * test_prereq * test) list
234 and test =
235     (* Run the command sequence and just expect nothing to fail. *)
236   | TestRun of seq
237
238     (* Run the command sequence and expect the output of the final
239      * command to be the string.
240      *)
241   | TestOutput of seq * string
242
243     (* Run the command sequence and expect the output of the final
244      * command to be the list of strings.
245      *)
246   | TestOutputList of seq * string list
247
248     (* Run the command sequence and expect the output of the final
249      * command to be the list of block devices (could be either
250      * "/dev/sd.." or "/dev/hd.." form - we don't check the 5th
251      * character of each string).
252      *)
253   | TestOutputListOfDevices of seq * string list
254
255     (* Run the command sequence and expect the output of the final
256      * command to be the integer.
257      *)
258   | TestOutputInt of seq * int
259
260     (* Run the command sequence and expect the output of the final
261      * command to be <op> <int>, eg. ">=", "1".
262      *)
263   | TestOutputIntOp of seq * string * int
264
265     (* Run the command sequence and expect the output of the final
266      * command to be a true value (!= 0 or != NULL).
267      *)
268   | TestOutputTrue of seq
269
270     (* Run the command sequence and expect the output of the final
271      * command to be a false value (== 0 or == NULL, but not an error).
272      *)
273   | TestOutputFalse of seq
274
275     (* Run the command sequence and expect the output of the final
276      * command to be a list of the given length (but don't care about
277      * content).
278      *)
279   | TestOutputLength of seq * int
280
281     (* Run the command sequence and expect the output of the final
282      * command to be a buffer (RBufferOut), ie. string + size.
283      *)
284   | TestOutputBuffer of seq * string
285
286     (* Run the command sequence and expect the output of the final
287      * command to be a structure.
288      *)
289   | TestOutputStruct of seq * test_field_compare list
290
291     (* Run the command sequence and expect the final command (only)
292      * to fail.
293      *)
294   | TestLastFail of seq
295
296 and test_field_compare =
297   | CompareWithInt of string * int
298   | CompareWithIntOp of string * string * int
299   | CompareWithString of string * string
300   | CompareFieldsIntEq of string * string
301   | CompareFieldsStrEq of string * string
302
303 (* Test prerequisites. *)
304 and test_prereq =
305     (* Test always runs. *)
306   | Always
307
308     (* Test is currently disabled - eg. it fails, or it tests some
309      * unimplemented feature.
310      *)
311   | Disabled
312
313     (* 'string' is some C code (a function body) that should return
314      * true or false.  The test will run if the code returns true.
315      *)
316   | If of string
317
318     (* As for 'If' but the test runs _unless_ the code returns true. *)
319   | Unless of string
320
321     (* Run the test only if 'string' is available in the daemon. *)
322   | IfAvailable of string
323
324 (* Some initial scenarios for testing. *)
325 and test_init =
326     (* Do nothing, block devices could contain random stuff including
327      * LVM PVs, and some filesystems might be mounted.  This is usually
328      * a bad idea.
329      *)
330   | InitNone
331
332     (* Block devices are empty and no filesystems are mounted. *)
333   | InitEmpty
334
335     (* /dev/sda contains a single partition /dev/sda1, with random
336      * content.  /dev/sdb and /dev/sdc may have random content.
337      * No LVM.
338      *)
339   | InitPartition
340
341     (* /dev/sda contains a single partition /dev/sda1, which is formatted
342      * as ext2, empty [except for lost+found] and mounted on /.
343      * /dev/sdb and /dev/sdc may have random content.
344      * No LVM.
345      *)
346   | InitBasicFS
347
348     (* /dev/sda:
349      *   /dev/sda1 (is a PV):
350      *     /dev/VG/LV (size 8MB):
351      *       formatted as ext2, empty [except for lost+found], mounted on /
352      * /dev/sdb and /dev/sdc may have random content.
353      *)
354   | InitBasicFSonLVM
355
356     (* /dev/sdd (the ISO, see images/ directory in source)
357      * is mounted on /
358      *)
359   | InitISOFS
360
361 (* Sequence of commands for testing. *)
362 and seq = cmd list
363 and cmd = string list
364
365 (* Note about long descriptions: When referring to another
366  * action, use the format C<guestfs_other> (ie. the full name of
367  * the C function).  This will be replaced as appropriate in other
368  * language bindings.
369  *
370  * Apart from that, long descriptions are just perldoc paragraphs.
371  *)
372
373 (* Generate a random UUID (used in tests). *)
374 let uuidgen () =
375   let chan = open_process_in "uuidgen" in
376   let uuid = input_line chan in
377   (match close_process_in chan with
378    | WEXITED 0 -> ()
379    | WEXITED _ ->
380        failwith "uuidgen: process exited with non-zero status"
381    | WSIGNALED _ | WSTOPPED _ ->
382        failwith "uuidgen: process signalled or stopped by signal"
383   );
384   uuid
385
386 (* These test functions are used in the language binding tests. *)
387
388 let test_all_args = [
389   String "str";
390   OptString "optstr";
391   StringList "strlist";
392   Bool "b";
393   Int "integer";
394   Int64 "integer64";
395   FileIn "filein";
396   FileOut "fileout";
397   BufferIn "bufferin";
398 ]
399
400 let test_all_rets = [
401   (* except for RErr, which is tested thoroughly elsewhere *)
402   "test0rint",         RInt "valout";
403   "test0rint64",       RInt64 "valout";
404   "test0rbool",        RBool "valout";
405   "test0rconststring", RConstString "valout";
406   "test0rconstoptstring", RConstOptString "valout";
407   "test0rstring",      RString "valout";
408   "test0rstringlist",  RStringList "valout";
409   "test0rstruct",      RStruct ("valout", "lvm_pv");
410   "test0rstructlist",  RStructList ("valout", "lvm_pv");
411   "test0rhashtable",   RHashtable "valout";
412 ]
413
414 let test_functions = [
415   ("test0", (RErr, test_all_args), -1, [NotInFish; NotInDocs],
416    [],
417    "internal test function - do not use",
418    "\
419 This is an internal test function which is used to test whether
420 the automatically generated bindings can handle every possible
421 parameter type correctly.
422
423 It echos the contents of each parameter to stdout.
424
425 You probably don't want to call this function.");
426 ] @ List.flatten (
427   List.map (
428     fun (name, ret) ->
429       [(name, (ret, [String "val"]), -1, [NotInFish; NotInDocs],
430         [],
431         "internal test function - do not use",
432         "\
433 This is an internal test function which is used to test whether
434 the automatically generated bindings can handle every possible
435 return type correctly.
436
437 It converts string C<val> to the return type.
438
439 You probably don't want to call this function.");
440        (name ^ "err", (ret, []), -1, [NotInFish; NotInDocs],
441         [],
442         "internal test function - do not use",
443         "\
444 This is an internal test function which is used to test whether
445 the automatically generated bindings can handle every possible
446 return type correctly.
447
448 This function always returns an error.
449
450 You probably don't want to call this function.")]
451   ) test_all_rets
452 )
453
454 (* non_daemon_functions are any functions which don't get processed
455  * in the daemon, eg. functions for setting and getting local
456  * configuration values.
457  *)
458
459 let non_daemon_functions = test_functions @ [
460   ("launch", (RErr, []), -1, [FishAlias "run"],
461    [],
462    "launch the qemu subprocess",
463    "\
464 Internally libguestfs is implemented by running a virtual machine
465 using L<qemu(1)>.
466
467 You should call this after configuring the handle
468 (eg. adding drives) but before performing any actions.");
469
470   ("wait_ready", (RErr, []), -1, [NotInFish],
471    [],
472    "wait until the qemu subprocess launches (no op)",
473    "\
474 This function is a no op.
475
476 In versions of the API E<lt> 1.0.71 you had to call this function
477 just after calling C<guestfs_launch> to wait for the launch
478 to complete.  However this is no longer necessary because
479 C<guestfs_launch> now does the waiting.
480
481 If you see any calls to this function in code then you can just
482 remove them, unless you want to retain compatibility with older
483 versions of the API.");
484
485   ("kill_subprocess", (RErr, []), -1, [],
486    [],
487    "kill the qemu subprocess",
488    "\
489 This kills the qemu subprocess.  You should never need to call this.");
490
491   ("add_drive", (RErr, [String "filename"]), -1, [FishAlias "add"],
492    [],
493    "add an image to examine or modify",
494    "\
495 This function adds a virtual machine disk image C<filename> to the
496 guest.  The first time you call this function, the disk appears as IDE
497 disk 0 (C</dev/sda>) in the guest, the second time as C</dev/sdb>, and
498 so on.
499
500 You don't necessarily need to be root when using libguestfs.  However
501 you obviously do need sufficient permissions to access the filename
502 for whatever operations you want to perform (ie. read access if you
503 just want to read the image or write access if you want to modify the
504 image).
505
506 This is equivalent to the qemu parameter
507 C<-drive file=filename,cache=off,if=...>.
508
509 C<cache=off> is omitted in cases where it is not supported by
510 the underlying filesystem.
511
512 C<if=...> is set at compile time by the configuration option
513 C<./configure --with-drive-if=...>.  In the rare case where you
514 might need to change this at run time, use C<guestfs_add_drive_with_if>
515 or C<guestfs_add_drive_ro_with_if>.
516
517 Note that this call checks for the existence of C<filename>.  This
518 stops you from specifying other types of drive which are supported
519 by qemu such as C<nbd:> and C<http:> URLs.  To specify those, use
520 the general C<guestfs_config> call instead.");
521
522   ("add_cdrom", (RErr, [String "filename"]), -1, [FishAlias "cdrom"],
523    [],
524    "add a CD-ROM disk image to examine",
525    "\
526 This function adds a virtual CD-ROM disk image to the guest.
527
528 This is equivalent to the qemu parameter C<-cdrom filename>.
529
530 Notes:
531
532 =over 4
533
534 =item *
535
536 This call checks for the existence of C<filename>.  This
537 stops you from specifying other types of drive which are supported
538 by qemu such as C<nbd:> and C<http:> URLs.  To specify those, use
539 the general C<guestfs_config> call instead.
540
541 =item *
542
543 If you just want to add an ISO file (often you use this as an
544 efficient way to transfer large files into the guest), then you
545 should probably use C<guestfs_add_drive_ro> instead.
546
547 =back");
548
549   ("add_drive_ro", (RErr, [String "filename"]), -1, [FishAlias "add-ro"],
550    [],
551    "add a drive in snapshot mode (read-only)",
552    "\
553 This adds a drive in snapshot mode, making it effectively
554 read-only.
555
556 Note that writes to the device are allowed, and will be seen for
557 the duration of the guestfs handle, but they are written
558 to a temporary file which is discarded as soon as the guestfs
559 handle is closed.  We don't currently have any method to enable
560 changes to be committed, although qemu can support this.
561
562 This is equivalent to the qemu parameter
563 C<-drive file=filename,snapshot=on,if=...>.
564
565 C<if=...> is set at compile time by the configuration option
566 C<./configure --with-drive-if=...>.  In the rare case where you
567 might need to change this at run time, use C<guestfs_add_drive_with_if>
568 or C<guestfs_add_drive_ro_with_if>.
569
570 Note that this call checks for the existence of C<filename>.  This
571 stops you from specifying other types of drive which are supported
572 by qemu such as C<nbd:> and C<http:> URLs.  To specify those, use
573 the general C<guestfs_config> call instead.");
574
575   ("config", (RErr, [String "qemuparam"; OptString "qemuvalue"]), -1, [],
576    [],
577    "add qemu parameters",
578    "\
579 This can be used to add arbitrary qemu command line parameters
580 of the form C<-param value>.  Actually it's not quite arbitrary - we
581 prevent you from setting some parameters which would interfere with
582 parameters that we use.
583
584 The first character of C<param> string must be a C<-> (dash).
585
586 C<value> can be NULL.");
587
588   ("set_qemu", (RErr, [OptString "qemu"]), -1, [FishAlias "qemu"],
589    [],
590    "set the qemu binary",
591    "\
592 Set the qemu binary that we will use.
593
594 The default is chosen when the library was compiled by the
595 configure script.
596
597 You can also override this by setting the C<LIBGUESTFS_QEMU>
598 environment variable.
599
600 Setting C<qemu> to C<NULL> restores the default qemu binary.
601
602 Note that you should call this function as early as possible
603 after creating the handle.  This is because some pre-launch
604 operations depend on testing qemu features (by running C<qemu -help>).
605 If the qemu binary changes, we don't retest features, and
606 so you might see inconsistent results.  Using the environment
607 variable C<LIBGUESTFS_QEMU> is safest of all since that picks
608 the qemu binary at the same time as the handle is created.");
609
610   ("get_qemu", (RConstString "qemu", []), -1, [],
611    [InitNone, Always, TestRun (
612       [["get_qemu"]])],
613    "get the qemu binary",
614    "\
615 Return the current qemu binary.
616
617 This is always non-NULL.  If it wasn't set already, then this will
618 return the default qemu binary name.");
619
620   ("set_path", (RErr, [OptString "searchpath"]), -1, [FishAlias "path"],
621    [],
622    "set the search path",
623    "\
624 Set the path that libguestfs searches for kernel and initrd.img.
625
626 The default is C<$libdir/guestfs> unless overridden by setting
627 C<LIBGUESTFS_PATH> environment variable.
628
629 Setting C<path> to C<NULL> restores the default path.");
630
631   ("get_path", (RConstString "path", []), -1, [],
632    [InitNone, Always, TestRun (
633       [["get_path"]])],
634    "get the search path",
635    "\
636 Return the current search path.
637
638 This is always non-NULL.  If it wasn't set already, then this will
639 return the default path.");
640
641   ("set_append", (RErr, [OptString "append"]), -1, [FishAlias "append"],
642    [],
643    "add options to kernel command line",
644    "\
645 This function is used to add additional options to the
646 guest kernel command line.
647
648 The default is C<NULL> unless overridden by setting
649 C<LIBGUESTFS_APPEND> environment variable.
650
651 Setting C<append> to C<NULL> means I<no> additional options
652 are passed (libguestfs always adds a few of its own).");
653
654   ("get_append", (RConstOptString "append", []), -1, [],
655    (* This cannot be tested with the current framework.  The
656     * function can return NULL in normal operations, which the
657     * test framework interprets as an error.
658     *)
659    [],
660    "get the additional kernel options",
661    "\
662 Return the additional kernel options which are added to the
663 guest kernel command line.
664
665 If C<NULL> then no options are added.");
666
667   ("set_autosync", (RErr, [Bool "autosync"]), -1, [FishAlias "autosync"],
668    [],
669    "set autosync mode",
670    "\
671 If C<autosync> is true, this enables autosync.  Libguestfs will make a
672 best effort attempt to run C<guestfs_umount_all> followed by
673 C<guestfs_sync> when the handle is closed
674 (also if the program exits without closing handles).
675
676 This is disabled by default (except in guestfish where it is
677 enabled by default).");
678
679   ("get_autosync", (RBool "autosync", []), -1, [],
680    [InitNone, Always, TestRun (
681       [["get_autosync"]])],
682    "get autosync mode",
683    "\
684 Get the autosync flag.");
685
686   ("set_verbose", (RErr, [Bool "verbose"]), -1, [FishAlias "verbose"],
687    [],
688    "set verbose mode",
689    "\
690 If C<verbose> is true, this turns on verbose messages (to C<stderr>).
691
692 Verbose messages are disabled unless the environment variable
693 C<LIBGUESTFS_DEBUG> is defined and set to C<1>.");
694
695   ("get_verbose", (RBool "verbose", []), -1, [],
696    [],
697    "get verbose mode",
698    "\
699 This returns the verbose messages flag.");
700
701   ("is_ready", (RBool "ready", []), -1, [],
702    [InitNone, Always, TestOutputTrue (
703       [["is_ready"]])],
704    "is ready to accept commands",
705    "\
706 This returns true iff this handle is ready to accept commands
707 (in the C<READY> state).
708
709 For more information on states, see L<guestfs(3)>.");
710
711   ("is_config", (RBool "config", []), -1, [],
712    [InitNone, Always, TestOutputFalse (
713       [["is_config"]])],
714    "is in configuration state",
715    "\
716 This returns true iff this handle is being configured
717 (in the C<CONFIG> state).
718
719 For more information on states, see L<guestfs(3)>.");
720
721   ("is_launching", (RBool "launching", []), -1, [],
722    [InitNone, Always, TestOutputFalse (
723       [["is_launching"]])],
724    "is launching subprocess",
725    "\
726 This returns true iff this handle is launching the subprocess
727 (in the C<LAUNCHING> state).
728
729 For more information on states, see L<guestfs(3)>.");
730
731   ("is_busy", (RBool "busy", []), -1, [],
732    [InitNone, Always, TestOutputFalse (
733       [["is_busy"]])],
734    "is busy processing a command",
735    "\
736 This returns true iff this handle is busy processing a command
737 (in the C<BUSY> state).
738
739 For more information on states, see L<guestfs(3)>.");
740
741   ("get_state", (RInt "state", []), -1, [],
742    [],
743    "get the current state",
744    "\
745 This returns the current state as an opaque integer.  This is
746 only useful for printing debug and internal error messages.
747
748 For more information on states, see L<guestfs(3)>.");
749
750   ("set_memsize", (RErr, [Int "memsize"]), -1, [FishAlias "memsize"],
751    [InitNone, Always, TestOutputInt (
752       [["set_memsize"; "500"];
753        ["get_memsize"]], 500)],
754    "set memory allocated to the qemu subprocess",
755    "\
756 This sets the memory size in megabytes allocated to the
757 qemu subprocess.  This only has any effect if called before
758 C<guestfs_launch>.
759
760 You can also change this by setting the environment
761 variable C<LIBGUESTFS_MEMSIZE> before the handle is
762 created.
763
764 For more information on the architecture of libguestfs,
765 see L<guestfs(3)>.");
766
767   ("get_memsize", (RInt "memsize", []), -1, [],
768    [InitNone, Always, TestOutputIntOp (
769       [["get_memsize"]], ">=", 256)],
770    "get memory allocated to the qemu subprocess",
771    "\
772 This gets the memory size in megabytes allocated to the
773 qemu subprocess.
774
775 If C<guestfs_set_memsize> was not called
776 on this handle, and if C<LIBGUESTFS_MEMSIZE> was not set,
777 then this returns the compiled-in default value for memsize.
778
779 For more information on the architecture of libguestfs,
780 see L<guestfs(3)>.");
781
782   ("get_pid", (RInt "pid", []), -1, [FishAlias "pid"],
783    [InitNone, Always, TestOutputIntOp (
784       [["get_pid"]], ">=", 1)],
785    "get PID of qemu subprocess",
786    "\
787 Return the process ID of the qemu subprocess.  If there is no
788 qemu subprocess, then this will return an error.
789
790 This is an internal call used for debugging and testing.");
791
792   ("version", (RStruct ("version", "version"), []), -1, [],
793    [InitNone, Always, TestOutputStruct (
794       [["version"]], [CompareWithInt ("major", 1)])],
795    "get the library version number",
796    "\
797 Return the libguestfs version number that the program is linked
798 against.
799
800 Note that because of dynamic linking this is not necessarily
801 the version of libguestfs that you compiled against.  You can
802 compile the program, and then at runtime dynamically link
803 against a completely different C<libguestfs.so> library.
804
805 This call was added in version C<1.0.58>.  In previous
806 versions of libguestfs there was no way to get the version
807 number.  From C code you can use dynamic linker functions
808 to find out if this symbol exists (if it doesn't, then
809 it's an earlier version).
810
811 The call returns a structure with four elements.  The first
812 three (C<major>, C<minor> and C<release>) are numbers and
813 correspond to the usual version triplet.  The fourth element
814 (C<extra>) is a string and is normally empty, but may be
815 used for distro-specific information.
816
817 To construct the original version string:
818 C<$major.$minor.$release$extra>
819
820 See also: L<guestfs(3)/LIBGUESTFS VERSION NUMBERS>.
821
822 I<Note:> Don't use this call to test for availability
823 of features.  In enterprise distributions we backport
824 features from later versions into earlier versions,
825 making this an unreliable way to test for features.
826 Use C<guestfs_available> instead.");
827
828   ("set_selinux", (RErr, [Bool "selinux"]), -1, [FishAlias "selinux"],
829    [InitNone, Always, TestOutputTrue (
830       [["set_selinux"; "true"];
831        ["get_selinux"]])],
832    "set SELinux enabled or disabled at appliance boot",
833    "\
834 This sets the selinux flag that is passed to the appliance
835 at boot time.  The default is C<selinux=0> (disabled).
836
837 Note that if SELinux is enabled, it is always in
838 Permissive mode (C<enforcing=0>).
839
840 For more information on the architecture of libguestfs,
841 see L<guestfs(3)>.");
842
843   ("get_selinux", (RBool "selinux", []), -1, [],
844    [],
845    "get SELinux enabled flag",
846    "\
847 This returns the current setting of the selinux flag which
848 is passed to the appliance at boot time.  See C<guestfs_set_selinux>.
849
850 For more information on the architecture of libguestfs,
851 see L<guestfs(3)>.");
852
853   ("set_trace", (RErr, [Bool "trace"]), -1, [FishAlias "trace"],
854    [InitNone, Always, TestOutputFalse (
855       [["set_trace"; "false"];
856        ["get_trace"]])],
857    "enable or disable command traces",
858    "\
859 If the command trace flag is set to 1, then commands are
860 printed on stderr before they are executed in a format
861 which is very similar to the one used by guestfish.  In
862 other words, you can run a program with this enabled, and
863 you will get out a script which you can feed to guestfish
864 to perform the same set of actions.
865
866 If you want to trace C API calls into libguestfs (and
867 other libraries) then possibly a better way is to use
868 the external ltrace(1) command.
869
870 Command traces are disabled unless the environment variable
871 C<LIBGUESTFS_TRACE> is defined and set to C<1>.");
872
873   ("get_trace", (RBool "trace", []), -1, [],
874    [],
875    "get command trace enabled flag",
876    "\
877 Return the command trace flag.");
878
879   ("set_direct", (RErr, [Bool "direct"]), -1, [FishAlias "direct"],
880    [InitNone, Always, TestOutputFalse (
881       [["set_direct"; "false"];
882        ["get_direct"]])],
883    "enable or disable direct appliance mode",
884    "\
885 If the direct appliance mode flag is enabled, then stdin and
886 stdout are passed directly through to the appliance once it
887 is launched.
888
889 One consequence of this is that log messages aren't caught
890 by the library and handled by C<guestfs_set_log_message_callback>,
891 but go straight to stdout.
892
893 You probably don't want to use this unless you know what you
894 are doing.
895
896 The default is disabled.");
897
898   ("get_direct", (RBool "direct", []), -1, [],
899    [],
900    "get direct appliance mode flag",
901    "\
902 Return the direct appliance mode flag.");
903
904   ("set_recovery_proc", (RErr, [Bool "recoveryproc"]), -1, [FishAlias "recovery-proc"],
905    [InitNone, Always, TestOutputTrue (
906       [["set_recovery_proc"; "true"];
907        ["get_recovery_proc"]])],
908    "enable or disable the recovery process",
909    "\
910 If this is called with the parameter C<false> then
911 C<guestfs_launch> does not create a recovery process.  The
912 purpose of the recovery process is to stop runaway qemu
913 processes in the case where the main program aborts abruptly.
914
915 This only has any effect if called before C<guestfs_launch>,
916 and the default is true.
917
918 About the only time when you would want to disable this is
919 if the main process will fork itself into the background
920 (\"daemonize\" itself).  In this case the recovery process
921 thinks that the main program has disappeared and so kills
922 qemu, which is not very helpful.");
923
924   ("get_recovery_proc", (RBool "recoveryproc", []), -1, [],
925    [],
926    "get recovery process enabled flag",
927    "\
928 Return the recovery process enabled flag.");
929
930   ("add_drive_with_if", (RErr, [String "filename"; String "iface"]), -1, [],
931    [],
932    "add a drive specifying the QEMU block emulation to use",
933    "\
934 This is the same as C<guestfs_add_drive> but it allows you
935 to specify the QEMU interface emulation to use at run time.");
936
937   ("add_drive_ro_with_if", (RErr, [String "filename"; String "iface"]), -1, [],
938    [],
939    "add a drive read-only specifying the QEMU block emulation to use",
940    "\
941 This is the same as C<guestfs_add_drive_ro> but it allows you
942 to specify the QEMU interface emulation to use at run time.");
943
944   ("file_architecture", (RString "arch", [Pathname "filename"]), -1, [],
945    [InitISOFS, Always, TestOutput (
946       [["file_architecture"; "/bin-i586-dynamic"]], "i386");
947     InitISOFS, Always, TestOutput (
948       [["file_architecture"; "/bin-sparc-dynamic"]], "sparc");
949     InitISOFS, Always, TestOutput (
950       [["file_architecture"; "/bin-win32.exe"]], "i386");
951     InitISOFS, Always, TestOutput (
952       [["file_architecture"; "/bin-win64.exe"]], "x86_64");
953     InitISOFS, Always, TestOutput (
954       [["file_architecture"; "/bin-x86_64-dynamic"]], "x86_64");
955     InitISOFS, Always, TestOutput (
956       [["file_architecture"; "/lib-i586.so"]], "i386");
957     InitISOFS, Always, TestOutput (
958       [["file_architecture"; "/lib-sparc.so"]], "sparc");
959     InitISOFS, Always, TestOutput (
960       [["file_architecture"; "/lib-win32.dll"]], "i386");
961     InitISOFS, Always, TestOutput (
962       [["file_architecture"; "/lib-win64.dll"]], "x86_64");
963     InitISOFS, Always, TestOutput (
964       [["file_architecture"; "/lib-x86_64.so"]], "x86_64");
965     InitISOFS, Always, TestOutput (
966       [["file_architecture"; "/initrd-x86_64.img"]], "x86_64");
967     InitISOFS, Always, TestOutput (
968       [["file_architecture"; "/initrd-x86_64.img.gz"]], "x86_64");],
969    "detect the architecture of a binary file",
970    "\
971 This detects the architecture of the binary C<filename>,
972 and returns it if known.
973
974 Currently defined architectures are:
975
976 =over 4
977
978 =item \"i386\"
979
980 This string is returned for all 32 bit i386, i486, i586, i686 binaries
981 irrespective of the precise processor requirements of the binary.
982
983 =item \"x86_64\"
984
985 64 bit x86-64.
986
987 =item \"sparc\"
988
989 32 bit SPARC.
990
991 =item \"sparc64\"
992
993 64 bit SPARC V9 and above.
994
995 =item \"ia64\"
996
997 Intel Itanium.
998
999 =item \"ppc\"
1000
1001 32 bit Power PC.
1002
1003 =item \"ppc64\"
1004
1005 64 bit Power PC.
1006
1007 =back
1008
1009 Libguestfs may return other architecture strings in future.
1010
1011 The function works on at least the following types of files:
1012
1013 =over 4
1014
1015 =item *
1016
1017 many types of Un*x and Linux binary
1018
1019 =item *
1020
1021 many types of Un*x and Linux shared library
1022
1023 =item *
1024
1025 Windows Win32 and Win64 binaries
1026
1027 =item *
1028
1029 Windows Win32 and Win64 DLLs
1030
1031 Win32 binaries and DLLs return C<i386>.
1032
1033 Win64 binaries and DLLs return C<x86_64>.
1034
1035 =item *
1036
1037 Linux kernel modules
1038
1039 =item *
1040
1041 Linux new-style initrd images
1042
1043 =item *
1044
1045 some non-x86 Linux vmlinuz kernels
1046
1047 =back
1048
1049 What it can't do currently:
1050
1051 =over 4
1052
1053 =item *
1054
1055 static libraries (libfoo.a)
1056
1057 =item *
1058
1059 Linux old-style initrd as compressed ext2 filesystem (RHEL 3)
1060
1061 =item *
1062
1063 x86 Linux vmlinuz kernels
1064
1065 x86 vmlinuz images (bzImage format) consist of a mix of 16-, 32- and
1066 compressed code, and are horribly hard to unpack.  If you want to find
1067 the architecture of a kernel, use the architecture of the associated
1068 initrd or kernel module(s) instead.
1069
1070 =back");
1071
1072   ("inspect_os", (RStringList "roots", []), -1, [],
1073    [],
1074    "inspect disk and return list of operating systems found",
1075    "\
1076 This function uses other libguestfs functions and certain
1077 heuristics to inspect the disk(s) (usually disks belonging to
1078 a virtual machine), looking for operating systems.
1079
1080 The list returned is empty if no operating systems were found.
1081
1082 If one operating system was found, then this returns a list with
1083 a single element, which is the name of the root filesystem of
1084 this operating system.  It is also possible for this function
1085 to return a list containing more than one element, indicating
1086 a dual-boot or multi-boot virtual machine, with each element being
1087 the root filesystem of one of the operating systems.
1088
1089 You can pass the root string(s) returned to other
1090 C<guestfs_inspect_get_*> functions in order to query further
1091 information about each operating system, such as the name
1092 and version.
1093
1094 This function uses other libguestfs features such as
1095 C<guestfs_mount_ro> and C<guestfs_umount_all> in order to mount
1096 and unmount filesystems and look at the contents.  This should
1097 be called with no disks currently mounted.  The function may also
1098 use Augeas, so any existing Augeas handle will be closed.
1099
1100 This function cannot decrypt encrypted disks.  The caller
1101 must do that first (supplying the necessary keys) if the
1102 disk is encrypted.
1103
1104 Please read L<guestfs(3)/INSPECTION> for more details.");
1105
1106   ("inspect_get_type", (RString "name", [Device "root"]), -1, [],
1107    [],
1108    "get type of inspected operating system",
1109    "\
1110 This function should only be called with a root device string
1111 as returned by C<guestfs_inspect_os>.
1112
1113 This returns the type of the inspected operating system.
1114 Currently defined types are:
1115
1116 =over 4
1117
1118 =item \"linux\"
1119
1120 Any Linux-based operating system.
1121
1122 =item \"windows\"
1123
1124 Any Microsoft Windows operating system.
1125
1126 =item \"unknown\"
1127
1128 The operating system type could not be determined.
1129
1130 =back
1131
1132 Future versions of libguestfs may return other strings here.
1133 The caller should be prepared to handle any string.
1134
1135 Please read L<guestfs(3)/INSPECTION> for more details.");
1136
1137   ("inspect_get_arch", (RString "arch", [Device "root"]), -1, [],
1138    [],
1139    "get architecture of inspected operating system",
1140    "\
1141 This function should only be called with a root device string
1142 as returned by C<guestfs_inspect_os>.
1143
1144 This returns the architecture of the inspected operating system.
1145 The possible return values are listed under
1146 C<guestfs_file_architecture>.
1147
1148 If the architecture could not be determined, then the
1149 string C<unknown> is returned.
1150
1151 Please read L<guestfs(3)/INSPECTION> for more details.");
1152
1153   ("inspect_get_distro", (RString "distro", [Device "root"]), -1, [],
1154    [],
1155    "get distro of inspected operating system",
1156    "\
1157 This function should only be called with a root device string
1158 as returned by C<guestfs_inspect_os>.
1159
1160 This returns the distro (distribution) of the inspected operating
1161 system.
1162
1163 Currently defined distros are:
1164
1165 =over 4
1166
1167 =item \"debian\"
1168
1169 Debian or a Debian-derived distro such as Ubuntu.
1170
1171 =item \"fedora\"
1172
1173 Fedora.
1174
1175 =item \"redhat-based\"
1176
1177 Some Red Hat-derived distro.
1178
1179 =item \"rhel\"
1180
1181 Red Hat Enterprise Linux and some derivatives.
1182
1183 =item \"windows\"
1184
1185 Windows does not have distributions.  This string is
1186 returned if the OS type is Windows.
1187
1188 =item \"unknown\"
1189
1190 The distro could not be determined.
1191
1192 =back
1193
1194 Future versions of libguestfs may return other strings here.
1195 The caller should be prepared to handle any string.
1196
1197 Please read L<guestfs(3)/INSPECTION> for more details.");
1198
1199   ("inspect_get_major_version", (RInt "major", [Device "root"]), -1, [],
1200    [],
1201    "get major version of inspected operating system",
1202    "\
1203 This function should only be called with a root device string
1204 as returned by C<guestfs_inspect_os>.
1205
1206 This returns the major version number of the inspected operating
1207 system.
1208
1209 Windows uses a consistent versioning scheme which is I<not>
1210 reflected in the popular public names used by the operating system.
1211 Notably the operating system known as \"Windows 7\" is really
1212 version 6.1 (ie. major = 6, minor = 1).  You can find out the
1213 real versions corresponding to releases of Windows by consulting
1214 Wikipedia or MSDN.
1215
1216 If the version could not be determined, then C<0> is returned.
1217
1218 Please read L<guestfs(3)/INSPECTION> for more details.");
1219
1220   ("inspect_get_minor_version", (RInt "minor", [Device "root"]), -1, [],
1221    [],
1222    "get minor version of inspected operating system",
1223    "\
1224 This function should only be called with a root device string
1225 as returned by C<guestfs_inspect_os>.
1226
1227 This returns the minor version number of the inspected operating
1228 system.
1229
1230 If the version could not be determined, then C<0> is returned.
1231
1232 Please read L<guestfs(3)/INSPECTION> for more details.
1233 See also C<guestfs_inspect_get_major_version>.");
1234
1235   ("inspect_get_product_name", (RString "product", [Device "root"]), -1, [],
1236    [],
1237    "get product name of inspected operating system",
1238    "\
1239 This function should only be called with a root device string
1240 as returned by C<guestfs_inspect_os>.
1241
1242 This returns the product name of the inspected operating
1243 system.  The product name is generally some freeform string
1244 which can be displayed to the user, but should not be
1245 parsed by programs.
1246
1247 If the product name could not be determined, then the
1248 string C<unknown> is returned.
1249
1250 Please read L<guestfs(3)/INSPECTION> for more details.");
1251
1252   ("inspect_get_mountpoints", (RHashtable "mountpoints", [Device "root"]), -1, [],
1253    [],
1254    "get mountpoints of inspected operating system",
1255    "\
1256 This function should only be called with a root device string
1257 as returned by C<guestfs_inspect_os>.
1258
1259 This returns a hash of where we think the filesystems
1260 associated with this operating system should be mounted.
1261 Callers should note that this is at best an educated guess
1262 made by reading configuration files such as C</etc/fstab>.
1263
1264 Each element in the returned hashtable has a key which
1265 is the path of the mountpoint (eg. C</boot>) and a value
1266 which is the filesystem that would be mounted there
1267 (eg. C</dev/sda1>).
1268
1269 Non-mounted devices such as swap devices are I<not>
1270 returned in this list.
1271
1272 Please read L<guestfs(3)/INSPECTION> for more details.
1273 See also C<guestfs_inspect_get_filesystems>.");
1274
1275   ("inspect_get_filesystems", (RStringList "filesystems", [Device "root"]), -1, [],
1276    [],
1277    "get filesystems associated with inspected operating system",
1278    "\
1279 This function should only be called with a root device string
1280 as returned by C<guestfs_inspect_os>.
1281
1282 This returns a list of all the filesystems that we think
1283 are associated with this operating system.  This includes
1284 the root filesystem, other ordinary filesystems, and
1285 non-mounted devices like swap partitions.
1286
1287 In the case of a multi-boot virtual machine, it is possible
1288 for a filesystem to be shared between operating systems.
1289
1290 Please read L<guestfs(3)/INSPECTION> for more details.
1291 See also C<guestfs_inspect_get_mountpoints>.");
1292
1293   ("set_network", (RErr, [Bool "network"]), -1, [FishAlias "network"],
1294    [],
1295    "set enable network flag",
1296    "\
1297 If C<network> is true, then the network is enabled in the
1298 libguestfs appliance.  The default is false.
1299
1300 This affects whether commands are able to access the network
1301 (see L<guestfs(3)/RUNNING COMMANDS>).
1302
1303 You must call this before calling C<guestfs_launch>, otherwise
1304 it has no effect.");
1305
1306   ("get_network", (RBool "network", []), -1, [],
1307    [],
1308    "get enable network flag",
1309    "\
1310 This returns the enable network flag.");
1311
1312 ]
1313
1314 (* daemon_functions are any functions which cause some action
1315  * to take place in the daemon.
1316  *)
1317
1318 let daemon_functions = [
1319   ("mount", (RErr, [Device "device"; String "mountpoint"]), 1, [],
1320    [InitEmpty, Always, TestOutput (
1321       [["part_disk"; "/dev/sda"; "mbr"];
1322        ["mkfs"; "ext2"; "/dev/sda1"];
1323        ["mount"; "/dev/sda1"; "/"];
1324        ["write"; "/new"; "new file contents"];
1325        ["cat"; "/new"]], "new file contents")],
1326    "mount a guest disk at a position in the filesystem",
1327    "\
1328 Mount a guest disk at a position in the filesystem.  Block devices
1329 are named C</dev/sda>, C</dev/sdb> and so on, as they were added to
1330 the guest.  If those block devices contain partitions, they will have
1331 the usual names (eg. C</dev/sda1>).  Also LVM C</dev/VG/LV>-style
1332 names can be used.
1333
1334 The rules are the same as for L<mount(2)>:  A filesystem must
1335 first be mounted on C</> before others can be mounted.  Other
1336 filesystems can only be mounted on directories which already
1337 exist.
1338
1339 The mounted filesystem is writable, if we have sufficient permissions
1340 on the underlying device.
1341
1342 B<Important note:>
1343 When you use this call, the filesystem options C<sync> and C<noatime>
1344 are set implicitly.  This was originally done because we thought it
1345 would improve reliability, but it turns out that I<-o sync> has a
1346 very large negative performance impact and negligible effect on
1347 reliability.  Therefore we recommend that you avoid using
1348 C<guestfs_mount> in any code that needs performance, and instead
1349 use C<guestfs_mount_options> (use an empty string for the first
1350 parameter if you don't want any options).");
1351
1352   ("sync", (RErr, []), 2, [],
1353    [ InitEmpty, Always, TestRun [["sync"]]],
1354    "sync disks, writes are flushed through to the disk image",
1355    "\
1356 This syncs the disk, so that any writes are flushed through to the
1357 underlying disk image.
1358
1359 You should always call this if you have modified a disk image, before
1360 closing the handle.");
1361
1362   ("touch", (RErr, [Pathname "path"]), 3, [],
1363    [InitBasicFS, Always, TestOutputTrue (
1364       [["touch"; "/new"];
1365        ["exists"; "/new"]])],
1366    "update file timestamps or create a new file",
1367    "\
1368 Touch acts like the L<touch(1)> command.  It can be used to
1369 update the timestamps on a file, or, if the file does not exist,
1370 to create a new zero-length file.
1371
1372 This command only works on regular files, and will fail on other
1373 file types such as directories, symbolic links, block special etc.");
1374
1375   ("cat", (RString "content", [Pathname "path"]), 4, [ProtocolLimitWarning],
1376    [InitISOFS, Always, TestOutput (
1377       [["cat"; "/known-2"]], "abcdef\n")],
1378    "list the contents of a file",
1379    "\
1380 Return the contents of the file named C<path>.
1381
1382 Note that this function cannot correctly handle binary files
1383 (specifically, files containing C<\\0> character which is treated
1384 as end of string).  For those you need to use the C<guestfs_read_file>
1385 or C<guestfs_download> functions which have a more complex interface.");
1386
1387   ("ll", (RString "listing", [Pathname "directory"]), 5, [],
1388    [], (* XXX Tricky to test because it depends on the exact format
1389         * of the 'ls -l' command, which changes between F10 and F11.
1390         *)
1391    "list the files in a directory (long format)",
1392    "\
1393 List the files in C<directory> (relative to the root directory,
1394 there is no cwd) in the format of 'ls -la'.
1395
1396 This command is mostly useful for interactive sessions.  It
1397 is I<not> intended that you try to parse the output string.");
1398
1399   ("ls", (RStringList "listing", [Pathname "directory"]), 6, [],
1400    [InitBasicFS, Always, TestOutputList (
1401       [["touch"; "/new"];
1402        ["touch"; "/newer"];
1403        ["touch"; "/newest"];
1404        ["ls"; "/"]], ["lost+found"; "new"; "newer"; "newest"])],
1405    "list the files in a directory",
1406    "\
1407 List the files in C<directory> (relative to the root directory,
1408 there is no cwd).  The '.' and '..' entries are not returned, but
1409 hidden files are shown.
1410
1411 This command is mostly useful for interactive sessions.  Programs
1412 should probably use C<guestfs_readdir> instead.");
1413
1414   ("list_devices", (RStringList "devices", []), 7, [],
1415    [InitEmpty, Always, TestOutputListOfDevices (
1416       [["list_devices"]], ["/dev/sda"; "/dev/sdb"; "/dev/sdc"; "/dev/sdd"])],
1417    "list the block devices",
1418    "\
1419 List all the block devices.
1420
1421 The full block device names are returned, eg. C</dev/sda>");
1422
1423   ("list_partitions", (RStringList "partitions", []), 8, [],
1424    [InitBasicFS, Always, TestOutputListOfDevices (
1425       [["list_partitions"]], ["/dev/sda1"]);
1426     InitEmpty, Always, TestOutputListOfDevices (
1427       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1428        ["list_partitions"]], ["/dev/sda1"; "/dev/sda2"; "/dev/sda3"])],
1429    "list the partitions",
1430    "\
1431 List all the partitions detected on all block devices.
1432
1433 The full partition device names are returned, eg. C</dev/sda1>
1434
1435 This does not return logical volumes.  For that you will need to
1436 call C<guestfs_lvs>.");
1437
1438   ("pvs", (RStringList "physvols", []), 9, [Optional "lvm2"],
1439    [InitBasicFSonLVM, Always, TestOutputListOfDevices (
1440       [["pvs"]], ["/dev/sda1"]);
1441     InitEmpty, Always, TestOutputListOfDevices (
1442       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1443        ["pvcreate"; "/dev/sda1"];
1444        ["pvcreate"; "/dev/sda2"];
1445        ["pvcreate"; "/dev/sda3"];
1446        ["pvs"]], ["/dev/sda1"; "/dev/sda2"; "/dev/sda3"])],
1447    "list the LVM physical volumes (PVs)",
1448    "\
1449 List all the physical volumes detected.  This is the equivalent
1450 of the L<pvs(8)> command.
1451
1452 This returns a list of just the device names that contain
1453 PVs (eg. C</dev/sda2>).
1454
1455 See also C<guestfs_pvs_full>.");
1456
1457   ("vgs", (RStringList "volgroups", []), 10, [Optional "lvm2"],
1458    [InitBasicFSonLVM, Always, TestOutputList (
1459       [["vgs"]], ["VG"]);
1460     InitEmpty, Always, TestOutputList (
1461       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1462        ["pvcreate"; "/dev/sda1"];
1463        ["pvcreate"; "/dev/sda2"];
1464        ["pvcreate"; "/dev/sda3"];
1465        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1466        ["vgcreate"; "VG2"; "/dev/sda3"];
1467        ["vgs"]], ["VG1"; "VG2"])],
1468    "list the LVM volume groups (VGs)",
1469    "\
1470 List all the volumes groups detected.  This is the equivalent
1471 of the L<vgs(8)> command.
1472
1473 This returns a list of just the volume group names that were
1474 detected (eg. C<VolGroup00>).
1475
1476 See also C<guestfs_vgs_full>.");
1477
1478   ("lvs", (RStringList "logvols", []), 11, [Optional "lvm2"],
1479    [InitBasicFSonLVM, Always, TestOutputList (
1480       [["lvs"]], ["/dev/VG/LV"]);
1481     InitEmpty, Always, TestOutputList (
1482       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1483        ["pvcreate"; "/dev/sda1"];
1484        ["pvcreate"; "/dev/sda2"];
1485        ["pvcreate"; "/dev/sda3"];
1486        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1487        ["vgcreate"; "VG2"; "/dev/sda3"];
1488        ["lvcreate"; "LV1"; "VG1"; "50"];
1489        ["lvcreate"; "LV2"; "VG1"; "50"];
1490        ["lvcreate"; "LV3"; "VG2"; "50"];
1491        ["lvs"]], ["/dev/VG1/LV1"; "/dev/VG1/LV2"; "/dev/VG2/LV3"])],
1492    "list the LVM logical volumes (LVs)",
1493    "\
1494 List all the logical volumes detected.  This is the equivalent
1495 of the L<lvs(8)> command.
1496
1497 This returns a list of the logical volume device names
1498 (eg. C</dev/VolGroup00/LogVol00>).
1499
1500 See also C<guestfs_lvs_full>.");
1501
1502   ("pvs_full", (RStructList ("physvols", "lvm_pv"), []), 12, [Optional "lvm2"],
1503    [], (* XXX how to test? *)
1504    "list the LVM physical volumes (PVs)",
1505    "\
1506 List all the physical volumes detected.  This is the equivalent
1507 of the L<pvs(8)> command.  The \"full\" version includes all fields.");
1508
1509   ("vgs_full", (RStructList ("volgroups", "lvm_vg"), []), 13, [Optional "lvm2"],
1510    [], (* XXX how to test? *)
1511    "list the LVM volume groups (VGs)",
1512    "\
1513 List all the volumes groups detected.  This is the equivalent
1514 of the L<vgs(8)> command.  The \"full\" version includes all fields.");
1515
1516   ("lvs_full", (RStructList ("logvols", "lvm_lv"), []), 14, [Optional "lvm2"],
1517    [], (* XXX how to test? *)
1518    "list the LVM logical volumes (LVs)",
1519    "\
1520 List all the logical volumes detected.  This is the equivalent
1521 of the L<lvs(8)> command.  The \"full\" version includes all fields.");
1522
1523   ("read_lines", (RStringList "lines", [Pathname "path"]), 15, [],
1524    [InitISOFS, Always, TestOutputList (
1525       [["read_lines"; "/known-4"]], ["abc"; "def"; "ghi"]);
1526     InitISOFS, Always, TestOutputList (
1527       [["read_lines"; "/empty"]], [])],
1528    "read file as lines",
1529    "\
1530 Return the contents of the file named C<path>.
1531
1532 The file contents are returned as a list of lines.  Trailing
1533 C<LF> and C<CRLF> character sequences are I<not> returned.
1534
1535 Note that this function cannot correctly handle binary files
1536 (specifically, files containing C<\\0> character which is treated
1537 as end of line).  For those you need to use the C<guestfs_read_file>
1538 function which has a more complex interface.");
1539
1540   ("aug_init", (RErr, [Pathname "root"; Int "flags"]), 16, [Optional "augeas"],
1541    [], (* XXX Augeas code needs tests. *)
1542    "create a new Augeas handle",
1543    "\
1544 Create a new Augeas handle for editing configuration files.
1545 If there was any previous Augeas handle associated with this
1546 guestfs session, then it is closed.
1547
1548 You must call this before using any other C<guestfs_aug_*>
1549 commands.
1550
1551 C<root> is the filesystem root.  C<root> must not be NULL,
1552 use C</> instead.
1553
1554 The flags are the same as the flags defined in
1555 E<lt>augeas.hE<gt>, the logical I<or> of the following
1556 integers:
1557
1558 =over 4
1559
1560 =item C<AUG_SAVE_BACKUP> = 1
1561
1562 Keep the original file with a C<.augsave> extension.
1563
1564 =item C<AUG_SAVE_NEWFILE> = 2
1565
1566 Save changes into a file with extension C<.augnew>, and
1567 do not overwrite original.  Overrides C<AUG_SAVE_BACKUP>.
1568
1569 =item C<AUG_TYPE_CHECK> = 4
1570
1571 Typecheck lenses (can be expensive).
1572
1573 =item C<AUG_NO_STDINC> = 8
1574
1575 Do not use standard load path for modules.
1576
1577 =item C<AUG_SAVE_NOOP> = 16
1578
1579 Make save a no-op, just record what would have been changed.
1580
1581 =item C<AUG_NO_LOAD> = 32
1582
1583 Do not load the tree in C<guestfs_aug_init>.
1584
1585 =back
1586
1587 To close the handle, you can call C<guestfs_aug_close>.
1588
1589 To find out more about Augeas, see L<http://augeas.net/>.");
1590
1591   ("aug_close", (RErr, []), 26, [Optional "augeas"],
1592    [], (* XXX Augeas code needs tests. *)
1593    "close the current Augeas handle",
1594    "\
1595 Close the current Augeas handle and free up any resources
1596 used by it.  After calling this, you have to call
1597 C<guestfs_aug_init> again before you can use any other
1598 Augeas functions.");
1599
1600   ("aug_defvar", (RInt "nrnodes", [String "name"; OptString "expr"]), 17, [Optional "augeas"],
1601    [], (* XXX Augeas code needs tests. *)
1602    "define an Augeas variable",
1603    "\
1604 Defines an Augeas variable C<name> whose value is the result
1605 of evaluating C<expr>.  If C<expr> is NULL, then C<name> is
1606 undefined.
1607
1608 On success this returns the number of nodes in C<expr>, or
1609 C<0> if C<expr> evaluates to something which is not a nodeset.");
1610
1611   ("aug_defnode", (RStruct ("nrnodescreated", "int_bool"), [String "name"; String "expr"; String "val"]), 18, [Optional "augeas"],
1612    [], (* XXX Augeas code needs tests. *)
1613    "define an Augeas node",
1614    "\
1615 Defines a variable C<name> whose value is the result of
1616 evaluating C<expr>.
1617
1618 If C<expr> evaluates to an empty nodeset, a node is created,
1619 equivalent to calling C<guestfs_aug_set> C<expr>, C<value>.
1620 C<name> will be the nodeset containing that single node.
1621
1622 On success this returns a pair containing the
1623 number of nodes in the nodeset, and a boolean flag
1624 if a node was created.");
1625
1626   ("aug_get", (RString "val", [String "augpath"]), 19, [Optional "augeas"],
1627    [], (* XXX Augeas code needs tests. *)
1628    "look up the value of an Augeas path",
1629    "\
1630 Look up the value associated with C<path>.  If C<path>
1631 matches exactly one node, the C<value> is returned.");
1632
1633   ("aug_set", (RErr, [String "augpath"; String "val"]), 20, [Optional "augeas"],
1634    [], (* XXX Augeas code needs tests. *)
1635    "set Augeas path to value",
1636    "\
1637 Set the value associated with C<path> to C<val>.
1638
1639 In the Augeas API, it is possible to clear a node by setting
1640 the value to NULL.  Due to an oversight in the libguestfs API
1641 you cannot do that with this call.  Instead you must use the
1642 C<guestfs_aug_clear> call.");
1643
1644   ("aug_insert", (RErr, [String "augpath"; String "label"; Bool "before"]), 21, [Optional "augeas"],
1645    [], (* XXX Augeas code needs tests. *)
1646    "insert a sibling Augeas node",
1647    "\
1648 Create a new sibling C<label> for C<path>, inserting it into
1649 the tree before or after C<path> (depending on the boolean
1650 flag C<before>).
1651
1652 C<path> must match exactly one existing node in the tree, and
1653 C<label> must be a label, ie. not contain C</>, C<*> or end
1654 with a bracketed index C<[N]>.");
1655
1656   ("aug_rm", (RInt "nrnodes", [String "augpath"]), 22, [Optional "augeas"],
1657    [], (* XXX Augeas code needs tests. *)
1658    "remove an Augeas path",
1659    "\
1660 Remove C<path> and all of its children.
1661
1662 On success this returns the number of entries which were removed.");
1663
1664   ("aug_mv", (RErr, [String "src"; String "dest"]), 23, [Optional "augeas"],
1665    [], (* XXX Augeas code needs tests. *)
1666    "move Augeas node",
1667    "\
1668 Move the node C<src> to C<dest>.  C<src> must match exactly
1669 one node.  C<dest> is overwritten if it exists.");
1670
1671   ("aug_match", (RStringList "matches", [String "augpath"]), 24, [Optional "augeas"],
1672    [], (* XXX Augeas code needs tests. *)
1673    "return Augeas nodes which match augpath",
1674    "\
1675 Returns a list of paths which match the path expression C<path>.
1676 The returned paths are sufficiently qualified so that they match
1677 exactly one node in the current tree.");
1678
1679   ("aug_save", (RErr, []), 25, [Optional "augeas"],
1680    [], (* XXX Augeas code needs tests. *)
1681    "write all pending Augeas changes to disk",
1682    "\
1683 This writes all pending changes to disk.
1684
1685 The flags which were passed to C<guestfs_aug_init> affect exactly
1686 how files are saved.");
1687
1688   ("aug_load", (RErr, []), 27, [Optional "augeas"],
1689    [], (* XXX Augeas code needs tests. *)
1690    "load files into the tree",
1691    "\
1692 Load files into the tree.
1693
1694 See C<aug_load> in the Augeas documentation for the full gory
1695 details.");
1696
1697   ("aug_ls", (RStringList "matches", [String "augpath"]), 28, [Optional "augeas"],
1698    [], (* XXX Augeas code needs tests. *)
1699    "list Augeas nodes under augpath",
1700    "\
1701 This is just a shortcut for listing C<guestfs_aug_match>
1702 C<path/*> and sorting the resulting nodes into alphabetical order.");
1703
1704   ("rm", (RErr, [Pathname "path"]), 29, [],
1705    [InitBasicFS, Always, TestRun
1706       [["touch"; "/new"];
1707        ["rm"; "/new"]];
1708     InitBasicFS, Always, TestLastFail
1709       [["rm"; "/new"]];
1710     InitBasicFS, Always, TestLastFail
1711       [["mkdir"; "/new"];
1712        ["rm"; "/new"]]],
1713    "remove a file",
1714    "\
1715 Remove the single file C<path>.");
1716
1717   ("rmdir", (RErr, [Pathname "path"]), 30, [],
1718    [InitBasicFS, Always, TestRun
1719       [["mkdir"; "/new"];
1720        ["rmdir"; "/new"]];
1721     InitBasicFS, Always, TestLastFail
1722       [["rmdir"; "/new"]];
1723     InitBasicFS, Always, TestLastFail
1724       [["touch"; "/new"];
1725        ["rmdir"; "/new"]]],
1726    "remove a directory",
1727    "\
1728 Remove the single directory C<path>.");
1729
1730   ("rm_rf", (RErr, [Pathname "path"]), 31, [],
1731    [InitBasicFS, Always, TestOutputFalse
1732       [["mkdir"; "/new"];
1733        ["mkdir"; "/new/foo"];
1734        ["touch"; "/new/foo/bar"];
1735        ["rm_rf"; "/new"];
1736        ["exists"; "/new"]]],
1737    "remove a file or directory recursively",
1738    "\
1739 Remove the file or directory C<path>, recursively removing the
1740 contents if its a directory.  This is like the C<rm -rf> shell
1741 command.");
1742
1743   ("mkdir", (RErr, [Pathname "path"]), 32, [],
1744    [InitBasicFS, Always, TestOutputTrue
1745       [["mkdir"; "/new"];
1746        ["is_dir"; "/new"]];
1747     InitBasicFS, Always, TestLastFail
1748       [["mkdir"; "/new/foo/bar"]]],
1749    "create a directory",
1750    "\
1751 Create a directory named C<path>.");
1752
1753   ("mkdir_p", (RErr, [Pathname "path"]), 33, [],
1754    [InitBasicFS, Always, TestOutputTrue
1755       [["mkdir_p"; "/new/foo/bar"];
1756        ["is_dir"; "/new/foo/bar"]];
1757     InitBasicFS, Always, TestOutputTrue
1758       [["mkdir_p"; "/new/foo/bar"];
1759        ["is_dir"; "/new/foo"]];
1760     InitBasicFS, Always, TestOutputTrue
1761       [["mkdir_p"; "/new/foo/bar"];
1762        ["is_dir"; "/new"]];
1763     (* Regression tests for RHBZ#503133: *)
1764     InitBasicFS, Always, TestRun
1765       [["mkdir"; "/new"];
1766        ["mkdir_p"; "/new"]];
1767     InitBasicFS, Always, TestLastFail
1768       [["touch"; "/new"];
1769        ["mkdir_p"; "/new"]]],
1770    "create a directory and parents",
1771    "\
1772 Create a directory named C<path>, creating any parent directories
1773 as necessary.  This is like the C<mkdir -p> shell command.");
1774
1775   ("chmod", (RErr, [Int "mode"; Pathname "path"]), 34, [],
1776    [], (* XXX Need stat command to test *)
1777    "change file mode",
1778    "\
1779 Change the mode (permissions) of C<path> to C<mode>.  Only
1780 numeric modes are supported.
1781
1782 I<Note>: When using this command from guestfish, C<mode>
1783 by default would be decimal, unless you prefix it with
1784 C<0> to get octal, ie. use C<0700> not C<700>.
1785
1786 The mode actually set is affected by the umask.");
1787
1788   ("chown", (RErr, [Int "owner"; Int "group"; Pathname "path"]), 35, [],
1789    [], (* XXX Need stat command to test *)
1790    "change file owner and group",
1791    "\
1792 Change the file owner to C<owner> and group to C<group>.
1793
1794 Only numeric uid and gid are supported.  If you want to use
1795 names, you will need to locate and parse the password file
1796 yourself (Augeas support makes this relatively easy).");
1797
1798   ("exists", (RBool "existsflag", [Pathname "path"]), 36, [],
1799    [InitISOFS, Always, TestOutputTrue (
1800       [["exists"; "/empty"]]);
1801     InitISOFS, Always, TestOutputTrue (
1802       [["exists"; "/directory"]])],
1803    "test if file or directory exists",
1804    "\
1805 This returns C<true> if and only if there is a file, directory
1806 (or anything) with the given C<path> name.
1807
1808 See also C<guestfs_is_file>, C<guestfs_is_dir>, C<guestfs_stat>.");
1809
1810   ("is_file", (RBool "fileflag", [Pathname "path"]), 37, [],
1811    [InitISOFS, Always, TestOutputTrue (
1812       [["is_file"; "/known-1"]]);
1813     InitISOFS, Always, TestOutputFalse (
1814       [["is_file"; "/directory"]])],
1815    "test if file exists",
1816    "\
1817 This returns C<true> if and only if there is a file
1818 with the given C<path> name.  Note that it returns false for
1819 other objects like directories.
1820
1821 See also C<guestfs_stat>.");
1822
1823   ("is_dir", (RBool "dirflag", [Pathname "path"]), 38, [],
1824    [InitISOFS, Always, TestOutputFalse (
1825       [["is_dir"; "/known-3"]]);
1826     InitISOFS, Always, TestOutputTrue (
1827       [["is_dir"; "/directory"]])],
1828    "test if file exists",
1829    "\
1830 This returns C<true> if and only if there is a directory
1831 with the given C<path> name.  Note that it returns false for
1832 other objects like files.
1833
1834 See also C<guestfs_stat>.");
1835
1836   ("pvcreate", (RErr, [Device "device"]), 39, [Optional "lvm2"],
1837    [InitEmpty, Always, TestOutputListOfDevices (
1838       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1839        ["pvcreate"; "/dev/sda1"];
1840        ["pvcreate"; "/dev/sda2"];
1841        ["pvcreate"; "/dev/sda3"];
1842        ["pvs"]], ["/dev/sda1"; "/dev/sda2"; "/dev/sda3"])],
1843    "create an LVM physical volume",
1844    "\
1845 This creates an LVM physical volume on the named C<device>,
1846 where C<device> should usually be a partition name such
1847 as C</dev/sda1>.");
1848
1849   ("vgcreate", (RErr, [String "volgroup"; DeviceList "physvols"]), 40, [Optional "lvm2"],
1850    [InitEmpty, Always, TestOutputList (
1851       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1852        ["pvcreate"; "/dev/sda1"];
1853        ["pvcreate"; "/dev/sda2"];
1854        ["pvcreate"; "/dev/sda3"];
1855        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1856        ["vgcreate"; "VG2"; "/dev/sda3"];
1857        ["vgs"]], ["VG1"; "VG2"])],
1858    "create an LVM volume group",
1859    "\
1860 This creates an LVM volume group called C<volgroup>
1861 from the non-empty list of physical volumes C<physvols>.");
1862
1863   ("lvcreate", (RErr, [String "logvol"; String "volgroup"; Int "mbytes"]), 41, [Optional "lvm2"],
1864    [InitEmpty, Always, TestOutputList (
1865       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1866        ["pvcreate"; "/dev/sda1"];
1867        ["pvcreate"; "/dev/sda2"];
1868        ["pvcreate"; "/dev/sda3"];
1869        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1870        ["vgcreate"; "VG2"; "/dev/sda3"];
1871        ["lvcreate"; "LV1"; "VG1"; "50"];
1872        ["lvcreate"; "LV2"; "VG1"; "50"];
1873        ["lvcreate"; "LV3"; "VG2"; "50"];
1874        ["lvcreate"; "LV4"; "VG2"; "50"];
1875        ["lvcreate"; "LV5"; "VG2"; "50"];
1876        ["lvs"]],
1877       ["/dev/VG1/LV1"; "/dev/VG1/LV2";
1878        "/dev/VG2/LV3"; "/dev/VG2/LV4"; "/dev/VG2/LV5"])],
1879    "create an LVM logical volume",
1880    "\
1881 This creates an LVM logical volume called C<logvol>
1882 on the volume group C<volgroup>, with C<size> megabytes.");
1883
1884   ("mkfs", (RErr, [String "fstype"; Device "device"]), 42, [],
1885    [InitEmpty, Always, TestOutput (
1886       [["part_disk"; "/dev/sda"; "mbr"];
1887        ["mkfs"; "ext2"; "/dev/sda1"];
1888        ["mount_options"; ""; "/dev/sda1"; "/"];
1889        ["write"; "/new"; "new file contents"];
1890        ["cat"; "/new"]], "new file contents")],
1891    "make a filesystem",
1892    "\
1893 This creates a filesystem on C<device> (usually a partition
1894 or LVM logical volume).  The filesystem type is C<fstype>, for
1895 example C<ext3>.");
1896
1897   ("sfdisk", (RErr, [Device "device";
1898                      Int "cyls"; Int "heads"; Int "sectors";
1899                      StringList "lines"]), 43, [DangerWillRobinson],
1900    [],
1901    "create partitions on a block device",
1902    "\
1903 This is a direct interface to the L<sfdisk(8)> program for creating
1904 partitions on block devices.
1905
1906 C<device> should be a block device, for example C</dev/sda>.
1907
1908 C<cyls>, C<heads> and C<sectors> are the number of cylinders, heads
1909 and sectors on the device, which are passed directly to sfdisk as
1910 the I<-C>, I<-H> and I<-S> parameters.  If you pass C<0> for any
1911 of these, then the corresponding parameter is omitted.  Usually for
1912 'large' disks, you can just pass C<0> for these, but for small
1913 (floppy-sized) disks, sfdisk (or rather, the kernel) cannot work
1914 out the right geometry and you will need to tell it.
1915
1916 C<lines> is a list of lines that we feed to C<sfdisk>.  For more
1917 information refer to the L<sfdisk(8)> manpage.
1918
1919 To create a single partition occupying the whole disk, you would
1920 pass C<lines> as a single element list, when the single element being
1921 the string C<,> (comma).
1922
1923 See also: C<guestfs_sfdisk_l>, C<guestfs_sfdisk_N>,
1924 C<guestfs_part_init>");
1925
1926   ("write_file", (RErr, [Pathname "path"; String "content"; Int "size"]), 44, [ProtocolLimitWarning; DeprecatedBy "write"],
1927    (* Regression test for RHBZ#597135. *)
1928    [InitBasicFS, Always, TestLastFail
1929       [["write_file"; "/new"; "abc"; "10000"]]],
1930    "create a file",
1931    "\
1932 This call creates a file called C<path>.  The contents of the
1933 file is the string C<content> (which can contain any 8 bit data),
1934 with length C<size>.
1935
1936 As a special case, if C<size> is C<0>
1937 then the length is calculated using C<strlen> (so in this case
1938 the content cannot contain embedded ASCII NULs).
1939
1940 I<NB.> Owing to a bug, writing content containing ASCII NUL
1941 characters does I<not> work, even if the length is specified.");
1942
1943   ("umount", (RErr, [String "pathordevice"]), 45, [FishAlias "unmount"],
1944    [InitEmpty, Always, TestOutputListOfDevices (
1945       [["part_disk"; "/dev/sda"; "mbr"];
1946        ["mkfs"; "ext2"; "/dev/sda1"];
1947        ["mount_options"; ""; "/dev/sda1"; "/"];
1948        ["mounts"]], ["/dev/sda1"]);
1949     InitEmpty, Always, TestOutputList (
1950       [["part_disk"; "/dev/sda"; "mbr"];
1951        ["mkfs"; "ext2"; "/dev/sda1"];
1952        ["mount_options"; ""; "/dev/sda1"; "/"];
1953        ["umount"; "/"];
1954        ["mounts"]], [])],
1955    "unmount a filesystem",
1956    "\
1957 This unmounts the given filesystem.  The filesystem may be
1958 specified either by its mountpoint (path) or the device which
1959 contains the filesystem.");
1960
1961   ("mounts", (RStringList "devices", []), 46, [],
1962    [InitBasicFS, Always, TestOutputListOfDevices (
1963       [["mounts"]], ["/dev/sda1"])],
1964    "show mounted filesystems",
1965    "\
1966 This returns the list of currently mounted filesystems.  It returns
1967 the list of devices (eg. C</dev/sda1>, C</dev/VG/LV>).
1968
1969 Some internal mounts are not shown.
1970
1971 See also: C<guestfs_mountpoints>");
1972
1973   ("umount_all", (RErr, []), 47, [FishAlias "unmount-all"],
1974    [InitBasicFS, Always, TestOutputList (
1975       [["umount_all"];
1976        ["mounts"]], []);
1977     (* check that umount_all can unmount nested mounts correctly: *)
1978     InitEmpty, Always, TestOutputList (
1979       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1980        ["mkfs"; "ext2"; "/dev/sda1"];
1981        ["mkfs"; "ext2"; "/dev/sda2"];
1982        ["mkfs"; "ext2"; "/dev/sda3"];
1983        ["mount_options"; ""; "/dev/sda1"; "/"];
1984        ["mkdir"; "/mp1"];
1985        ["mount_options"; ""; "/dev/sda2"; "/mp1"];
1986        ["mkdir"; "/mp1/mp2"];
1987        ["mount_options"; ""; "/dev/sda3"; "/mp1/mp2"];
1988        ["mkdir"; "/mp1/mp2/mp3"];
1989        ["umount_all"];
1990        ["mounts"]], [])],
1991    "unmount all filesystems",
1992    "\
1993 This unmounts all mounted filesystems.
1994
1995 Some internal mounts are not unmounted by this call.");
1996
1997   ("lvm_remove_all", (RErr, []), 48, [DangerWillRobinson; Optional "lvm2"],
1998    [],
1999    "remove all LVM LVs, VGs and PVs",
2000    "\
2001 This command removes all LVM logical volumes, volume groups
2002 and physical volumes.");
2003
2004   ("file", (RString "description", [Dev_or_Path "path"]), 49, [],
2005    [InitISOFS, Always, TestOutput (
2006       [["file"; "/empty"]], "empty");
2007     InitISOFS, Always, TestOutput (
2008       [["file"; "/known-1"]], "ASCII text");
2009     InitISOFS, Always, TestLastFail (
2010       [["file"; "/notexists"]]);
2011     InitISOFS, Always, TestOutput (
2012       [["file"; "/abssymlink"]], "symbolic link");
2013     InitISOFS, Always, TestOutput (
2014       [["file"; "/directory"]], "directory")],
2015    "determine file type",
2016    "\
2017 This call uses the standard L<file(1)> command to determine
2018 the type or contents of the file.
2019
2020 This call will also transparently look inside various types
2021 of compressed file.
2022
2023 The exact command which runs is C<file -zb path>.  Note in
2024 particular that the filename is not prepended to the output
2025 (the C<-b> option).
2026
2027 This command can also be used on C</dev/> devices
2028 (and partitions, LV names).  You can for example use this
2029 to determine if a device contains a filesystem, although
2030 it's usually better to use C<guestfs_vfs_type>.
2031
2032 If the C<path> does not begin with C</dev/> then
2033 this command only works for the content of regular files.
2034 For other file types (directory, symbolic link etc) it
2035 will just return the string C<directory> etc.");
2036
2037   ("command", (RString "output", [StringList "arguments"]), 50, [ProtocolLimitWarning],
2038    [InitBasicFS, Always, TestOutput (
2039       [["upload"; "test-command"; "/test-command"];
2040        ["chmod"; "0o755"; "/test-command"];
2041        ["command"; "/test-command 1"]], "Result1");
2042     InitBasicFS, Always, TestOutput (
2043       [["upload"; "test-command"; "/test-command"];
2044        ["chmod"; "0o755"; "/test-command"];
2045        ["command"; "/test-command 2"]], "Result2\n");
2046     InitBasicFS, Always, TestOutput (
2047       [["upload"; "test-command"; "/test-command"];
2048        ["chmod"; "0o755"; "/test-command"];
2049        ["command"; "/test-command 3"]], "\nResult3");
2050     InitBasicFS, Always, TestOutput (
2051       [["upload"; "test-command"; "/test-command"];
2052        ["chmod"; "0o755"; "/test-command"];
2053        ["command"; "/test-command 4"]], "\nResult4\n");
2054     InitBasicFS, Always, TestOutput (
2055       [["upload"; "test-command"; "/test-command"];
2056        ["chmod"; "0o755"; "/test-command"];
2057        ["command"; "/test-command 5"]], "\nResult5\n\n");
2058     InitBasicFS, Always, TestOutput (
2059       [["upload"; "test-command"; "/test-command"];
2060        ["chmod"; "0o755"; "/test-command"];
2061        ["command"; "/test-command 6"]], "\n\nResult6\n\n");
2062     InitBasicFS, Always, TestOutput (
2063       [["upload"; "test-command"; "/test-command"];
2064        ["chmod"; "0o755"; "/test-command"];
2065        ["command"; "/test-command 7"]], "");
2066     InitBasicFS, Always, TestOutput (
2067       [["upload"; "test-command"; "/test-command"];
2068        ["chmod"; "0o755"; "/test-command"];
2069        ["command"; "/test-command 8"]], "\n");
2070     InitBasicFS, Always, TestOutput (
2071       [["upload"; "test-command"; "/test-command"];
2072        ["chmod"; "0o755"; "/test-command"];
2073        ["command"; "/test-command 9"]], "\n\n");
2074     InitBasicFS, Always, TestOutput (
2075       [["upload"; "test-command"; "/test-command"];
2076        ["chmod"; "0o755"; "/test-command"];
2077        ["command"; "/test-command 10"]], "Result10-1\nResult10-2\n");
2078     InitBasicFS, Always, TestOutput (
2079       [["upload"; "test-command"; "/test-command"];
2080        ["chmod"; "0o755"; "/test-command"];
2081        ["command"; "/test-command 11"]], "Result11-1\nResult11-2");
2082     InitBasicFS, Always, TestLastFail (
2083       [["upload"; "test-command"; "/test-command"];
2084        ["chmod"; "0o755"; "/test-command"];
2085        ["command"; "/test-command"]])],
2086    "run a command from the guest filesystem",
2087    "\
2088 This call runs a command from the guest filesystem.  The
2089 filesystem must be mounted, and must contain a compatible
2090 operating system (ie. something Linux, with the same
2091 or compatible processor architecture).
2092
2093 The single parameter is an argv-style list of arguments.
2094 The first element is the name of the program to run.
2095 Subsequent elements are parameters.  The list must be
2096 non-empty (ie. must contain a program name).  Note that
2097 the command runs directly, and is I<not> invoked via
2098 the shell (see C<guestfs_sh>).
2099
2100 The return value is anything printed to I<stdout> by
2101 the command.
2102
2103 If the command returns a non-zero exit status, then
2104 this function returns an error message.  The error message
2105 string is the content of I<stderr> from the command.
2106
2107 The C<$PATH> environment variable will contain at least
2108 C</usr/bin> and C</bin>.  If you require a program from
2109 another location, you should provide the full path in the
2110 first parameter.
2111
2112 Shared libraries and data files required by the program
2113 must be available on filesystems which are mounted in the
2114 correct places.  It is the caller's responsibility to ensure
2115 all filesystems that are needed are mounted at the right
2116 locations.");
2117
2118   ("command_lines", (RStringList "lines", [StringList "arguments"]), 51, [ProtocolLimitWarning],
2119    [InitBasicFS, Always, TestOutputList (
2120       [["upload"; "test-command"; "/test-command"];
2121        ["chmod"; "0o755"; "/test-command"];
2122        ["command_lines"; "/test-command 1"]], ["Result1"]);
2123     InitBasicFS, Always, TestOutputList (
2124       [["upload"; "test-command"; "/test-command"];
2125        ["chmod"; "0o755"; "/test-command"];
2126        ["command_lines"; "/test-command 2"]], ["Result2"]);
2127     InitBasicFS, Always, TestOutputList (
2128       [["upload"; "test-command"; "/test-command"];
2129        ["chmod"; "0o755"; "/test-command"];
2130        ["command_lines"; "/test-command 3"]], ["";"Result3"]);
2131     InitBasicFS, Always, TestOutputList (
2132       [["upload"; "test-command"; "/test-command"];
2133        ["chmod"; "0o755"; "/test-command"];
2134        ["command_lines"; "/test-command 4"]], ["";"Result4"]);
2135     InitBasicFS, Always, TestOutputList (
2136       [["upload"; "test-command"; "/test-command"];
2137        ["chmod"; "0o755"; "/test-command"];
2138        ["command_lines"; "/test-command 5"]], ["";"Result5";""]);
2139     InitBasicFS, Always, TestOutputList (
2140       [["upload"; "test-command"; "/test-command"];
2141        ["chmod"; "0o755"; "/test-command"];
2142        ["command_lines"; "/test-command 6"]], ["";"";"Result6";""]);
2143     InitBasicFS, Always, TestOutputList (
2144       [["upload"; "test-command"; "/test-command"];
2145        ["chmod"; "0o755"; "/test-command"];
2146        ["command_lines"; "/test-command 7"]], []);
2147     InitBasicFS, Always, TestOutputList (
2148       [["upload"; "test-command"; "/test-command"];
2149        ["chmod"; "0o755"; "/test-command"];
2150        ["command_lines"; "/test-command 8"]], [""]);
2151     InitBasicFS, Always, TestOutputList (
2152       [["upload"; "test-command"; "/test-command"];
2153        ["chmod"; "0o755"; "/test-command"];
2154        ["command_lines"; "/test-command 9"]], ["";""]);
2155     InitBasicFS, Always, TestOutputList (
2156       [["upload"; "test-command"; "/test-command"];
2157        ["chmod"; "0o755"; "/test-command"];
2158        ["command_lines"; "/test-command 10"]], ["Result10-1";"Result10-2"]);
2159     InitBasicFS, Always, TestOutputList (
2160       [["upload"; "test-command"; "/test-command"];
2161        ["chmod"; "0o755"; "/test-command"];
2162        ["command_lines"; "/test-command 11"]], ["Result11-1";"Result11-2"])],
2163    "run a command, returning lines",
2164    "\
2165 This is the same as C<guestfs_command>, but splits the
2166 result into a list of lines.
2167
2168 See also: C<guestfs_sh_lines>");
2169
2170   ("stat", (RStruct ("statbuf", "stat"), [Pathname "path"]), 52, [],
2171    [InitISOFS, Always, TestOutputStruct (
2172       [["stat"; "/empty"]], [CompareWithInt ("size", 0)])],
2173    "get file information",
2174    "\
2175 Returns file information for the given C<path>.
2176
2177 This is the same as the C<stat(2)> system call.");
2178
2179   ("lstat", (RStruct ("statbuf", "stat"), [Pathname "path"]), 53, [],
2180    [InitISOFS, Always, TestOutputStruct (
2181       [["lstat"; "/empty"]], [CompareWithInt ("size", 0)])],
2182    "get file information for a symbolic link",
2183    "\
2184 Returns file information for the given C<path>.
2185
2186 This is the same as C<guestfs_stat> except that if C<path>
2187 is a symbolic link, then the link is stat-ed, not the file it
2188 refers to.
2189
2190 This is the same as the C<lstat(2)> system call.");
2191
2192   ("statvfs", (RStruct ("statbuf", "statvfs"), [Pathname "path"]), 54, [],
2193    [InitISOFS, Always, TestOutputStruct (
2194       [["statvfs"; "/"]], [CompareWithInt ("namemax", 255)])],
2195    "get file system statistics",
2196    "\
2197 Returns file system statistics for any mounted file system.
2198 C<path> should be a file or directory in the mounted file system
2199 (typically it is the mount point itself, but it doesn't need to be).
2200
2201 This is the same as the C<statvfs(2)> system call.");
2202
2203   ("tune2fs_l", (RHashtable "superblock", [Device "device"]), 55, [],
2204    [], (* XXX test *)
2205    "get ext2/ext3/ext4 superblock details",
2206    "\
2207 This returns the contents of the ext2, ext3 or ext4 filesystem
2208 superblock on C<device>.
2209
2210 It is the same as running C<tune2fs -l device>.  See L<tune2fs(8)>
2211 manpage for more details.  The list of fields returned isn't
2212 clearly defined, and depends on both the version of C<tune2fs>
2213 that libguestfs was built against, and the filesystem itself.");
2214
2215   ("blockdev_setro", (RErr, [Device "device"]), 56, [],
2216    [InitEmpty, Always, TestOutputTrue (
2217       [["blockdev_setro"; "/dev/sda"];
2218        ["blockdev_getro"; "/dev/sda"]])],
2219    "set block device to read-only",
2220    "\
2221 Sets the block device named C<device> to read-only.
2222
2223 This uses the L<blockdev(8)> command.");
2224
2225   ("blockdev_setrw", (RErr, [Device "device"]), 57, [],
2226    [InitEmpty, Always, TestOutputFalse (
2227       [["blockdev_setrw"; "/dev/sda"];
2228        ["blockdev_getro"; "/dev/sda"]])],
2229    "set block device to read-write",
2230    "\
2231 Sets the block device named C<device> to read-write.
2232
2233 This uses the L<blockdev(8)> command.");
2234
2235   ("blockdev_getro", (RBool "ro", [Device "device"]), 58, [],
2236    [InitEmpty, Always, TestOutputTrue (
2237       [["blockdev_setro"; "/dev/sda"];
2238        ["blockdev_getro"; "/dev/sda"]])],
2239    "is block device set to read-only",
2240    "\
2241 Returns a boolean indicating if the block device is read-only
2242 (true if read-only, false if not).
2243
2244 This uses the L<blockdev(8)> command.");
2245
2246   ("blockdev_getss", (RInt "sectorsize", [Device "device"]), 59, [],
2247    [InitEmpty, Always, TestOutputInt (
2248       [["blockdev_getss"; "/dev/sda"]], 512)],
2249    "get sectorsize of block device",
2250    "\
2251 This returns the size of sectors on a block device.
2252 Usually 512, but can be larger for modern devices.
2253
2254 (Note, this is not the size in sectors, use C<guestfs_blockdev_getsz>
2255 for that).
2256
2257 This uses the L<blockdev(8)> command.");
2258
2259   ("blockdev_getbsz", (RInt "blocksize", [Device "device"]), 60, [],
2260    [InitEmpty, Always, TestOutputInt (
2261       [["blockdev_getbsz"; "/dev/sda"]], 4096)],
2262    "get blocksize of block device",
2263    "\
2264 This returns the block size of a device.
2265
2266 (Note this is different from both I<size in blocks> and
2267 I<filesystem block size>).
2268
2269 This uses the L<blockdev(8)> command.");
2270
2271   ("blockdev_setbsz", (RErr, [Device "device"; Int "blocksize"]), 61, [],
2272    [], (* XXX test *)
2273    "set blocksize of block device",
2274    "\
2275 This sets the block size of a device.
2276
2277 (Note this is different from both I<size in blocks> and
2278 I<filesystem block size>).
2279
2280 This uses the L<blockdev(8)> command.");
2281
2282   ("blockdev_getsz", (RInt64 "sizeinsectors", [Device "device"]), 62, [],
2283    [InitEmpty, Always, TestOutputInt (
2284       [["blockdev_getsz"; "/dev/sda"]], 1024000)],
2285    "get total size of device in 512-byte sectors",
2286    "\
2287 This returns the size of the device in units of 512-byte sectors
2288 (even if the sectorsize isn't 512 bytes ... weird).
2289
2290 See also C<guestfs_blockdev_getss> for the real sector size of
2291 the device, and C<guestfs_blockdev_getsize64> for the more
2292 useful I<size in bytes>.
2293
2294 This uses the L<blockdev(8)> command.");
2295
2296   ("blockdev_getsize64", (RInt64 "sizeinbytes", [Device "device"]), 63, [],
2297    [InitEmpty, Always, TestOutputInt (
2298       [["blockdev_getsize64"; "/dev/sda"]], 524288000)],
2299    "get total size of device in bytes",
2300    "\
2301 This returns the size of the device in bytes.
2302
2303 See also C<guestfs_blockdev_getsz>.
2304
2305 This uses the L<blockdev(8)> command.");
2306
2307   ("blockdev_flushbufs", (RErr, [Device "device"]), 64, [],
2308    [InitEmpty, Always, TestRun
2309       [["blockdev_flushbufs"; "/dev/sda"]]],
2310    "flush device buffers",
2311    "\
2312 This tells the kernel to flush internal buffers associated
2313 with C<device>.
2314
2315 This uses the L<blockdev(8)> command.");
2316
2317   ("blockdev_rereadpt", (RErr, [Device "device"]), 65, [],
2318    [InitEmpty, Always, TestRun
2319       [["blockdev_rereadpt"; "/dev/sda"]]],
2320    "reread partition table",
2321    "\
2322 Reread the partition table on C<device>.
2323
2324 This uses the L<blockdev(8)> command.");
2325
2326   ("upload", (RErr, [FileIn "filename"; Dev_or_Path "remotefilename"]), 66, [],
2327    [InitBasicFS, Always, TestOutput (
2328       (* Pick a file from cwd which isn't likely to change. *)
2329       [["upload"; "../COPYING.LIB"; "/COPYING.LIB"];
2330        ["checksum"; "md5"; "/COPYING.LIB"]],
2331       Digest.to_hex (Digest.file "COPYING.LIB"))],
2332    "upload a file from the local machine",
2333    "\
2334 Upload local file C<filename> to C<remotefilename> on the
2335 filesystem.
2336
2337 C<filename> can also be a named pipe.
2338
2339 See also C<guestfs_download>.");
2340
2341   ("download", (RErr, [Dev_or_Path "remotefilename"; FileOut "filename"]), 67, [Progress],
2342    [InitBasicFS, Always, TestOutput (
2343       (* Pick a file from cwd which isn't likely to change. *)
2344       [["upload"; "../COPYING.LIB"; "/COPYING.LIB"];
2345        ["download"; "/COPYING.LIB"; "testdownload.tmp"];
2346        ["upload"; "testdownload.tmp"; "/upload"];
2347        ["checksum"; "md5"; "/upload"]],
2348       Digest.to_hex (Digest.file "COPYING.LIB"))],
2349    "download a file to the local machine",
2350    "\
2351 Download file C<remotefilename> and save it as C<filename>
2352 on the local machine.
2353
2354 C<filename> can also be a named pipe.
2355
2356 See also C<guestfs_upload>, C<guestfs_cat>.");
2357
2358   ("checksum", (RString "checksum", [String "csumtype"; Pathname "path"]), 68, [],
2359    [InitISOFS, Always, TestOutput (
2360       [["checksum"; "crc"; "/known-3"]], "2891671662");
2361     InitISOFS, Always, TestLastFail (
2362       [["checksum"; "crc"; "/notexists"]]);
2363     InitISOFS, Always, TestOutput (
2364       [["checksum"; "md5"; "/known-3"]], "46d6ca27ee07cdc6fa99c2e138cc522c");
2365     InitISOFS, Always, TestOutput (
2366       [["checksum"; "sha1"; "/known-3"]], "b7ebccc3ee418311091c3eda0a45b83c0a770f15");
2367     InitISOFS, Always, TestOutput (
2368       [["checksum"; "sha224"; "/known-3"]], "d2cd1774b28f3659c14116be0a6dc2bb5c4b350ce9cd5defac707741");
2369     InitISOFS, Always, TestOutput (
2370       [["checksum"; "sha256"; "/known-3"]], "75bb71b90cd20cb13f86d2bea8dad63ac7194e7517c3b52b8d06ff52d3487d30");
2371     InitISOFS, Always, TestOutput (
2372       [["checksum"; "sha384"; "/known-3"]], "5fa7883430f357b5d7b7271d3a1d2872b51d73cba72731de6863d3dea55f30646af2799bef44d5ea776a5ec7941ac640");
2373     InitISOFS, Always, TestOutput (
2374       [["checksum"; "sha512"; "/known-3"]], "2794062c328c6b216dca90443b7f7134c5f40e56bd0ed7853123275a09982a6f992e6ca682f9d2fba34a4c5e870d8fe077694ff831e3032a004ee077e00603f6");
2375     (* Test for RHBZ#579608, absolute symbolic links. *)
2376     InitISOFS, Always, TestOutput (
2377       [["checksum"; "sha512"; "/abssymlink"]], "5f57d0639bc95081c53afc63a449403883818edc64da48930ad6b1a4fb49be90404686877743fbcd7c99811f3def7df7bc22635c885c6a8cf79c806b43451c1a")],
2378    "compute MD5, SHAx or CRC checksum of file",
2379    "\
2380 This call computes the MD5, SHAx or CRC checksum of the
2381 file named C<path>.
2382
2383 The type of checksum to compute is given by the C<csumtype>
2384 parameter which must have one of the following values:
2385
2386 =over 4
2387
2388 =item C<crc>
2389
2390 Compute the cyclic redundancy check (CRC) specified by POSIX
2391 for the C<cksum> command.
2392
2393 =item C<md5>
2394
2395 Compute the MD5 hash (using the C<md5sum> program).
2396
2397 =item C<sha1>
2398
2399 Compute the SHA1 hash (using the C<sha1sum> program).
2400
2401 =item C<sha224>
2402
2403 Compute the SHA224 hash (using the C<sha224sum> program).
2404
2405 =item C<sha256>
2406
2407 Compute the SHA256 hash (using the C<sha256sum> program).
2408
2409 =item C<sha384>
2410
2411 Compute the SHA384 hash (using the C<sha384sum> program).
2412
2413 =item C<sha512>
2414
2415 Compute the SHA512 hash (using the C<sha512sum> program).
2416
2417 =back
2418
2419 The checksum is returned as a printable string.
2420
2421 To get the checksum for a device, use C<guestfs_checksum_device>.
2422
2423 To get the checksums for many files, use C<guestfs_checksums_out>.");
2424
2425   ("tar_in", (RErr, [FileIn "tarfile"; Pathname "directory"]), 69, [],
2426    [InitBasicFS, Always, TestOutput (
2427       [["tar_in"; "../images/helloworld.tar"; "/"];
2428        ["cat"; "/hello"]], "hello\n")],
2429    "unpack tarfile to directory",
2430    "\
2431 This command uploads and unpacks local file C<tarfile> (an
2432 I<uncompressed> tar file) into C<directory>.
2433
2434 To upload a compressed tarball, use C<guestfs_tgz_in>
2435 or C<guestfs_txz_in>.");
2436
2437   ("tar_out", (RErr, [String "directory"; FileOut "tarfile"]), 70, [],
2438    [],
2439    "pack directory into tarfile",
2440    "\
2441 This command packs the contents of C<directory> and downloads
2442 it to local file C<tarfile>.
2443
2444 To download a compressed tarball, use C<guestfs_tgz_out>
2445 or C<guestfs_txz_out>.");
2446
2447   ("tgz_in", (RErr, [FileIn "tarball"; Pathname "directory"]), 71, [],
2448    [InitBasicFS, Always, TestOutput (
2449       [["tgz_in"; "../images/helloworld.tar.gz"; "/"];
2450        ["cat"; "/hello"]], "hello\n")],
2451    "unpack compressed tarball to directory",
2452    "\
2453 This command uploads and unpacks local file C<tarball> (a
2454 I<gzip compressed> tar file) into C<directory>.
2455
2456 To upload an uncompressed tarball, use C<guestfs_tar_in>.");
2457
2458   ("tgz_out", (RErr, [Pathname "directory"; FileOut "tarball"]), 72, [],
2459    [],
2460    "pack directory into compressed tarball",
2461    "\
2462 This command packs the contents of C<directory> and downloads
2463 it to local file C<tarball>.
2464
2465 To download an uncompressed tarball, use C<guestfs_tar_out>.");
2466
2467   ("mount_ro", (RErr, [Device "device"; String "mountpoint"]), 73, [],
2468    [InitBasicFS, Always, TestLastFail (
2469       [["umount"; "/"];
2470        ["mount_ro"; "/dev/sda1"; "/"];
2471        ["touch"; "/new"]]);
2472     InitBasicFS, Always, TestOutput (
2473       [["write"; "/new"; "data"];
2474        ["umount"; "/"];
2475        ["mount_ro"; "/dev/sda1"; "/"];
2476        ["cat"; "/new"]], "data")],
2477    "mount a guest disk, read-only",
2478    "\
2479 This is the same as the C<guestfs_mount> command, but it
2480 mounts the filesystem with the read-only (I<-o ro>) flag.");
2481
2482   ("mount_options", (RErr, [String "options"; Device "device"; String "mountpoint"]), 74, [],
2483    [],
2484    "mount a guest disk with mount options",
2485    "\
2486 This is the same as the C<guestfs_mount> command, but it
2487 allows you to set the mount options as for the
2488 L<mount(8)> I<-o> flag.
2489
2490 If the C<options> parameter is an empty string, then
2491 no options are passed (all options default to whatever
2492 the filesystem uses).");
2493
2494   ("mount_vfs", (RErr, [String "options"; String "vfstype"; Device "device"; String "mountpoint"]), 75, [],
2495    [],
2496    "mount a guest disk with mount options and vfstype",
2497    "\
2498 This is the same as the C<guestfs_mount> command, but it
2499 allows you to set both the mount options and the vfstype
2500 as for the L<mount(8)> I<-o> and I<-t> flags.");
2501
2502   ("debug", (RString "result", [String "subcmd"; StringList "extraargs"]), 76, [],
2503    [],
2504    "debugging and internals",
2505    "\
2506 The C<guestfs_debug> command exposes some internals of
2507 C<guestfsd> (the guestfs daemon) that runs inside the
2508 qemu subprocess.
2509
2510 There is no comprehensive help for this command.  You have
2511 to look at the file C<daemon/debug.c> in the libguestfs source
2512 to find out what you can do.");
2513
2514   ("lvremove", (RErr, [Device "device"]), 77, [Optional "lvm2"],
2515    [InitEmpty, Always, TestOutputList (
2516       [["part_disk"; "/dev/sda"; "mbr"];
2517        ["pvcreate"; "/dev/sda1"];
2518        ["vgcreate"; "VG"; "/dev/sda1"];
2519        ["lvcreate"; "LV1"; "VG"; "50"];
2520        ["lvcreate"; "LV2"; "VG"; "50"];
2521        ["lvremove"; "/dev/VG/LV1"];
2522        ["lvs"]], ["/dev/VG/LV2"]);
2523     InitEmpty, Always, TestOutputList (
2524       [["part_disk"; "/dev/sda"; "mbr"];
2525        ["pvcreate"; "/dev/sda1"];
2526        ["vgcreate"; "VG"; "/dev/sda1"];
2527        ["lvcreate"; "LV1"; "VG"; "50"];
2528        ["lvcreate"; "LV2"; "VG"; "50"];
2529        ["lvremove"; "/dev/VG"];
2530        ["lvs"]], []);
2531     InitEmpty, Always, TestOutputList (
2532       [["part_disk"; "/dev/sda"; "mbr"];
2533        ["pvcreate"; "/dev/sda1"];
2534        ["vgcreate"; "VG"; "/dev/sda1"];
2535        ["lvcreate"; "LV1"; "VG"; "50"];
2536        ["lvcreate"; "LV2"; "VG"; "50"];
2537        ["lvremove"; "/dev/VG"];
2538        ["vgs"]], ["VG"])],
2539    "remove an LVM logical volume",
2540    "\
2541 Remove an LVM logical volume C<device>, where C<device> is
2542 the path to the LV, such as C</dev/VG/LV>.
2543
2544 You can also remove all LVs in a volume group by specifying
2545 the VG name, C</dev/VG>.");
2546
2547   ("vgremove", (RErr, [String "vgname"]), 78, [Optional "lvm2"],
2548    [InitEmpty, Always, TestOutputList (
2549       [["part_disk"; "/dev/sda"; "mbr"];
2550        ["pvcreate"; "/dev/sda1"];
2551        ["vgcreate"; "VG"; "/dev/sda1"];
2552        ["lvcreate"; "LV1"; "VG"; "50"];
2553        ["lvcreate"; "LV2"; "VG"; "50"];
2554        ["vgremove"; "VG"];
2555        ["lvs"]], []);
2556     InitEmpty, Always, TestOutputList (
2557       [["part_disk"; "/dev/sda"; "mbr"];
2558        ["pvcreate"; "/dev/sda1"];
2559        ["vgcreate"; "VG"; "/dev/sda1"];
2560        ["lvcreate"; "LV1"; "VG"; "50"];
2561        ["lvcreate"; "LV2"; "VG"; "50"];
2562        ["vgremove"; "VG"];
2563        ["vgs"]], [])],
2564    "remove an LVM volume group",
2565    "\
2566 Remove an LVM volume group C<vgname>, (for example C<VG>).
2567
2568 This also forcibly removes all logical volumes in the volume
2569 group (if any).");
2570
2571   ("pvremove", (RErr, [Device "device"]), 79, [Optional "lvm2"],
2572    [InitEmpty, Always, TestOutputListOfDevices (
2573       [["part_disk"; "/dev/sda"; "mbr"];
2574        ["pvcreate"; "/dev/sda1"];
2575        ["vgcreate"; "VG"; "/dev/sda1"];
2576        ["lvcreate"; "LV1"; "VG"; "50"];
2577        ["lvcreate"; "LV2"; "VG"; "50"];
2578        ["vgremove"; "VG"];
2579        ["pvremove"; "/dev/sda1"];
2580        ["lvs"]], []);
2581     InitEmpty, Always, TestOutputListOfDevices (
2582       [["part_disk"; "/dev/sda"; "mbr"];
2583        ["pvcreate"; "/dev/sda1"];
2584        ["vgcreate"; "VG"; "/dev/sda1"];
2585        ["lvcreate"; "LV1"; "VG"; "50"];
2586        ["lvcreate"; "LV2"; "VG"; "50"];
2587        ["vgremove"; "VG"];
2588        ["pvremove"; "/dev/sda1"];
2589        ["vgs"]], []);
2590     InitEmpty, Always, TestOutputListOfDevices (
2591       [["part_disk"; "/dev/sda"; "mbr"];
2592        ["pvcreate"; "/dev/sda1"];
2593        ["vgcreate"; "VG"; "/dev/sda1"];
2594        ["lvcreate"; "LV1"; "VG"; "50"];
2595        ["lvcreate"; "LV2"; "VG"; "50"];
2596        ["vgremove"; "VG"];
2597        ["pvremove"; "/dev/sda1"];
2598        ["pvs"]], [])],
2599    "remove an LVM physical volume",
2600    "\
2601 This wipes a physical volume C<device> so that LVM will no longer
2602 recognise it.
2603
2604 The implementation uses the C<pvremove> command which refuses to
2605 wipe physical volumes that contain any volume groups, so you have
2606 to remove those first.");
2607
2608   ("set_e2label", (RErr, [Device "device"; String "label"]), 80, [],
2609    [InitBasicFS, Always, TestOutput (
2610       [["set_e2label"; "/dev/sda1"; "testlabel"];
2611        ["get_e2label"; "/dev/sda1"]], "testlabel")],
2612    "set the ext2/3/4 filesystem label",
2613    "\
2614 This sets the ext2/3/4 filesystem label of the filesystem on
2615 C<device> to C<label>.  Filesystem labels are limited to
2616 16 characters.
2617
2618 You can use either C<guestfs_tune2fs_l> or C<guestfs_get_e2label>
2619 to return the existing label on a filesystem.");
2620
2621   ("get_e2label", (RString "label", [Device "device"]), 81, [DeprecatedBy "vfs_label"],
2622    [],
2623    "get the ext2/3/4 filesystem label",
2624    "\
2625 This returns the ext2/3/4 filesystem label of the filesystem on
2626 C<device>.");
2627
2628   ("set_e2uuid", (RErr, [Device "device"; String "uuid"]), 82, [],
2629    (let uuid = uuidgen () in
2630     [InitBasicFS, Always, TestOutput (
2631        [["set_e2uuid"; "/dev/sda1"; uuid];
2632         ["get_e2uuid"; "/dev/sda1"]], uuid);
2633      InitBasicFS, Always, TestOutput (
2634        [["set_e2uuid"; "/dev/sda1"; "clear"];
2635         ["get_e2uuid"; "/dev/sda1"]], "");
2636      (* We can't predict what UUIDs will be, so just check the commands run. *)
2637      InitBasicFS, Always, TestRun (
2638        [["set_e2uuid"; "/dev/sda1"; "random"]]);
2639      InitBasicFS, Always, TestRun (
2640        [["set_e2uuid"; "/dev/sda1"; "time"]])]),
2641    "set the ext2/3/4 filesystem UUID",
2642    "\
2643 This sets the ext2/3/4 filesystem UUID of the filesystem on
2644 C<device> to C<uuid>.  The format of the UUID and alternatives
2645 such as C<clear>, C<random> and C<time> are described in the
2646 L<tune2fs(8)> manpage.
2647
2648 You can use either C<guestfs_tune2fs_l> or C<guestfs_get_e2uuid>
2649 to return the existing UUID of a filesystem.");
2650
2651   ("get_e2uuid", (RString "uuid", [Device "device"]), 83, [DeprecatedBy "vfs_uuid"],
2652    (* Regression test for RHBZ#597112. *)
2653    (let uuid = uuidgen () in
2654     [InitBasicFS, Always, TestOutput (
2655        [["mke2journal"; "1024"; "/dev/sdb"];
2656         ["set_e2uuid"; "/dev/sdb"; uuid];
2657         ["get_e2uuid"; "/dev/sdb"]], uuid)]),
2658    "get the ext2/3/4 filesystem UUID",
2659    "\
2660 This returns the ext2/3/4 filesystem UUID of the filesystem on
2661 C<device>.");
2662
2663   ("fsck", (RInt "status", [String "fstype"; Device "device"]), 84, [FishOutput FishOutputHexadecimal],
2664    [InitBasicFS, Always, TestOutputInt (
2665       [["umount"; "/dev/sda1"];
2666        ["fsck"; "ext2"; "/dev/sda1"]], 0);
2667     InitBasicFS, Always, TestOutputInt (
2668       [["umount"; "/dev/sda1"];
2669        ["zero"; "/dev/sda1"];
2670        ["fsck"; "ext2"; "/dev/sda1"]], 8)],
2671    "run the filesystem checker",
2672    "\
2673 This runs the filesystem checker (fsck) on C<device> which
2674 should have filesystem type C<fstype>.
2675
2676 The returned integer is the status.  See L<fsck(8)> for the
2677 list of status codes from C<fsck>.
2678
2679 Notes:
2680
2681 =over 4
2682
2683 =item *
2684
2685 Multiple status codes can be summed together.
2686
2687 =item *
2688
2689 A non-zero return code can mean \"success\", for example if
2690 errors have been corrected on the filesystem.
2691
2692 =item *
2693
2694 Checking or repairing NTFS volumes is not supported
2695 (by linux-ntfs).
2696
2697 =back
2698
2699 This command is entirely equivalent to running C<fsck -a -t fstype device>.");
2700
2701   ("zero", (RErr, [Device "device"]), 85, [Progress],
2702    [InitBasicFS, Always, TestOutput (
2703       [["umount"; "/dev/sda1"];
2704        ["zero"; "/dev/sda1"];
2705        ["file"; "/dev/sda1"]], "data")],
2706    "write zeroes to the device",
2707    "\
2708 This command writes zeroes over the first few blocks of C<device>.
2709
2710 How many blocks are zeroed isn't specified (but it's I<not> enough
2711 to securely wipe the device).  It should be sufficient to remove
2712 any partition tables, filesystem superblocks and so on.
2713
2714 See also: C<guestfs_zero_device>, C<guestfs_scrub_device>.");
2715
2716   ("grub_install", (RErr, [Pathname "root"; Device "device"]), 86, [],
2717    (* See:
2718     * https://bugzilla.redhat.com/show_bug.cgi?id=484986
2719     * https://bugzilla.redhat.com/show_bug.cgi?id=479760
2720     *)
2721    [InitBasicFS, Always, TestOutputTrue (
2722       [["mkdir_p"; "/boot/grub"];
2723        ["write"; "/boot/grub/device.map"; "(hd0) /dev/vda"];
2724        ["grub_install"; "/"; "/dev/vda"];
2725        ["is_dir"; "/boot"]])],
2726    "install GRUB",
2727    "\
2728 This command installs GRUB (the Grand Unified Bootloader) on
2729 C<device>, with the root directory being C<root>.
2730
2731 Note: If grub-install reports the error
2732 \"No suitable drive was found in the generated device map.\"
2733 it may be that you need to create a C</boot/grub/device.map>
2734 file first that contains the mapping between grub device names
2735 and Linux device names.  It is usually sufficient to create
2736 a file containing:
2737
2738  (hd0) /dev/vda
2739
2740 replacing C</dev/vda> with the name of the installation device.");
2741
2742   ("cp", (RErr, [Pathname "src"; Pathname "dest"]), 87, [],
2743    [InitBasicFS, Always, TestOutput (
2744       [["write"; "/old"; "file content"];
2745        ["cp"; "/old"; "/new"];
2746        ["cat"; "/new"]], "file content");
2747     InitBasicFS, Always, TestOutputTrue (
2748       [["write"; "/old"; "file content"];
2749        ["cp"; "/old"; "/new"];
2750        ["is_file"; "/old"]]);
2751     InitBasicFS, Always, TestOutput (
2752       [["write"; "/old"; "file content"];
2753        ["mkdir"; "/dir"];
2754        ["cp"; "/old"; "/dir/new"];
2755        ["cat"; "/dir/new"]], "file content")],
2756    "copy a file",
2757    "\
2758 This copies a file from C<src> to C<dest> where C<dest> is
2759 either a destination filename or destination directory.");
2760
2761   ("cp_a", (RErr, [Pathname "src"; Pathname "dest"]), 88, [],
2762    [InitBasicFS, Always, TestOutput (
2763       [["mkdir"; "/olddir"];
2764        ["mkdir"; "/newdir"];
2765        ["write"; "/olddir/file"; "file content"];
2766        ["cp_a"; "/olddir"; "/newdir"];
2767        ["cat"; "/newdir/olddir/file"]], "file content")],
2768    "copy a file or directory recursively",
2769    "\
2770 This copies a file or directory from C<src> to C<dest>
2771 recursively using the C<cp -a> command.");
2772
2773   ("mv", (RErr, [Pathname "src"; Pathname "dest"]), 89, [],
2774    [InitBasicFS, Always, TestOutput (
2775       [["write"; "/old"; "file content"];
2776        ["mv"; "/old"; "/new"];
2777        ["cat"; "/new"]], "file content");
2778     InitBasicFS, Always, TestOutputFalse (
2779       [["write"; "/old"; "file content"];
2780        ["mv"; "/old"; "/new"];
2781        ["is_file"; "/old"]])],
2782    "move a file",
2783    "\
2784 This moves a file from C<src> to C<dest> where C<dest> is
2785 either a destination filename or destination directory.");
2786
2787   ("drop_caches", (RErr, [Int "whattodrop"]), 90, [],
2788    [InitEmpty, Always, TestRun (
2789       [["drop_caches"; "3"]])],
2790    "drop kernel page cache, dentries and inodes",
2791    "\
2792 This instructs the guest kernel to drop its page cache,
2793 and/or dentries and inode caches.  The parameter C<whattodrop>
2794 tells the kernel what precisely to drop, see
2795 L<http://linux-mm.org/Drop_Caches>
2796
2797 Setting C<whattodrop> to 3 should drop everything.
2798
2799 This automatically calls L<sync(2)> before the operation,
2800 so that the maximum guest memory is freed.");
2801
2802   ("dmesg", (RString "kmsgs", []), 91, [],
2803    [InitEmpty, Always, TestRun (
2804       [["dmesg"]])],
2805    "return kernel messages",
2806    "\
2807 This returns the kernel messages (C<dmesg> output) from
2808 the guest kernel.  This is sometimes useful for extended
2809 debugging of problems.
2810
2811 Another way to get the same information is to enable
2812 verbose messages with C<guestfs_set_verbose> or by setting
2813 the environment variable C<LIBGUESTFS_DEBUG=1> before
2814 running the program.");
2815
2816   ("ping_daemon", (RErr, []), 92, [],
2817    [InitEmpty, Always, TestRun (
2818       [["ping_daemon"]])],
2819    "ping the guest daemon",
2820    "\
2821 This is a test probe into the guestfs daemon running inside
2822 the qemu subprocess.  Calling this function checks that the
2823 daemon responds to the ping message, without affecting the daemon
2824 or attached block device(s) in any other way.");
2825
2826   ("equal", (RBool "equality", [Pathname "file1"; Pathname "file2"]), 93, [],
2827    [InitBasicFS, Always, TestOutputTrue (
2828       [["write"; "/file1"; "contents of a file"];
2829        ["cp"; "/file1"; "/file2"];
2830        ["equal"; "/file1"; "/file2"]]);
2831     InitBasicFS, Always, TestOutputFalse (
2832       [["write"; "/file1"; "contents of a file"];
2833        ["write"; "/file2"; "contents of another file"];
2834        ["equal"; "/file1"; "/file2"]]);
2835     InitBasicFS, Always, TestLastFail (
2836       [["equal"; "/file1"; "/file2"]])],
2837    "test if two files have equal contents",
2838    "\
2839 This compares the two files C<file1> and C<file2> and returns
2840 true if their content is exactly equal, or false otherwise.
2841
2842 The external L<cmp(1)> program is used for the comparison.");
2843
2844   ("strings", (RStringList "stringsout", [Pathname "path"]), 94, [ProtocolLimitWarning],
2845    [InitISOFS, Always, TestOutputList (
2846       [["strings"; "/known-5"]], ["abcdefghi"; "jklmnopqr"]);
2847     InitISOFS, Always, TestOutputList (
2848       [["strings"; "/empty"]], []);
2849     (* Test for RHBZ#579608, absolute symbolic links. *)
2850     InitISOFS, Always, TestRun (
2851       [["strings"; "/abssymlink"]])],
2852    "print the printable strings in a file",
2853    "\
2854 This runs the L<strings(1)> command on a file and returns
2855 the list of printable strings found.");
2856
2857   ("strings_e", (RStringList "stringsout", [String "encoding"; Pathname "path"]), 95, [ProtocolLimitWarning],
2858    [InitISOFS, Always, TestOutputList (
2859       [["strings_e"; "b"; "/known-5"]], []);
2860     InitBasicFS, Always, TestOutputList (
2861       [["write"; "/new"; "\000h\000e\000l\000l\000o\000\n\000w\000o\000r\000l\000d\000\n"];
2862        ["strings_e"; "b"; "/new"]], ["hello"; "world"])],
2863    "print the printable strings in a file",
2864    "\
2865 This is like the C<guestfs_strings> command, but allows you to
2866 specify the encoding of strings that are looked for in
2867 the source file C<path>.
2868
2869 Allowed encodings are:
2870
2871 =over 4
2872
2873 =item s
2874
2875 Single 7-bit-byte characters like ASCII and the ASCII-compatible
2876 parts of ISO-8859-X (this is what C<guestfs_strings> uses).
2877
2878 =item S
2879
2880 Single 8-bit-byte characters.
2881
2882 =item b
2883
2884 16-bit big endian strings such as those encoded in
2885 UTF-16BE or UCS-2BE.
2886
2887 =item l (lower case letter L)
2888
2889 16-bit little endian such as UTF-16LE and UCS-2LE.
2890 This is useful for examining binaries in Windows guests.
2891
2892 =item B
2893
2894 32-bit big endian such as UCS-4BE.
2895
2896 =item L
2897
2898 32-bit little endian such as UCS-4LE.
2899
2900 =back
2901
2902 The returned strings are transcoded to UTF-8.");
2903
2904   ("hexdump", (RString "dump", [Pathname "path"]), 96, [ProtocolLimitWarning],
2905    [InitISOFS, Always, TestOutput (
2906       [["hexdump"; "/known-4"]], "00000000  61 62 63 0a 64 65 66 0a  67 68 69                 |abc.def.ghi|\n0000000b\n");
2907     (* Test for RHBZ#501888c2 regression which caused large hexdump
2908      * commands to segfault.
2909      *)
2910     InitISOFS, Always, TestRun (
2911       [["hexdump"; "/100krandom"]]);
2912     (* Test for RHBZ#579608, absolute symbolic links. *)
2913     InitISOFS, Always, TestRun (
2914       [["hexdump"; "/abssymlink"]])],
2915    "dump a file in hexadecimal",
2916    "\
2917 This runs C<hexdump -C> on the given C<path>.  The result is
2918 the human-readable, canonical hex dump of the file.");
2919
2920   ("zerofree", (RErr, [Device "device"]), 97, [Optional "zerofree"],
2921    [InitNone, Always, TestOutput (
2922       [["part_disk"; "/dev/sda"; "mbr"];
2923        ["mkfs"; "ext3"; "/dev/sda1"];
2924        ["mount_options"; ""; "/dev/sda1"; "/"];
2925        ["write"; "/new"; "test file"];
2926        ["umount"; "/dev/sda1"];
2927        ["zerofree"; "/dev/sda1"];
2928        ["mount_options"; ""; "/dev/sda1"; "/"];
2929        ["cat"; "/new"]], "test file")],
2930    "zero unused inodes and disk blocks on ext2/3 filesystem",
2931    "\
2932 This runs the I<zerofree> program on C<device>.  This program
2933 claims to zero unused inodes and disk blocks on an ext2/3
2934 filesystem, thus making it possible to compress the filesystem
2935 more effectively.
2936
2937 You should B<not> run this program if the filesystem is
2938 mounted.
2939
2940 It is possible that using this program can damage the filesystem
2941 or data on the filesystem.");
2942
2943   ("pvresize", (RErr, [Device "device"]), 98, [Optional "lvm2"],
2944    [],
2945    "resize an LVM physical volume",
2946    "\
2947 This resizes (expands or shrinks) an existing LVM physical
2948 volume to match the new size of the underlying device.");
2949
2950   ("sfdisk_N", (RErr, [Device "device"; Int "partnum";
2951                        Int "cyls"; Int "heads"; Int "sectors";
2952                        String "line"]), 99, [DangerWillRobinson],
2953    [],
2954    "modify a single partition on a block device",
2955    "\
2956 This runs L<sfdisk(8)> option to modify just the single
2957 partition C<n> (note: C<n> counts from 1).
2958
2959 For other parameters, see C<guestfs_sfdisk>.  You should usually
2960 pass C<0> for the cyls/heads/sectors parameters.
2961
2962 See also: C<guestfs_part_add>");
2963
2964   ("sfdisk_l", (RString "partitions", [Device "device"]), 100, [],
2965    [],
2966    "display the partition table",
2967    "\
2968 This displays the partition table on C<device>, in the
2969 human-readable output of the L<sfdisk(8)> command.  It is
2970 not intended to be parsed.
2971
2972 See also: C<guestfs_part_list>");
2973
2974   ("sfdisk_kernel_geometry", (RString "partitions", [Device "device"]), 101, [],
2975    [],
2976    "display the kernel geometry",
2977    "\
2978 This displays the kernel's idea of the geometry of C<device>.
2979
2980 The result is in human-readable format, and not designed to
2981 be parsed.");
2982
2983   ("sfdisk_disk_geometry", (RString "partitions", [Device "device"]), 102, [],
2984    [],
2985    "display the disk geometry from the partition table",
2986    "\
2987 This displays the disk geometry of C<device> read from the
2988 partition table.  Especially in the case where the underlying
2989 block device has been resized, this can be different from the
2990 kernel's idea of the geometry (see C<guestfs_sfdisk_kernel_geometry>).
2991
2992 The result is in human-readable format, and not designed to
2993 be parsed.");
2994
2995   ("vg_activate_all", (RErr, [Bool "activate"]), 103, [Optional "lvm2"],
2996    [],
2997    "activate or deactivate all volume groups",
2998    "\
2999 This command activates or (if C<activate> is false) deactivates
3000 all logical volumes in all volume groups.
3001 If activated, then they are made known to the
3002 kernel, ie. they appear as C</dev/mapper> devices.  If deactivated,
3003 then those devices disappear.
3004
3005 This command is the same as running C<vgchange -a y|n>");
3006
3007   ("vg_activate", (RErr, [Bool "activate"; StringList "volgroups"]), 104, [Optional "lvm2"],
3008    [],
3009    "activate or deactivate some volume groups",
3010    "\
3011 This command activates or (if C<activate> is false) deactivates
3012 all logical volumes in the listed volume groups C<volgroups>.
3013 If activated, then they are made known to the
3014 kernel, ie. they appear as C</dev/mapper> devices.  If deactivated,
3015 then those devices disappear.
3016
3017 This command is the same as running C<vgchange -a y|n volgroups...>
3018
3019 Note that if C<volgroups> is an empty list then B<all> volume groups
3020 are activated or deactivated.");
3021
3022   ("lvresize", (RErr, [Device "device"; Int "mbytes"]), 105, [Optional "lvm2"],
3023    [InitNone, Always, TestOutput (
3024       [["part_disk"; "/dev/sda"; "mbr"];
3025        ["pvcreate"; "/dev/sda1"];
3026        ["vgcreate"; "VG"; "/dev/sda1"];
3027        ["lvcreate"; "LV"; "VG"; "10"];
3028        ["mkfs"; "ext2"; "/dev/VG/LV"];
3029        ["mount_options"; ""; "/dev/VG/LV"; "/"];
3030        ["write"; "/new"; "test content"];
3031        ["umount"; "/"];
3032        ["lvresize"; "/dev/VG/LV"; "20"];
3033        ["e2fsck_f"; "/dev/VG/LV"];
3034        ["resize2fs"; "/dev/VG/LV"];
3035        ["mount_options"; ""; "/dev/VG/LV"; "/"];
3036        ["cat"; "/new"]], "test content");
3037     InitNone, Always, TestRun (
3038       (* Make an LV smaller to test RHBZ#587484. *)
3039       [["part_disk"; "/dev/sda"; "mbr"];
3040        ["pvcreate"; "/dev/sda1"];
3041        ["vgcreate"; "VG"; "/dev/sda1"];
3042        ["lvcreate"; "LV"; "VG"; "20"];
3043        ["lvresize"; "/dev/VG/LV"; "10"]])],
3044    "resize an LVM logical volume",
3045    "\
3046 This resizes (expands or shrinks) an existing LVM logical
3047 volume to C<mbytes>.  When reducing, data in the reduced part
3048 is lost.");
3049
3050   ("resize2fs", (RErr, [Device "device"]), 106, [],
3051    [], (* lvresize tests this *)
3052    "resize an ext2, ext3 or ext4 filesystem",
3053    "\
3054 This resizes an ext2, ext3 or ext4 filesystem to match the size of
3055 the underlying device.
3056
3057 I<Note:> It is sometimes required that you run C<guestfs_e2fsck_f>
3058 on the C<device> before calling this command.  For unknown reasons
3059 C<resize2fs> sometimes gives an error about this and sometimes not.
3060 In any case, it is always safe to call C<guestfs_e2fsck_f> before
3061 calling this function.");
3062
3063   ("find", (RStringList "names", [Pathname "directory"]), 107, [ProtocolLimitWarning],
3064    [InitBasicFS, Always, TestOutputList (
3065       [["find"; "/"]], ["lost+found"]);
3066     InitBasicFS, Always, TestOutputList (
3067       [["touch"; "/a"];
3068        ["mkdir"; "/b"];
3069        ["touch"; "/b/c"];
3070        ["find"; "/"]], ["a"; "b"; "b/c"; "lost+found"]);
3071     InitBasicFS, Always, TestOutputList (
3072       [["mkdir_p"; "/a/b/c"];
3073        ["touch"; "/a/b/c/d"];
3074        ["find"; "/a/b/"]], ["c"; "c/d"])],
3075    "find all files and directories",
3076    "\
3077 This command lists out all files and directories, recursively,
3078 starting at C<directory>.  It is essentially equivalent to
3079 running the shell command C<find directory -print> but some
3080 post-processing happens on the output, described below.
3081
3082 This returns a list of strings I<without any prefix>.  Thus
3083 if the directory structure was:
3084
3085  /tmp/a
3086  /tmp/b
3087  /tmp/c/d
3088
3089 then the returned list from C<guestfs_find> C</tmp> would be
3090 4 elements:
3091
3092  a
3093  b
3094  c
3095  c/d
3096
3097 If C<directory> is not a directory, then this command returns
3098 an error.
3099
3100 The returned list is sorted.
3101
3102 See also C<guestfs_find0>.");
3103
3104   ("e2fsck_f", (RErr, [Device "device"]), 108, [],
3105    [], (* lvresize tests this *)
3106    "check an ext2/ext3 filesystem",
3107    "\
3108 This runs C<e2fsck -p -f device>, ie. runs the ext2/ext3
3109 filesystem checker on C<device>, noninteractively (C<-p>),
3110 even if the filesystem appears to be clean (C<-f>).
3111
3112 This command is only needed because of C<guestfs_resize2fs>
3113 (q.v.).  Normally you should use C<guestfs_fsck>.");
3114
3115   ("sleep", (RErr, [Int "secs"]), 109, [],
3116    [InitNone, Always, TestRun (
3117       [["sleep"; "1"]])],
3118    "sleep for some seconds",
3119    "\
3120 Sleep for C<secs> seconds.");
3121
3122   ("ntfs_3g_probe", (RInt "status", [Bool "rw"; Device "device"]), 110, [Optional "ntfs3g"],
3123    [InitNone, Always, TestOutputInt (
3124       [["part_disk"; "/dev/sda"; "mbr"];
3125        ["mkfs"; "ntfs"; "/dev/sda1"];
3126        ["ntfs_3g_probe"; "true"; "/dev/sda1"]], 0);
3127     InitNone, Always, TestOutputInt (
3128       [["part_disk"; "/dev/sda"; "mbr"];
3129        ["mkfs"; "ext2"; "/dev/sda1"];
3130        ["ntfs_3g_probe"; "true"; "/dev/sda1"]], 12)],
3131    "probe NTFS volume",
3132    "\
3133 This command runs the L<ntfs-3g.probe(8)> command which probes
3134 an NTFS C<device> for mountability.  (Not all NTFS volumes can
3135 be mounted read-write, and some cannot be mounted at all).
3136
3137 C<rw> is a boolean flag.  Set it to true if you want to test
3138 if the volume can be mounted read-write.  Set it to false if
3139 you want to test if the volume can be mounted read-only.
3140
3141 The return value is an integer which C<0> if the operation
3142 would succeed, or some non-zero value documented in the
3143 L<ntfs-3g.probe(8)> manual page.");
3144
3145   ("sh", (RString "output", [String "command"]), 111, [],
3146    [], (* XXX needs tests *)
3147    "run a command via the shell",
3148    "\
3149 This call runs a command from the guest filesystem via the
3150 guest's C</bin/sh>.
3151
3152 This is like C<guestfs_command>, but passes the command to:
3153
3154  /bin/sh -c \"command\"
3155
3156 Depending on the guest's shell, this usually results in
3157 wildcards being expanded, shell expressions being interpolated
3158 and so on.
3159
3160 All the provisos about C<guestfs_command> apply to this call.");
3161
3162   ("sh_lines", (RStringList "lines", [String "command"]), 112, [],
3163    [], (* XXX needs tests *)
3164    "run a command via the shell returning lines",
3165    "\
3166 This is the same as C<guestfs_sh>, but splits the result
3167 into a list of lines.
3168
3169 See also: C<guestfs_command_lines>");
3170
3171   ("glob_expand", (RStringList "paths", [Pathname "pattern"]), 113, [],
3172    (* Use Pathname here, and hence ABS_PATH (pattern,... in generated
3173     * code in stubs.c, since all valid glob patterns must start with "/".
3174     * There is no concept of "cwd" in libguestfs, hence no "."-relative names.
3175     *)
3176    [InitBasicFS, Always, TestOutputList (
3177       [["mkdir_p"; "/a/b/c"];
3178        ["touch"; "/a/b/c/d"];
3179        ["touch"; "/a/b/c/e"];
3180        ["glob_expand"; "/a/b/c/*"]], ["/a/b/c/d"; "/a/b/c/e"]);
3181     InitBasicFS, Always, TestOutputList (
3182       [["mkdir_p"; "/a/b/c"];
3183        ["touch"; "/a/b/c/d"];
3184        ["touch"; "/a/b/c/e"];
3185        ["glob_expand"; "/a/*/c/*"]], ["/a/b/c/d"; "/a/b/c/e"]);
3186     InitBasicFS, Always, TestOutputList (
3187       [["mkdir_p"; "/a/b/c"];
3188        ["touch"; "/a/b/c/d"];
3189        ["touch"; "/a/b/c/e"];
3190        ["glob_expand"; "/a/*/x/*"]], [])],
3191    "expand a wildcard path",
3192    "\
3193 This command searches for all the pathnames matching
3194 C<pattern> according to the wildcard expansion rules
3195 used by the shell.
3196
3197 If no paths match, then this returns an empty list
3198 (note: not an error).
3199
3200 It is just a wrapper around the C L<glob(3)> function
3201 with flags C<GLOB_MARK|GLOB_BRACE>.
3202 See that manual page for more details.");
3203
3204   ("scrub_device", (RErr, [Device "device"]), 114, [DangerWillRobinson; Optional "scrub"],
3205    [InitNone, Always, TestRun ( (* use /dev/sdc because it's smaller *)
3206       [["scrub_device"; "/dev/sdc"]])],
3207    "scrub (securely wipe) a device",
3208    "\
3209 This command writes patterns over C<device> to make data retrieval
3210 more difficult.
3211
3212 It is an interface to the L<scrub(1)> program.  See that
3213 manual page for more details.");
3214
3215   ("scrub_file", (RErr, [Pathname "file"]), 115, [Optional "scrub"],
3216    [InitBasicFS, Always, TestRun (
3217       [["write"; "/file"; "content"];
3218        ["scrub_file"; "/file"]])],
3219    "scrub (securely wipe) a file",
3220    "\
3221 This command writes patterns over a file to make data retrieval
3222 more difficult.
3223
3224 The file is I<removed> after scrubbing.
3225
3226 It is an interface to the L<scrub(1)> program.  See that
3227 manual page for more details.");
3228
3229   ("scrub_freespace", (RErr, [Pathname "dir"]), 116, [Optional "scrub"],
3230    [], (* XXX needs testing *)
3231    "scrub (securely wipe) free space",
3232    "\
3233 This command creates the directory C<dir> and then fills it
3234 with files until the filesystem is full, and scrubs the files
3235 as for C<guestfs_scrub_file>, and deletes them.
3236 The intention is to scrub any free space on the partition
3237 containing C<dir>.
3238
3239 It is an interface to the L<scrub(1)> program.  See that
3240 manual page for more details.");
3241
3242   ("mkdtemp", (RString "dir", [Pathname "template"]), 117, [],
3243    [InitBasicFS, Always, TestRun (
3244       [["mkdir"; "/tmp"];
3245        ["mkdtemp"; "/tmp/tmpXXXXXX"]])],
3246    "create a temporary directory",
3247    "\
3248 This command creates a temporary directory.  The
3249 C<template> parameter should be a full pathname for the
3250 temporary directory name with the final six characters being
3251 \"XXXXXX\".
3252
3253 For example: \"/tmp/myprogXXXXXX\" or \"/Temp/myprogXXXXXX\",
3254 the second one being suitable for Windows filesystems.
3255
3256 The name of the temporary directory that was created
3257 is returned.
3258
3259 The temporary directory is created with mode 0700
3260 and is owned by root.
3261
3262 The caller is responsible for deleting the temporary
3263 directory and its contents after use.
3264
3265 See also: L<mkdtemp(3)>");
3266
3267   ("wc_l", (RInt "lines", [Pathname "path"]), 118, [],
3268    [InitISOFS, Always, TestOutputInt (
3269       [["wc_l"; "/10klines"]], 10000);
3270     (* Test for RHBZ#579608, absolute symbolic links. *)
3271     InitISOFS, Always, TestOutputInt (
3272       [["wc_l"; "/abssymlink"]], 10000)],
3273    "count lines in a file",
3274    "\
3275 This command counts the lines in a file, using the
3276 C<wc -l> external command.");
3277
3278   ("wc_w", (RInt "words", [Pathname "path"]), 119, [],
3279    [InitISOFS, Always, TestOutputInt (
3280       [["wc_w"; "/10klines"]], 10000)],
3281    "count words in a file",
3282    "\
3283 This command counts the words in a file, using the
3284 C<wc -w> external command.");
3285
3286   ("wc_c", (RInt "chars", [Pathname "path"]), 120, [],
3287    [InitISOFS, Always, TestOutputInt (
3288       [["wc_c"; "/100kallspaces"]], 102400)],
3289    "count characters in a file",
3290    "\
3291 This command counts the characters in a file, using the
3292 C<wc -c> external command.");
3293
3294   ("head", (RStringList "lines", [Pathname "path"]), 121, [ProtocolLimitWarning],
3295    [InitISOFS, Always, TestOutputList (
3296       [["head"; "/10klines"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz";"3abcdefghijklmnopqrstuvwxyz";"4abcdefghijklmnopqrstuvwxyz";"5abcdefghijklmnopqrstuvwxyz";"6abcdefghijklmnopqrstuvwxyz";"7abcdefghijklmnopqrstuvwxyz";"8abcdefghijklmnopqrstuvwxyz";"9abcdefghijklmnopqrstuvwxyz"]);
3297     (* Test for RHBZ#579608, absolute symbolic links. *)
3298     InitISOFS, Always, TestOutputList (
3299       [["head"; "/abssymlink"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz";"3abcdefghijklmnopqrstuvwxyz";"4abcdefghijklmnopqrstuvwxyz";"5abcdefghijklmnopqrstuvwxyz";"6abcdefghijklmnopqrstuvwxyz";"7abcdefghijklmnopqrstuvwxyz";"8abcdefghijklmnopqrstuvwxyz";"9abcdefghijklmnopqrstuvwxyz"])],
3300    "return first 10 lines of a file",
3301    "\
3302 This command returns up to the first 10 lines of a file as
3303 a list of strings.");
3304
3305   ("head_n", (RStringList "lines", [Int "nrlines"; Pathname "path"]), 122, [ProtocolLimitWarning],
3306    [InitISOFS, Always, TestOutputList (
3307       [["head_n"; "3"; "/10klines"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz"]);
3308     InitISOFS, Always, TestOutputList (
3309       [["head_n"; "-9997"; "/10klines"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz"]);
3310     InitISOFS, Always, TestOutputList (
3311       [["head_n"; "0"; "/10klines"]], [])],
3312    "return first N lines of a file",
3313    "\
3314 If the parameter C<nrlines> is a positive number, this returns the first
3315 C<nrlines> lines of the file C<path>.
3316
3317 If the parameter C<nrlines> is a negative number, this returns lines
3318 from the file C<path>, excluding the last C<nrlines> lines.
3319
3320 If the parameter C<nrlines> is zero, this returns an empty list.");
3321
3322   ("tail", (RStringList "lines", [Pathname "path"]), 123, [ProtocolLimitWarning],
3323    [InitISOFS, Always, TestOutputList (
3324       [["tail"; "/10klines"]], ["9990abcdefghijklmnopqrstuvwxyz";"9991abcdefghijklmnopqrstuvwxyz";"9992abcdefghijklmnopqrstuvwxyz";"9993abcdefghijklmnopqrstuvwxyz";"9994abcdefghijklmnopqrstuvwxyz";"9995abcdefghijklmnopqrstuvwxyz";"9996abcdefghijklmnopqrstuvwxyz";"9997abcdefghijklmnopqrstuvwxyz";"9998abcdefghijklmnopqrstuvwxyz";"9999abcdefghijklmnopqrstuvwxyz"])],
3325    "return last 10 lines of a file",
3326    "\
3327 This command returns up to the last 10 lines of a file as
3328 a list of strings.");
3329
3330   ("tail_n", (RStringList "lines", [Int "nrlines"; Pathname "path"]), 124, [ProtocolLimitWarning],
3331    [InitISOFS, Always, TestOutputList (
3332       [["tail_n"; "3"; "/10klines"]], ["9997abcdefghijklmnopqrstuvwxyz";"9998abcdefghijklmnopqrstuvwxyz";"9999abcdefghijklmnopqrstuvwxyz"]);
3333     InitISOFS, Always, TestOutputList (
3334       [["tail_n"; "-9998"; "/10klines"]], ["9997abcdefghijklmnopqrstuvwxyz";"9998abcdefghijklmnopqrstuvwxyz";"9999abcdefghijklmnopqrstuvwxyz"]);
3335     InitISOFS, Always, TestOutputList (
3336       [["tail_n"; "0"; "/10klines"]], [])],
3337    "return last N lines of a file",
3338    "\
3339 If the parameter C<nrlines> is a positive number, this returns the last
3340 C<nrlines> lines of the file C<path>.
3341
3342 If the parameter C<nrlines> is a negative number, this returns lines
3343 from the file C<path>, starting with the C<-nrlines>th line.
3344
3345 If the parameter C<nrlines> is zero, this returns an empty list.");
3346
3347   ("df", (RString "output", []), 125, [],
3348    [], (* XXX Tricky to test because it depends on the exact format
3349         * of the 'df' command and other imponderables.
3350         *)
3351    "report file system disk space usage",
3352    "\
3353 This command runs the C<df> command to report disk space used.
3354
3355 This command is mostly useful for interactive sessions.  It
3356 is I<not> intended that you try to parse the output string.
3357 Use C<statvfs> from programs.");
3358
3359   ("df_h", (RString "output", []), 126, [],
3360    [], (* XXX Tricky to test because it depends on the exact format
3361         * of the 'df' command and other imponderables.
3362         *)
3363    "report file system disk space usage (human readable)",
3364    "\
3365 This command runs the C<df -h> command to report disk space used
3366 in human-readable format.
3367
3368 This command is mostly useful for interactive sessions.  It
3369 is I<not> intended that you try to parse the output string.
3370 Use C<statvfs> from programs.");
3371
3372   ("du", (RInt64 "sizekb", [Pathname "path"]), 127, [],
3373    [InitISOFS, Always, TestOutputInt (
3374       [["du"; "/directory"]], 2 (* ISO fs blocksize is 2K *))],
3375    "estimate file space usage",
3376    "\
3377 This command runs the C<du -s> command to estimate file space
3378 usage for C<path>.
3379
3380 C<path> can be a file or a directory.  If C<path> is a directory
3381 then the estimate includes the contents of the directory and all
3382 subdirectories (recursively).
3383
3384 The result is the estimated size in I<kilobytes>
3385 (ie. units of 1024 bytes).");
3386
3387   ("initrd_list", (RStringList "filenames", [Pathname "path"]), 128, [],
3388    [InitISOFS, Always, TestOutputList (
3389       [["initrd_list"; "/initrd"]], ["empty";"known-1";"known-2";"known-3";"known-4"; "known-5"])],
3390    "list files in an initrd",
3391    "\
3392 This command lists out files contained in an initrd.
3393
3394 The files are listed without any initial C</> character.  The
3395 files are listed in the order they appear (not necessarily
3396 alphabetical).  Directory names are listed as separate items.
3397
3398 Old Linux kernels (2.4 and earlier) used a compressed ext2
3399 filesystem as initrd.  We I<only> support the newer initramfs
3400 format (compressed cpio files).");
3401
3402   ("mount_loop", (RErr, [Pathname "file"; Pathname "mountpoint"]), 129, [],
3403    [],
3404    "mount a file using the loop device",
3405    "\
3406 This command lets you mount C<file> (a filesystem image
3407 in a file) on a mount point.  It is entirely equivalent to
3408 the command C<mount -o loop file mountpoint>.");
3409
3410   ("mkswap", (RErr, [Device "device"]), 130, [],
3411    [InitEmpty, Always, TestRun (
3412       [["part_disk"; "/dev/sda"; "mbr"];
3413        ["mkswap"; "/dev/sda1"]])],
3414    "create a swap partition",
3415    "\
3416 Create a swap partition on C<device>.");
3417
3418   ("mkswap_L", (RErr, [String "label"; Device "device"]), 131, [],
3419    [InitEmpty, Always, TestRun (
3420       [["part_disk"; "/dev/sda"; "mbr"];
3421        ["mkswap_L"; "hello"; "/dev/sda1"]])],
3422    "create a swap partition with a label",
3423    "\
3424 Create a swap partition on C<device> with label C<label>.
3425
3426 Note that you cannot attach a swap label to a block device
3427 (eg. C</dev/sda>), just to a partition.  This appears to be
3428 a limitation of the kernel or swap tools.");
3429
3430   ("mkswap_U", (RErr, [String "uuid"; Device "device"]), 132, [Optional "linuxfsuuid"],
3431    (let uuid = uuidgen () in
3432     [InitEmpty, Always, TestRun (
3433        [["part_disk"; "/dev/sda"; "mbr"];
3434         ["mkswap_U"; uuid; "/dev/sda1"]])]),
3435    "create a swap partition with an explicit UUID",
3436    "\
3437 Create a swap partition on C<device> with UUID C<uuid>.");
3438
3439   ("mknod", (RErr, [Int "mode"; Int "devmajor"; Int "devminor"; Pathname "path"]), 133, [Optional "mknod"],
3440    [InitBasicFS, Always, TestOutputStruct (
3441       [["mknod"; "0o10777"; "0"; "0"; "/node"];
3442        (* NB: default umask 022 means 0777 -> 0755 in these tests *)
3443        ["stat"; "/node"]], [CompareWithInt ("mode", 0o10755)]);
3444     InitBasicFS, Always, TestOutputStruct (
3445       [["mknod"; "0o60777"; "66"; "99"; "/node"];
3446        ["stat"; "/node"]], [CompareWithInt ("mode", 0o60755)])],
3447    "make block, character or FIFO devices",
3448    "\
3449 This call creates block or character special devices, or
3450 named pipes (FIFOs).
3451
3452 The C<mode> parameter should be the mode, using the standard
3453 constants.  C<devmajor> and C<devminor> are the
3454 device major and minor numbers, only used when creating block
3455 and character special devices.
3456
3457 Note that, just like L<mknod(2)>, the mode must be bitwise
3458 OR'd with S_IFBLK, S_IFCHR, S_IFIFO or S_IFSOCK (otherwise this call
3459 just creates a regular file).  These constants are
3460 available in the standard Linux header files, or you can use
3461 C<guestfs_mknod_b>, C<guestfs_mknod_c> or C<guestfs_mkfifo>
3462 which are wrappers around this command which bitwise OR
3463 in the appropriate constant for you.
3464
3465 The mode actually set is affected by the umask.");
3466
3467   ("mkfifo", (RErr, [Int "mode"; Pathname "path"]), 134, [Optional "mknod"],
3468    [InitBasicFS, Always, TestOutputStruct (
3469       [["mkfifo"; "0o777"; "/node"];
3470        ["stat"; "/node"]], [CompareWithInt ("mode", 0o10755)])],
3471    "make FIFO (named pipe)",
3472    "\
3473 This call creates a FIFO (named pipe) called C<path> with
3474 mode C<mode>.  It is just a convenient wrapper around
3475 C<guestfs_mknod>.
3476
3477 The mode actually set is affected by the umask.");
3478
3479   ("mknod_b", (RErr, [Int "mode"; Int "devmajor"; Int "devminor"; Pathname "path"]), 135, [Optional "mknod"],
3480    [InitBasicFS, Always, TestOutputStruct (
3481       [["mknod_b"; "0o777"; "99"; "66"; "/node"];
3482        ["stat"; "/node"]], [CompareWithInt ("mode", 0o60755)])],
3483    "make block device node",
3484    "\
3485 This call creates a block device node called C<path> with
3486 mode C<mode> and device major/minor C<devmajor> and C<devminor>.
3487 It is just a convenient wrapper around C<guestfs_mknod>.
3488
3489 The mode actually set is affected by the umask.");
3490
3491   ("mknod_c", (RErr, [Int "mode"; Int "devmajor"; Int "devminor"; Pathname "path"]), 136, [Optional "mknod"],
3492    [InitBasicFS, Always, TestOutputStruct (
3493       [["mknod_c"; "0o777"; "99"; "66"; "/node"];
3494        ["stat"; "/node"]], [CompareWithInt ("mode", 0o20755)])],
3495    "make char device node",
3496    "\
3497 This call creates a char device node called C<path> with
3498 mode C<mode> and device major/minor C<devmajor> and C<devminor>.
3499 It is just a convenient wrapper around C<guestfs_mknod>.
3500
3501 The mode actually set is affected by the umask.");
3502
3503   ("umask", (RInt "oldmask", [Int "mask"]), 137, [FishOutput FishOutputOctal],
3504    [InitEmpty, Always, TestOutputInt (
3505       [["umask"; "0o22"]], 0o22)],
3506    "set file mode creation mask (umask)",
3507    "\
3508 This function sets the mask used for creating new files and
3509 device nodes to C<mask & 0777>.
3510
3511 Typical umask values would be C<022> which creates new files
3512 with permissions like \"-rw-r--r--\" or \"-rwxr-xr-x\", and
3513 C<002> which creates new files with permissions like
3514 \"-rw-rw-r--\" or \"-rwxrwxr-x\".
3515
3516 The default umask is C<022>.  This is important because it
3517 means that directories and device nodes will be created with
3518 C<0644> or C<0755> mode even if you specify C<0777>.
3519
3520 See also C<guestfs_get_umask>,
3521 L<umask(2)>, C<guestfs_mknod>, C<guestfs_mkdir>.
3522
3523 This call returns the previous umask.");
3524
3525   ("readdir", (RStructList ("entries", "dirent"), [Pathname "dir"]), 138, [],
3526    [],
3527    "read directories entries",
3528    "\
3529 This returns the list of directory entries in directory C<dir>.
3530
3531 All entries in the directory are returned, including C<.> and
3532 C<..>.  The entries are I<not> sorted, but returned in the same
3533 order as the underlying filesystem.
3534
3535 Also this call returns basic file type information about each
3536 file.  The C<ftyp> field will contain one of the following characters:
3537
3538 =over 4
3539
3540 =item 'b'
3541
3542 Block special
3543
3544 =item 'c'
3545
3546 Char special
3547
3548 =item 'd'
3549
3550 Directory
3551
3552 =item 'f'
3553
3554 FIFO (named pipe)
3555
3556 =item 'l'
3557
3558 Symbolic link
3559
3560 =item 'r'
3561
3562 Regular file
3563
3564 =item 's'
3565
3566 Socket
3567
3568 =item 'u'
3569
3570 Unknown file type
3571
3572 =item '?'
3573
3574 The L<readdir(3)> call returned a C<d_type> field with an
3575 unexpected value
3576
3577 =back
3578
3579 This function is primarily intended for use by programs.  To
3580 get a simple list of names, use C<guestfs_ls>.  To get a printable
3581 directory for human consumption, use C<guestfs_ll>.");
3582
3583   ("sfdiskM", (RErr, [Device "device"; StringList "lines"]), 139, [DangerWillRobinson],
3584    [],
3585    "create partitions on a block device",
3586    "\
3587 This is a simplified interface to the C<guestfs_sfdisk>
3588 command, where partition sizes are specified in megabytes
3589 only (rounded to the nearest cylinder) and you don't need
3590 to specify the cyls, heads and sectors parameters which
3591 were rarely if ever used anyway.
3592
3593 See also: C<guestfs_sfdisk>, the L<sfdisk(8)> manpage
3594 and C<guestfs_part_disk>");
3595
3596   ("zfile", (RString "description", [String "meth"; Pathname "path"]), 140, [DeprecatedBy "file"],
3597    [],
3598    "determine file type inside a compressed file",
3599    "\
3600 This command runs C<file> after first decompressing C<path>
3601 using C<method>.
3602
3603 C<method> must be one of C<gzip>, C<compress> or C<bzip2>.
3604
3605 Since 1.0.63, use C<guestfs_file> instead which can now
3606 process compressed files.");
3607
3608   ("getxattrs", (RStructList ("xattrs", "xattr"), [Pathname "path"]), 141, [Optional "linuxxattrs"],
3609    [],
3610    "list extended attributes of a file or directory",
3611    "\
3612 This call lists the extended attributes of the file or directory
3613 C<path>.
3614
3615 At the system call level, this is a combination of the
3616 L<listxattr(2)> and L<getxattr(2)> calls.
3617
3618 See also: C<guestfs_lgetxattrs>, L<attr(5)>.");
3619
3620   ("lgetxattrs", (RStructList ("xattrs", "xattr"), [Pathname "path"]), 142, [Optional "linuxxattrs"],
3621    [],
3622    "list extended attributes of a file or directory",
3623    "\
3624 This is the same as C<guestfs_getxattrs>, but if C<path>
3625 is a symbolic link, then it returns the extended attributes
3626 of the link itself.");
3627
3628   ("setxattr", (RErr, [String "xattr";
3629                        String "val"; Int "vallen"; (* will be BufferIn *)
3630                        Pathname "path"]), 143, [Optional "linuxxattrs"],
3631    [],
3632    "set extended attribute of a file or directory",
3633    "\
3634 This call sets the extended attribute named C<xattr>
3635 of the file C<path> to the value C<val> (of length C<vallen>).
3636 The value is arbitrary 8 bit data.
3637
3638 See also: C<guestfs_lsetxattr>, L<attr(5)>.");
3639
3640   ("lsetxattr", (RErr, [String "xattr";
3641                         String "val"; Int "vallen"; (* will be BufferIn *)
3642                         Pathname "path"]), 144, [Optional "linuxxattrs"],
3643    [],
3644    "set extended attribute of a file or directory",
3645    "\
3646 This is the same as C<guestfs_setxattr>, but if C<path>
3647 is a symbolic link, then it sets an extended attribute
3648 of the link itself.");
3649
3650   ("removexattr", (RErr, [String "xattr"; Pathname "path"]), 145, [Optional "linuxxattrs"],
3651    [],
3652    "remove extended attribute of a file or directory",
3653    "\
3654 This call removes the extended attribute named C<xattr>
3655 of the file C<path>.
3656
3657 See also: C<guestfs_lremovexattr>, L<attr(5)>.");
3658
3659   ("lremovexattr", (RErr, [String "xattr"; Pathname "path"]), 146, [Optional "linuxxattrs"],
3660    [],
3661    "remove extended attribute of a file or directory",
3662    "\
3663 This is the same as C<guestfs_removexattr>, but if C<path>
3664 is a symbolic link, then it removes an extended attribute
3665 of the link itself.");
3666
3667   ("mountpoints", (RHashtable "mps", []), 147, [],
3668    [],
3669    "show mountpoints",
3670    "\
3671 This call is similar to C<guestfs_mounts>.  That call returns
3672 a list of devices.  This one returns a hash table (map) of
3673 device name to directory where the device is mounted.");
3674
3675   ("mkmountpoint", (RErr, [String "exemptpath"]), 148, [],
3676    (* This is a special case: while you would expect a parameter
3677     * of type "Pathname", that doesn't work, because it implies
3678     * NEED_ROOT in the generated calling code in stubs.c, and
3679     * this function cannot use NEED_ROOT.
3680     *)
3681    [],
3682    "create a mountpoint",
3683    "\
3684 C<guestfs_mkmountpoint> and C<guestfs_rmmountpoint> are
3685 specialized calls that can be used to create extra mountpoints
3686 before mounting the first filesystem.
3687
3688 These calls are I<only> necessary in some very limited circumstances,
3689 mainly the case where you want to mount a mix of unrelated and/or
3690 read-only filesystems together.
3691
3692 For example, live CDs often contain a \"Russian doll\" nest of
3693 filesystems, an ISO outer layer, with a squashfs image inside, with
3694 an ext2/3 image inside that.  You can unpack this as follows
3695 in guestfish:
3696
3697  add-ro Fedora-11-i686-Live.iso
3698  run
3699  mkmountpoint /cd
3700  mkmountpoint /squash
3701  mkmountpoint /ext3
3702  mount /dev/sda /cd
3703  mount-loop /cd/LiveOS/squashfs.img /squash
3704  mount-loop /squash/LiveOS/ext3fs.img /ext3
3705
3706 The inner filesystem is now unpacked under the /ext3 mountpoint.");
3707
3708   ("rmmountpoint", (RErr, [String "exemptpath"]), 149, [],
3709    [],
3710    "remove a mountpoint",
3711    "\
3712 This calls removes a mountpoint that was previously created
3713 with C<guestfs_mkmountpoint>.  See C<guestfs_mkmountpoint>
3714 for full details.");
3715
3716   ("read_file", (RBufferOut "content", [Pathname "path"]), 150, [ProtocolLimitWarning],
3717    [InitISOFS, Always, TestOutputBuffer (
3718       [["read_file"; "/known-4"]], "abc\ndef\nghi");
3719     (* Test various near large, large and too large files (RHBZ#589039). *)
3720     InitBasicFS, Always, TestLastFail (
3721       [["touch"; "/a"];
3722        ["truncate_size"; "/a"; "4194303"]; (* GUESTFS_MESSAGE_MAX - 1 *)
3723        ["read_file"; "/a"]]);
3724     InitBasicFS, Always, TestLastFail (
3725       [["touch"; "/a"];
3726        ["truncate_size"; "/a"; "4194304"]; (* GUESTFS_MESSAGE_MAX *)
3727        ["read_file"; "/a"]]);
3728     InitBasicFS, Always, TestLastFail (
3729       [["touch"; "/a"];
3730        ["truncate_size"; "/a"; "41943040"]; (* GUESTFS_MESSAGE_MAX * 10 *)
3731        ["read_file"; "/a"]])],
3732    "read a file",
3733    "\
3734 This calls returns the contents of the file C<path> as a
3735 buffer.
3736
3737 Unlike C<guestfs_cat>, this function can correctly
3738 handle files that contain embedded ASCII NUL characters.
3739 However unlike C<guestfs_download>, this function is limited
3740 in the total size of file that can be handled.");
3741
3742   ("grep", (RStringList "lines", [String "regex"; Pathname "path"]), 151, [ProtocolLimitWarning],
3743    [InitISOFS, Always, TestOutputList (
3744       [["grep"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"]);
3745     InitISOFS, Always, TestOutputList (
3746       [["grep"; "nomatch"; "/test-grep.txt"]], []);
3747     (* Test for RHBZ#579608, absolute symbolic links. *)
3748     InitISOFS, Always, TestOutputList (
3749       [["grep"; "nomatch"; "/abssymlink"]], [])],
3750    "return lines matching a pattern",
3751    "\
3752 This calls the external C<grep> program and returns the
3753 matching lines.");
3754
3755   ("egrep", (RStringList "lines", [String "regex"; Pathname "path"]), 152, [ProtocolLimitWarning],
3756    [InitISOFS, Always, TestOutputList (
3757       [["egrep"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"])],
3758    "return lines matching a pattern",
3759    "\
3760 This calls the external C<egrep> program and returns the
3761 matching lines.");
3762
3763   ("fgrep", (RStringList "lines", [String "pattern"; Pathname "path"]), 153, [ProtocolLimitWarning],
3764    [InitISOFS, Always, TestOutputList (
3765       [["fgrep"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"])],
3766    "return lines matching a pattern",
3767    "\
3768 This calls the external C<fgrep> program and returns the
3769 matching lines.");
3770
3771   ("grepi", (RStringList "lines", [String "regex"; Pathname "path"]), 154, [ProtocolLimitWarning],
3772    [InitISOFS, Always, TestOutputList (
3773       [["grepi"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"; "ABC"])],
3774    "return lines matching a pattern",
3775    "\
3776 This calls the external C<grep -i> program and returns the
3777 matching lines.");
3778
3779   ("egrepi", (RStringList "lines", [String "regex"; Pathname "path"]), 155, [ProtocolLimitWarning],
3780    [InitISOFS, Always, TestOutputList (
3781       [["egrepi"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"; "ABC"])],
3782    "return lines matching a pattern",
3783    "\
3784 This calls the external C<egrep -i> program and returns the
3785 matching lines.");
3786
3787   ("fgrepi", (RStringList "lines", [String "pattern"; Pathname "path"]), 156, [ProtocolLimitWarning],
3788    [InitISOFS, Always, TestOutputList (
3789       [["fgrepi"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"; "ABC"])],
3790    "return lines matching a pattern",
3791    "\
3792 This calls the external C<fgrep -i> program and returns the
3793 matching lines.");
3794
3795   ("zgrep", (RStringList "lines", [String "regex"; Pathname "path"]), 157, [ProtocolLimitWarning],
3796    [InitISOFS, Always, TestOutputList (
3797       [["zgrep"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"])],
3798    "return lines matching a pattern",
3799    "\
3800 This calls the external C<zgrep> program and returns the
3801 matching lines.");
3802
3803   ("zegrep", (RStringList "lines", [String "regex"; Pathname "path"]), 158, [ProtocolLimitWarning],
3804    [InitISOFS, Always, TestOutputList (
3805       [["zegrep"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"])],
3806    "return lines matching a pattern",
3807    "\
3808 This calls the external C<zegrep> program and returns the
3809 matching lines.");
3810
3811   ("zfgrep", (RStringList "lines", [String "pattern"; Pathname "path"]), 159, [ProtocolLimitWarning],
3812    [InitISOFS, Always, TestOutputList (
3813       [["zfgrep"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"])],
3814    "return lines matching a pattern",
3815    "\
3816 This calls the external C<zfgrep> program and returns the
3817 matching lines.");
3818
3819   ("zgrepi", (RStringList "lines", [String "regex"; Pathname "path"]), 160, [ProtocolLimitWarning],
3820    [InitISOFS, Always, TestOutputList (
3821       [["zgrepi"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"; "ABC"])],
3822    "return lines matching a pattern",
3823    "\
3824 This calls the external C<zgrep -i> program and returns the
3825 matching lines.");
3826
3827   ("zegrepi", (RStringList "lines", [String "regex"; Pathname "path"]), 161, [ProtocolLimitWarning],
3828    [InitISOFS, Always, TestOutputList (
3829       [["zegrepi"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"; "ABC"])],
3830    "return lines matching a pattern",
3831    "\
3832 This calls the external C<zegrep -i> program and returns the
3833 matching lines.");
3834
3835   ("zfgrepi", (RStringList "lines", [String "pattern"; Pathname "path"]), 162, [ProtocolLimitWarning],
3836    [InitISOFS, Always, TestOutputList (
3837       [["zfgrepi"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"; "ABC"])],
3838    "return lines matching a pattern",
3839    "\
3840 This calls the external C<zfgrep -i> program and returns the
3841 matching lines.");
3842
3843   ("realpath", (RString "rpath", [Pathname "path"]), 163, [Optional "realpath"],
3844    [InitISOFS, Always, TestOutput (
3845       [["realpath"; "/../directory"]], "/directory")],
3846    "canonicalized absolute pathname",
3847    "\
3848 Return the canonicalized absolute pathname of C<path>.  The
3849 returned path has no C<.>, C<..> or symbolic link path elements.");
3850
3851   ("ln", (RErr, [String "target"; Pathname "linkname"]), 164, [],
3852    [InitBasicFS, Always, TestOutputStruct (
3853       [["touch"; "/a"];
3854        ["ln"; "/a"; "/b"];
3855        ["stat"; "/b"]], [CompareWithInt ("nlink", 2)])],
3856    "create a hard link",
3857    "\
3858 This command creates a hard link using the C<ln> command.");
3859
3860   ("ln_f", (RErr, [String "target"; Pathname "linkname"]), 165, [],
3861    [InitBasicFS, Always, TestOutputStruct (
3862       [["touch"; "/a"];
3863        ["touch"; "/b"];
3864        ["ln_f"; "/a"; "/b"];
3865        ["stat"; "/b"]], [CompareWithInt ("nlink", 2)])],
3866    "create a hard link",
3867    "\
3868 This command creates a hard link using the C<ln -f> command.
3869 The C<-f> option removes the link (C<linkname>) if it exists already.");
3870
3871   ("ln_s", (RErr, [String "target"; Pathname "linkname"]), 166, [],
3872    [InitBasicFS, Always, TestOutputStruct (
3873       [["touch"; "/a"];
3874        ["ln_s"; "a"; "/b"];
3875        ["lstat"; "/b"]], [CompareWithInt ("mode", 0o120777)])],
3876    "create a symbolic link",
3877    "\
3878 This command creates a symbolic link using the C<ln -s> command.");
3879
3880   ("ln_sf", (RErr, [String "target"; Pathname "linkname"]), 167, [],
3881    [InitBasicFS, Always, TestOutput (
3882       [["mkdir_p"; "/a/b"];
3883        ["touch"; "/a/b/c"];
3884        ["ln_sf"; "../d"; "/a/b/c"];
3885        ["readlink"; "/a/b/c"]], "../d")],
3886    "create a symbolic link",
3887    "\
3888 This command creates a symbolic link using the C<ln -sf> command,
3889 The C<-f> option removes the link (C<linkname>) if it exists already.");
3890
3891   ("readlink", (RString "link", [Pathname "path"]), 168, [],
3892    [] (* XXX tested above *),
3893    "read the target of a symbolic link",
3894    "\
3895 This command reads the target of a symbolic link.");
3896
3897   ("fallocate", (RErr, [Pathname "path"; Int "len"]), 169, [DeprecatedBy "fallocate64"],
3898    [InitBasicFS, Always, TestOutputStruct (
3899       [["fallocate"; "/a"; "1000000"];
3900        ["stat"; "/a"]], [CompareWithInt ("size", 1_000_000)])],
3901    "preallocate a file in the guest filesystem",
3902    "\
3903 This command preallocates a file (containing zero bytes) named
3904 C<path> of size C<len> bytes.  If the file exists already, it
3905 is overwritten.
3906
3907 Do not confuse this with the guestfish-specific
3908 C<alloc> command which allocates a file in the host and
3909 attaches it as a device.");
3910
3911   ("swapon_device", (RErr, [Device "device"]), 170, [],
3912    [InitPartition, Always, TestRun (
3913       [["mkswap"; "/dev/sda1"];
3914        ["swapon_device"; "/dev/sda1"];
3915        ["swapoff_device"; "/dev/sda1"]])],
3916    "enable swap on device",
3917    "\
3918 This command enables the libguestfs appliance to use the
3919 swap device or partition named C<device>.  The increased
3920 memory is made available for all commands, for example
3921 those run using C<guestfs_command> or C<guestfs_sh>.
3922
3923 Note that you should not swap to existing guest swap
3924 partitions unless you know what you are doing.  They may
3925 contain hibernation information, or other information that
3926 the guest doesn't want you to trash.  You also risk leaking
3927 information about the host to the guest this way.  Instead,
3928 attach a new host device to the guest and swap on that.");
3929
3930   ("swapoff_device", (RErr, [Device "device"]), 171, [],
3931    [], (* XXX tested by swapon_device *)
3932    "disable swap on device",
3933    "\
3934 This command disables the libguestfs appliance swap
3935 device or partition named C<device>.
3936 See C<guestfs_swapon_device>.");
3937
3938   ("swapon_file", (RErr, [Pathname "file"]), 172, [],
3939    [InitBasicFS, Always, TestRun (
3940       [["fallocate"; "/swap"; "8388608"];
3941        ["mkswap_file"; "/swap"];
3942        ["swapon_file"; "/swap"];
3943        ["swapoff_file"; "/swap"]])],
3944    "enable swap on file",
3945    "\
3946 This command enables swap to a file.
3947 See C<guestfs_swapon_device> for other notes.");
3948
3949   ("swapoff_file", (RErr, [Pathname "file"]), 173, [],
3950    [], (* XXX tested by swapon_file *)
3951    "disable swap on file",
3952    "\
3953 This command disables the libguestfs appliance swap on file.");
3954
3955   ("swapon_label", (RErr, [String "label"]), 174, [],
3956    [InitEmpty, Always, TestRun (
3957       [["part_disk"; "/dev/sdb"; "mbr"];
3958        ["mkswap_L"; "swapit"; "/dev/sdb1"];
3959        ["swapon_label"; "swapit"];
3960        ["swapoff_label"; "swapit"];
3961        ["zero"; "/dev/sdb"];
3962        ["blockdev_rereadpt"; "/dev/sdb"]])],
3963    "enable swap on labeled swap partition",
3964    "\
3965 This command enables swap to a labeled swap partition.
3966 See C<guestfs_swapon_device> for other notes.");
3967
3968   ("swapoff_label", (RErr, [String "label"]), 175, [],
3969    [], (* XXX tested by swapon_label *)
3970    "disable swap on labeled swap partition",
3971    "\
3972 This command disables the libguestfs appliance swap on
3973 labeled swap partition.");
3974
3975   ("swapon_uuid", (RErr, [String "uuid"]), 176, [Optional "linuxfsuuid"],
3976    (let uuid = uuidgen () in
3977     [InitEmpty, Always, TestRun (
3978        [["mkswap_U"; uuid; "/dev/sdb"];
3979         ["swapon_uuid"; uuid];
3980         ["swapoff_uuid"; uuid]])]),
3981    "enable swap on swap partition by UUID",
3982    "\
3983 This command enables swap to a swap partition with the given UUID.
3984 See C<guestfs_swapon_device> for other notes.");
3985
3986   ("swapoff_uuid", (RErr, [String "uuid"]), 177, [Optional "linuxfsuuid"],
3987    [], (* XXX tested by swapon_uuid *)
3988    "disable swap on swap partition by UUID",
3989    "\
3990 This command disables the libguestfs appliance swap partition
3991 with the given UUID.");
3992
3993   ("mkswap_file", (RErr, [Pathname "path"]), 178, [],
3994    [InitBasicFS, Always, TestRun (
3995       [["fallocate"; "/swap"; "8388608"];
3996        ["mkswap_file"; "/swap"]])],
3997    "create a swap file",
3998    "\
3999 Create a swap file.
4000
4001 This command just writes a swap file signature to an existing
4002 file.  To create the file itself, use something like C<guestfs_fallocate>.");
4003
4004   ("inotify_init", (RErr, [Int "maxevents"]), 179, [Optional "inotify"],
4005    [InitISOFS, Always, TestRun (
4006       [["inotify_init"; "0"]])],
4007    "create an inotify handle",
4008    "\
4009 This command creates a new inotify handle.
4010 The inotify subsystem can be used to notify events which happen to
4011 objects in the guest filesystem.
4012
4013 C<maxevents> is the maximum number of events which will be
4014 queued up between calls to C<guestfs_inotify_read> or
4015 C<guestfs_inotify_files>.
4016 If this is passed as C<0>, then the kernel (or previously set)
4017 default is used.  For Linux 2.6.29 the default was 16384 events.
4018 Beyond this limit, the kernel throws away events, but records
4019 the fact that it threw them away by setting a flag
4020 C<IN_Q_OVERFLOW> in the returned structure list (see
4021 C<guestfs_inotify_read>).
4022
4023 Before any events are generated, you have to add some
4024 watches to the internal watch list.  See:
4025 C<guestfs_inotify_add_watch>,
4026 C<guestfs_inotify_rm_watch> and
4027 C<guestfs_inotify_watch_all>.
4028
4029 Queued up events should be read periodically by calling
4030 C<guestfs_inotify_read>
4031 (or C<guestfs_inotify_files> which is just a helpful
4032 wrapper around C<guestfs_inotify_read>).  If you don't
4033 read the events out often enough then you risk the internal
4034 queue overflowing.
4035
4036 The handle should be closed after use by calling
4037 C<guestfs_inotify_close>.  This also removes any
4038 watches automatically.
4039
4040 See also L<inotify(7)> for an overview of the inotify interface
4041 as exposed by the Linux kernel, which is roughly what we expose
4042 via libguestfs.  Note that there is one global inotify handle
4043 per libguestfs instance.");
4044
4045   ("inotify_add_watch", (RInt64 "wd", [Pathname "path"; Int "mask"]), 180, [Optional "inotify"],
4046    [InitBasicFS, Always, TestOutputList (
4047       [["inotify_init"; "0"];
4048        ["inotify_add_watch"; "/"; "1073741823"];
4049        ["touch"; "/a"];
4050        ["touch"; "/b"];
4051        ["inotify_files"]], ["a"; "b"])],
4052    "add an inotify watch",
4053    "\
4054 Watch C<path> for the events listed in C<mask>.
4055
4056 Note that if C<path> is a directory then events within that
4057 directory are watched, but this does I<not> happen recursively
4058 (in subdirectories).
4059
4060 Note for non-C or non-Linux callers: the inotify events are
4061 defined by the Linux kernel ABI and are listed in
4062 C</usr/include/sys/inotify.h>.");
4063
4064   ("inotify_rm_watch", (RErr, [Int(*XXX64*) "wd"]), 181, [Optional "inotify"],
4065    [],
4066    "remove an inotify watch",
4067    "\
4068 Remove a previously defined inotify watch.
4069 See C<guestfs_inotify_add_watch>.");
4070
4071   ("inotify_read", (RStructList ("events", "inotify_event"), []), 182, [Optional "inotify"],
4072    [],
4073    "return list of inotify events",
4074    "\
4075 Return the complete queue of events that have happened
4076 since the previous read call.
4077
4078 If no events have happened, this returns an empty list.
4079
4080 I<Note>: In order to make sure that all events have been
4081 read, you must call this function repeatedly until it
4082 returns an empty list.  The reason is that the call will
4083 read events up to the maximum appliance-to-host message
4084 size and leave remaining events in the queue.");
4085
4086   ("inotify_files", (RStringList "paths", []), 183, [Optional "inotify"],
4087    [],
4088    "return list of watched files that had events",
4089    "\
4090 This function is a helpful wrapper around C<guestfs_inotify_read>
4091 which just returns a list of pathnames of objects that were
4092 touched.  The returned pathnames are sorted and deduplicated.");
4093
4094   ("inotify_close", (RErr, []), 184, [Optional "inotify"],
4095    [],
4096    "close the inotify handle",
4097    "\
4098 This closes the inotify handle which was previously
4099 opened by inotify_init.  It removes all watches, throws
4100 away any pending events, and deallocates all resources.");
4101
4102   ("setcon", (RErr, [String "context"]), 185, [Optional "selinux"],
4103    [],
4104    "set SELinux security context",
4105    "\
4106 This sets the SELinux security context of the daemon
4107 to the string C<context>.
4108
4109 See the documentation about SELINUX in L<guestfs(3)>.");
4110
4111   ("getcon", (RString "context", []), 186, [Optional "selinux"],
4112    [],
4113    "get SELinux security context",
4114    "\
4115 This gets the SELinux security context of the daemon.
4116
4117 See the documentation about SELINUX in L<guestfs(3)>,
4118 and C<guestfs_setcon>");
4119
4120   ("mkfs_b", (RErr, [String "fstype"; Int "blocksize"; Device "device"]), 187, [],
4121    [InitEmpty, Always, TestOutput (
4122       [["part_disk"; "/dev/sda"; "mbr"];
4123        ["mkfs_b"; "ext2"; "4096"; "/dev/sda1"];
4124        ["mount_options"; ""; "/dev/sda1"; "/"];
4125        ["write"; "/new"; "new file contents"];
4126        ["cat"; "/new"]], "new file contents");
4127     InitEmpty, Always, TestRun (
4128       [["part_disk"; "/dev/sda"; "mbr"];
4129        ["mkfs_b"; "vfat"; "32768"; "/dev/sda1"]]);
4130     InitEmpty, Always, TestLastFail (
4131       [["part_disk"; "/dev/sda"; "mbr"];
4132        ["mkfs_b"; "vfat"; "32769"; "/dev/sda1"]]);
4133     InitEmpty, Always, TestLastFail (
4134       [["part_disk"; "/dev/sda"; "mbr"];
4135        ["mkfs_b"; "vfat"; "33280"; "/dev/sda1"]]);
4136     InitEmpty, IfAvailable "ntfsprogs", TestRun (
4137       [["part_disk"; "/dev/sda"; "mbr"];
4138        ["mkfs_b"; "ntfs"; "32768"; "/dev/sda1"]])],
4139    "make a filesystem with block size",
4140    "\
4141 This call is similar to C<guestfs_mkfs>, but it allows you to
4142 control the block size of the resulting filesystem.  Supported
4143 block sizes depend on the filesystem type, but typically they
4144 are C<1024>, C<2048> or C<4096> only.
4145
4146 For VFAT and NTFS the C<blocksize> parameter is treated as
4147 the requested cluster size.");
4148
4149   ("mke2journal", (RErr, [Int "blocksize"; Device "device"]), 188, [],
4150    [InitEmpty, Always, TestOutput (
4151       [["sfdiskM"; "/dev/sda"; ",100 ,"];
4152        ["mke2journal"; "4096"; "/dev/sda1"];
4153        ["mke2fs_J"; "ext2"; "4096"; "/dev/sda2"; "/dev/sda1"];
4154        ["mount_options"; ""; "/dev/sda2"; "/"];
4155        ["write"; "/new"; "new file contents"];
4156        ["cat"; "/new"]], "new file contents")],
4157    "make ext2/3/4 external journal",
4158    "\
4159 This creates an ext2 external journal on C<device>.  It is equivalent
4160 to the command:
4161
4162  mke2fs -O journal_dev -b blocksize device");
4163
4164   ("mke2journal_L", (RErr, [Int "blocksize"; String "label"; Device "device"]), 189, [],
4165    [InitEmpty, Always, TestOutput (
4166       [["sfdiskM"; "/dev/sda"; ",100 ,"];
4167        ["mke2journal_L"; "4096"; "JOURNAL"; "/dev/sda1"];
4168        ["mke2fs_JL"; "ext2"; "4096"; "/dev/sda2"; "JOURNAL"];
4169        ["mount_options"; ""; "/dev/sda2"; "/"];
4170        ["write"; "/new"; "new file contents"];
4171        ["cat"; "/new"]], "new file contents")],
4172    "make ext2/3/4 external journal with label",
4173    "\
4174 This creates an ext2 external journal on C<device> with label C<label>.");
4175
4176   ("mke2journal_U", (RErr, [Int "blocksize"; String "uuid"; Device "device"]), 190, [Optional "linuxfsuuid"],
4177    (let uuid = uuidgen () in
4178     [InitEmpty, Always, TestOutput (
4179        [["sfdiskM"; "/dev/sda"; ",100 ,"];
4180         ["mke2journal_U"; "4096"; uuid; "/dev/sda1"];
4181         ["mke2fs_JU"; "ext2"; "4096"; "/dev/sda2"; uuid];
4182         ["mount_options"; ""; "/dev/sda2"; "/"];
4183         ["write"; "/new"; "new file contents"];
4184         ["cat"; "/new"]], "new file contents")]),
4185    "make ext2/3/4 external journal with UUID",
4186    "\
4187 This creates an ext2 external journal on C<device> with UUID C<uuid>.");
4188
4189   ("mke2fs_J", (RErr, [String "fstype"; Int "blocksize"; Device "device"; Device "journal"]), 191, [],
4190    [],
4191    "make ext2/3/4 filesystem with external journal",
4192    "\
4193 This creates an ext2/3/4 filesystem on C<device> with
4194 an external journal on C<journal>.  It is equivalent
4195 to the command:
4196
4197  mke2fs -t fstype -b blocksize -J device=<journal> <device>
4198
4199 See also C<guestfs_mke2journal>.");
4200
4201   ("mke2fs_JL", (RErr, [String "fstype"; Int "blocksize"; Device "device"; String "label"]), 192, [],
4202    [],
4203    "make ext2/3/4 filesystem with external journal",
4204    "\
4205 This creates an ext2/3/4 filesystem on C<device> with
4206 an external journal on the journal labeled C<label>.
4207
4208 See also C<guestfs_mke2journal_L>.");
4209
4210   ("mke2fs_JU", (RErr, [String "fstype"; Int "blocksize"; Device "device"; String "uuid"]), 193, [Optional "linuxfsuuid"],
4211    [],
4212    "make ext2/3/4 filesystem with external journal",
4213    "\
4214 This creates an ext2/3/4 filesystem on C<device> with
4215 an external journal on the journal with UUID C<uuid>.
4216
4217 See also C<guestfs_mke2journal_U>.");
4218
4219   ("modprobe", (RErr, [String "modulename"]), 194, [Optional "linuxmodules"],
4220    [InitNone, Always, TestRun [["modprobe"; "fat"]]],
4221    "load a kernel module",
4222    "\
4223 This loads a kernel module in the appliance.
4224
4225 The kernel module must have been whitelisted when libguestfs
4226 was built (see C<appliance/kmod.whitelist.in> in the source).");
4227
4228   ("echo_daemon", (RString "output", [StringList "words"]), 195, [],
4229    [InitNone, Always, TestOutput (
4230       [["echo_daemon"; "This is a test"]], "This is a test"
4231     )],
4232    "echo arguments back to the client",
4233    "\
4234 This command concatenates the list of C<words> passed with single spaces
4235 between them and returns the resulting string.
4236
4237 You can use this command to test the connection through to the daemon.
4238
4239 See also C<guestfs_ping_daemon>.");
4240
4241   ("find0", (RErr, [Pathname "directory"; FileOut "files"]), 196, [],
4242    [], (* There is a regression test for this. *)
4243    "find all files and directories, returning NUL-separated list",
4244    "\
4245 This command lists out all files and directories, recursively,
4246 starting at C<directory>, placing the resulting list in the
4247 external file called C<files>.
4248
4249 This command works the same way as C<guestfs_find> with the
4250 following exceptions:
4251
4252 =over 4
4253
4254 =item *
4255
4256 The resulting list is written to an external file.
4257
4258 =item *
4259
4260 Items (filenames) in the result are separated
4261 by C<\\0> characters.  See L<find(1)> option I<-print0>.
4262
4263 =item *
4264
4265 This command is not limited in the number of names that it
4266 can return.
4267
4268 =item *
4269
4270 The result list is not sorted.
4271
4272 =back");
4273
4274   ("case_sensitive_path", (RString "rpath", [Pathname "path"]), 197, [],
4275    [InitISOFS, Always, TestOutput (
4276       [["case_sensitive_path"; "/DIRECTORY"]], "/directory");
4277     InitISOFS, Always, TestOutput (
4278       [["case_sensitive_path"; "/DIRECTORY/"]], "/directory");
4279     InitISOFS, Always, TestOutput (
4280       [["case_sensitive_path"; "/Known-1"]], "/known-1");
4281     InitISOFS, Always, TestLastFail (
4282       [["case_sensitive_path"; "/Known-1/"]]);
4283     InitBasicFS, Always, TestOutput (
4284       [["mkdir"; "/a"];
4285        ["mkdir"; "/a/bbb"];
4286        ["touch"; "/a/bbb/c"];
4287        ["case_sensitive_path"; "/A/bbB/C"]], "/a/bbb/c");
4288     InitBasicFS, Always, TestOutput (
4289       [["mkdir"; "/a"];
4290        ["mkdir"; "/a/bbb"];
4291        ["touch"; "/a/bbb/c"];
4292        ["case_sensitive_path"; "/A////bbB/C"]], "/a/bbb/c");
4293     InitBasicFS, Always, TestLastFail (
4294       [["mkdir"; "/a"];
4295        ["mkdir"; "/a/bbb"];
4296        ["touch"; "/a/bbb/c"];
4297        ["case_sensitive_path"; "/A/bbb/../bbb/C"]])],
4298    "return true path on case-insensitive filesystem",
4299    "\
4300 This can be used to resolve case insensitive paths on
4301 a filesystem which is case sensitive.  The use case is
4302 to resolve paths which you have read from Windows configuration
4303 files or the Windows Registry, to the true path.
4304
4305 The command handles a peculiarity of the Linux ntfs-3g
4306 filesystem driver (and probably others), which is that although
4307 the underlying filesystem is case-insensitive, the driver
4308 exports the filesystem to Linux as case-sensitive.
4309
4310 One consequence of this is that special directories such
4311 as C<c:\\windows> may appear as C</WINDOWS> or C</windows>
4312 (or other things) depending on the precise details of how
4313 they were created.  In Windows itself this would not be
4314 a problem.
4315
4316 Bug or feature?  You decide:
4317 L<http://www.tuxera.com/community/ntfs-3g-faq/#posixfilenames1>
4318
4319 This function resolves the true case of each element in the
4320 path and returns the case-sensitive path.
4321
4322 Thus C<guestfs_case_sensitive_path> (\"/Windows/System32\")
4323 might return C<\"/WINDOWS/system32\"> (the exact return value
4324 would depend on details of how the directories were originally
4325 created under Windows).
4326
4327 I<Note>:
4328 This function does not handle drive names, backslashes etc.
4329
4330 See also C<guestfs_realpath>.");
4331
4332   ("vfs_type", (RString "fstype", [Device "device"]), 198, [],
4333    [InitBasicFS, Always, TestOutput (
4334       [["vfs_type"; "/dev/sda1"]], "ext2")],
4335    "get the Linux VFS type corresponding to a mounted device",
4336    "\
4337 This command gets the filesystem type corresponding to
4338 the filesystem on C<device>.
4339
4340 For most filesystems, the result is the name of the Linux
4341 VFS module which would be used to mount this filesystem
4342 if you mounted it without specifying the filesystem type.
4343 For example a string such as C<ext3> or C<ntfs>.");
4344
4345   ("truncate", (RErr, [Pathname "path"]), 199, [],
4346    [InitBasicFS, Always, TestOutputStruct (
4347       [["write"; "/test"; "some stuff so size is not zero"];
4348        ["truncate"; "/test"];
4349        ["stat"; "/test"]], [CompareWithInt ("size", 0)])],
4350    "truncate a file to zero size",
4351    "\
4352 This command truncates C<path> to a zero-length file.  The
4353 file must exist already.");
4354
4355   ("truncate_size", (RErr, [Pathname "path"; Int64 "size"]), 200, [],
4356    [InitBasicFS, Always, TestOutputStruct (
4357       [["touch"; "/test"];
4358        ["truncate_size"; "/test"; "1000"];
4359        ["stat"; "/test"]], [CompareWithInt ("size", 1000)])],
4360    "truncate a file to a particular size",
4361    "\
4362 This command truncates C<path> to size C<size> bytes.  The file
4363 must exist already.
4364
4365 If the current file size is less than C<size> then
4366 the file is extended to the required size with zero bytes.
4367 This creates a sparse file (ie. disk blocks are not allocated
4368 for the file until you write to it).  To create a non-sparse
4369 file of zeroes, use C<guestfs_fallocate64> instead.");
4370
4371   ("utimens", (RErr, [Pathname "path"; Int64 "atsecs"; Int64 "atnsecs"; Int64 "mtsecs"; Int64 "mtnsecs"]), 201, [],
4372    [InitBasicFS, Always, TestOutputStruct (
4373       [["touch"; "/test"];
4374        ["utimens"; "/test"; "12345"; "67890"; "9876"; "5432"];
4375        ["stat"; "/test"]], [CompareWithInt ("mtime", 9876)])],
4376    "set timestamp of a file with nanosecond precision",
4377    "\
4378 This command sets the timestamps of a file with nanosecond
4379 precision.
4380
4381 C<atsecs, atnsecs> are the last access time (atime) in secs and
4382 nanoseconds from the epoch.
4383
4384 C<mtsecs, mtnsecs> are the last modification time (mtime) in
4385 secs and nanoseconds from the epoch.
4386
4387 If the C<*nsecs> field contains the special value C<-1> then
4388 the corresponding timestamp is set to the current time.  (The
4389 C<*secs> field is ignored in this case).
4390
4391 If the C<*nsecs> field contains the special value C<-2> then
4392 the corresponding timestamp is left unchanged.  (The
4393 C<*secs> field is ignored in this case).");
4394
4395   ("mkdir_mode", (RErr, [Pathname "path"; Int "mode"]), 202, [],
4396    [InitBasicFS, Always, TestOutputStruct (
4397       [["mkdir_mode"; "/test"; "0o111"];
4398        ["stat"; "/test"]], [CompareWithInt ("mode", 0o40111)])],
4399    "create a directory with a particular mode",
4400    "\
4401 This command creates a directory, setting the initial permissions
4402 of the directory to C<mode>.
4403
4404 For common Linux filesystems, the actual mode which is set will
4405 be C<mode & ~umask & 01777>.  Non-native-Linux filesystems may
4406 interpret the mode in other ways.
4407
4408 See also C<guestfs_mkdir>, C<guestfs_umask>");
4409
4410   ("lchown", (RErr, [Int "owner"; Int "group"; Pathname "path"]), 203, [],
4411    [], (* XXX *)
4412    "change file owner and group",
4413    "\
4414 Change the file owner to C<owner> and group to C<group>.
4415 This is like C<guestfs_chown> but if C<path> is a symlink then
4416 the link itself is changed, not the target.
4417
4418 Only numeric uid and gid are supported.  If you want to use
4419 names, you will need to locate and parse the password file
4420 yourself (Augeas support makes this relatively easy).");
4421
4422   ("lstatlist", (RStructList ("statbufs", "stat"), [Pathname "path"; StringList "names"]), 204, [],
4423    [], (* XXX *)
4424    "lstat on multiple files",
4425    "\
4426 This call allows you to perform the C<guestfs_lstat> operation
4427 on multiple files, where all files are in the directory C<path>.
4428 C<names> is the list of files from this directory.
4429
4430 On return you get a list of stat structs, with a one-to-one
4431 correspondence to the C<names> list.  If any name did not exist
4432 or could not be lstat'd, then the C<ino> field of that structure
4433 is set to C<-1>.
4434
4435 This call is intended for programs that want to efficiently
4436 list a directory contents without making many round-trips.
4437 See also C<guestfs_lxattrlist> for a similarly efficient call
4438 for getting extended attributes.  Very long directory listings
4439 might cause the protocol message size to be exceeded, causing
4440 this call to fail.  The caller must split up such requests
4441 into smaller groups of names.");
4442
4443   ("lxattrlist", (RStructList ("xattrs", "xattr"), [Pathname "path"; StringList "names"]), 205, [Optional "linuxxattrs"],
4444    [], (* XXX *)
4445    "lgetxattr on multiple files",
4446    "\
4447 This call allows you to get the extended attributes
4448 of multiple files, where all files are in the directory C<path>.
4449 C<names> is the list of files from this directory.
4450
4451 On return you get a flat list of xattr structs which must be
4452 interpreted sequentially.  The first xattr struct always has a zero-length
4453 C<attrname>.  C<attrval> in this struct is zero-length
4454 to indicate there was an error doing C<lgetxattr> for this
4455 file, I<or> is a C string which is a decimal number
4456 (the number of following attributes for this file, which could
4457 be C<\"0\">).  Then after the first xattr struct are the
4458 zero or more attributes for the first named file.
4459 This repeats for the second and subsequent files.
4460
4461 This call is intended for programs that want to efficiently
4462 list a directory contents without making many round-trips.
4463 See also C<guestfs_lstatlist> for a similarly efficient call
4464 for getting standard stats.  Very long directory listings
4465 might cause the protocol message size to be exceeded, causing
4466 this call to fail.  The caller must split up such requests
4467 into smaller groups of names.");
4468
4469   ("readlinklist", (RStringList "links", [Pathname "path"; StringList "names"]), 206, [],
4470    [], (* XXX *)
4471    "readlink on multiple files",
4472    "\
4473 This call allows you to do a C<readlink> operation
4474 on multiple files, where all files are in the directory C<path>.
4475 C<names> is the list of files from this directory.
4476
4477 On return you get a list of strings, with a one-to-one
4478 correspondence to the C<names> list.  Each string is the
4479 value of the symbolic link.
4480
4481 If the C<readlink(2)> operation fails on any name, then
4482 the corresponding result string is the empty string C<\"\">.
4483 However the whole operation is completed even if there
4484 were C<readlink(2)> errors, and so you can call this
4485 function with names where you don't know if they are
4486 symbolic links already (albeit slightly less efficient).
4487
4488 This call is intended for programs that want to efficiently
4489 list a directory contents without making many round-trips.
4490 Very long directory listings might cause the protocol
4491 message size to be exceeded, causing
4492 this call to fail.  The caller must split up such requests
4493 into smaller groups of names.");
4494
4495   ("pread", (RBufferOut "content", [Pathname "path"; Int "count"; Int64 "offset"]), 207, [ProtocolLimitWarning],
4496    [InitISOFS, Always, TestOutputBuffer (
4497       [["pread"; "/known-4"; "1"; "3"]], "\n");
4498     InitISOFS, Always, TestOutputBuffer (
4499       [["pread"; "/empty"; "0"; "100"]], "")],
4500    "read part of a file",
4501    "\
4502 This command lets you read part of a file.  It reads C<count>
4503 bytes of the file, starting at C<offset>, from file C<path>.
4504
4505 This may read fewer bytes than requested.  For further details
4506 see the L<pread(2)> system call.
4507
4508 See also C<guestfs_pwrite>.");
4509
4510   ("part_init", (RErr, [Device "device"; String "parttype"]), 208, [],
4511    [InitEmpty, Always, TestRun (
4512       [["part_init"; "/dev/sda"; "gpt"]])],
4513    "create an empty partition table",
4514    "\
4515 This creates an empty partition table on C<device> of one of the
4516 partition types listed below.  Usually C<parttype> should be
4517 either C<msdos> or C<gpt> (for large disks).
4518
4519 Initially there are no partitions.  Following this, you should
4520 call C<guestfs_part_add> for each partition required.
4521
4522 Possible values for C<parttype> are:
4523
4524 =over 4
4525
4526 =item B<efi> | B<gpt>
4527
4528 Intel EFI / GPT partition table.
4529
4530 This is recommended for >= 2 TB partitions that will be accessed
4531 from Linux and Intel-based Mac OS X.  It also has limited backwards
4532 compatibility with the C<mbr> format.
4533
4534 =item B<mbr> | B<msdos>
4535
4536 The standard PC \"Master Boot Record\" (MBR) format used
4537 by MS-DOS and Windows.  This partition type will B<only> work
4538 for device sizes up to 2 TB.  For large disks we recommend
4539 using C<gpt>.
4540
4541 =back
4542
4543 Other partition table types that may work but are not
4544 supported include:
4545
4546 =over 4
4547
4548 =item B<aix>
4549
4550 AIX disk labels.
4551
4552 =item B<amiga> | B<rdb>
4553
4554 Amiga \"Rigid Disk Block\" format.
4555
4556 =item B<bsd>
4557
4558 BSD disk labels.
4559
4560 =item B<dasd>
4561
4562 DASD, used on IBM mainframes.
4563
4564 =item B<dvh>
4565
4566 MIPS/SGI volumes.
4567
4568 =item B<mac>
4569
4570 Old Mac partition format.  Modern Macs use C<gpt>.
4571
4572 =item B<pc98>
4573
4574 NEC PC-98 format, common in Japan apparently.
4575
4576 =item B<sun>
4577
4578 Sun disk labels.
4579
4580 =back");
4581
4582   ("part_add", (RErr, [Device "device"; String "prlogex"; Int64 "startsect"; Int64 "endsect"]), 209, [],
4583    [InitEmpty, Always, TestRun (
4584       [["part_init"; "/dev/sda"; "mbr"];
4585        ["part_add"; "/dev/sda"; "primary"; "1"; "-1"]]);
4586     InitEmpty, Always, TestRun (
4587       [["part_init"; "/dev/sda"; "gpt"];
4588        ["part_add"; "/dev/sda"; "primary"; "34"; "127"];
4589        ["part_add"; "/dev/sda"; "primary"; "128"; "-34"]]);
4590     InitEmpty, Always, TestRun (
4591       [["part_init"; "/dev/sda"; "mbr"];
4592        ["part_add"; "/dev/sda"; "primary"; "32"; "127"];
4593        ["part_add"; "/dev/sda"; "primary"; "128"; "255"];
4594        ["part_add"; "/dev/sda"; "primary"; "256"; "511"];
4595        ["part_add"; "/dev/sda"; "primary"; "512"; "-1"]])],
4596    "add a partition to the device",
4597    "\
4598 This command adds a partition to C<device>.  If there is no partition
4599 table on the device, call C<guestfs_part_init> first.
4600
4601 The C<prlogex> parameter is the type of partition.  Normally you
4602 should pass C<p> or C<primary> here, but MBR partition tables also
4603 support C<l> (or C<logical>) and C<e> (or C<extended>) partition
4604 types.
4605
4606 C<startsect> and C<endsect> are the start and end of the partition
4607 in I<sectors>.  C<endsect> may be negative, which means it counts
4608 backwards from the end of the disk (C<-1> is the last sector).
4609
4610 Creating a partition which covers the whole disk is not so easy.
4611 Use C<guestfs_part_disk> to do that.");
4612
4613   ("part_disk", (RErr, [Device "device"; String "parttype"]), 210, [DangerWillRobinson],
4614    [InitEmpty, Always, TestRun (
4615       [["part_disk"; "/dev/sda"; "mbr"]]);
4616     InitEmpty, Always, TestRun (
4617       [["part_disk"; "/dev/sda"; "gpt"]])],
4618    "partition whole disk with a single primary partition",
4619    "\
4620 This command is simply a combination of C<guestfs_part_init>
4621 followed by C<guestfs_part_add> to create a single primary partition
4622 covering the whole disk.
4623
4624 C<parttype> is the partition table type, usually C<mbr> or C<gpt>,
4625 but other possible values are described in C<guestfs_part_init>.");
4626
4627   ("part_set_bootable", (RErr, [Device "device"; Int "partnum"; Bool "bootable"]), 211, [],
4628    [InitEmpty, Always, TestRun (
4629       [["part_disk"; "/dev/sda"; "mbr"];
4630        ["part_set_bootable"; "/dev/sda"; "1"; "true"]])],
4631    "make a partition bootable",
4632    "\
4633 This sets the bootable flag on partition numbered C<partnum> on
4634 device C<device>.  Note that partitions are numbered from 1.
4635
4636 The bootable flag is used by some operating systems (notably
4637 Windows) to determine which partition to boot from.  It is by
4638 no means universally recognized.");
4639
4640   ("part_set_name", (RErr, [Device "device"; Int "partnum"; String "name"]), 212, [],
4641    [InitEmpty, Always, TestRun (
4642       [["part_disk"; "/dev/sda"; "gpt"];
4643        ["part_set_name"; "/dev/sda"; "1"; "thepartname"]])],
4644    "set partition name",
4645    "\
4646 This sets the partition name on partition numbered C<partnum> on
4647 device C<device>.  Note that partitions are numbered from 1.
4648
4649 The partition name can only be set on certain types of partition
4650 table.  This works on C<gpt> but not on C<mbr> partitions.");
4651
4652   ("part_list", (RStructList ("partitions", "partition"), [Device "device"]), 213, [],
4653    [], (* XXX Add a regression test for this. *)
4654    "list partitions on a device",
4655    "\
4656 This command parses the partition table on C<device> and
4657 returns the list of partitions found.
4658
4659 The fields in the returned structure are:
4660
4661 =over 4
4662
4663 =item B<part_num>
4664
4665 Partition number, counting from 1.
4666
4667 =item B<part_start>
4668
4669 Start of the partition I<in bytes>.  To get sectors you have to
4670 divide by the device's sector size, see C<guestfs_blockdev_getss>.
4671
4672 =item B<part_end>
4673
4674 End of the partition in bytes.
4675
4676 =item B<part_size>
4677
4678 Size of the partition in bytes.
4679
4680 =back");
4681
4682   ("part_get_parttype", (RString "parttype", [Device "device"]), 214, [],
4683    [InitEmpty, Always, TestOutput (
4684       [["part_disk"; "/dev/sda"; "gpt"];
4685        ["part_get_parttype"; "/dev/sda"]], "gpt")],
4686    "get the partition table type",
4687    "\
4688 This command examines the partition table on C<device> and
4689 returns the partition table type (format) being used.
4690
4691 Common return values include: C<msdos> (a DOS/Windows style MBR
4692 partition table), C<gpt> (a GPT/EFI-style partition table).  Other
4693 values are possible, although unusual.  See C<guestfs_part_init>
4694 for a full list.");
4695
4696   ("fill", (RErr, [Int "c"; Int "len"; Pathname "path"]), 215, [Progress],
4697    [InitBasicFS, Always, TestOutputBuffer (
4698       [["fill"; "0x63"; "10"; "/test"];
4699        ["read_file"; "/test"]], "cccccccccc")],
4700    "fill a file with octets",
4701    "\
4702 This command creates a new file called C<path>.  The initial
4703 content of the file is C<len> octets of C<c>, where C<c>
4704 must be a number in the range C<[0..255]>.
4705
4706 To fill a file with zero bytes (sparsely), it is
4707 much more efficient to use C<guestfs_truncate_size>.
4708 To create a file with a pattern of repeating bytes
4709 use C<guestfs_fill_pattern>.");
4710
4711   ("available", (RErr, [StringList "groups"]), 216, [],
4712    [InitNone, Always, TestRun [["available"; ""]]],
4713    "test availability of some parts of the API",
4714    "\
4715 This command is used to check the availability of some
4716 groups of functionality in the appliance, which not all builds of
4717 the libguestfs appliance will be able to provide.
4718
4719 The libguestfs groups, and the functions that those
4720 groups correspond to, are listed in L<guestfs(3)/AVAILABILITY>.
4721 You can also fetch this list at runtime by calling
4722 C<guestfs_available_all_groups>.
4723
4724 The argument C<groups> is a list of group names, eg:
4725 C<[\"inotify\", \"augeas\"]> would check for the availability of
4726 the Linux inotify functions and Augeas (configuration file
4727 editing) functions.
4728
4729 The command returns no error if I<all> requested groups are available.
4730
4731 It fails with an error if one or more of the requested
4732 groups is unavailable in the appliance.
4733
4734 If an unknown group name is included in the
4735 list of groups then an error is always returned.
4736
4737 I<Notes:>
4738
4739 =over 4
4740
4741 =item *
4742
4743 You must call C<guestfs_launch> before calling this function.
4744
4745 The reason is because we don't know what groups are
4746 supported by the appliance/daemon until it is running and can
4747 be queried.
4748
4749 =item *
4750
4751 If a group of functions is available, this does not necessarily
4752 mean that they will work.  You still have to check for errors
4753 when calling individual API functions even if they are
4754 available.
4755
4756 =item *
4757
4758 It is usually the job of distro packagers to build
4759 complete functionality into the libguestfs appliance.
4760 Upstream libguestfs, if built from source with all
4761 requirements satisfied, will support everything.
4762
4763 =item *
4764
4765 This call was added in version C<1.0.80>.  In previous
4766 versions of libguestfs all you could do would be to speculatively
4767 execute a command to find out if the daemon implemented it.
4768 See also C<guestfs_version>.
4769
4770 =back");
4771
4772   ("dd", (RErr, [Dev_or_Path "src"; Dev_or_Path "dest"]), 217, [],
4773    [InitBasicFS, Always, TestOutputBuffer (
4774       [["write"; "/src"; "hello, world"];
4775        ["dd"; "/src"; "/dest"];
4776        ["read_file"; "/dest"]], "hello, world")],
4777    "copy from source to destination using dd",
4778    "\
4779 This command copies from one source device or file C<src>
4780 to another destination device or file C<dest>.  Normally you
4781 would use this to copy to or from a device or partition, for
4782 example to duplicate a filesystem.
4783
4784 If the destination is a device, it must be as large or larger
4785 than the source file or device, otherwise the copy will fail.
4786 This command cannot do partial copies (see C<guestfs_copy_size>).");
4787
4788   ("filesize", (RInt64 "size", [Pathname "file"]), 218, [],
4789    [InitBasicFS, Always, TestOutputInt (
4790       [["write"; "/file"; "hello, world"];
4791        ["filesize"; "/file"]], 12)],
4792    "return the size of the file in bytes",
4793    "\
4794 This command returns the size of C<file> in bytes.
4795
4796 To get other stats about a file, use C<guestfs_stat>, C<guestfs_lstat>,
4797 C<guestfs_is_dir>, C<guestfs_is_file> etc.
4798 To get the size of block devices, use C<guestfs_blockdev_getsize64>.");
4799
4800   ("lvrename", (RErr, [String "logvol"; String "newlogvol"]), 219, [],
4801    [InitBasicFSonLVM, Always, TestOutputList (
4802       [["lvrename"; "/dev/VG/LV"; "/dev/VG/LV2"];
4803        ["lvs"]], ["/dev/VG/LV2"])],
4804    "rename an LVM logical volume",
4805    "\
4806 Rename a logical volume C<logvol> with the new name C<newlogvol>.");
4807
4808   ("vgrename", (RErr, [String "volgroup"; String "newvolgroup"]), 220, [],
4809    [InitBasicFSonLVM, Always, TestOutputList (
4810       [["umount"; "/"];
4811        ["vg_activate"; "false"; "VG"];
4812        ["vgrename"; "VG"; "VG2"];
4813        ["vg_activate"; "true"; "VG2"];
4814        ["mount_options"; ""; "/dev/VG2/LV"; "/"];
4815        ["vgs"]], ["VG2"])],
4816    "rename an LVM volume group",
4817    "\
4818 Rename a volume group C<volgroup> with the new name C<newvolgroup>.");
4819
4820   ("initrd_cat", (RBufferOut "content", [Pathname "initrdpath"; String "filename"]), 221, [ProtocolLimitWarning],
4821    [InitISOFS, Always, TestOutputBuffer (
4822       [["initrd_cat"; "/initrd"; "known-4"]], "abc\ndef\nghi")],
4823    "list the contents of a single file in an initrd",
4824    "\
4825 This command unpacks the file C<filename> from the initrd file
4826 called C<initrdpath>.  The filename must be given I<without> the
4827 initial C</> character.
4828
4829 For example, in guestfish you could use the following command
4830 to examine the boot script (usually called C</init>)
4831 contained in a Linux initrd or initramfs image:
4832
4833  initrd-cat /boot/initrd-<version>.img init
4834
4835 See also C<guestfs_initrd_list>.");
4836
4837   ("pvuuid", (RString "uuid", [Device "device"]), 222, [],
4838    [],
4839    "get the UUID of a physical volume",
4840    "\
4841 This command returns the UUID of the LVM PV C<device>.");
4842
4843   ("vguuid", (RString "uuid", [String "vgname"]), 223, [],
4844    [],
4845    "get the UUID of a volume group",
4846    "\
4847 This command returns the UUID of the LVM VG named C<vgname>.");
4848
4849   ("lvuuid", (RString "uuid", [Device "device"]), 224, [],
4850    [],
4851    "get the UUID of a logical volume",
4852    "\
4853 This command returns the UUID of the LVM LV C<device>.");
4854
4855   ("vgpvuuids", (RStringList "uuids", [String "vgname"]), 225, [],
4856    [],
4857    "get the PV UUIDs containing the volume group",
4858    "\
4859 Given a VG called C<vgname>, this returns the UUIDs of all
4860 the physical volumes that this volume group resides on.
4861
4862 You can use this along with C<guestfs_pvs> and C<guestfs_pvuuid>
4863 calls to associate physical volumes and volume groups.
4864
4865 See also C<guestfs_vglvuuids>.");
4866
4867   ("vglvuuids", (RStringList "uuids", [String "vgname"]), 226, [],
4868    [],
4869    "get the LV UUIDs of all LVs in the volume group",
4870    "\
4871 Given a VG called C<vgname>, this returns the UUIDs of all
4872 the logical volumes created in this volume group.
4873
4874 You can use this along with C<guestfs_lvs> and C<guestfs_lvuuid>
4875 calls to associate logical volumes and volume groups.
4876
4877 See also C<guestfs_vgpvuuids>.");
4878
4879   ("copy_size", (RErr, [Dev_or_Path "src"; Dev_or_Path "dest"; Int64 "size"]), 227, [Progress],
4880    [InitBasicFS, Always, TestOutputBuffer (
4881       [["write"; "/src"; "hello, world"];
4882        ["copy_size"; "/src"; "/dest"; "5"];
4883        ["read_file"; "/dest"]], "hello")],
4884    "copy size bytes from source to destination using dd",
4885    "\
4886 This command copies exactly C<size> bytes from one source device
4887 or file C<src> to another destination device or file C<dest>.
4888
4889 Note this will fail if the source is too short or if the destination
4890 is not large enough.");
4891
4892   ("zero_device", (RErr, [Device "device"]), 228, [DangerWillRobinson; Progress],
4893    [InitBasicFSonLVM, Always, TestRun (
4894       [["zero_device"; "/dev/VG/LV"]])],
4895    "write zeroes to an entire device",
4896    "\
4897 This command writes zeroes over the entire C<device>.  Compare
4898 with C<guestfs_zero> which just zeroes the first few blocks of
4899 a device.");
4900
4901   ("txz_in", (RErr, [FileIn "tarball"; Pathname "directory"]), 229, [Optional "xz"],
4902    [InitBasicFS, Always, TestOutput (
4903       [["txz_in"; "../images/helloworld.tar.xz"; "/"];
4904        ["cat"; "/hello"]], "hello\n")],
4905    "unpack compressed tarball to directory",
4906    "\
4907 This command uploads and unpacks local file C<tarball> (an
4908 I<xz compressed> tar file) into C<directory>.");
4909
4910   ("txz_out", (RErr, [Pathname "directory"; FileOut "tarball"]), 230, [Optional "xz"],
4911    [],
4912    "pack directory into compressed tarball",
4913    "\
4914 This command packs the contents of C<directory> and downloads
4915 it to local file C<tarball> (as an xz compressed tar archive).");
4916
4917   ("ntfsresize", (RErr, [Device "device"]), 231, [Optional "ntfsprogs"],
4918    [],
4919    "resize an NTFS filesystem",
4920    "\
4921 This command resizes an NTFS filesystem, expanding or
4922 shrinking it to the size of the underlying device.
4923 See also L<ntfsresize(8)>.");
4924
4925   ("vgscan", (RErr, []), 232, [],
4926    [InitEmpty, Always, TestRun (
4927       [["vgscan"]])],
4928    "rescan for LVM physical volumes, volume groups and logical volumes",
4929    "\
4930 This rescans all block devices and rebuilds the list of LVM
4931 physical volumes, volume groups and logical volumes.");
4932
4933   ("part_del", (RErr, [Device "device"; Int "partnum"]), 233, [],
4934    [InitEmpty, Always, TestRun (
4935       [["part_init"; "/dev/sda"; "mbr"];
4936        ["part_add"; "/dev/sda"; "primary"; "1"; "-1"];
4937        ["part_del"; "/dev/sda"; "1"]])],
4938    "delete a partition",
4939    "\
4940 This command deletes the partition numbered C<partnum> on C<device>.
4941
4942 Note that in the case of MBR partitioning, deleting an
4943 extended partition also deletes any logical partitions
4944 it contains.");
4945
4946   ("part_get_bootable", (RBool "bootable", [Device "device"; Int "partnum"]), 234, [],
4947    [InitEmpty, Always, TestOutputTrue (
4948       [["part_init"; "/dev/sda"; "mbr"];
4949        ["part_add"; "/dev/sda"; "primary"; "1"; "-1"];
4950        ["part_set_bootable"; "/dev/sda"; "1"; "true"];
4951        ["part_get_bootable"; "/dev/sda"; "1"]])],
4952    "return true if a partition is bootable",
4953    "\
4954 This command returns true if the partition C<partnum> on
4955 C<device> has the bootable flag set.
4956
4957 See also C<guestfs_part_set_bootable>.");
4958
4959   ("part_get_mbr_id", (RInt "idbyte", [Device "device"; Int "partnum"]), 235, [FishOutput FishOutputHexadecimal],
4960    [InitEmpty, Always, TestOutputInt (
4961       [["part_init"; "/dev/sda"; "mbr"];
4962        ["part_add"; "/dev/sda"; "primary"; "1"; "-1"];
4963        ["part_set_mbr_id"; "/dev/sda"; "1"; "0x7f"];
4964        ["part_get_mbr_id"; "/dev/sda"; "1"]], 0x7f)],
4965    "get the MBR type byte (ID byte) from a partition",
4966    "\
4967 Returns the MBR type byte (also known as the ID byte) from
4968 the numbered partition C<partnum>.
4969
4970 Note that only MBR (old DOS-style) partitions have type bytes.
4971 You will get undefined results for other partition table
4972 types (see C<guestfs_part_get_parttype>).");
4973
4974   ("part_set_mbr_id", (RErr, [Device "device"; Int "partnum"; Int "idbyte"]), 236, [],
4975    [], (* tested by part_get_mbr_id *)
4976    "set the MBR type byte (ID byte) of a partition",
4977    "\
4978 Sets the MBR type byte (also known as the ID byte) of
4979 the numbered partition C<partnum> to C<idbyte>.  Note
4980 that the type bytes quoted in most documentation are
4981 in fact hexadecimal numbers, but usually documented
4982 without any leading \"0x\" which might be confusing.
4983
4984 Note that only MBR (old DOS-style) partitions have type bytes.
4985 You will get undefined results for other partition table
4986 types (see C<guestfs_part_get_parttype>).");
4987
4988   ("checksum_device", (RString "checksum", [String "csumtype"; Device "device"]), 237, [],
4989    [InitISOFS, Always, TestOutput (
4990       [["checksum_device"; "md5"; "/dev/sdd"]],
4991       (Digest.to_hex (Digest.file "images/test.iso")))],
4992    "compute MD5, SHAx or CRC checksum of the contents of a device",
4993    "\
4994 This call computes the MD5, SHAx or CRC checksum of the
4995 contents of the device named C<device>.  For the types of
4996 checksums supported see the C<guestfs_checksum> command.");
4997
4998   ("lvresize_free", (RErr, [Device "lv"; Int "percent"]), 238, [Optional "lvm2"],
4999    [InitNone, Always, TestRun (
5000       [["part_disk"; "/dev/sda"; "mbr"];
5001        ["pvcreate"; "/dev/sda1"];
5002        ["vgcreate"; "VG"; "/dev/sda1"];
5003        ["lvcreate"; "LV"; "VG"; "10"];
5004        ["lvresize_free"; "/dev/VG/LV"; "100"]])],
5005    "expand an LV to fill free space",
5006    "\
5007 This expands an existing logical volume C<lv> so that it fills
5008 C<pc>% of the remaining free space in the volume group.  Commonly
5009 you would call this with pc = 100 which expands the logical volume
5010 as much as possible, using all remaining free space in the volume
5011 group.");
5012
5013   ("aug_clear", (RErr, [String "augpath"]), 239, [Optional "augeas"],
5014    [], (* XXX Augeas code needs tests. *)
5015    "clear Augeas path",
5016    "\
5017 Set the value associated with C<path> to C<NULL>.  This
5018 is the same as the L<augtool(1)> C<clear> command.");
5019
5020   ("get_umask", (RInt "mask", []), 240, [FishOutput FishOutputOctal],
5021    [InitEmpty, Always, TestOutputInt (
5022       [["get_umask"]], 0o22)],
5023    "get the current umask",
5024    "\
5025 Return the current umask.  By default the umask is C<022>
5026 unless it has been set by calling C<guestfs_umask>.");
5027
5028   ("debug_upload", (RErr, [FileIn "filename"; String "tmpname"; Int "mode"]), 241, [],
5029    [],
5030    "upload a file to the appliance (internal use only)",
5031    "\
5032 The C<guestfs_debug_upload> command uploads a file to
5033 the libguestfs appliance.
5034
5035 There is no comprehensive help for this command.  You have
5036 to look at the file C<daemon/debug.c> in the libguestfs source
5037 to find out what it is for.");
5038
5039   ("base64_in", (RErr, [FileIn "base64file"; Pathname "filename"]), 242, [],
5040    [InitBasicFS, Always, TestOutput (
5041       [["base64_in"; "../images/hello.b64"; "/hello"];
5042        ["cat"; "/hello"]], "hello\n")],
5043    "upload base64-encoded data to file",
5044    "\
5045 This command uploads base64-encoded data from C<base64file>
5046 to C<filename>.");
5047
5048   ("base64_out", (RErr, [Pathname "filename"; FileOut "base64file"]), 243, [],
5049    [],
5050    "download file and encode as base64",
5051    "\
5052 This command downloads the contents of C<filename>, writing
5053 it out to local file C<base64file> encoded as base64.");
5054
5055   ("checksums_out", (RErr, [String "csumtype"; Pathname "directory"; FileOut "sumsfile"]), 244, [],
5056    [],
5057    "compute MD5, SHAx or CRC checksum of files in a directory",
5058    "\
5059 This command computes the checksums of all regular files in
5060 C<directory> and then emits a list of those checksums to
5061 the local output file C<sumsfile>.
5062
5063 This can be used for verifying the integrity of a virtual
5064 machine.  However to be properly secure you should pay
5065 attention to the output of the checksum command (it uses
5066 the ones from GNU coreutils).  In particular when the
5067 filename is not printable, coreutils uses a special
5068 backslash syntax.  For more information, see the GNU
5069 coreutils info file.");
5070
5071   ("fill_pattern", (RErr, [String "pattern"; Int "len"; Pathname "path"]), 245, [Progress],
5072    [InitBasicFS, Always, TestOutputBuffer (
5073       [["fill_pattern"; "abcdefghijklmnopqrstuvwxyz"; "28"; "/test"];
5074        ["read_file"; "/test"]], "abcdefghijklmnopqrstuvwxyzab")],
5075    "fill a file with a repeating pattern of bytes",
5076    "\
5077 This function is like C<guestfs_fill> except that it creates
5078 a new file of length C<len> containing the repeating pattern
5079 of bytes in C<pattern>.  The pattern is truncated if necessary
5080 to ensure the length of the file is exactly C<len> bytes.");
5081
5082   ("write", (RErr, [Pathname "path"; BufferIn "content"]), 246, [ProtocolLimitWarning],
5083    [InitBasicFS, Always, TestOutput (
5084       [["write"; "/new"; "new file contents"];
5085        ["cat"; "/new"]], "new file contents");
5086     InitBasicFS, Always, TestOutput (
5087       [["write"; "/new"; "\nnew file contents\n"];
5088        ["cat"; "/new"]], "\nnew file contents\n");
5089     InitBasicFS, Always, TestOutput (
5090       [["write"; "/new"; "\n\n"];
5091        ["cat"; "/new"]], "\n\n");
5092     InitBasicFS, Always, TestOutput (
5093       [["write"; "/new"; ""];
5094        ["cat"; "/new"]], "");
5095     InitBasicFS, Always, TestOutput (
5096       [["write"; "/new"; "\n\n\n"];
5097        ["cat"; "/new"]], "\n\n\n");
5098     InitBasicFS, Always, TestOutput (
5099       [["write"; "/new"; "\n"];
5100        ["cat"; "/new"]], "\n")],
5101    "create a new file",
5102    "\
5103 This call creates a file called C<path>.  The content of the
5104 file is the string C<content> (which can contain any 8 bit data).");
5105
5106   ("pwrite", (RInt "nbytes", [Pathname "path"; BufferIn "content"; Int64 "offset"]), 247, [ProtocolLimitWarning],
5107    [InitBasicFS, Always, TestOutput (
5108       [["write"; "/new"; "new file contents"];
5109        ["pwrite"; "/new"; "data"; "4"];
5110        ["cat"; "/new"]], "new data contents");
5111     InitBasicFS, Always, TestOutput (
5112       [["write"; "/new"; "new file contents"];
5113        ["pwrite"; "/new"; "is extended"; "9"];
5114        ["cat"; "/new"]], "new file is extended");
5115     InitBasicFS, Always, TestOutput (
5116       [["write"; "/new"; "new file contents"];
5117        ["pwrite"; "/new"; ""; "4"];
5118        ["cat"; "/new"]], "new file contents")],
5119    "write to part of a file",
5120    "\
5121 This command writes to part of a file.  It writes the data
5122 buffer C<content> to the file C<path> starting at offset C<offset>.
5123
5124 This command implements the L<pwrite(2)> system call, and like
5125 that system call it may not write the full data requested.  The
5126 return value is the number of bytes that were actually written
5127 to the file.  This could even be 0, although short writes are
5128 unlikely for regular files in ordinary circumstances.
5129
5130 See also C<guestfs_pread>.");
5131
5132   ("resize2fs_size", (RErr, [Device "device"; Int64 "size"]), 248, [],
5133    [],
5134    "resize an ext2, ext3 or ext4 filesystem (with size)",
5135    "\
5136 This command is the same as C<guestfs_resize2fs> except that it
5137 allows you to specify the new size (in bytes) explicitly.");
5138
5139   ("pvresize_size", (RErr, [Device "device"; Int64 "size"]), 249, [Optional "lvm2"],
5140    [],
5141    "resize an LVM physical volume (with size)",
5142    "\
5143 This command is the same as C<guestfs_pvresize> except that it
5144 allows you to specify the new size (in bytes) explicitly.");
5145
5146   ("ntfsresize_size", (RErr, [Device "device"; Int64 "size"]), 250, [Optional "ntfsprogs"],
5147    [],
5148    "resize an NTFS filesystem (with size)",
5149    "\
5150 This command is the same as C<guestfs_ntfsresize> except that it
5151 allows you to specify the new size (in bytes) explicitly.");
5152
5153   ("available_all_groups", (RStringList "groups", []), 251, [],
5154    [InitNone, Always, TestRun [["available_all_groups"]]],
5155    "return a list of all optional groups",
5156    "\
5157 This command returns a list of all optional groups that this
5158 daemon knows about.  Note this returns both supported and unsupported
5159 groups.  To find out which ones the daemon can actually support
5160 you have to call C<guestfs_available> on each member of the
5161 returned list.
5162
5163 See also C<guestfs_available> and L<guestfs(3)/AVAILABILITY>.");
5164
5165   ("fallocate64", (RErr, [Pathname "path"; Int64 "len"]), 252, [],
5166    [InitBasicFS, Always, TestOutputStruct (
5167       [["fallocate64"; "/a"; "1000000"];
5168        ["stat"; "/a"]], [CompareWithInt ("size", 1_000_000)])],
5169    "preallocate a file in the guest filesystem",
5170    "\
5171 This command preallocates a file (containing zero bytes) named
5172 C<path> of size C<len> bytes.  If the file exists already, it
5173 is overwritten.
5174
5175 Note that this call allocates disk blocks for the file.
5176 To create a sparse file use C<guestfs_truncate_size> instead.
5177
5178 The deprecated call C<guestfs_fallocate> does the same,
5179 but owing to an oversight it only allowed 30 bit lengths
5180 to be specified, effectively limiting the maximum size
5181 of files created through that call to 1GB.
5182
5183 Do not confuse this with the guestfish-specific
5184 C<alloc> and C<sparse> commands which create
5185 a file in the host and attach it as a device.");
5186
5187   ("vfs_label", (RString "label", [Device "device"]), 253, [],
5188    [InitBasicFS, Always, TestOutput (
5189        [["set_e2label"; "/dev/sda1"; "LTEST"];
5190         ["vfs_label"; "/dev/sda1"]], "LTEST")],
5191    "get the filesystem label",
5192    "\
5193 This returns the filesystem label of the filesystem on
5194 C<device>.
5195
5196 If the filesystem is unlabeled, this returns the empty string.
5197
5198 To find a filesystem from the label, use C<guestfs_findfs_label>.");
5199
5200   ("vfs_uuid", (RString "uuid", [Device "device"]), 254, [],
5201    (let uuid = uuidgen () in
5202     [InitBasicFS, Always, TestOutput (
5203        [["set_e2uuid"; "/dev/sda1"; uuid];
5204         ["vfs_uuid"; "/dev/sda1"]], uuid)]),
5205    "get the filesystem UUID",
5206    "\
5207 This returns the filesystem UUID of the filesystem on
5208 C<device>.
5209
5210 If the filesystem does not have a UUID, this returns the empty string.
5211
5212 To find a filesystem from the UUID, use C<guestfs_findfs_uuid>.");
5213
5214   ("lvm_set_filter", (RErr, [DeviceList "devices"]), 255, [Optional "lvm2"],
5215    (* Can't be tested with the current framework because
5216     * the VG is being used by the mounted filesystem, so
5217     * the vgchange -an command we do first will fail.
5218     *)
5219     [],
5220    "set LVM device filter",
5221    "\
5222 This sets the LVM device filter so that LVM will only be
5223 able to \"see\" the block devices in the list C<devices>,
5224 and will ignore all other attached block devices.
5225
5226 Where disk image(s) contain duplicate PVs or VGs, this
5227 command is useful to get LVM to ignore the duplicates, otherwise
5228 LVM can get confused.  Note also there are two types
5229 of duplication possible: either cloned PVs/VGs which have
5230 identical UUIDs; or VGs that are not cloned but just happen
5231 to have the same name.  In normal operation you cannot
5232 create this situation, but you can do it outside LVM, eg.
5233 by cloning disk images or by bit twiddling inside the LVM
5234 metadata.
5235
5236 This command also clears the LVM cache and performs a volume
5237 group scan.
5238
5239 You can filter whole block devices or individual partitions.
5240
5241 You cannot use this if any VG is currently in use (eg.
5242 contains a mounted filesystem), even if you are not
5243 filtering out that VG.");
5244
5245   ("lvm_clear_filter", (RErr, []), 256, [],
5246    [], (* see note on lvm_set_filter *)
5247    "clear LVM device filter",
5248    "\
5249 This undoes the effect of C<guestfs_lvm_set_filter>.  LVM
5250 will be able to see every block device.
5251
5252 This command also clears the LVM cache and performs a volume
5253 group scan.");
5254
5255   ("luks_open", (RErr, [Device "device"; Key "key"; String "mapname"]), 257, [Optional "luks"],
5256    [],
5257    "open a LUKS-encrypted block device",
5258    "\
5259 This command opens a block device which has been encrypted
5260 according to the Linux Unified Key Setup (LUKS) standard.
5261
5262 C<device> is the encrypted block device or partition.
5263
5264 The caller must supply one of the keys associated with the
5265 LUKS block device, in the C<key> parameter.
5266
5267 This creates a new block device called C</dev/mapper/mapname>.
5268 Reads and writes to this block device are decrypted from and
5269 encrypted to the underlying C<device> respectively.
5270
5271 If this block device contains LVM volume groups, then
5272 calling C<guestfs_vgscan> followed by C<guestfs_vg_activate_all>
5273 will make them visible.");
5274
5275   ("luks_open_ro", (RErr, [Device "device"; Key "key"; String "mapname"]), 258, [Optional "luks"],
5276    [],
5277    "open a LUKS-encrypted block device read-only",
5278    "\
5279 This is the same as C<guestfs_luks_open> except that a read-only
5280 mapping is created.");
5281
5282   ("luks_close", (RErr, [Device "device"]), 259, [Optional "luks"],
5283    [],
5284    "close a LUKS device",
5285    "\
5286 This closes a LUKS device that was created earlier by
5287 C<guestfs_luks_open> or C<guestfs_luks_open_ro>.  The
5288 C<device> parameter must be the name of the LUKS mapping
5289 device (ie. C</dev/mapper/mapname>) and I<not> the name
5290 of the underlying block device.");
5291
5292   ("luks_format", (RErr, [Device "device"; Key "key"; Int "keyslot"]), 260, [Optional "luks"; DangerWillRobinson],
5293    [],
5294    "format a block device as a LUKS encrypted device",
5295    "\
5296 This command erases existing data on C<device> and formats
5297 the device as a LUKS encrypted device.  C<key> is the
5298 initial key, which is added to key slot C<slot>.  (LUKS
5299 supports 8 key slots, numbered 0-7).");
5300
5301   ("luks_format_cipher", (RErr, [Device "device"; Key "key"; Int "keyslot"; String "cipher"]), 261, [Optional "luks"; DangerWillRobinson],
5302    [],
5303    "format a block device as a LUKS encrypted device",
5304    "\
5305 This command is the same as C<guestfs_luks_format> but
5306 it also allows you to set the C<cipher> used.");
5307
5308   ("luks_add_key", (RErr, [Device "device"; Key "key"; Key "newkey"; Int "keyslot"]), 262, [Optional "luks"],
5309    [],
5310    "add a key on a LUKS encrypted device",
5311    "\
5312 This command adds a new key on LUKS device C<device>.
5313 C<key> is any existing key, and is used to access the device.
5314 C<newkey> is the new key to add.  C<keyslot> is the key slot
5315 that will be replaced.
5316
5317 Note that if C<keyslot> already contains a key, then this
5318 command will fail.  You have to use C<guestfs_luks_kill_slot>
5319 first to remove that key.");
5320
5321   ("luks_kill_slot", (RErr, [Device "device"; Key "key"; Int "keyslot"]), 263, [Optional "luks"],
5322    [],
5323    "remove a key from a LUKS encrypted device",
5324    "\
5325 This command deletes the key in key slot C<keyslot> from the
5326 encrypted LUKS device C<device>.  C<key> must be one of the
5327 I<other> keys.");
5328
5329   ("is_lv", (RBool "lvflag", [Device "device"]), 264, [Optional "lvm2"],
5330    [InitBasicFSonLVM, IfAvailable "lvm2", TestOutputTrue (
5331       [["is_lv"; "/dev/VG/LV"]]);
5332     InitBasicFSonLVM, IfAvailable "lvm2", TestOutputFalse (
5333       [["is_lv"; "/dev/sda1"]])],
5334    "test if device is a logical volume",
5335    "\
5336 This command tests whether C<device> is a logical volume, and
5337 returns true iff this is the case.");
5338
5339   ("findfs_uuid", (RString "device", [String "uuid"]), 265, [],
5340    [],
5341    "find a filesystem by UUID",
5342    "\
5343 This command searches the filesystems and returns the one
5344 which has the given UUID.  An error is returned if no such
5345 filesystem can be found.
5346
5347 To find the UUID of a filesystem, use C<guestfs_vfs_uuid>.");
5348
5349   ("findfs_label", (RString "device", [String "label"]), 266, [],
5350    [],
5351    "find a filesystem by label",
5352    "\
5353 This command searches the filesystems and returns the one
5354 which has the given label.  An error is returned if no such
5355 filesystem can be found.
5356
5357 To find the label of a filesystem, use C<guestfs_vfs_label>.");
5358
5359 ]
5360
5361 let all_functions = non_daemon_functions @ daemon_functions
5362
5363 (* In some places we want the functions to be displayed sorted
5364  * alphabetically, so this is useful:
5365  *)
5366 let all_functions_sorted =
5367   List.sort (fun (n1,_,_,_,_,_,_) (n2,_,_,_,_,_,_) ->
5368                compare n1 n2) all_functions
5369
5370 (* This is used to generate the src/MAX_PROC_NR file which
5371  * contains the maximum procedure number, a surrogate for the
5372  * ABI version number.  See src/Makefile.am for the details.
5373  *)
5374 let max_proc_nr =
5375   let proc_nrs = List.map (
5376     fun (_, _, proc_nr, _, _, _, _) -> proc_nr
5377   ) daemon_functions in
5378   List.fold_left max 0 proc_nrs
5379
5380 (* Field types for structures. *)
5381 type field =
5382   | FChar                       (* C 'char' (really, a 7 bit byte). *)
5383   | FString                     (* nul-terminated ASCII string, NOT NULL. *)
5384   | FBuffer                     (* opaque buffer of bytes, (char *, int) pair *)
5385   | FUInt32
5386   | FInt32
5387   | FUInt64
5388   | FInt64
5389   | FBytes                      (* Any int measure that counts bytes. *)
5390   | FUUID                       (* 32 bytes long, NOT nul-terminated. *)
5391   | FOptPercent                 (* [0..100], or -1 meaning "not present". *)
5392
5393 (* Because we generate extra parsing code for LVM command line tools,
5394  * we have to pull out the LVM columns separately here.
5395  *)
5396 let lvm_pv_cols = [
5397   "pv_name", FString;
5398   "pv_uuid", FUUID;
5399   "pv_fmt", FString;
5400   "pv_size", FBytes;
5401   "dev_size", FBytes;
5402   "pv_free", FBytes;
5403   "pv_used", FBytes;
5404   "pv_attr", FString (* XXX *);
5405   "pv_pe_count", FInt64;
5406   "pv_pe_alloc_count", FInt64;
5407   "pv_tags", FString;
5408   "pe_start", FBytes;
5409   "pv_mda_count", FInt64;
5410   "pv_mda_free", FBytes;
5411   (* Not in Fedora 10:
5412      "pv_mda_size", FBytes;
5413   *)
5414 ]
5415 let lvm_vg_cols = [
5416   "vg_name", FString;
5417   "vg_uuid", FUUID;
5418   "vg_fmt", FString;
5419   "vg_attr", FString (* XXX *);
5420   "vg_size", FBytes;
5421   "vg_free", FBytes;
5422   "vg_sysid", FString;
5423   "vg_extent_size", FBytes;
5424   "vg_extent_count", FInt64;
5425   "vg_free_count", FInt64;
5426   "max_lv", FInt64;
5427   "max_pv", FInt64;
5428   "pv_count", FInt64;
5429   "lv_count", FInt64;
5430   "snap_count", FInt64;
5431   "vg_seqno", FInt64;
5432   "vg_tags", FString;
5433   "vg_mda_count", FInt64;
5434   "vg_mda_free", FBytes;
5435   (* Not in Fedora 10:
5436      "vg_mda_size", FBytes;
5437   *)
5438 ]
5439 let lvm_lv_cols = [
5440   "lv_name", FString;
5441   "lv_uuid", FUUID;
5442   "lv_attr", FString (* XXX *);
5443   "lv_major", FInt64;
5444   "lv_minor", FInt64;
5445   "lv_kernel_major", FInt64;
5446   "lv_kernel_minor", FInt64;
5447   "lv_size", FBytes;
5448   "seg_count", FInt64;
5449   "origin", FString;
5450   "snap_percent", FOptPercent;
5451   "copy_percent", FOptPercent;
5452   "move_pv", FString;
5453   "lv_tags", FString;
5454   "mirror_log", FString;
5455   "modules", FString;
5456 ]
5457
5458 (* Names and fields in all structures (in RStruct and RStructList)
5459  * that we support.
5460  *)
5461 let structs = [
5462   (* The old RIntBool return type, only ever used for aug_defnode.  Do
5463    * not use this struct in any new code.
5464    *)
5465   "int_bool", [
5466     "i", FInt32;                (* for historical compatibility *)
5467     "b", FInt32;                (* for historical compatibility *)
5468   ];
5469
5470   (* LVM PVs, VGs, LVs. *)
5471   "lvm_pv", lvm_pv_cols;
5472   "lvm_vg", lvm_vg_cols;
5473   "lvm_lv", lvm_lv_cols;
5474
5475   (* Column names and types from stat structures.
5476    * NB. Can't use things like 'st_atime' because glibc header files
5477    * define some of these as macros.  Ugh.
5478    *)
5479   "stat", [
5480     "dev", FInt64;
5481     "ino", FInt64;
5482     "mode", FInt64;
5483     "nlink", FInt64;
5484     "uid", FInt64;
5485     "gid", FInt64;
5486     "rdev", FInt64;
5487     "size", FInt64;
5488     "blksize", FInt64;
5489     "blocks", FInt64;
5490     "atime", FInt64;
5491     "mtime", FInt64;
5492     "ctime", FInt64;
5493   ];
5494   "statvfs", [
5495     "bsize", FInt64;
5496     "frsize", FInt64;
5497     "blocks", FInt64;
5498     "bfree", FInt64;
5499     "bavail", FInt64;
5500     "files", FInt64;
5501     "ffree", FInt64;
5502     "favail", FInt64;
5503     "fsid", FInt64;
5504     "flag", FInt64;
5505     "namemax", FInt64;
5506   ];
5507
5508   (* Column names in dirent structure. *)
5509   "dirent", [
5510     "ino", FInt64;
5511     (* 'b' 'c' 'd' 'f' (FIFO) 'l' 'r' (regular file) 's' 'u' '?' *)
5512     "ftyp", FChar;
5513     "name", FString;
5514   ];
5515
5516   (* Version numbers. *)
5517   "version", [
5518     "major", FInt64;
5519     "minor", FInt64;
5520     "release", FInt64;
5521     "extra", FString;
5522   ];
5523
5524   (* Extended attribute. *)
5525   "xattr", [
5526     "attrname", FString;
5527     "attrval", FBuffer;
5528   ];
5529
5530   (* Inotify events. *)
5531   "inotify_event", [
5532     "in_wd", FInt64;
5533     "in_mask", FUInt32;
5534     "in_cookie", FUInt32;
5535     "in_name", FString;
5536   ];
5537
5538   (* Partition table entry. *)
5539   "partition", [
5540     "part_num", FInt32;
5541     "part_start", FBytes;
5542     "part_end", FBytes;
5543     "part_size", FBytes;
5544   ];
5545 ] (* end of structs *)
5546
5547 (* Ugh, Java has to be different ..
5548  * These names are also used by the Haskell bindings.
5549  *)
5550 let java_structs = [
5551   "int_bool", "IntBool";
5552   "lvm_pv", "PV";
5553   "lvm_vg", "VG";
5554   "lvm_lv", "LV";
5555   "stat", "Stat";
5556   "statvfs", "StatVFS";
5557   "dirent", "Dirent";
5558   "version", "Version";
5559   "xattr", "XAttr";
5560   "inotify_event", "INotifyEvent";
5561   "partition", "Partition";
5562 ]
5563
5564 (* What structs are actually returned. *)
5565 type rstructs_used_t = RStructOnly | RStructListOnly | RStructAndList
5566
5567 (* Returns a list of RStruct/RStructList structs that are returned
5568  * by any function.  Each element of returned list is a pair:
5569  *
5570  * (structname, RStructOnly)
5571  *    == there exists function which returns RStruct (_, structname)
5572  * (structname, RStructListOnly)
5573  *    == there exists function which returns RStructList (_, structname)
5574  * (structname, RStructAndList)
5575  *    == there are functions returning both RStruct (_, structname)
5576  *                                      and RStructList (_, structname)
5577  *)
5578 let rstructs_used_by functions =
5579   (* ||| is a "logical OR" for rstructs_used_t *)
5580   let (|||) a b =
5581     match a, b with
5582     | RStructAndList, _
5583     | _, RStructAndList -> RStructAndList
5584     | RStructOnly, RStructListOnly
5585     | RStructListOnly, RStructOnly -> RStructAndList
5586     | RStructOnly, RStructOnly -> RStructOnly
5587     | RStructListOnly, RStructListOnly -> RStructListOnly
5588   in
5589
5590   let h = Hashtbl.create 13 in
5591
5592   (* if elem->oldv exists, update entry using ||| operator,
5593    * else just add elem->newv to the hash
5594    *)
5595   let update elem newv =
5596     try  let oldv = Hashtbl.find h elem in
5597          Hashtbl.replace h elem (newv ||| oldv)
5598     with Not_found -> Hashtbl.add h elem newv
5599   in
5600
5601   List.iter (
5602     fun (_, style, _, _, _, _, _) ->
5603       match fst style with
5604       | RStruct (_, structname) -> update structname RStructOnly
5605       | RStructList (_, structname) -> update structname RStructListOnly
5606       | _ -> ()
5607   ) functions;
5608
5609   (* return key->values as a list of (key,value) *)
5610   Hashtbl.fold (fun key value xs -> (key, value) :: xs) h []
5611
5612 (* Used for testing language bindings. *)
5613 type callt =
5614   | CallString of string
5615   | CallOptString of string option
5616   | CallStringList of string list
5617   | CallInt of int
5618   | CallInt64 of int64
5619   | CallBool of bool
5620   | CallBuffer of string
5621
5622 (* Used for the guestfish -N (prepared disk images) option.
5623  * Note that the longdescs are indented by 2 spaces.
5624  *)
5625 let prepopts = [
5626   ("disk",
5627    "create a blank disk",
5628    [ "size", "100M", "the size of the disk image" ],
5629    "  Create a blank disk, size 100MB (by default).
5630
5631   The default size can be changed by supplying an optional parameter.");
5632
5633   ("part",
5634    "create a partitioned disk",
5635    [ "size", "100M", "the size of the disk image";
5636      "partition", "mbr", "partition table type" ],
5637    "  Create a disk with a single partition.  By default the size of the disk
5638   is 100MB (the available space in the partition will be a tiny bit smaller)
5639   and the partition table will be MBR (old DOS-style).
5640
5641   These defaults can be changed by supplying optional parameters.");
5642
5643   ("fs",
5644    "create a filesystem",
5645    [ "filesystem", "ext2", "the type of filesystem to use";
5646      "size", "100M", "the size of the disk image";
5647      "partition", "mbr", "partition table type" ],
5648    "  Create a disk with a single partition, with the partition containing
5649   an empty filesystem.  This defaults to creating a 100MB disk (the available
5650   space in the filesystem will be a tiny bit smaller) with an MBR (old
5651   DOS-style) partition table and an ext2 filesystem.
5652
5653   These defaults can be changed by supplying optional parameters.");
5654 ]
5655
5656 (* Used to memoize the result of pod2text. *)
5657 let pod2text_memo_filename = "src/.pod2text.data"
5658 let pod2text_memo : ((int * string * string), string list) Hashtbl.t =
5659   try
5660     let chan = open_in pod2text_memo_filename in
5661     let v = input_value chan in
5662     close_in chan;
5663     v
5664   with
5665     _ -> Hashtbl.create 13
5666 let pod2text_memo_updated () =
5667   let chan = open_out pod2text_memo_filename in
5668   output_value chan pod2text_memo;
5669   close_out chan
5670
5671 (* Useful functions.
5672  * Note we don't want to use any external OCaml libraries which
5673  * makes this a bit harder than it should be.
5674  *)
5675 module StringMap = Map.Make (String)
5676
5677 let failwithf fs = ksprintf failwith fs
5678
5679 let unique = let i = ref 0 in fun () -> incr i; !i
5680
5681 let replace_char s c1 c2 =
5682   let s2 = String.copy s in
5683   let r = ref false in
5684   for i = 0 to String.length s2 - 1 do
5685     if String.unsafe_get s2 i = c1 then (
5686       String.unsafe_set s2 i c2;
5687       r := true
5688     )
5689   done;
5690   if not !r then s else s2
5691
5692 let isspace c =
5693   c = ' '
5694   (* || c = '\f' *) || c = '\n' || c = '\r' || c = '\t' (* || c = '\v' *)
5695
5696 let triml ?(test = isspace) str =
5697   let i = ref 0 in
5698   let n = ref (String.length str) in
5699   while !n > 0 && test str.[!i]; do
5700     decr n;
5701     incr i
5702   done;
5703   if !i = 0 then str
5704   else String.sub str !i !n
5705
5706 let trimr ?(test = isspace) str =
5707   let n = ref (String.length str) in
5708   while !n > 0 && test str.[!n-1]; do
5709     decr n
5710   done;
5711   if !n = String.length str then str
5712   else String.sub str 0 !n
5713
5714 let trim ?(test = isspace) str =
5715   trimr ~test (triml ~test str)
5716
5717 let rec find s sub =
5718   let len = String.length s in
5719   let sublen = String.length sub in
5720   let rec loop i =
5721     if i <= len-sublen then (
5722       let rec loop2 j =
5723         if j < sublen then (
5724           if s.[i+j] = sub.[j] then loop2 (j+1)
5725           else -1
5726         ) else
5727           i (* found *)
5728       in
5729       let r = loop2 0 in
5730       if r = -1 then loop (i+1) else r
5731     ) else
5732       -1 (* not found *)
5733   in
5734   loop 0
5735
5736 let rec replace_str s s1 s2 =
5737   let len = String.length s in
5738   let sublen = String.length s1 in
5739   let i = find s s1 in
5740   if i = -1 then s
5741   else (
5742     let s' = String.sub s 0 i in
5743     let s'' = String.sub s (i+sublen) (len-i-sublen) in
5744     s' ^ s2 ^ replace_str s'' s1 s2
5745   )
5746
5747 let rec string_split sep str =
5748   let len = String.length str in
5749   let seplen = String.length sep in
5750   let i = find str sep in
5751   if i = -1 then [str]
5752   else (
5753     let s' = String.sub str 0 i in
5754     let s'' = String.sub str (i+seplen) (len-i-seplen) in
5755     s' :: string_split sep s''
5756   )
5757
5758 let files_equal n1 n2 =
5759   let cmd = sprintf "cmp -s %s %s" (Filename.quote n1) (Filename.quote n2) in
5760   match Sys.command cmd with
5761   | 0 -> true
5762   | 1 -> false
5763   | i -> failwithf "%s: failed with error code %d" cmd i
5764
5765 let rec filter_map f = function
5766   | [] -> []
5767   | x :: xs ->
5768       match f x with
5769       | Some y -> y :: filter_map f xs
5770       | None -> filter_map f xs
5771
5772 let rec find_map f = function
5773   | [] -> raise Not_found
5774   | x :: xs ->
5775       match f x with
5776       | Some y -> y
5777       | None -> find_map f xs
5778
5779 let iteri f xs =
5780   let rec loop i = function
5781     | [] -> ()
5782     | x :: xs -> f i x; loop (i+1) xs
5783   in
5784   loop 0 xs
5785
5786 let mapi f xs =
5787   let rec loop i = function
5788     | [] -> []
5789     | x :: xs -> let r = f i x in r :: loop (i+1) xs
5790   in
5791   loop 0 xs
5792
5793 let count_chars c str =
5794   let count = ref 0 in
5795   for i = 0 to String.length str - 1 do
5796     if c = String.unsafe_get str i then incr count
5797   done;
5798   !count
5799
5800 let explode str =
5801   let r = ref [] in
5802   for i = 0 to String.length str - 1 do
5803     let c = String.unsafe_get str i in
5804     r := c :: !r;
5805   done;
5806   List.rev !r
5807
5808 let map_chars f str =
5809   List.map f (explode str)
5810
5811 let name_of_argt = function
5812   | Pathname n | Device n | Dev_or_Path n | String n | OptString n
5813   | StringList n | DeviceList n | Bool n | Int n | Int64 n
5814   | FileIn n | FileOut n | BufferIn n | Key n -> n
5815
5816 let java_name_of_struct typ =
5817   try List.assoc typ java_structs
5818   with Not_found ->
5819     failwithf
5820       "java_name_of_struct: no java_structs entry corresponding to %s" typ
5821
5822 let cols_of_struct typ =
5823   try List.assoc typ structs
5824   with Not_found ->
5825     failwithf "cols_of_struct: unknown struct %s" typ
5826
5827 let seq_of_test = function
5828   | TestRun s | TestOutput (s, _) | TestOutputList (s, _)
5829   | TestOutputListOfDevices (s, _)
5830   | TestOutputInt (s, _) | TestOutputIntOp (s, _, _)
5831   | TestOutputTrue s | TestOutputFalse s
5832   | TestOutputLength (s, _) | TestOutputBuffer (s, _)
5833   | TestOutputStruct (s, _)
5834   | TestLastFail s -> s
5835
5836 (* Handling for function flags. *)
5837 let progress_message =
5838   "This long-running command can generate progress notification messages
5839 so that the caller can display a progress bar or indicator.
5840 To receive these messages, the caller must register a progress
5841 callback.  See L<guestfs(3)/guestfs_set_progress_callback>."
5842
5843 let protocol_limit_warning =
5844   "Because of the message protocol, there is a transfer limit
5845 of somewhere between 2MB and 4MB.  See L<guestfs(3)/PROTOCOL LIMITS>."
5846
5847 let danger_will_robinson =
5848   "B<This command is dangerous.  Without careful use you
5849 can easily destroy all your data>."
5850
5851 let deprecation_notice flags =
5852   try
5853     let alt =
5854       find_map (function DeprecatedBy str -> Some str | _ -> None) flags in
5855     let txt =
5856       sprintf "This function is deprecated.
5857 In new code, use the C<%s> call instead.
5858
5859 Deprecated functions will not be removed from the API, but the
5860 fact that they are deprecated indicates that there are problems
5861 with correct use of these functions." alt in
5862     Some txt
5863   with
5864     Not_found -> None
5865
5866 (* Create list of optional groups. *)
5867 let optgroups =
5868   let h = Hashtbl.create 13 in
5869   List.iter (
5870     fun (name, _, _, flags, _, _, _) ->
5871       List.iter (
5872         function
5873         | Optional group ->
5874             let names = try Hashtbl.find h group with Not_found -> [] in
5875             Hashtbl.replace h group (name :: names)
5876         | _ -> ()
5877       ) flags
5878   ) daemon_functions;
5879   let groups = Hashtbl.fold (fun k _ ks -> k :: ks) h [] in
5880   let groups =
5881     List.map (
5882       fun group -> group, List.sort compare (Hashtbl.find h group)
5883     ) groups in
5884   List.sort (fun x y -> compare (fst x) (fst y)) groups
5885
5886 (* Check function names etc. for consistency. *)
5887 let check_functions () =
5888   let contains_uppercase str =
5889     let len = String.length str in
5890     let rec loop i =
5891       if i >= len then false
5892       else (
5893         let c = str.[i] in
5894         if c >= 'A' && c <= 'Z' then true
5895         else loop (i+1)
5896       )
5897     in
5898     loop 0
5899   in
5900
5901   (* Check function names. *)
5902   List.iter (
5903     fun (name, _, _, _, _, _, _) ->
5904       if String.length name >= 7 && String.sub name 0 7 = "guestfs" then
5905         failwithf "function name %s does not need 'guestfs' prefix" name;
5906       if name = "" then
5907         failwithf "function name is empty";
5908       if name.[0] < 'a' || name.[0] > 'z' then
5909         failwithf "function name %s must start with lowercase a-z" name;
5910       if String.contains name '-' then
5911         failwithf "function name %s should not contain '-', use '_' instead."
5912           name
5913   ) all_functions;
5914
5915   (* Check function parameter/return names. *)
5916   List.iter (
5917     fun (name, style, _, _, _, _, _) ->
5918       let check_arg_ret_name n =
5919         if contains_uppercase n then
5920           failwithf "%s param/ret %s should not contain uppercase chars"
5921             name n;
5922         if String.contains n '-' || String.contains n '_' then
5923           failwithf "%s param/ret %s should not contain '-' or '_'"
5924             name n;
5925         if n = "value" then
5926           failwithf "%s has a param/ret called 'value', which causes conflicts in the OCaml bindings, use something like 'val' or a more descriptive name" name;
5927         if n = "int" || n = "char" || n = "short" || n = "long" then
5928           failwithf "%s has a param/ret which conflicts with a C type (eg. 'int', 'char' etc.)" name;
5929         if n = "i" || n = "n" then
5930           failwithf "%s has a param/ret called 'i' or 'n', which will cause some conflicts in the generated code" name;
5931         if n = "argv" || n = "args" then
5932           failwithf "%s has a param/ret called 'argv' or 'args', which will cause some conflicts in the generated code" name;
5933
5934         (* List Haskell, OCaml and C keywords here.
5935          * http://www.haskell.org/haskellwiki/Keywords
5936          * http://caml.inria.fr/pub/docs/manual-ocaml/lex.html#operator-char
5937          * http://en.wikipedia.org/wiki/C_syntax#Reserved_keywords
5938          * Formatted via: cat c haskell ocaml|sort -u|grep -vE '_|^val$' \
5939          *   |perl -pe 's/(.+)/"$1";/'|fmt -70
5940          * Omitting _-containing words, since they're handled above.
5941          * Omitting the OCaml reserved word, "val", is ok,
5942          * and saves us from renaming several parameters.
5943          *)
5944         let reserved = [
5945           "and"; "as"; "asr"; "assert"; "auto"; "begin"; "break"; "case";
5946           "char"; "class"; "const"; "constraint"; "continue"; "data";
5947           "default"; "deriving"; "do"; "done"; "double"; "downto"; "else";
5948           "end"; "enum"; "exception"; "extern"; "external"; "false"; "float";
5949           "for"; "forall"; "foreign"; "fun"; "function"; "functor"; "goto";
5950           "hiding"; "if"; "import"; "in"; "include"; "infix"; "infixl";
5951           "infixr"; "inherit"; "initializer"; "inline"; "instance"; "int";
5952           "interface";
5953           "land"; "lazy"; "let"; "long"; "lor"; "lsl"; "lsr"; "lxor";
5954           "match"; "mdo"; "method"; "mod"; "module"; "mutable"; "new";
5955           "newtype"; "object"; "of"; "open"; "or"; "private"; "qualified";
5956           "rec"; "register"; "restrict"; "return"; "short"; "sig"; "signed";
5957           "sizeof"; "static"; "struct"; "switch"; "then"; "to"; "true"; "try";
5958           "type"; "typedef"; "union"; "unsigned"; "virtual"; "void";
5959           "volatile"; "when"; "where"; "while";
5960           ] in
5961         if List.mem n reserved then
5962           failwithf "%s has param/ret using reserved word %s" name n;
5963       in
5964
5965       (match fst style with
5966        | RErr -> ()
5967        | RInt n | RInt64 n | RBool n
5968        | RConstString n | RConstOptString n | RString n
5969        | RStringList n | RStruct (n, _) | RStructList (n, _)
5970        | RHashtable n | RBufferOut n ->
5971            check_arg_ret_name n
5972       );
5973       List.iter (fun arg -> check_arg_ret_name (name_of_argt arg)) (snd style)
5974   ) all_functions;
5975
5976   (* Check short descriptions. *)
5977   List.iter (
5978     fun (name, _, _, _, _, shortdesc, _) ->
5979       if shortdesc.[0] <> Char.lowercase shortdesc.[0] then
5980         failwithf "short description of %s should begin with lowercase." name;
5981       let c = shortdesc.[String.length shortdesc-1] in
5982       if c = '\n' || c = '.' then
5983         failwithf "short description of %s should not end with . or \\n." name
5984   ) all_functions;
5985
5986   (* Check long descriptions. *)
5987   List.iter (
5988     fun (name, _, _, _, _, _, longdesc) ->
5989       if longdesc.[String.length longdesc-1] = '\n' then
5990         failwithf "long description of %s should not end with \\n." name
5991   ) all_functions;
5992
5993   (* Check proc_nrs. *)
5994   List.iter (
5995     fun (name, _, proc_nr, _, _, _, _) ->
5996       if proc_nr <= 0 then
5997         failwithf "daemon function %s should have proc_nr > 0" name
5998   ) daemon_functions;
5999
6000   List.iter (
6001     fun (name, _, proc_nr, _, _, _, _) ->
6002       if proc_nr <> -1 then
6003         failwithf "non-daemon function %s should have proc_nr -1" name
6004   ) non_daemon_functions;
6005
6006   let proc_nrs =
6007     List.map (fun (name, _, proc_nr, _, _, _, _) -> name, proc_nr)
6008       daemon_functions in
6009   let proc_nrs =
6010     List.sort (fun (_,nr1) (_,nr2) -> compare nr1 nr2) proc_nrs in
6011   let rec loop = function
6012     | [] -> ()
6013     | [_] -> ()
6014     | (name1,nr1) :: ((name2,nr2) :: _ as rest) when nr1 < nr2 ->
6015         loop rest
6016     | (name1,nr1) :: (name2,nr2) :: _ ->
6017         failwithf "%s and %s have conflicting procedure numbers (%d, %d)"
6018           name1 name2 nr1 nr2
6019   in
6020   loop proc_nrs;
6021
6022   (* Check tests. *)
6023   List.iter (
6024     function
6025       (* Ignore functions that have no tests.  We generate a
6026        * warning when the user does 'make check' instead.
6027        *)
6028     | name, _, _, _, [], _, _ -> ()
6029     | name, _, _, _, tests, _, _ ->
6030         let funcs =
6031           List.map (
6032             fun (_, _, test) ->
6033               match seq_of_test test with
6034               | [] ->
6035                   failwithf "%s has a test containing an empty sequence" name
6036               | cmds -> List.map List.hd cmds
6037           ) tests in
6038         let funcs = List.flatten funcs in
6039
6040         let tested = List.mem name funcs in
6041
6042         if not tested then
6043           failwithf "function %s has tests but does not test itself" name
6044   ) all_functions
6045
6046 (* 'pr' prints to the current output file. *)
6047 let chan = ref Pervasives.stdout
6048 let lines = ref 0
6049 let pr fs =
6050   ksprintf
6051     (fun str ->
6052        let i = count_chars '\n' str in
6053        lines := !lines + i;
6054        output_string !chan str
6055     ) fs
6056
6057 let copyright_years =
6058   let this_year = 1900 + (localtime (time ())).tm_year in
6059   if this_year > 2009 then sprintf "2009-%04d" this_year else "2009"
6060
6061 (* Generate a header block in a number of standard styles. *)
6062 type comment_style =
6063     CStyle | CPlusPlusStyle | HashStyle | OCamlStyle | HaskellStyle
6064 type license = GPLv2plus | LGPLv2plus
6065
6066 let generate_header ?(extra_inputs = []) comment license =
6067   let inputs = "src/generator.ml" :: extra_inputs in
6068   let c = match comment with
6069     | CStyle ->         pr "/* "; " *"
6070     | CPlusPlusStyle -> pr "// "; "//"
6071     | HashStyle ->      pr "# ";  "#"
6072     | OCamlStyle ->     pr "(* "; " *"
6073     | HaskellStyle ->   pr "{- "; "  " in
6074   pr "libguestfs generated file\n";
6075   pr "%s WARNING: THIS FILE IS GENERATED FROM:\n" c;
6076   List.iter (pr "%s   %s\n" c) inputs;
6077   pr "%s ANY CHANGES YOU MAKE TO THIS FILE WILL BE LOST.\n" c;
6078   pr "%s\n" c;
6079   pr "%s Copyright (C) %s Red Hat Inc.\n" c copyright_years;
6080   pr "%s\n" c;
6081   (match license with
6082    | GPLv2plus ->
6083        pr "%s This program is free software; you can redistribute it and/or modify\n" c;
6084        pr "%s it under the terms of the GNU General Public License as published by\n" c;
6085        pr "%s the Free Software Foundation; either version 2 of the License, or\n" c;
6086        pr "%s (at your option) any later version.\n" c;
6087        pr "%s\n" c;
6088        pr "%s This program is distributed in the hope that it will be useful,\n" c;
6089        pr "%s but WITHOUT ANY WARRANTY; without even the implied warranty of\n" c;
6090        pr "%s MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the\n" c;
6091        pr "%s GNU General Public License for more details.\n" c;
6092        pr "%s\n" c;
6093        pr "%s You should have received a copy of the GNU General Public License along\n" c;
6094        pr "%s with this program; if not, write to the Free Software Foundation, Inc.,\n" c;
6095        pr "%s 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA.\n" c;
6096
6097    | LGPLv2plus ->
6098        pr "%s This library is free software; you can redistribute it and/or\n" c;
6099        pr "%s modify it under the terms of the GNU Lesser General Public\n" c;
6100        pr "%s License as published by the Free Software Foundation; either\n" c;
6101        pr "%s version 2 of the License, or (at your option) any later version.\n" c;
6102        pr "%s\n" c;
6103        pr "%s This library is distributed in the hope that it will be useful,\n" c;
6104        pr "%s but WITHOUT ANY WARRANTY; without even the implied warranty of\n" c;
6105        pr "%s MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU\n" c;
6106        pr "%s Lesser General Public License for more details.\n" c;
6107        pr "%s\n" c;
6108        pr "%s You should have received a copy of the GNU Lesser General Public\n" c;
6109        pr "%s License along with this library; if not, write to the Free Software\n" c;
6110        pr "%s Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA\n" c;
6111   );
6112   (match comment with
6113    | CStyle -> pr " */\n"
6114    | CPlusPlusStyle
6115    | HashStyle -> ()
6116    | OCamlStyle -> pr " *)\n"
6117    | HaskellStyle -> pr "-}\n"
6118   );
6119   pr "\n"
6120
6121 (* Start of main code generation functions below this line. *)
6122
6123 (* Generate the pod documentation for the C API. *)
6124 let rec generate_actions_pod () =
6125   List.iter (
6126     fun (shortname, style, _, flags, _, _, longdesc) ->
6127       if not (List.mem NotInDocs flags) then (
6128         let name = "guestfs_" ^ shortname in
6129         pr "=head2 %s\n\n" name;
6130         pr " ";
6131         generate_prototype ~extern:false ~handle:"g" name style;
6132         pr "\n\n";
6133         pr "%s\n\n" longdesc;
6134         (match fst style with
6135          | RErr ->
6136              pr "This function returns 0 on success or -1 on error.\n\n"
6137          | RInt _ ->
6138              pr "On error this function returns -1.\n\n"
6139          | RInt64 _ ->
6140              pr "On error this function returns -1.\n\n"
6141          | RBool _ ->
6142              pr "This function returns a C truth value on success or -1 on error.\n\n"
6143          | RConstString _ ->
6144              pr "This function returns a string, or NULL on error.
6145 The string is owned by the guest handle and must I<not> be freed.\n\n"
6146          | RConstOptString _ ->
6147              pr "This function returns a string which may be NULL.
6148 There is no way to return an error from this function.
6149 The string is owned by the guest handle and must I<not> be freed.\n\n"
6150          | RString _ ->
6151              pr "This function returns a string, or NULL on error.
6152 I<The caller must free the returned string after use>.\n\n"
6153          | RStringList _ ->
6154              pr "This function returns a NULL-terminated array of strings
6155 (like L<environ(3)>), or NULL if there was an error.
6156 I<The caller must free the strings and the array after use>.\n\n"
6157          | RStruct (_, typ) ->
6158              pr "This function returns a C<struct guestfs_%s *>,
6159 or NULL if there was an error.
6160 I<The caller must call C<guestfs_free_%s> after use>.\n\n" typ typ
6161          | RStructList (_, typ) ->
6162              pr "This function returns a C<struct guestfs_%s_list *>
6163 (see E<lt>guestfs-structs.hE<gt>),
6164 or NULL if there was an error.
6165 I<The caller must call C<guestfs_free_%s_list> after use>.\n\n" typ typ
6166          | RHashtable _ ->
6167              pr "This function returns a NULL-terminated array of
6168 strings, or NULL if there was an error.
6169 The array of strings will always have length C<2n+1>, where
6170 C<n> keys and values alternate, followed by the trailing NULL entry.
6171 I<The caller must free the strings and the array after use>.\n\n"
6172          | RBufferOut _ ->
6173              pr "This function returns a buffer, or NULL on error.
6174 The size of the returned buffer is written to C<*size_r>.
6175 I<The caller must free the returned buffer after use>.\n\n"
6176         );
6177         if List.mem Progress flags then
6178           pr "%s\n\n" progress_message;
6179         if List.mem ProtocolLimitWarning flags then
6180           pr "%s\n\n" protocol_limit_warning;
6181         if List.mem DangerWillRobinson flags then
6182           pr "%s\n\n" danger_will_robinson;
6183         if List.exists (function Key _ -> true | _ -> false) (snd style) then
6184           pr "This function takes a key or passphrase parameter which
6185 could contain sensitive material.  Read the section
6186 L</KEYS AND PASSPHRASES> for more information.\n\n";
6187         match deprecation_notice flags with
6188         | None -> ()
6189         | Some txt -> pr "%s\n\n" txt
6190       )
6191   ) all_functions_sorted
6192
6193 and generate_structs_pod () =
6194   (* Structs documentation. *)
6195   List.iter (
6196     fun (typ, cols) ->
6197       pr "=head2 guestfs_%s\n" typ;
6198       pr "\n";
6199       pr " struct guestfs_%s {\n" typ;
6200       List.iter (
6201         function
6202         | name, FChar -> pr "   char %s;\n" name
6203         | name, FUInt32 -> pr "   uint32_t %s;\n" name
6204         | name, FInt32 -> pr "   int32_t %s;\n" name
6205         | name, (FUInt64|FBytes) -> pr "   uint64_t %s;\n" name
6206         | name, FInt64 -> pr "   int64_t %s;\n" name
6207         | name, FString -> pr "   char *%s;\n" name
6208         | name, FBuffer ->
6209             pr "   /* The next two fields describe a byte array. */\n";
6210             pr "   uint32_t %s_len;\n" name;
6211             pr "   char *%s;\n" name
6212         | name, FUUID ->
6213             pr "   /* The next field is NOT nul-terminated, be careful when printing it: */\n";
6214             pr "   char %s[32];\n" name
6215         | name, FOptPercent ->
6216             pr "   /* The next field is [0..100] or -1 meaning 'not present': */\n";
6217             pr "   float %s;\n" name
6218       ) cols;
6219       pr " };\n";
6220       pr " \n";
6221       pr " struct guestfs_%s_list {\n" typ;
6222       pr "   uint32_t len; /* Number of elements in list. */\n";
6223       pr "   struct guestfs_%s *val; /* Elements. */\n" typ;
6224       pr " };\n";
6225       pr " \n";
6226       pr " void guestfs_free_%s (struct guestfs_free_%s *);\n" typ typ;
6227       pr " void guestfs_free_%s_list (struct guestfs_free_%s_list *);\n"
6228         typ typ;
6229       pr "\n"
6230   ) structs
6231
6232 and generate_availability_pod () =
6233   (* Availability documentation. *)
6234   pr "=over 4\n";
6235   pr "\n";
6236   List.iter (
6237     fun (group, functions) ->
6238       pr "=item B<%s>\n" group;
6239       pr "\n";
6240       pr "The following functions:\n";
6241       List.iter (pr "L</guestfs_%s>\n") functions;
6242       pr "\n"
6243   ) optgroups;
6244   pr "=back\n";
6245   pr "\n"
6246
6247 (* Generate the protocol (XDR) file, 'guestfs_protocol.x' and
6248  * indirectly 'guestfs_protocol.h' and 'guestfs_protocol.c'.
6249  *
6250  * We have to use an underscore instead of a dash because otherwise
6251  * rpcgen generates incorrect code.
6252  *
6253  * This header is NOT exported to clients, but see also generate_structs_h.
6254  *)
6255 and generate_xdr () =
6256   generate_header CStyle LGPLv2plus;
6257
6258   (* This has to be defined to get around a limitation in Sun's rpcgen. *)
6259   pr "typedef string guestfs_str<>;\n";
6260   pr "\n";
6261
6262   (* Internal structures. *)
6263   List.iter (
6264     function
6265     | typ, cols ->
6266         pr "struct guestfs_int_%s {\n" typ;
6267         List.iter (function
6268                    | name, FChar -> pr "  char %s;\n" name
6269                    | name, FString -> pr "  string %s<>;\n" name
6270                    | name, FBuffer -> pr "  opaque %s<>;\n" name
6271                    | name, FUUID -> pr "  opaque %s[32];\n" name
6272                    | name, (FInt32|FUInt32) -> pr "  int %s;\n" name
6273                    | name, (FInt64|FUInt64|FBytes) -> pr "  hyper %s;\n" name
6274                    | name, FOptPercent -> pr "  float %s;\n" name
6275                   ) cols;
6276         pr "};\n";
6277         pr "\n";
6278         pr "typedef struct guestfs_int_%s guestfs_int_%s_list<>;\n" typ typ;
6279         pr "\n";
6280   ) structs;
6281
6282   List.iter (
6283     fun (shortname, style, _, _, _, _, _) ->
6284       let name = "guestfs_" ^ shortname in
6285
6286       (match snd style with
6287        | [] -> ()
6288        | args ->
6289            pr "struct %s_args {\n" name;
6290            List.iter (
6291              function
6292              | Pathname n | Device n | Dev_or_Path n | String n | Key n ->
6293                  pr "  string %s<>;\n" n
6294              | OptString n -> pr "  guestfs_str *%s;\n" n
6295              | StringList n | DeviceList n -> pr "  guestfs_str %s<>;\n" n
6296              | Bool n -> pr "  bool %s;\n" n
6297              | Int n -> pr "  int %s;\n" n
6298              | Int64 n -> pr "  hyper %s;\n" n
6299              | BufferIn n ->
6300                  pr "  opaque %s<>;\n" n
6301              | FileIn _ | FileOut _ -> ()
6302            ) args;
6303            pr "};\n\n"
6304       );
6305       (match fst style with
6306        | RErr -> ()
6307        | RInt n ->
6308            pr "struct %s_ret {\n" name;
6309            pr "  int %s;\n" n;
6310            pr "};\n\n"
6311        | RInt64 n ->
6312            pr "struct %s_ret {\n" name;
6313            pr "  hyper %s;\n" n;
6314            pr "};\n\n"
6315        | RBool n ->
6316            pr "struct %s_ret {\n" name;
6317            pr "  bool %s;\n" n;
6318            pr "};\n\n"
6319        | RConstString _ | RConstOptString _ ->
6320            failwithf "RConstString|RConstOptString cannot be used by daemon functions"
6321        | RString n ->
6322            pr "struct %s_ret {\n" name;
6323            pr "  string %s<>;\n" n;
6324            pr "};\n\n"
6325        | RStringList n ->
6326            pr "struct %s_ret {\n" name;
6327            pr "  guestfs_str %s<>;\n" n;
6328            pr "};\n\n"
6329        | RStruct (n, typ) ->
6330            pr "struct %s_ret {\n" name;
6331            pr "  guestfs_int_%s %s;\n" typ n;
6332            pr "};\n\n"
6333        | RStructList (n, typ) ->
6334            pr "struct %s_ret {\n" name;
6335            pr "  guestfs_int_%s_list %s;\n" typ n;
6336            pr "};\n\n"
6337        | RHashtable n ->
6338            pr "struct %s_ret {\n" name;
6339            pr "  guestfs_str %s<>;\n" n;
6340            pr "};\n\n"
6341        | RBufferOut n ->
6342            pr "struct %s_ret {\n" name;
6343            pr "  opaque %s<>;\n" n;
6344            pr "};\n\n"
6345       );
6346   ) daemon_functions;
6347
6348   (* Table of procedure numbers. *)
6349   pr "enum guestfs_procedure {\n";
6350   List.iter (
6351     fun (shortname, _, proc_nr, _, _, _, _) ->
6352       pr "  GUESTFS_PROC_%s = %d,\n" (String.uppercase shortname) proc_nr
6353   ) daemon_functions;
6354   pr "  GUESTFS_PROC_NR_PROCS\n";
6355   pr "};\n";
6356   pr "\n";
6357
6358   (* Having to choose a maximum message size is annoying for several
6359    * reasons (it limits what we can do in the API), but it (a) makes
6360    * the protocol a lot simpler, and (b) provides a bound on the size
6361    * of the daemon which operates in limited memory space.
6362    *)
6363   pr "const GUESTFS_MESSAGE_MAX = %d;\n" (4 * 1024 * 1024);
6364   pr "\n";
6365
6366   (* Message header, etc. *)
6367   pr "\
6368 /* The communication protocol is now documented in the guestfs(3)
6369  * manpage.
6370  */
6371
6372 const GUESTFS_PROGRAM = 0x2000F5F5;
6373 const GUESTFS_PROTOCOL_VERSION = 2;
6374
6375 /* These constants must be larger than any possible message length. */
6376 const GUESTFS_LAUNCH_FLAG = 0xf5f55ff5;
6377 const GUESTFS_CANCEL_FLAG = 0xffffeeee;
6378 const GUESTFS_PROGRESS_FLAG = 0xffff5555;
6379
6380 enum guestfs_message_direction {
6381   GUESTFS_DIRECTION_CALL = 0,        /* client -> daemon */
6382   GUESTFS_DIRECTION_REPLY = 1        /* daemon -> client */
6383 };
6384
6385 enum guestfs_message_status {
6386   GUESTFS_STATUS_OK = 0,
6387   GUESTFS_STATUS_ERROR = 1
6388 };
6389
6390 ";
6391
6392   pr "const GUESTFS_ERROR_LEN = %d;\n" (64 * 1024);
6393   pr "\n";
6394
6395   pr "\
6396 struct guestfs_message_error {
6397   int linux_errno;                   /* Linux errno if available. */
6398   string error_message<GUESTFS_ERROR_LEN>;
6399 };
6400
6401 struct guestfs_message_header {
6402   unsigned prog;                     /* GUESTFS_PROGRAM */
6403   unsigned vers;                     /* GUESTFS_PROTOCOL_VERSION */
6404   guestfs_procedure proc;            /* GUESTFS_PROC_x */
6405   guestfs_message_direction direction;
6406   unsigned serial;                   /* message serial number */
6407   guestfs_message_status status;
6408 };
6409
6410 const GUESTFS_MAX_CHUNK_SIZE = 8192;
6411
6412 struct guestfs_chunk {
6413   int cancel;                        /* if non-zero, transfer is cancelled */
6414   /* data size is 0 bytes if the transfer has finished successfully */
6415   opaque data<GUESTFS_MAX_CHUNK_SIZE>;
6416 };
6417
6418 /* Progress notifications.  Daemon self-limits these messages to
6419  * at most one per second.  The daemon can send these messages
6420  * at any time, and the caller should discard unexpected messages.
6421  * 'position' and 'total' have undefined units; however they may
6422  * have meaning for some calls.
6423  *
6424  * NB. guestfs___recv_from_daemon assumes the XDR-encoded
6425  * structure is 24 bytes long.
6426  */
6427 struct guestfs_progress {
6428   guestfs_procedure proc;            /* @0:  GUESTFS_PROC_x */
6429   unsigned serial;                   /* @4:  message serial number */
6430   unsigned hyper position;           /* @8:  0 <= position <= total */
6431   unsigned hyper total;              /* @16: total size of operation */
6432                                      /* @24: size of structure */
6433 };
6434 "
6435
6436 (* Generate the guestfs-structs.h file. *)
6437 and generate_structs_h () =
6438   generate_header CStyle LGPLv2plus;
6439
6440   (* This is a public exported header file containing various
6441    * structures.  The structures are carefully written to have
6442    * exactly the same in-memory format as the XDR structures that
6443    * we use on the wire to the daemon.  The reason for creating
6444    * copies of these structures here is just so we don't have to
6445    * export the whole of guestfs_protocol.h (which includes much
6446    * unrelated and XDR-dependent stuff that we don't want to be
6447    * public, or required by clients).
6448    *
6449    * To reiterate, we will pass these structures to and from the
6450    * client with a simple assignment or memcpy, so the format
6451    * must be identical to what rpcgen / the RFC defines.
6452    *)
6453
6454   (* Public structures. *)
6455   List.iter (
6456     fun (typ, cols) ->
6457       pr "struct guestfs_%s {\n" typ;
6458       List.iter (
6459         function
6460         | name, FChar -> pr "  char %s;\n" name
6461         | name, FString -> pr "  char *%s;\n" name
6462         | name, FBuffer ->
6463             pr "  uint32_t %s_len;\n" name;
6464             pr "  char *%s;\n" name
6465         | name, FUUID -> pr "  char %s[32]; /* this is NOT nul-terminated, be careful when printing */\n" name
6466         | name, FUInt32 -> pr "  uint32_t %s;\n" name
6467         | name, FInt32 -> pr "  int32_t %s;\n" name
6468         | name, (FUInt64|FBytes) -> pr "  uint64_t %s;\n" name
6469         | name, FInt64 -> pr "  int64_t %s;\n" name
6470         | name, FOptPercent -> pr "  float %s; /* [0..100] or -1 */\n" name
6471       ) cols;
6472       pr "};\n";
6473       pr "\n";
6474       pr "struct guestfs_%s_list {\n" typ;
6475       pr "  uint32_t len;\n";
6476       pr "  struct guestfs_%s *val;\n" typ;
6477       pr "};\n";
6478       pr "\n";
6479       pr "extern void guestfs_free_%s (struct guestfs_%s *);\n" typ typ;
6480       pr "extern void guestfs_free_%s_list (struct guestfs_%s_list *);\n" typ typ;
6481       pr "\n"
6482   ) structs
6483
6484 (* Generate the guestfs-actions.h file. *)
6485 and generate_actions_h () =
6486   generate_header CStyle LGPLv2plus;
6487   List.iter (
6488     fun (shortname, style, _, flags, _, _, _) ->
6489       let name = "guestfs_" ^ shortname in
6490
6491       let deprecated =
6492         List.exists (function DeprecatedBy _ -> true | _ -> false) flags in
6493       let test0 =
6494         String.length shortname >= 5 && String.sub shortname 0 5 = "test0" in
6495       let debug =
6496         String.length shortname >= 5 && String.sub shortname 0 5 = "debug" in
6497       if not deprecated && not test0 && not debug then
6498         pr "#define LIBGUESTFS_HAVE_%s 1\n" (String.uppercase shortname);
6499
6500       generate_prototype ~single_line:true ~newline:true ~handle:"g"
6501         name style
6502   ) all_functions_sorted
6503
6504 (* Generate the guestfs-internal-actions.h file. *)
6505 and generate_internal_actions_h () =
6506   generate_header CStyle LGPLv2plus;
6507   List.iter (
6508     fun (shortname, style, _, _, _, _, _) ->
6509       let name = "guestfs__" ^ shortname in
6510       generate_prototype ~single_line:true ~newline:true ~handle:"g"
6511         name style
6512   ) non_daemon_functions
6513
6514 (* Generate the client-side dispatch stubs. *)
6515 and generate_client_actions () =
6516   generate_header CStyle LGPLv2plus;
6517
6518   pr "\
6519 #include <stdio.h>
6520 #include <stdlib.h>
6521 #include <stdint.h>
6522 #include <string.h>
6523 #include <inttypes.h>
6524
6525 #include \"guestfs.h\"
6526 #include \"guestfs-internal.h\"
6527 #include \"guestfs-internal-actions.h\"
6528 #include \"guestfs_protocol.h\"
6529
6530 /* Check the return message from a call for validity. */
6531 static int
6532 check_reply_header (guestfs_h *g,
6533                     const struct guestfs_message_header *hdr,
6534                     unsigned int proc_nr, unsigned int serial)
6535 {
6536   if (hdr->prog != GUESTFS_PROGRAM) {
6537     error (g, \"wrong program (%%d/%%d)\", hdr->prog, GUESTFS_PROGRAM);
6538     return -1;
6539   }
6540   if (hdr->vers != GUESTFS_PROTOCOL_VERSION) {
6541     error (g, \"wrong protocol version (%%d/%%d)\",
6542            hdr->vers, GUESTFS_PROTOCOL_VERSION);
6543     return -1;
6544   }
6545   if (hdr->direction != GUESTFS_DIRECTION_REPLY) {
6546     error (g, \"unexpected message direction (%%d/%%d)\",
6547            hdr->direction, GUESTFS_DIRECTION_REPLY);
6548     return -1;
6549   }
6550   if (hdr->proc != proc_nr) {
6551     error (g, \"unexpected procedure number (%%d/%%d)\", hdr->proc, proc_nr);
6552     return -1;
6553   }
6554   if (hdr->serial != serial) {
6555     error (g, \"unexpected serial (%%d/%%d)\", hdr->serial, serial);
6556     return -1;
6557   }
6558
6559   return 0;
6560 }
6561
6562 /* Check we are in the right state to run a high-level action. */
6563 static int
6564 check_state (guestfs_h *g, const char *caller)
6565 {
6566   if (!guestfs__is_ready (g)) {
6567     if (guestfs__is_config (g) || guestfs__is_launching (g))
6568       error (g, \"%%s: call launch before using this function\\n(in guestfish, don't forget to use the 'run' command)\",
6569         caller);
6570     else
6571       error (g, \"%%s called from the wrong state, %%d != READY\",
6572         caller, guestfs__get_state (g));
6573     return -1;
6574   }
6575   return 0;
6576 }
6577
6578 ";
6579
6580   let error_code_of = function
6581     | RErr | RInt _ | RInt64 _ | RBool _ -> "-1"
6582     | RConstString _ | RConstOptString _
6583     | RString _ | RStringList _
6584     | RStruct _ | RStructList _
6585     | RHashtable _ | RBufferOut _ -> "NULL"
6586   in
6587
6588   (* Generate code to check String-like parameters are not passed in
6589    * as NULL (returning an error if they are).
6590    *)
6591   let check_null_strings shortname style =
6592     let pr_newline = ref false in
6593     List.iter (
6594       function
6595       (* parameters which should not be NULL *)
6596       | String n
6597       | Device n
6598       | Pathname n
6599       | Dev_or_Path n
6600       | FileIn n
6601       | FileOut n
6602       | BufferIn n
6603       | StringList n
6604       | DeviceList n
6605       | Key n ->
6606           pr "  if (%s == NULL) {\n" n;
6607           pr "    error (g, \"%%s: %%s: parameter cannot be NULL\",\n";
6608           pr "           \"%s\", \"%s\");\n" shortname n;
6609           pr "    return %s;\n" (error_code_of (fst style));
6610           pr "  }\n";
6611           pr_newline := true
6612
6613       (* can be NULL *)
6614       | OptString _
6615
6616       (* not applicable *)
6617       | Bool _
6618       | Int _
6619       | Int64 _ -> ()
6620     ) (snd style);
6621
6622     if !pr_newline then pr "\n";
6623   in
6624
6625   (* Generate code to generate guestfish call traces. *)
6626   let trace_call shortname style =
6627     pr "  if (guestfs__get_trace (g)) {\n";
6628
6629     let needs_i =
6630       List.exists (function
6631                    | StringList _ | DeviceList _ -> true
6632                    | _ -> false) (snd style) in
6633     if needs_i then (
6634       pr "    size_t i;\n";
6635       pr "\n"
6636     );
6637
6638     pr "    fprintf (stderr, \"%s\");\n" shortname;
6639     List.iter (
6640       function
6641       | String n                        (* strings *)
6642       | Device n
6643       | Pathname n
6644       | Dev_or_Path n
6645       | FileIn n
6646       | FileOut n
6647       | BufferIn n
6648       | Key n ->
6649           (* guestfish doesn't support string escaping, so neither do we *)
6650           pr "    fprintf (stderr, \" \\\"%%s\\\"\", %s);\n" n
6651       | OptString n ->                  (* string option *)
6652           pr "    if (%s) fprintf (stderr, \" \\\"%%s\\\"\", %s);\n" n n;
6653           pr "    else fprintf (stderr, \" null\");\n"
6654       | StringList n
6655       | DeviceList n ->                 (* string list *)
6656           pr "    fputc (' ', stderr);\n";
6657           pr "    fputc ('\"', stderr);\n";
6658           pr "    for (i = 0; %s[i]; ++i) {\n" n;
6659           pr "      if (i > 0) fputc (' ', stderr);\n";
6660           pr "      fputs (%s[i], stderr);\n" n;
6661           pr "    }\n";
6662           pr "    fputc ('\"', stderr);\n";
6663       | Bool n ->                       (* boolean *)
6664           pr "    fputs (%s ? \" true\" : \" false\", stderr);\n" n
6665       | Int n ->                        (* int *)
6666           pr "    fprintf (stderr, \" %%d\", %s);\n" n
6667       | Int64 n ->
6668           pr "    fprintf (stderr, \" %%\" PRIi64, %s);\n" n
6669     ) (snd style);
6670     pr "    fputc ('\\n', stderr);\n";
6671     pr "  }\n";
6672     pr "\n";
6673   in
6674
6675   (* For non-daemon functions, generate a wrapper around each function. *)
6676   List.iter (
6677     fun (shortname, style, _, _, _, _, _) ->
6678       let name = "guestfs_" ^ shortname in
6679
6680       generate_prototype ~extern:false ~semicolon:false ~newline:true
6681         ~handle:"g" name style;
6682       pr "{\n";
6683       check_null_strings shortname style;
6684       trace_call shortname style;
6685       pr "  return guestfs__%s " shortname;
6686       generate_c_call_args ~handle:"g" style;
6687       pr ";\n";
6688       pr "}\n";
6689       pr "\n"
6690   ) non_daemon_functions;
6691
6692   (* Client-side stubs for each function. *)
6693   List.iter (
6694     fun (shortname, style, _, _, _, _, _) ->
6695       let name = "guestfs_" ^ shortname in
6696       let error_code = error_code_of (fst style) in
6697
6698       (* Generate the action stub. *)
6699       generate_prototype ~extern:false ~semicolon:false ~newline:true
6700         ~handle:"g" name style;
6701
6702       pr "{\n";
6703
6704       (match snd style with
6705        | [] -> ()
6706        | _ -> pr "  struct %s_args args;\n" name
6707       );
6708
6709       pr "  guestfs_message_header hdr;\n";
6710       pr "  guestfs_message_error err;\n";
6711       let has_ret =
6712         match fst style with
6713         | RErr -> false
6714         | RConstString _ | RConstOptString _ ->
6715             failwithf "RConstString|RConstOptString cannot be used by daemon functions"
6716         | RInt _ | RInt64 _
6717         | RBool _ | RString _ | RStringList _
6718         | RStruct _ | RStructList _
6719         | RHashtable _ | RBufferOut _ ->
6720             pr "  struct %s_ret ret;\n" name;
6721             true in
6722
6723       pr "  int serial;\n";
6724       pr "  int r;\n";
6725       pr "\n";
6726       check_null_strings shortname style;
6727       trace_call shortname style;
6728       pr "  if (check_state (g, \"%s\") == -1) return %s;\n"
6729         shortname error_code;
6730       pr "  guestfs___set_busy (g);\n";
6731       pr "\n";
6732
6733       (* Send the main header and arguments. *)
6734       (match snd style with
6735        | [] ->
6736            pr "  serial = guestfs___send (g, GUESTFS_PROC_%s, NULL, NULL);\n"
6737              (String.uppercase shortname)
6738        | args ->
6739            List.iter (
6740              function
6741              | Pathname n | Device n | Dev_or_Path n | String n | Key n ->
6742                  pr "  args.%s = (char *) %s;\n" n n
6743              | OptString n ->
6744                  pr "  args.%s = %s ? (char **) &%s : NULL;\n" n n n
6745              | StringList n | DeviceList n ->
6746                  pr "  args.%s.%s_val = (char **) %s;\n" n n n;
6747                  pr "  for (args.%s.%s_len = 0; %s[args.%s.%s_len]; args.%s.%s_len++) ;\n" n n n n n n n;
6748              | Bool n ->
6749                  pr "  args.%s = %s;\n" n n
6750              | Int n ->
6751                  pr "  args.%s = %s;\n" n n
6752              | Int64 n ->
6753                  pr "  args.%s = %s;\n" n n
6754              | FileIn _ | FileOut _ -> ()
6755              | BufferIn n ->
6756                  pr "  /* Just catch grossly large sizes. XDR encoding will make this precise. */\n";
6757                  pr "  if (%s_size >= GUESTFS_MESSAGE_MAX) {\n" n;
6758                  pr "    error (g, \"%%s: size of input buffer too large\", \"%s\");\n"
6759                    shortname;
6760                  pr "    guestfs___end_busy (g);\n";
6761                  pr "    return %s;\n" error_code;
6762                  pr "  }\n";
6763                  pr "  args.%s.%s_val = (char *) %s;\n" n n n;
6764                  pr "  args.%s.%s_len = %s_size;\n" n n n
6765            ) args;
6766            pr "  serial = guestfs___send (g, GUESTFS_PROC_%s,\n"
6767              (String.uppercase shortname);
6768            pr "        (xdrproc_t) xdr_%s_args, (char *) &args);\n"
6769              name;
6770       );
6771       pr "  if (serial == -1) {\n";
6772       pr "    guestfs___end_busy (g);\n";
6773       pr "    return %s;\n" error_code;
6774       pr "  }\n";
6775       pr "\n";
6776
6777       (* Send any additional files (FileIn) requested. *)
6778       let need_read_reply_label = ref false in
6779       List.iter (
6780         function
6781         | FileIn n ->
6782             pr "  r = guestfs___send_file (g, %s);\n" n;
6783             pr "  if (r == -1) {\n";
6784             pr "    guestfs___end_busy (g);\n";
6785             pr "    return %s;\n" error_code;
6786             pr "  }\n";
6787             pr "  if (r == -2) /* daemon cancelled */\n";
6788             pr "    goto read_reply;\n";
6789             need_read_reply_label := true;
6790             pr "\n";
6791         | _ -> ()
6792       ) (snd style);
6793
6794       (* Wait for the reply from the remote end. *)
6795       if !need_read_reply_label then pr " read_reply:\n";
6796       pr "  memset (&hdr, 0, sizeof hdr);\n";
6797       pr "  memset (&err, 0, sizeof err);\n";
6798       if has_ret then pr "  memset (&ret, 0, sizeof ret);\n";
6799       pr "\n";
6800       pr "  r = guestfs___recv (g, \"%s\", &hdr, &err,\n        " shortname;
6801       if not has_ret then
6802         pr "NULL, NULL"
6803       else
6804         pr "(xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret" shortname;
6805       pr ");\n";
6806
6807       pr "  if (r == -1) {\n";
6808       pr "    guestfs___end_busy (g);\n";
6809       pr "    return %s;\n" error_code;
6810       pr "  }\n";
6811       pr "\n";
6812
6813       pr "  if (check_reply_header (g, &hdr, GUESTFS_PROC_%s, serial) == -1) {\n"
6814         (String.uppercase shortname);
6815       pr "    guestfs___end_busy (g);\n";
6816       pr "    return %s;\n" error_code;
6817       pr "  }\n";
6818       pr "\n";
6819
6820       pr "  if (hdr.status == GUESTFS_STATUS_ERROR) {\n";
6821       pr "    error (g, \"%%s: %%s\", \"%s\", err.error_message);\n" shortname;
6822       pr "    free (err.error_message);\n";
6823       pr "    guestfs___end_busy (g);\n";
6824       pr "    return %s;\n" error_code;
6825       pr "  }\n";
6826       pr "\n";
6827
6828       (* Expecting to receive further files (FileOut)? *)
6829       List.iter (
6830         function
6831         | FileOut n ->
6832             pr "  if (guestfs___recv_file (g, %s) == -1) {\n" n;
6833             pr "    guestfs___end_busy (g);\n";
6834             pr "    return %s;\n" error_code;
6835             pr "  }\n";
6836             pr "\n";
6837         | _ -> ()
6838       ) (snd style);
6839
6840       pr "  guestfs___end_busy (g);\n";
6841
6842       (match fst style with
6843        | RErr -> pr "  return 0;\n"
6844        | RInt n | RInt64 n | RBool n ->
6845            pr "  return ret.%s;\n" n
6846        | RConstString _ | RConstOptString _ ->
6847            failwithf "RConstString|RConstOptString cannot be used by daemon functions"
6848        | RString n ->
6849            pr "  return ret.%s; /* caller will free */\n" n
6850        | RStringList n | RHashtable n ->
6851            pr "  /* caller will free this, but we need to add a NULL entry */\n";
6852            pr "  ret.%s.%s_val =\n" n n;
6853            pr "    safe_realloc (g, ret.%s.%s_val,\n" n n;
6854            pr "                  sizeof (char *) * (ret.%s.%s_len + 1));\n"
6855              n n;
6856            pr "  ret.%s.%s_val[ret.%s.%s_len] = NULL;\n" n n n n;
6857            pr "  return ret.%s.%s_val;\n" n n
6858        | RStruct (n, _) ->
6859            pr "  /* caller will free this */\n";
6860            pr "  return safe_memdup (g, &ret.%s, sizeof (ret.%s));\n" n n
6861        | RStructList (n, _) ->
6862            pr "  /* caller will free this */\n";
6863            pr "  return safe_memdup (g, &ret.%s, sizeof (ret.%s));\n" n n
6864        | RBufferOut n ->
6865            pr "  /* RBufferOut is tricky: If the buffer is zero-length, then\n";
6866            pr "   * _val might be NULL here.  To make the API saner for\n";
6867            pr "   * callers, we turn this case into a unique pointer (using\n";
6868            pr "   * malloc(1)).\n";
6869            pr "   */\n";
6870            pr "  if (ret.%s.%s_len > 0) {\n" n n;
6871            pr "    *size_r = ret.%s.%s_len;\n" n n;
6872            pr "    return ret.%s.%s_val; /* caller will free */\n" n n;
6873            pr "  } else {\n";
6874            pr "    free (ret.%s.%s_val);\n" n n;
6875            pr "    char *p = safe_malloc (g, 1);\n";
6876            pr "    *size_r = ret.%s.%s_len;\n" n n;
6877            pr "    return p;\n";
6878            pr "  }\n";
6879       );
6880
6881       pr "}\n\n"
6882   ) daemon_functions;
6883
6884   (* Functions to free structures. *)
6885   pr "/* Structure-freeing functions.  These rely on the fact that the\n";
6886   pr " * structure format is identical to the XDR format.  See note in\n";
6887   pr " * generator.ml.\n";
6888   pr " */\n";
6889   pr "\n";
6890
6891   List.iter (
6892     fun (typ, _) ->
6893       pr "void\n";
6894       pr "guestfs_free_%s (struct guestfs_%s *x)\n" typ typ;
6895       pr "{\n";
6896       pr "  xdr_free ((xdrproc_t) xdr_guestfs_int_%s, (char *) x);\n" typ;
6897       pr "  free (x);\n";
6898       pr "}\n";
6899       pr "\n";
6900
6901       pr "void\n";
6902       pr "guestfs_free_%s_list (struct guestfs_%s_list *x)\n" typ typ;
6903       pr "{\n";
6904       pr "  xdr_free ((xdrproc_t) xdr_guestfs_int_%s_list, (char *) x);\n" typ;
6905       pr "  free (x);\n";
6906       pr "}\n";
6907       pr "\n";
6908
6909   ) structs;
6910
6911 (* Generate daemon/actions.h. *)
6912 and generate_daemon_actions_h () =
6913   generate_header CStyle GPLv2plus;
6914
6915   pr "#include \"../src/guestfs_protocol.h\"\n";
6916   pr "\n";
6917
6918   List.iter (
6919     fun (name, style, _, _, _, _, _) ->
6920       generate_prototype
6921         ~single_line:true ~newline:true ~in_daemon:true ~prefix:"do_"
6922         name style;
6923   ) daemon_functions
6924
6925 (* Generate the linker script which controls the visibility of
6926  * symbols in the public ABI and ensures no other symbols get
6927  * exported accidentally.
6928  *)
6929 and generate_linker_script () =
6930   generate_header HashStyle GPLv2plus;
6931
6932   let globals = [
6933     "guestfs_create";
6934     "guestfs_close";
6935     "guestfs_get_error_handler";
6936     "guestfs_get_out_of_memory_handler";
6937     "guestfs_get_private";
6938     "guestfs_last_error";
6939     "guestfs_set_close_callback";
6940     "guestfs_set_error_handler";
6941     "guestfs_set_launch_done_callback";
6942     "guestfs_set_log_message_callback";
6943     "guestfs_set_out_of_memory_handler";
6944     "guestfs_set_private";
6945     "guestfs_set_progress_callback";
6946     "guestfs_set_subprocess_quit_callback";
6947
6948     (* Unofficial parts of the API: the bindings code use these
6949      * functions, so it is useful to export them.
6950      *)
6951     "guestfs_safe_calloc";
6952     "guestfs_safe_malloc";
6953     "guestfs_safe_strdup";
6954     "guestfs_safe_memdup";
6955   ] in
6956   let functions =
6957     List.map (fun (name, _, _, _, _, _, _) -> "guestfs_" ^ name)
6958       all_functions in
6959   let structs =
6960     List.concat (
6961       List.map (fun (typ, _) ->
6962                   ["guestfs_free_" ^ typ; "guestfs_free_" ^ typ ^ "_list"])
6963         structs
6964     ) in
6965   let globals = List.sort compare (globals @ functions @ structs) in
6966
6967   pr "{\n";
6968   pr "    global:\n";
6969   List.iter (pr "        %s;\n") globals;
6970   pr "\n";
6971
6972   pr "    local:\n";
6973   pr "        *;\n";
6974   pr "};\n"
6975
6976 (* Generate the server-side stubs. *)
6977 and generate_daemon_actions () =
6978   generate_header CStyle GPLv2plus;
6979
6980   pr "#include <config.h>\n";
6981   pr "\n";
6982   pr "#include <stdio.h>\n";
6983   pr "#include <stdlib.h>\n";
6984   pr "#include <string.h>\n";
6985   pr "#include <inttypes.h>\n";
6986   pr "#include <rpc/types.h>\n";
6987   pr "#include <rpc/xdr.h>\n";
6988   pr "\n";
6989   pr "#include \"daemon.h\"\n";
6990   pr "#include \"c-ctype.h\"\n";
6991   pr "#include \"../src/guestfs_protocol.h\"\n";
6992   pr "#include \"actions.h\"\n";
6993   pr "\n";
6994
6995   List.iter (
6996     fun (name, style, _, _, _, _, _) ->
6997       (* Generate server-side stubs. *)
6998       pr "static void %s_stub (XDR *xdr_in)\n" name;
6999       pr "{\n";
7000       let error_code =
7001         match fst style with
7002         | RErr | RInt _ -> pr "  int r;\n"; "-1"
7003         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
7004         | RBool _ -> pr "  int r;\n"; "-1"
7005         | RConstString _ | RConstOptString _ ->
7006             failwithf "RConstString|RConstOptString cannot be used by daemon functions"
7007         | RString _ -> pr "  char *r;\n"; "NULL"
7008         | RStringList _ | RHashtable _ -> pr "  char **r;\n"; "NULL"
7009         | RStruct (_, typ) -> pr "  guestfs_int_%s *r;\n" typ; "NULL"
7010         | RStructList (_, typ) -> pr "  guestfs_int_%s_list *r;\n" typ; "NULL"
7011         | RBufferOut _ ->
7012             pr "  size_t size = 1;\n";
7013             pr "  char *r;\n";
7014             "NULL" in
7015
7016       (match snd style with
7017        | [] -> ()
7018        | args ->
7019            pr "  struct guestfs_%s_args args;\n" name;
7020            List.iter (
7021              function
7022              | Device n | Dev_or_Path n
7023              | Pathname n
7024              | String n
7025              | Key n -> ()
7026              | OptString n -> pr "  char *%s;\n" n
7027              | StringList n | DeviceList n -> pr "  char **%s;\n" n
7028              | Bool n -> pr "  int %s;\n" n
7029              | Int n -> pr "  int %s;\n" n
7030              | Int64 n -> pr "  int64_t %s;\n" n
7031              | FileIn _ | FileOut _ -> ()
7032              | BufferIn n ->
7033                  pr "  const char *%s;\n" n;
7034                  pr "  size_t %s_size;\n" n
7035            ) args
7036       );
7037       pr "\n";
7038
7039       let is_filein =
7040         List.exists (function FileIn _ -> true | _ -> false) (snd style) in
7041
7042       (match snd style with
7043        | [] -> ()
7044        | args ->
7045            pr "  memset (&args, 0, sizeof args);\n";
7046            pr "\n";
7047            pr "  if (!xdr_guestfs_%s_args (xdr_in, &args)) {\n" name;
7048            if is_filein then
7049              pr "    if (cancel_receive () != -2)\n";
7050            pr "      reply_with_error (\"daemon failed to decode procedure arguments\");\n";
7051            pr "    goto done;\n";
7052            pr "  }\n";
7053            let pr_args n =
7054              pr "  char *%s = args.%s;\n" n n
7055            in
7056            let pr_list_handling_code n =
7057              pr "  %s = realloc (args.%s.%s_val,\n" n n n;
7058              pr "                sizeof (char *) * (args.%s.%s_len+1));\n" n n;
7059              pr "  if (%s == NULL) {\n" n;
7060              if is_filein then
7061                pr "    if (cancel_receive () != -2)\n";
7062              pr "      reply_with_perror (\"realloc\");\n";
7063              pr "    goto done;\n";
7064              pr "  }\n";
7065              pr "  %s[args.%s.%s_len] = NULL;\n" n n n;
7066              pr "  args.%s.%s_val = %s;\n" n n n;
7067            in
7068            List.iter (
7069              function
7070              | Pathname n ->
7071                  pr_args n;
7072                  pr "  ABS_PATH (%s, %s, goto done);\n"
7073                    n (if is_filein then "cancel_receive ()" else "0");
7074              | Device n ->
7075                  pr_args n;
7076                  pr "  RESOLVE_DEVICE (%s, %s, goto done);\n"
7077                    n (if is_filein then "cancel_receive ()" else "0");
7078              | Dev_or_Path n ->
7079                  pr_args n;
7080                  pr "  REQUIRE_ROOT_OR_RESOLVE_DEVICE (%s, %s, goto done);\n"
7081                    n (if is_filein then "cancel_receive ()" else "0");
7082              | String n | Key n -> pr_args n
7083              | OptString n -> pr "  %s = args.%s ? *args.%s : NULL;\n" n n n
7084              | StringList n ->
7085                  pr_list_handling_code n;
7086              | DeviceList n ->
7087                  pr_list_handling_code n;
7088                  pr "  /* Ensure that each is a device,\n";
7089                  pr "   * and perform device name translation.\n";
7090                  pr "   */\n";
7091                  pr "  {\n";
7092                  pr "    size_t i;\n";
7093                  pr "    for (i = 0; %s[i] != NULL; ++i)\n" n;
7094                  pr "      RESOLVE_DEVICE (%s[i], %s, goto done);\n" n
7095                    (if is_filein then "cancel_receive ()" else "0");
7096                  pr "  }\n";
7097              | Bool n -> pr "  %s = args.%s;\n" n n
7098              | Int n -> pr "  %s = args.%s;\n" n n
7099              | Int64 n -> pr "  %s = args.%s;\n" n n
7100              | FileIn _ | FileOut _ -> ()
7101              | BufferIn n ->
7102                  pr "  %s = args.%s.%s_val;\n" n n n;
7103                  pr "  %s_size = args.%s.%s_len;\n" n n n
7104            ) args;
7105            pr "\n"
7106       );
7107
7108       (* this is used at least for do_equal *)
7109       if List.exists (function Pathname _ -> true | _ -> false) (snd style) then (
7110         (* Emit NEED_ROOT just once, even when there are two or
7111            more Pathname args *)
7112         pr "  NEED_ROOT (%s, goto done);\n"
7113           (if is_filein then "cancel_receive ()" else "0");
7114       );
7115
7116       (* Don't want to call the impl with any FileIn or FileOut
7117        * parameters, since these go "outside" the RPC protocol.
7118        *)
7119       let args' =
7120         List.filter (function FileIn _ | FileOut _ -> false | _ -> true)
7121           (snd style) in
7122       pr "  r = do_%s " name;
7123       generate_c_call_args (fst style, args');
7124       pr ";\n";
7125
7126       (match fst style with
7127        | RErr | RInt _ | RInt64 _ | RBool _
7128        | RConstString _ | RConstOptString _
7129        | RString _ | RStringList _ | RHashtable _
7130        | RStruct (_, _) | RStructList (_, _) ->
7131            pr "  if (r == %s)\n" error_code;
7132            pr "    /* do_%s has already called reply_with_error */\n" name;
7133            pr "    goto done;\n";
7134            pr "\n"
7135        | RBufferOut _ ->
7136            pr "  /* size == 0 && r == NULL could be a non-error case (just\n";
7137            pr "   * an ordinary zero-length buffer), so be careful ...\n";
7138            pr "   */\n";
7139            pr "  if (size == 1 && r == %s)\n" error_code;
7140            pr "    /* do_%s has already called reply_with_error */\n" name;
7141            pr "    goto done;\n";
7142            pr "\n"
7143       );
7144
7145       (* If there are any FileOut parameters, then the impl must
7146        * send its own reply.
7147        *)
7148       let no_reply =
7149         List.exists (function FileOut _ -> true | _ -> false) (snd style) in
7150       if no_reply then
7151         pr "  /* do_%s has already sent a reply */\n" name
7152       else (
7153         match fst style with
7154         | RErr -> pr "  reply (NULL, NULL);\n"
7155         | RInt n | RInt64 n | RBool n ->
7156             pr "  struct guestfs_%s_ret ret;\n" name;
7157             pr "  ret.%s = r;\n" n;
7158             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
7159               name
7160         | RConstString _ | RConstOptString _ ->
7161             failwithf "RConstString|RConstOptString cannot be used by daemon functions"
7162         | RString n ->
7163             pr "  struct guestfs_%s_ret ret;\n" name;
7164             pr "  ret.%s = r;\n" n;
7165             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
7166               name;
7167             pr "  free (r);\n"
7168         | RStringList n | RHashtable n ->
7169             pr "  struct guestfs_%s_ret ret;\n" name;
7170             pr "  ret.%s.%s_len = count_strings (r);\n" n n;
7171             pr "  ret.%s.%s_val = r;\n" n n;
7172             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
7173               name;
7174             pr "  free_strings (r);\n"
7175         | RStruct (n, _) ->
7176             pr "  struct guestfs_%s_ret ret;\n" name;
7177             pr "  ret.%s = *r;\n" n;
7178             pr "  reply ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
7179               name;
7180             pr "  xdr_free ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
7181               name
7182         | RStructList (n, _) ->
7183             pr "  struct guestfs_%s_ret ret;\n" name;
7184             pr "  ret.%s = *r;\n" n;
7185             pr "  reply ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
7186               name;
7187             pr "  xdr_free ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
7188               name
7189         | RBufferOut n ->
7190             pr "  struct guestfs_%s_ret ret;\n" name;
7191             pr "  ret.%s.%s_val = r;\n" n n;
7192             pr "  ret.%s.%s_len = size;\n" n n;
7193             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
7194               name;
7195             pr "  free (r);\n"
7196       );
7197
7198       (* Free the args. *)
7199       pr "done:\n";
7200       (match snd style with
7201        | [] -> ()
7202        | _ ->
7203            pr "  xdr_free ((xdrproc_t) xdr_guestfs_%s_args, (char *) &args);\n"
7204              name
7205       );
7206       pr "  return;\n";
7207       pr "}\n\n";
7208   ) daemon_functions;
7209
7210   (* Dispatch function. *)
7211   pr "void dispatch_incoming_message (XDR *xdr_in)\n";
7212   pr "{\n";
7213   pr "  switch (proc_nr) {\n";
7214
7215   List.iter (
7216     fun (name, style, _, _, _, _, _) ->
7217       pr "    case GUESTFS_PROC_%s:\n" (String.uppercase name);
7218       pr "      %s_stub (xdr_in);\n" name;
7219       pr "      break;\n"
7220   ) daemon_functions;
7221
7222   pr "    default:\n";
7223   pr "      reply_with_error (\"dispatch_incoming_message: unknown procedure number %%d, set LIBGUESTFS_PATH to point to the matching libguestfs appliance directory\", proc_nr);\n";
7224   pr "  }\n";
7225   pr "}\n";
7226   pr "\n";
7227
7228   (* LVM columns and tokenization functions. *)
7229   (* XXX This generates crap code.  We should rethink how we
7230    * do this parsing.
7231    *)
7232   List.iter (
7233     function
7234     | typ, cols ->
7235         pr "static const char *lvm_%s_cols = \"%s\";\n"
7236           typ (String.concat "," (List.map fst cols));
7237         pr "\n";
7238
7239         pr "static int lvm_tokenize_%s (char *str, guestfs_int_lvm_%s *r)\n" typ typ;
7240         pr "{\n";
7241         pr "  char *tok, *p, *next;\n";
7242         pr "  size_t i, j;\n";
7243         pr "\n";
7244         (*
7245           pr "  fprintf (stderr, \"%%s: <<%%s>>\\n\", __func__, str);\n";
7246           pr "\n";
7247         *)
7248         pr "  if (!str) {\n";
7249         pr "    fprintf (stderr, \"%%s: failed: passed a NULL string\\n\", __func__);\n";
7250         pr "    return -1;\n";
7251         pr "  }\n";
7252         pr "  if (!*str || c_isspace (*str)) {\n";
7253         pr "    fprintf (stderr, \"%%s: failed: passed a empty string or one beginning with whitespace\\n\", __func__);\n";
7254         pr "    return -1;\n";
7255         pr "  }\n";
7256         pr "  tok = str;\n";
7257         List.iter (
7258           fun (name, coltype) ->
7259             pr "  if (!tok) {\n";
7260             pr "    fprintf (stderr, \"%%s: failed: string finished early, around token %%s\\n\", __func__, \"%s\");\n" name;
7261             pr "    return -1;\n";
7262             pr "  }\n";
7263             pr "  p = strchrnul (tok, ',');\n";
7264             pr "  if (*p) next = p+1; else next = NULL;\n";
7265             pr "  *p = '\\0';\n";
7266             (match coltype with
7267              | FString ->
7268                  pr "  r->%s = strdup (tok);\n" name;
7269                  pr "  if (r->%s == NULL) {\n" name;
7270                  pr "    perror (\"strdup\");\n";
7271                  pr "    return -1;\n";
7272                  pr "  }\n"
7273              | FUUID ->
7274                  pr "  for (i = j = 0; i < 32; ++j) {\n";
7275                  pr "    if (tok[j] == '\\0') {\n";
7276                  pr "      fprintf (stderr, \"%%s: failed to parse UUID from '%%s'\\n\", __func__, tok);\n";
7277                  pr "      return -1;\n";
7278                  pr "    } else if (tok[j] != '-')\n";
7279                  pr "      r->%s[i++] = tok[j];\n" name;
7280                  pr "  }\n";
7281              | FBytes ->
7282                  pr "  if (sscanf (tok, \"%%\"SCNu64, &r->%s) != 1) {\n" name;
7283                  pr "    fprintf (stderr, \"%%s: failed to parse size '%%s' from token %%s\\n\", __func__, tok, \"%s\");\n" name;
7284                  pr "    return -1;\n";
7285                  pr "  }\n";
7286              | FInt64 ->
7287                  pr "  if (sscanf (tok, \"%%\"SCNi64, &r->%s) != 1) {\n" name;
7288                  pr "    fprintf (stderr, \"%%s: failed to parse int '%%s' from token %%s\\n\", __func__, tok, \"%s\");\n" name;
7289                  pr "    return -1;\n";
7290                  pr "  }\n";
7291              | FOptPercent ->
7292                  pr "  if (tok[0] == '\\0')\n";
7293                  pr "    r->%s = -1;\n" name;
7294                  pr "  else if (sscanf (tok, \"%%f\", &r->%s) != 1) {\n" name;
7295                  pr "    fprintf (stderr, \"%%s: failed to parse float '%%s' from token %%s\\n\", __func__, tok, \"%s\");\n" name;
7296                  pr "    return -1;\n";
7297                  pr "  }\n";
7298              | FBuffer | FInt32 | FUInt32 | FUInt64 | FChar ->
7299                  assert false (* can never be an LVM column *)
7300             );
7301             pr "  tok = next;\n";
7302         ) cols;
7303
7304         pr "  if (tok != NULL) {\n";
7305         pr "    fprintf (stderr, \"%%s: failed: extra tokens at end of string\\n\", __func__);\n";
7306         pr "    return -1;\n";
7307         pr "  }\n";
7308         pr "  return 0;\n";
7309         pr "}\n";
7310         pr "\n";
7311
7312         pr "guestfs_int_lvm_%s_list *\n" typ;
7313         pr "parse_command_line_%ss (void)\n" typ;
7314         pr "{\n";
7315         pr "  char *out, *err;\n";
7316         pr "  char *p, *pend;\n";
7317         pr "  int r, i;\n";
7318         pr "  guestfs_int_lvm_%s_list *ret;\n" typ;
7319         pr "  void *newp;\n";
7320         pr "\n";
7321         pr "  ret = malloc (sizeof *ret);\n";
7322         pr "  if (!ret) {\n";
7323         pr "    reply_with_perror (\"malloc\");\n";
7324         pr "    return NULL;\n";
7325         pr "  }\n";
7326         pr "\n";
7327         pr "  ret->guestfs_int_lvm_%s_list_len = 0;\n" typ;
7328         pr "  ret->guestfs_int_lvm_%s_list_val = NULL;\n" typ;
7329         pr "\n";
7330         pr "  r = command (&out, &err,\n";
7331         pr "           \"lvm\", \"%ss\",\n" typ;
7332         pr "           \"-o\", lvm_%s_cols, \"--unbuffered\", \"--noheadings\",\n" typ;
7333         pr "           \"--nosuffix\", \"--separator\", \",\", \"--units\", \"b\", NULL);\n";
7334         pr "  if (r == -1) {\n";
7335         pr "    reply_with_error (\"%%s\", err);\n";
7336         pr "    free (out);\n";
7337         pr "    free (err);\n";
7338         pr "    free (ret);\n";
7339         pr "    return NULL;\n";
7340         pr "  }\n";
7341         pr "\n";
7342         pr "  free (err);\n";
7343         pr "\n";
7344         pr "  /* Tokenize each line of the output. */\n";
7345         pr "  p = out;\n";
7346         pr "  i = 0;\n";
7347         pr "  while (p) {\n";
7348         pr "    pend = strchr (p, '\\n');       /* Get the next line of output. */\n";
7349         pr "    if (pend) {\n";
7350         pr "      *pend = '\\0';\n";
7351         pr "      pend++;\n";
7352         pr "    }\n";
7353         pr "\n";
7354         pr "    while (*p && c_isspace (*p))    /* Skip any leading whitespace. */\n";
7355         pr "      p++;\n";
7356         pr "\n";
7357         pr "    if (!*p) {                      /* Empty line?  Skip it. */\n";
7358         pr "      p = pend;\n";
7359         pr "      continue;\n";
7360         pr "    }\n";
7361         pr "\n";
7362         pr "    /* Allocate some space to store this next entry. */\n";
7363         pr "    newp = realloc (ret->guestfs_int_lvm_%s_list_val,\n" typ;
7364         pr "                sizeof (guestfs_int_lvm_%s) * (i+1));\n" typ;
7365         pr "    if (newp == NULL) {\n";
7366         pr "      reply_with_perror (\"realloc\");\n";
7367         pr "      free (ret->guestfs_int_lvm_%s_list_val);\n" typ;
7368         pr "      free (ret);\n";
7369         pr "      free (out);\n";
7370         pr "      return NULL;\n";
7371         pr "    }\n";
7372         pr "    ret->guestfs_int_lvm_%s_list_val = newp;\n" typ;
7373         pr "\n";
7374         pr "    /* Tokenize the next entry. */\n";
7375         pr "    r = lvm_tokenize_%s (p, &ret->guestfs_int_lvm_%s_list_val[i]);\n" typ typ;
7376         pr "    if (r == -1) {\n";
7377         pr "      reply_with_error (\"failed to parse output of '%ss' command\");\n" typ;
7378         pr "      free (ret->guestfs_int_lvm_%s_list_val);\n" typ;
7379         pr "      free (ret);\n";
7380         pr "      free (out);\n";
7381         pr "      return NULL;\n";
7382         pr "    }\n";
7383         pr "\n";
7384         pr "    ++i;\n";
7385         pr "    p = pend;\n";
7386         pr "  }\n";
7387         pr "\n";
7388         pr "  ret->guestfs_int_lvm_%s_list_len = i;\n" typ;
7389         pr "\n";
7390         pr "  free (out);\n";
7391         pr "  return ret;\n";
7392         pr "}\n"
7393
7394   ) ["pv", lvm_pv_cols; "vg", lvm_vg_cols; "lv", lvm_lv_cols]
7395
7396 (* Generate a list of function names, for debugging in the daemon.. *)
7397 and generate_daemon_names () =
7398   generate_header CStyle GPLv2plus;
7399
7400   pr "#include <config.h>\n";
7401   pr "\n";
7402   pr "#include \"daemon.h\"\n";
7403   pr "\n";
7404
7405   pr "/* This array is indexed by proc_nr.  See guestfs_protocol.x. */\n";
7406   pr "const char *function_names[] = {\n";
7407   List.iter (
7408     fun (name, _, proc_nr, _, _, _, _) -> pr "  [%d] = \"%s\",\n" proc_nr name
7409   ) daemon_functions;
7410   pr "};\n";
7411
7412 (* Generate the optional groups for the daemon to implement
7413  * guestfs_available.
7414  *)
7415 and generate_daemon_optgroups_c () =
7416   generate_header CStyle GPLv2plus;
7417
7418   pr "#include <config.h>\n";
7419   pr "\n";
7420   pr "#include \"daemon.h\"\n";
7421   pr "#include \"optgroups.h\"\n";
7422   pr "\n";
7423
7424   pr "struct optgroup optgroups[] = {\n";
7425   List.iter (
7426     fun (group, _) ->
7427       pr "  { \"%s\", optgroup_%s_available },\n" group group
7428   ) optgroups;
7429   pr "  { NULL, NULL }\n";
7430   pr "};\n"
7431
7432 and generate_daemon_optgroups_h () =
7433   generate_header CStyle GPLv2plus;
7434
7435   List.iter (
7436     fun (group, _) ->
7437       pr "extern int optgroup_%s_available (void);\n" group
7438   ) optgroups
7439
7440 (* Generate the tests. *)
7441 and generate_tests () =
7442   generate_header CStyle GPLv2plus;
7443
7444   pr "\
7445 #include <stdio.h>
7446 #include <stdlib.h>
7447 #include <string.h>
7448 #include <unistd.h>
7449 #include <sys/types.h>
7450 #include <fcntl.h>
7451
7452 #include \"guestfs.h\"
7453 #include \"guestfs-internal.h\"
7454
7455 static guestfs_h *g;
7456 static int suppress_error = 0;
7457
7458 static void print_error (guestfs_h *g, void *data, const char *msg)
7459 {
7460   if (!suppress_error)
7461     fprintf (stderr, \"%%s\\n\", msg);
7462 }
7463
7464 /* FIXME: nearly identical code appears in fish.c */
7465 static void print_strings (char *const *argv)
7466 {
7467   size_t argc;
7468
7469   for (argc = 0; argv[argc] != NULL; ++argc)
7470     printf (\"\\t%%s\\n\", argv[argc]);
7471 }
7472
7473 /*
7474 static void print_table (char const *const *argv)
7475 {
7476   size_t i;
7477
7478   for (i = 0; argv[i] != NULL; i += 2)
7479     printf (\"%%s: %%s\\n\", argv[i], argv[i+1]);
7480 }
7481 */
7482
7483 static int
7484 is_available (const char *group)
7485 {
7486   const char *groups[] = { group, NULL };
7487   int r;
7488
7489   suppress_error = 1;
7490   r = guestfs_available (g, (char **) groups);
7491   suppress_error = 0;
7492
7493   return r == 0;
7494 }
7495
7496 static void
7497 incr (guestfs_h *g, void *iv)
7498 {
7499   int *i = (int *) iv;
7500   (*i)++;
7501 }
7502
7503 ";
7504
7505   (* Generate a list of commands which are not tested anywhere. *)
7506   pr "static void no_test_warnings (void)\n";
7507   pr "{\n";
7508
7509   let hash : (string, bool) Hashtbl.t = Hashtbl.create 13 in
7510   List.iter (
7511     fun (_, _, _, _, tests, _, _) ->
7512       let tests = filter_map (
7513         function
7514         | (_, (Always|If _|Unless _|IfAvailable _), test) -> Some test
7515         | (_, Disabled, _) -> None
7516       ) tests in
7517       let seq = List.concat (List.map seq_of_test tests) in
7518       let cmds_tested = List.map List.hd seq in
7519       List.iter (fun cmd -> Hashtbl.replace hash cmd true) cmds_tested
7520   ) all_functions;
7521
7522   List.iter (
7523     fun (name, _, _, _, _, _, _) ->
7524       if not (Hashtbl.mem hash name) then
7525         pr "  fprintf (stderr, \"warning: \\\"guestfs_%s\\\" has no tests\\n\");\n" name
7526   ) all_functions;
7527
7528   pr "}\n";
7529   pr "\n";
7530
7531   (* Generate the actual tests.  Note that we generate the tests
7532    * in reverse order, deliberately, so that (in general) the
7533    * newest tests run first.  This makes it quicker and easier to
7534    * debug them.
7535    *)
7536   let test_names =
7537     List.map (
7538       fun (name, _, _, flags, tests, _, _) ->
7539         mapi (generate_one_test name flags) tests
7540     ) (List.rev all_functions) in
7541   let test_names = List.concat test_names in
7542   let nr_tests = List.length test_names in
7543
7544   pr "\
7545 int main (int argc, char *argv[])
7546 {
7547   char c = 0;
7548   unsigned long int n_failed = 0;
7549   const char *filename;
7550   int fd;
7551   int nr_tests, test_num = 0;
7552
7553   setbuf (stdout, NULL);
7554
7555   no_test_warnings ();
7556
7557   g = guestfs_create ();
7558   if (g == NULL) {
7559     printf (\"guestfs_create FAILED\\n\");
7560     exit (EXIT_FAILURE);
7561   }
7562
7563   guestfs_set_error_handler (g, print_error, NULL);
7564
7565   guestfs_set_path (g, \"../appliance\");
7566
7567   filename = \"test1.img\";
7568   fd = open (filename, O_WRONLY|O_CREAT|O_NOCTTY|O_NONBLOCK|O_TRUNC, 0666);
7569   if (fd == -1) {
7570     perror (filename);
7571     exit (EXIT_FAILURE);
7572   }
7573   if (lseek (fd, %d, SEEK_SET) == -1) {
7574     perror (\"lseek\");
7575     close (fd);
7576     unlink (filename);
7577     exit (EXIT_FAILURE);
7578   }
7579   if (write (fd, &c, 1) == -1) {
7580     perror (\"write\");
7581     close (fd);
7582     unlink (filename);
7583     exit (EXIT_FAILURE);
7584   }
7585   if (close (fd) == -1) {
7586     perror (filename);
7587     unlink (filename);
7588     exit (EXIT_FAILURE);
7589   }
7590   if (guestfs_add_drive (g, filename) == -1) {
7591     printf (\"guestfs_add_drive %%s FAILED\\n\", filename);
7592     exit (EXIT_FAILURE);
7593   }
7594
7595   filename = \"test2.img\";
7596   fd = open (filename, O_WRONLY|O_CREAT|O_NOCTTY|O_NONBLOCK|O_TRUNC, 0666);
7597   if (fd == -1) {
7598     perror (filename);
7599     exit (EXIT_FAILURE);
7600   }
7601   if (lseek (fd, %d, SEEK_SET) == -1) {
7602     perror (\"lseek\");
7603     close (fd);
7604     unlink (filename);
7605     exit (EXIT_FAILURE);
7606   }
7607   if (write (fd, &c, 1) == -1) {
7608     perror (\"write\");
7609     close (fd);
7610     unlink (filename);
7611     exit (EXIT_FAILURE);
7612   }
7613   if (close (fd) == -1) {
7614     perror (filename);
7615     unlink (filename);
7616     exit (EXIT_FAILURE);
7617   }
7618   if (guestfs_add_drive (g, filename) == -1) {
7619     printf (\"guestfs_add_drive %%s FAILED\\n\", filename);
7620     exit (EXIT_FAILURE);
7621   }
7622
7623   filename = \"test3.img\";
7624   fd = open (filename, O_WRONLY|O_CREAT|O_NOCTTY|O_NONBLOCK|O_TRUNC, 0666);
7625   if (fd == -1) {
7626     perror (filename);
7627     exit (EXIT_FAILURE);
7628   }
7629   if (lseek (fd, %d, SEEK_SET) == -1) {
7630     perror (\"lseek\");
7631     close (fd);
7632     unlink (filename);
7633     exit (EXIT_FAILURE);
7634   }
7635   if (write (fd, &c, 1) == -1) {
7636     perror (\"write\");
7637     close (fd);
7638     unlink (filename);
7639     exit (EXIT_FAILURE);
7640   }
7641   if (close (fd) == -1) {
7642     perror (filename);
7643     unlink (filename);
7644     exit (EXIT_FAILURE);
7645   }
7646   if (guestfs_add_drive (g, filename) == -1) {
7647     printf (\"guestfs_add_drive %%s FAILED\\n\", filename);
7648     exit (EXIT_FAILURE);
7649   }
7650
7651   if (guestfs_add_drive_ro (g, \"../images/test.iso\") == -1) {
7652     printf (\"guestfs_add_drive_ro ../images/test.iso FAILED\\n\");
7653     exit (EXIT_FAILURE);
7654   }
7655
7656   /* Set a timeout in case qemu hangs during launch (RHBZ#505329). */
7657   alarm (600);
7658
7659   if (guestfs_launch (g) == -1) {
7660     printf (\"guestfs_launch FAILED\\n\");
7661     exit (EXIT_FAILURE);
7662   }
7663
7664   /* Cancel previous alarm. */
7665   alarm (0);
7666
7667   nr_tests = %d;
7668
7669 " (500 * 1024 * 1024) (50 * 1024 * 1024) (10 * 1024 * 1024) nr_tests;
7670
7671   iteri (
7672     fun i test_name ->
7673       pr "  test_num++;\n";
7674       pr "  if (guestfs_get_verbose (g))\n";
7675       pr "    printf (\"-------------------------------------------------------------------------------\\n\");\n";
7676       pr "  printf (\"%%3d/%%3d %s\\n\", test_num, nr_tests);\n" test_name;
7677       pr "  if (%s () == -1) {\n" test_name;
7678       pr "    printf (\"%s FAILED\\n\");\n" test_name;
7679       pr "    n_failed++;\n";
7680       pr "  }\n";
7681   ) test_names;
7682   pr "\n";
7683
7684   pr "  /* Check close callback is called. */
7685   int close_sentinel = 1;
7686   guestfs_set_close_callback (g, incr, &close_sentinel);
7687
7688   guestfs_close (g);
7689
7690   if (close_sentinel != 2) {
7691     fprintf (stderr, \"close callback was not called\\n\");
7692     exit (EXIT_FAILURE);
7693   }
7694
7695   unlink (\"test1.img\");
7696   unlink (\"test2.img\");
7697   unlink (\"test3.img\");
7698
7699 ";
7700
7701   pr "  if (n_failed > 0) {\n";
7702   pr "    printf (\"***** %%lu / %%d tests FAILED *****\\n\", n_failed, nr_tests);\n";
7703   pr "    exit (EXIT_FAILURE);\n";
7704   pr "  }\n";
7705   pr "\n";
7706
7707   pr "  exit (EXIT_SUCCESS);\n";
7708   pr "}\n"
7709
7710 and generate_one_test name flags i (init, prereq, test) =
7711   let test_name = sprintf "test_%s_%d" name i in
7712
7713   pr "\
7714 static int %s_skip (void)
7715 {
7716   const char *str;
7717
7718   str = getenv (\"TEST_ONLY\");
7719   if (str)
7720     return strstr (str, \"%s\") == NULL;
7721   str = getenv (\"SKIP_%s\");
7722   if (str && STREQ (str, \"1\")) return 1;
7723   str = getenv (\"SKIP_TEST_%s\");
7724   if (str && STREQ (str, \"1\")) return 1;
7725   return 0;
7726 }
7727
7728 " test_name name (String.uppercase test_name) (String.uppercase name);
7729
7730   (match prereq with
7731    | Disabled | Always | IfAvailable _ -> ()
7732    | If code | Unless code ->
7733        pr "static int %s_prereq (void)\n" test_name;
7734        pr "{\n";
7735        pr "  %s\n" code;
7736        pr "}\n";
7737        pr "\n";
7738   );
7739
7740   pr "\
7741 static int %s (void)
7742 {
7743   if (%s_skip ()) {
7744     printf (\"        %%s skipped (reason: environment variable set)\\n\", \"%s\");
7745     return 0;
7746   }
7747
7748 " test_name test_name test_name;
7749
7750   (* Optional functions should only be tested if the relevant
7751    * support is available in the daemon.
7752    *)
7753   List.iter (
7754     function
7755     | Optional group ->
7756         pr "  if (!is_available (\"%s\")) {\n" group;
7757         pr "    printf (\"        %%s skipped (reason: group %%s not available in daemon)\\n\", \"%s\", \"%s\");\n" test_name group;
7758         pr "    return 0;\n";
7759         pr "  }\n";
7760     | _ -> ()
7761   ) flags;
7762
7763   (match prereq with
7764    | Disabled ->
7765        pr "  printf (\"        %%s skipped (reason: test disabled in generator)\\n\", \"%s\");\n" test_name
7766    | If _ ->
7767        pr "  if (! %s_prereq ()) {\n" test_name;
7768        pr "    printf (\"        %%s skipped (reason: test prerequisite)\\n\", \"%s\");\n" test_name;
7769        pr "    return 0;\n";
7770        pr "  }\n";
7771        pr "\n";
7772        generate_one_test_body name i test_name init test;
7773    | Unless _ ->
7774        pr "  if (%s_prereq ()) {\n" test_name;
7775        pr "    printf (\"        %%s skipped (reason: test prerequisite)\\n\", \"%s\");\n" test_name;
7776        pr "    return 0;\n";
7777        pr "  }\n";
7778        pr "\n";
7779        generate_one_test_body name i test_name init test;
7780    | IfAvailable group ->
7781        pr "  if (!is_available (\"%s\")) {\n" group;
7782        pr "    printf (\"        %%s skipped (reason: %%s not available)\\n\", \"%s\", \"%s\");\n" test_name group;
7783        pr "    return 0;\n";
7784        pr "  }\n";
7785        pr "\n";
7786        generate_one_test_body name i test_name init test;
7787    | Always ->
7788        generate_one_test_body name i test_name init test
7789   );
7790
7791   pr "  return 0;\n";
7792   pr "}\n";
7793   pr "\n";
7794   test_name
7795
7796 and generate_one_test_body name i test_name init test =
7797   (match init with
7798    | InitNone (* XXX at some point, InitNone and InitEmpty became
7799                * folded together as the same thing.  Really we should
7800                * make InitNone do nothing at all, but the tests may
7801                * need to be checked to make sure this is OK.
7802                *)
7803    | InitEmpty ->
7804        pr "  /* InitNone|InitEmpty for %s */\n" test_name;
7805        List.iter (generate_test_command_call test_name)
7806          [["blockdev_setrw"; "/dev/sda"];
7807           ["umount_all"];
7808           ["lvm_remove_all"]]
7809    | InitPartition ->
7810        pr "  /* InitPartition for %s: create /dev/sda1 */\n" test_name;
7811        List.iter (generate_test_command_call test_name)
7812          [["blockdev_setrw"; "/dev/sda"];
7813           ["umount_all"];
7814           ["lvm_remove_all"];
7815           ["part_disk"; "/dev/sda"; "mbr"]]
7816    | InitBasicFS ->
7817        pr "  /* InitBasicFS for %s: create ext2 on /dev/sda1 */\n" test_name;
7818        List.iter (generate_test_command_call test_name)
7819          [["blockdev_setrw"; "/dev/sda"];
7820           ["umount_all"];
7821           ["lvm_remove_all"];
7822           ["part_disk"; "/dev/sda"; "mbr"];
7823           ["mkfs"; "ext2"; "/dev/sda1"];
7824           ["mount_options"; ""; "/dev/sda1"; "/"]]
7825    | InitBasicFSonLVM ->
7826        pr "  /* InitBasicFSonLVM for %s: create ext2 on /dev/VG/LV */\n"
7827          test_name;
7828        List.iter (generate_test_command_call test_name)
7829          [["blockdev_setrw"; "/dev/sda"];
7830           ["umount_all"];
7831           ["lvm_remove_all"];
7832           ["part_disk"; "/dev/sda"; "mbr"];
7833           ["pvcreate"; "/dev/sda1"];
7834           ["vgcreate"; "VG"; "/dev/sda1"];
7835           ["lvcreate"; "LV"; "VG"; "8"];
7836           ["mkfs"; "ext2"; "/dev/VG/LV"];
7837           ["mount_options"; ""; "/dev/VG/LV"; "/"]]
7838    | InitISOFS ->
7839        pr "  /* InitISOFS for %s */\n" test_name;
7840        List.iter (generate_test_command_call test_name)
7841          [["blockdev_setrw"; "/dev/sda"];
7842           ["umount_all"];
7843           ["lvm_remove_all"];
7844           ["mount_ro"; "/dev/sdd"; "/"]]
7845   );
7846
7847   let get_seq_last = function
7848     | [] ->
7849         failwithf "%s: you cannot use [] (empty list) when expecting a command"
7850           test_name
7851     | seq ->
7852         let seq = List.rev seq in
7853         List.rev (List.tl seq), List.hd seq
7854   in
7855
7856   match test with
7857   | TestRun seq ->
7858       pr "  /* TestRun for %s (%d) */\n" name i;
7859       List.iter (generate_test_command_call test_name) seq
7860   | TestOutput (seq, expected) ->
7861       pr "  /* TestOutput for %s (%d) */\n" name i;
7862       pr "  const char *expected = \"%s\";\n" (c_quote expected);
7863       let seq, last = get_seq_last seq in
7864       let test () =
7865         pr "    if (STRNEQ (r, expected)) {\n";
7866         pr "      fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r);\n" test_name;
7867         pr "      return -1;\n";
7868         pr "    }\n"
7869       in
7870       List.iter (generate_test_command_call test_name) seq;
7871       generate_test_command_call ~test test_name last
7872   | TestOutputList (seq, expected) ->
7873       pr "  /* TestOutputList for %s (%d) */\n" name i;
7874       let seq, last = get_seq_last seq in
7875       let test () =
7876         iteri (
7877           fun i str ->
7878             pr "    if (!r[%d]) {\n" i;
7879             pr "      fprintf (stderr, \"%s: short list returned from command\\n\");\n" test_name;
7880             pr "      print_strings (r);\n";
7881             pr "      return -1;\n";
7882             pr "    }\n";
7883             pr "    {\n";
7884             pr "      const char *expected = \"%s\";\n" (c_quote str);
7885             pr "      if (STRNEQ (r[%d], expected)) {\n" i;
7886             pr "        fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r[%d]);\n" test_name i;
7887             pr "        return -1;\n";
7888             pr "      }\n";
7889             pr "    }\n"
7890         ) expected;
7891         pr "    if (r[%d] != NULL) {\n" (List.length expected);
7892         pr "      fprintf (stderr, \"%s: extra elements returned from command\\n\");\n"
7893           test_name;
7894         pr "      print_strings (r);\n";
7895         pr "      return -1;\n";
7896         pr "    }\n"
7897       in
7898       List.iter (generate_test_command_call test_name) seq;
7899       generate_test_command_call ~test test_name last
7900   | TestOutputListOfDevices (seq, expected) ->
7901       pr "  /* TestOutputListOfDevices for %s (%d) */\n" name i;
7902       let seq, last = get_seq_last seq in
7903       let test () =
7904         iteri (
7905           fun i str ->
7906             pr "    if (!r[%d]) {\n" i;
7907             pr "      fprintf (stderr, \"%s: short list returned from command\\n\");\n" test_name;
7908             pr "      print_strings (r);\n";
7909             pr "      return -1;\n";
7910             pr "    }\n";
7911             pr "    {\n";
7912             pr "      const char *expected = \"%s\";\n" (c_quote str);
7913             pr "      r[%d][5] = 's';\n" i;
7914             pr "      if (STRNEQ (r[%d], expected)) {\n" i;
7915             pr "        fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r[%d]);\n" test_name i;
7916             pr "        return -1;\n";
7917             pr "      }\n";
7918             pr "    }\n"
7919         ) expected;
7920         pr "    if (r[%d] != NULL) {\n" (List.length expected);
7921         pr "      fprintf (stderr, \"%s: extra elements returned from command\\n\");\n"
7922           test_name;
7923         pr "      print_strings (r);\n";
7924         pr "      return -1;\n";
7925         pr "    }\n"
7926       in
7927       List.iter (generate_test_command_call test_name) seq;
7928       generate_test_command_call ~test test_name last
7929   | TestOutputInt (seq, expected) ->
7930       pr "  /* TestOutputInt for %s (%d) */\n" name i;
7931       let seq, last = get_seq_last seq in
7932       let test () =
7933         pr "    if (r != %d) {\n" expected;
7934         pr "      fprintf (stderr, \"%s: expected %d but got %%d\\n\","
7935           test_name expected;
7936         pr "               (int) r);\n";
7937         pr "      return -1;\n";
7938         pr "    }\n"
7939       in
7940       List.iter (generate_test_command_call test_name) seq;
7941       generate_test_command_call ~test test_name last
7942   | TestOutputIntOp (seq, op, expected) ->
7943       pr "  /* TestOutputIntOp for %s (%d) */\n" name i;
7944       let seq, last = get_seq_last seq in
7945       let test () =
7946         pr "    if (! (r %s %d)) {\n" op expected;
7947         pr "      fprintf (stderr, \"%s: expected %s %d but got %%d\\n\","
7948           test_name op expected;
7949         pr "               (int) r);\n";
7950         pr "      return -1;\n";
7951         pr "    }\n"
7952       in
7953       List.iter (generate_test_command_call test_name) seq;
7954       generate_test_command_call ~test test_name last
7955   | TestOutputTrue seq ->
7956       pr "  /* TestOutputTrue for %s (%d) */\n" name i;
7957       let seq, last = get_seq_last seq in
7958       let test () =
7959         pr "    if (!r) {\n";
7960         pr "      fprintf (stderr, \"%s: expected true, got false\\n\");\n"
7961           test_name;
7962         pr "      return -1;\n";
7963         pr "    }\n"
7964       in
7965       List.iter (generate_test_command_call test_name) seq;
7966       generate_test_command_call ~test test_name last
7967   | TestOutputFalse seq ->
7968       pr "  /* TestOutputFalse for %s (%d) */\n" name i;
7969       let seq, last = get_seq_last seq in
7970       let test () =
7971         pr "    if (r) {\n";
7972         pr "      fprintf (stderr, \"%s: expected false, got true\\n\");\n"
7973           test_name;
7974         pr "      return -1;\n";
7975         pr "    }\n"
7976       in
7977       List.iter (generate_test_command_call test_name) seq;
7978       generate_test_command_call ~test test_name last
7979   | TestOutputLength (seq, expected) ->
7980       pr "  /* TestOutputLength for %s (%d) */\n" name i;
7981       let seq, last = get_seq_last seq in
7982       let test () =
7983         pr "    int j;\n";
7984         pr "    for (j = 0; j < %d; ++j)\n" expected;
7985         pr "      if (r[j] == NULL) {\n";
7986         pr "        fprintf (stderr, \"%s: short list returned\\n\");\n"
7987           test_name;
7988         pr "        print_strings (r);\n";
7989         pr "        return -1;\n";
7990         pr "      }\n";
7991         pr "    if (r[j] != NULL) {\n";
7992         pr "      fprintf (stderr, \"%s: long list returned\\n\");\n"
7993           test_name;
7994         pr "      print_strings (r);\n";
7995         pr "      return -1;\n";
7996         pr "    }\n"
7997       in
7998       List.iter (generate_test_command_call test_name) seq;
7999       generate_test_command_call ~test test_name last
8000   | TestOutputBuffer (seq, expected) ->
8001       pr "  /* TestOutputBuffer for %s (%d) */\n" name i;
8002       pr "  const char *expected = \"%s\";\n" (c_quote expected);
8003       let seq, last = get_seq_last seq in
8004       let len = String.length expected in
8005       let test () =
8006         pr "    if (size != %d) {\n" len;
8007         pr "      fprintf (stderr, \"%s: returned size of buffer wrong, expected %d but got %%zu\\n\", size);\n" test_name len;
8008         pr "      return -1;\n";
8009         pr "    }\n";
8010         pr "    if (STRNEQLEN (r, expected, size)) {\n";
8011         pr "      fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r);\n" test_name;
8012         pr "      return -1;\n";
8013         pr "    }\n"
8014       in
8015       List.iter (generate_test_command_call test_name) seq;
8016       generate_test_command_call ~test test_name last
8017   | TestOutputStruct (seq, checks) ->
8018       pr "  /* TestOutputStruct for %s (%d) */\n" name i;
8019       let seq, last = get_seq_last seq in
8020       let test () =
8021         List.iter (
8022           function
8023           | CompareWithInt (field, expected) ->
8024               pr "    if (r->%s != %d) {\n" field expected;
8025               pr "      fprintf (stderr, \"%s: %s was %%d, expected %d\\n\",\n"
8026                 test_name field expected;
8027               pr "               (int) r->%s);\n" field;
8028               pr "      return -1;\n";
8029               pr "    }\n"
8030           | CompareWithIntOp (field, op, expected) ->
8031               pr "    if (!(r->%s %s %d)) {\n" field op expected;
8032               pr "      fprintf (stderr, \"%s: %s was %%d, expected %s %d\\n\",\n"
8033                 test_name field op expected;
8034               pr "               (int) r->%s);\n" field;
8035               pr "      return -1;\n";
8036               pr "    }\n"
8037           | CompareWithString (field, expected) ->
8038               pr "    if (STRNEQ (r->%s, \"%s\")) {\n" field expected;
8039               pr "      fprintf (stderr, \"%s: %s was \"%%s\", expected \"%s\"\\n\",\n"
8040                 test_name field expected;
8041               pr "               r->%s);\n" field;
8042               pr "      return -1;\n";
8043               pr "    }\n"
8044           | CompareFieldsIntEq (field1, field2) ->
8045               pr "    if (r->%s != r->%s) {\n" field1 field2;
8046               pr "      fprintf (stderr, \"%s: %s (%%d) <> %s (%%d)\\n\",\n"
8047                 test_name field1 field2;
8048               pr "               (int) r->%s, (int) r->%s);\n" field1 field2;
8049               pr "      return -1;\n";
8050               pr "    }\n"
8051           | CompareFieldsStrEq (field1, field2) ->
8052               pr "    if (STRNEQ (r->%s, r->%s)) {\n" field1 field2;
8053               pr "      fprintf (stderr, \"%s: %s (\"%%s\") <> %s (\"%%s\")\\n\",\n"
8054                 test_name field1 field2;
8055               pr "               r->%s, r->%s);\n" field1 field2;
8056               pr "      return -1;\n";
8057               pr "    }\n"
8058         ) checks
8059       in
8060       List.iter (generate_test_command_call test_name) seq;
8061       generate_test_command_call ~test test_name last
8062   | TestLastFail seq ->
8063       pr "  /* TestLastFail for %s (%d) */\n" name i;
8064       let seq, last = get_seq_last seq in
8065       List.iter (generate_test_command_call test_name) seq;
8066       generate_test_command_call test_name ~expect_error:true last
8067
8068 (* Generate the code to run a command, leaving the result in 'r'.
8069  * If you expect to get an error then you should set expect_error:true.
8070  *)
8071 and generate_test_command_call ?(expect_error = false) ?test test_name cmd =
8072   match cmd with
8073   | [] -> assert false
8074   | name :: args ->
8075       (* Look up the command to find out what args/ret it has. *)
8076       let style =
8077         try
8078           let _, style, _, _, _, _, _ =
8079             List.find (fun (n, _, _, _, _, _, _) -> n = name) all_functions in
8080           style
8081         with Not_found ->
8082           failwithf "%s: in test, command %s was not found" test_name name in
8083
8084       if List.length (snd style) <> List.length args then
8085         failwithf "%s: in test, wrong number of args given to %s"
8086           test_name name;
8087
8088       pr "  {\n";
8089
8090       List.iter (
8091         function
8092         | OptString n, "NULL" -> ()
8093         | Pathname n, arg
8094         | Device n, arg
8095         | Dev_or_Path n, arg
8096         | String n, arg
8097         | OptString n, arg
8098         | Key n, arg ->
8099             pr "    const char *%s = \"%s\";\n" n (c_quote arg);
8100         | BufferIn n, arg ->
8101             pr "    const char *%s = \"%s\";\n" n (c_quote arg);
8102             pr "    size_t %s_size = %d;\n" n (String.length arg)
8103         | Int _, _
8104         | Int64 _, _
8105         | Bool _, _
8106         | FileIn _, _ | FileOut _, _ -> ()
8107         | StringList n, "" | DeviceList n, "" ->
8108             pr "    const char *const %s[1] = { NULL };\n" n
8109         | StringList n, arg | DeviceList n, arg ->
8110             let strs = string_split " " arg in
8111             iteri (
8112               fun i str ->
8113                 pr "    const char *%s_%d = \"%s\";\n" n i (c_quote str);
8114             ) strs;
8115             pr "    const char *const %s[] = {\n" n;
8116             iteri (
8117               fun i _ -> pr "      %s_%d,\n" n i
8118             ) strs;
8119             pr "      NULL\n";
8120             pr "    };\n";
8121       ) (List.combine (snd style) args);
8122
8123       let error_code =
8124         match fst style with
8125         | RErr | RInt _ | RBool _ -> pr "    int r;\n"; "-1"
8126         | RInt64 _ -> pr "    int64_t r;\n"; "-1"
8127         | RConstString _ | RConstOptString _ ->
8128             pr "    const char *r;\n"; "NULL"
8129         | RString _ -> pr "    char *r;\n"; "NULL"
8130         | RStringList _ | RHashtable _ ->
8131             pr "    char **r;\n";
8132             pr "    size_t i;\n";
8133             "NULL"
8134         | RStruct (_, typ) ->
8135             pr "    struct guestfs_%s *r;\n" typ; "NULL"
8136         | RStructList (_, typ) ->
8137             pr "    struct guestfs_%s_list *r;\n" typ; "NULL"
8138         | RBufferOut _ ->
8139             pr "    char *r;\n";
8140             pr "    size_t size;\n";
8141             "NULL" in
8142
8143       pr "    suppress_error = %d;\n" (if expect_error then 1 else 0);
8144       pr "    r = guestfs_%s (g" name;
8145
8146       (* Generate the parameters. *)
8147       List.iter (
8148         function
8149         | OptString _, "NULL" -> pr ", NULL"
8150         | Pathname n, _
8151         | Device n, _ | Dev_or_Path n, _
8152         | String n, _
8153         | OptString n, _
8154         | Key n, _ ->
8155             pr ", %s" n
8156         | BufferIn n, _ ->
8157             pr ", %s, %s_size" n n
8158         | FileIn _, arg | FileOut _, arg ->
8159             pr ", \"%s\"" (c_quote arg)
8160         | StringList n, _ | DeviceList n, _ ->
8161             pr ", (char **) %s" n
8162         | Int _, arg ->
8163             let i =
8164               try int_of_string arg
8165               with Failure "int_of_string" ->
8166                 failwithf "%s: expecting an int, but got '%s'" test_name arg in
8167             pr ", %d" i
8168         | Int64 _, arg ->
8169             let i =
8170               try Int64.of_string arg
8171               with Failure "int_of_string" ->
8172                 failwithf "%s: expecting an int64, but got '%s'" test_name arg in
8173             pr ", %Ld" i
8174         | Bool _, arg ->
8175             let b = bool_of_string arg in pr ", %d" (if b then 1 else 0)
8176       ) (List.combine (snd style) args);
8177
8178       (match fst style with
8179        | RBufferOut _ -> pr ", &size"
8180        | _ -> ()
8181       );
8182
8183       pr ");\n";
8184
8185       if not expect_error then
8186         pr "    if (r == %s)\n" error_code
8187       else
8188         pr "    if (r != %s)\n" error_code;
8189       pr "      return -1;\n";
8190
8191       (* Insert the test code. *)
8192       (match test with
8193        | None -> ()
8194        | Some f -> f ()
8195       );
8196
8197       (match fst style with
8198        | RErr | RInt _ | RInt64 _ | RBool _
8199        | RConstString _ | RConstOptString _ -> ()
8200        | RString _ | RBufferOut _ -> pr "    free (r);\n"
8201        | RStringList _ | RHashtable _ ->
8202            pr "    for (i = 0; r[i] != NULL; ++i)\n";
8203            pr "      free (r[i]);\n";
8204            pr "    free (r);\n"
8205        | RStruct (_, typ) ->
8206            pr "    guestfs_free_%s (r);\n" typ
8207        | RStructList (_, typ) ->
8208            pr "    guestfs_free_%s_list (r);\n" typ
8209       );
8210
8211       pr "  }\n"
8212
8213 and c_quote str =
8214   let str = replace_str str "\r" "\\r" in
8215   let str = replace_str str "\n" "\\n" in
8216   let str = replace_str str "\t" "\\t" in
8217   let str = replace_str str "\000" "\\0" in
8218   str
8219
8220 (* Generate a lot of different functions for guestfish. *)
8221 and generate_fish_cmds () =
8222   generate_header CStyle GPLv2plus;
8223
8224   let all_functions =
8225     List.filter (
8226       fun (_, _, _, flags, _, _, _) -> not (List.mem NotInFish flags)
8227     ) all_functions in
8228   let all_functions_sorted =
8229     List.filter (
8230       fun (_, _, _, flags, _, _, _) -> not (List.mem NotInFish flags)
8231     ) all_functions_sorted in
8232
8233   pr "#include <config.h>\n";
8234   pr "\n";
8235   pr "#include <stdio.h>\n";
8236   pr "#include <stdlib.h>\n";
8237   pr "#include <string.h>\n";
8238   pr "#include <inttypes.h>\n";
8239   pr "\n";
8240   pr "#include <guestfs.h>\n";
8241   pr "#include \"c-ctype.h\"\n";
8242   pr "#include \"full-write.h\"\n";
8243   pr "#include \"xstrtol.h\"\n";
8244   pr "#include \"fish.h\"\n";
8245   pr "\n";
8246   pr "/* Valid suffixes allowed for numbers.  See Gnulib xstrtol function. */\n";
8247   pr "static const char *xstrtol_suffixes = \"0kKMGTPEZY\";\n";
8248   pr "\n";
8249
8250   (* list_commands function, which implements guestfish -h *)
8251   pr "void list_commands (void)\n";
8252   pr "{\n";
8253   pr "  printf (\"    %%-16s     %%s\\n\", _(\"Command\"), _(\"Description\"));\n";
8254   pr "  list_builtin_commands ();\n";
8255   List.iter (
8256     fun (name, _, _, flags, _, shortdesc, _) ->
8257       let name = replace_char name '_' '-' in
8258       pr "  printf (\"%%-20s %%s\\n\", \"%s\", _(\"%s\"));\n"
8259         name shortdesc
8260   ) all_functions_sorted;
8261   pr "  printf (\"    %%s\\n\",";
8262   pr "          _(\"Use -h <cmd> / help <cmd> to show detailed help for a command.\"));\n";
8263   pr "}\n";
8264   pr "\n";
8265
8266   (* display_command function, which implements guestfish -h cmd *)
8267   pr "int display_command (const char *cmd)\n";
8268   pr "{\n";
8269   List.iter (
8270     fun (name, style, _, flags, _, shortdesc, longdesc) ->
8271       let name2 = replace_char name '_' '-' in
8272       let alias =
8273         try find_map (function FishAlias n -> Some n | _ -> None) flags
8274         with Not_found -> name in
8275       let longdesc = replace_str longdesc "C<guestfs_" "C<" in
8276       let synopsis =
8277         match snd style with
8278         | [] -> name2
8279         | args ->
8280             let args = List.filter (function Key _ -> false | _ -> true) args in
8281             sprintf "%s %s"
8282               name2 (String.concat " " (List.map name_of_argt args)) in
8283
8284       let warnings =
8285         if List.exists (function Key _ -> true | _ -> false) (snd style) then
8286           "\n\nThis command has one or more key or passphrase parameters.
8287 Guestfish will prompt for these separately."
8288         else "" in
8289
8290       let warnings =
8291         warnings ^
8292           if List.mem ProtocolLimitWarning flags then
8293             ("\n\n" ^ protocol_limit_warning)
8294           else "" in
8295
8296       (* For DangerWillRobinson commands, we should probably have
8297        * guestfish prompt before allowing you to use them (especially
8298        * in interactive mode). XXX
8299        *)
8300       let warnings =
8301         warnings ^
8302           if List.mem DangerWillRobinson flags then
8303             ("\n\n" ^ danger_will_robinson)
8304           else "" in
8305
8306       let warnings =
8307         warnings ^
8308           match deprecation_notice flags with
8309           | None -> ""
8310           | Some txt -> "\n\n" ^ txt in
8311
8312       let describe_alias =
8313         if name <> alias then
8314           sprintf "\n\nYou can use '%s' as an alias for this command." alias
8315         else "" in
8316
8317       pr "  if (";
8318       pr "STRCASEEQ (cmd, \"%s\")" name;
8319       if name <> name2 then
8320         pr " || STRCASEEQ (cmd, \"%s\")" name2;
8321       if name <> alias then
8322         pr " || STRCASEEQ (cmd, \"%s\")" alias;
8323       pr ") {\n";
8324       pr "    pod2text (\"%s\", _(\"%s\"), %S);\n"
8325         name2 shortdesc
8326         ("=head1 SYNOPSIS\n\n " ^ synopsis ^ "\n\n" ^
8327          "=head1 DESCRIPTION\n\n" ^
8328          longdesc ^ warnings ^ describe_alias);
8329       pr "    return 0;\n";
8330       pr "  }\n";
8331       pr "  else\n"
8332   ) all_functions;
8333   pr "    return display_builtin_command (cmd);\n";
8334   pr "}\n";
8335   pr "\n";
8336
8337   let emit_print_list_function typ =
8338     pr "static void print_%s_list (struct guestfs_%s_list *%ss)\n"
8339       typ typ typ;
8340     pr "{\n";
8341     pr "  unsigned int i;\n";
8342     pr "\n";
8343     pr "  for (i = 0; i < %ss->len; ++i) {\n" typ;
8344     pr "    printf (\"[%%d] = {\\n\", i);\n";
8345     pr "    print_%s_indent (&%ss->val[i], \"  \");\n" typ typ;
8346     pr "    printf (\"}\\n\");\n";
8347     pr "  }\n";
8348     pr "}\n";
8349     pr "\n";
8350   in
8351
8352   (* print_* functions *)
8353   List.iter (
8354     fun (typ, cols) ->
8355       let needs_i =
8356         List.exists (function (_, (FUUID|FBuffer)) -> true | _ -> false) cols in
8357
8358       pr "static void print_%s_indent (struct guestfs_%s *%s, const char *indent)\n" typ typ typ;
8359       pr "{\n";
8360       if needs_i then (
8361         pr "  unsigned int i;\n";
8362         pr "\n"
8363       );
8364       List.iter (
8365         function
8366         | name, FString ->
8367             pr "  printf (\"%%s%s: %%s\\n\", indent, %s->%s);\n" name typ name
8368         | name, FUUID ->
8369             pr "  printf (\"%%s%s: \", indent);\n" name;
8370             pr "  for (i = 0; i < 32; ++i)\n";
8371             pr "    printf (\"%%c\", %s->%s[i]);\n" typ name;
8372             pr "  printf (\"\\n\");\n"
8373         | name, FBuffer ->
8374             pr "  printf (\"%%s%s: \", indent);\n" name;
8375             pr "  for (i = 0; i < %s->%s_len; ++i)\n" typ name;
8376             pr "    if (c_isprint (%s->%s[i]))\n" typ name;
8377             pr "      printf (\"%%c\", %s->%s[i]);\n" typ name;
8378             pr "    else\n";
8379             pr "      printf (\"\\\\x%%02x\", %s->%s[i]);\n" typ name;
8380             pr "  printf (\"\\n\");\n"
8381         | name, (FUInt64|FBytes) ->
8382             pr "  printf (\"%%s%s: %%\" PRIu64 \"\\n\", indent, %s->%s);\n"
8383               name typ name
8384         | name, FInt64 ->
8385             pr "  printf (\"%%s%s: %%\" PRIi64 \"\\n\", indent, %s->%s);\n"
8386               name typ name
8387         | name, FUInt32 ->
8388             pr "  printf (\"%%s%s: %%\" PRIu32 \"\\n\", indent, %s->%s);\n"
8389               name typ name
8390         | name, FInt32 ->
8391             pr "  printf (\"%%s%s: %%\" PRIi32 \"\\n\", indent, %s->%s);\n"
8392               name typ name
8393         | name, FChar ->
8394             pr "  printf (\"%%s%s: %%c\\n\", indent, %s->%s);\n"
8395               name typ name
8396         | name, FOptPercent ->
8397             pr "  if (%s->%s >= 0) printf (\"%%s%s: %%g %%%%\\n\", indent, %s->%s);\n"
8398               typ name name typ name;
8399             pr "  else printf (\"%%s%s: \\n\", indent);\n" name
8400       ) cols;
8401       pr "}\n";
8402       pr "\n";
8403   ) structs;
8404
8405   (* Emit a print_TYPE_list function definition only if that function is used. *)
8406   List.iter (
8407     function
8408     | typ, (RStructListOnly | RStructAndList) ->
8409         (* generate the function for typ *)
8410         emit_print_list_function typ
8411     | typ, _ -> () (* empty *)
8412   ) (rstructs_used_by all_functions);
8413
8414   (* Emit a print_TYPE function definition only if that function is used. *)
8415   List.iter (
8416     function
8417     | typ, (RStructOnly | RStructAndList) ->
8418         pr "static void print_%s (struct guestfs_%s *%s)\n" typ typ typ;
8419         pr "{\n";
8420         pr "  print_%s_indent (%s, \"\");\n" typ typ;
8421         pr "}\n";
8422         pr "\n";
8423     | typ, _ -> () (* empty *)
8424   ) (rstructs_used_by all_functions);
8425
8426   (* run_<action> actions *)
8427   List.iter (
8428     fun (name, style, _, flags, _, _, _) ->
8429       pr "static int run_%s (const char *cmd, int argc, char *argv[])\n" name;
8430       pr "{\n";
8431       (match fst style with
8432        | RErr
8433        | RInt _
8434        | RBool _ -> pr "  int r;\n"
8435        | RInt64 _ -> pr "  int64_t r;\n"
8436        | RConstString _ | RConstOptString _ -> pr "  const char *r;\n"
8437        | RString _ -> pr "  char *r;\n"
8438        | RStringList _ | RHashtable _ -> pr "  char **r;\n"
8439        | RStruct (_, typ) -> pr "  struct guestfs_%s *r;\n" typ
8440        | RStructList (_, typ) -> pr "  struct guestfs_%s_list *r;\n" typ
8441        | RBufferOut _ ->
8442            pr "  char *r;\n";
8443            pr "  size_t size;\n";
8444       );
8445       List.iter (
8446         function
8447         | Device n
8448         | String n
8449         | OptString n -> pr "  const char *%s;\n" n
8450         | Pathname n
8451         | Dev_or_Path n
8452         | FileIn n
8453         | FileOut n
8454         | Key n -> pr "  char *%s;\n" n
8455         | BufferIn n ->
8456             pr "  const char *%s;\n" n;
8457             pr "  size_t %s_size;\n" n
8458         | StringList n | DeviceList n -> pr "  char **%s;\n" n
8459         | Bool n -> pr "  int %s;\n" n
8460         | Int n -> pr "  int %s;\n" n
8461         | Int64 n -> pr "  int64_t %s;\n" n
8462       ) (snd style);
8463
8464       (* Check and convert parameters. *)
8465       let argc_expected =
8466         let args_no_keys =
8467           List.filter (function Key _ -> false | _ -> true) (snd style) in
8468         List.length args_no_keys in
8469       pr "  if (argc != %d) {\n" argc_expected;
8470       pr "    fprintf (stderr, _(\"%%s should have %%d parameter(s)\\n\"), cmd, %d);\n"
8471         argc_expected;
8472       pr "    fprintf (stderr, _(\"type 'help %%s' for help on %%s\\n\"), cmd, cmd);\n";
8473       pr "    return -1;\n";
8474       pr "  }\n";
8475
8476       let parse_integer fn fntyp rtyp range name =
8477         pr "  {\n";
8478         pr "    strtol_error xerr;\n";
8479         pr "    %s r;\n" fntyp;
8480         pr "\n";
8481         pr "    xerr = %s (argv[i++], NULL, 0, &r, xstrtol_suffixes);\n" fn;
8482         pr "    if (xerr != LONGINT_OK) {\n";
8483         pr "      fprintf (stderr,\n";
8484         pr "               _(\"%%s: %%s: invalid integer parameter (%%s returned %%d)\\n\"),\n";
8485         pr "               cmd, \"%s\", \"%s\", xerr);\n" name fn;
8486         pr "      return -1;\n";
8487         pr "    }\n";
8488         (match range with
8489          | None -> ()
8490          | Some (min, max, comment) ->
8491              pr "    /* %s */\n" comment;
8492              pr "    if (r < %s || r > %s) {\n" min max;
8493              pr "      fprintf (stderr, _(\"%%s: %%s: integer out of range\\n\"), cmd, \"%s\");\n"
8494                name;
8495              pr "      return -1;\n";
8496              pr "    }\n";
8497              pr "    /* The check above should ensure this assignment does not overflow. */\n";
8498         );
8499         pr "    %s = r;\n" name;
8500         pr "  }\n";
8501       in
8502
8503       if snd style <> [] then
8504         pr "  size_t i = 0;\n";
8505
8506       List.iter (
8507         function
8508         | Device name
8509         | String name ->
8510             pr "  %s = argv[i++];\n" name
8511         | Pathname name
8512         | Dev_or_Path name ->
8513             pr "  %s = resolve_win_path (argv[i++]);\n" name;
8514             pr "  if (%s == NULL) return -1;\n" name
8515         | OptString name ->
8516             pr "  %s = STRNEQ (argv[i], \"\") ? argv[i] : NULL;\n" name;
8517             pr "  i++;\n"
8518         | BufferIn name ->
8519             pr "  %s = argv[i];\n" name;
8520             pr "  %s_size = strlen (argv[i]);\n" name;
8521             pr "  i++;\n"
8522         | FileIn name ->
8523             pr "  %s = file_in (argv[i++]);\n" name;
8524             pr "  if (%s == NULL) return -1;\n" name
8525         | FileOut name ->
8526             pr "  %s = file_out (argv[i++]);\n" name;
8527             pr "  if (%s == NULL) return -1;\n" name
8528         | StringList name | DeviceList name ->
8529             pr "  %s = parse_string_list (argv[i++]);\n" name;
8530             pr "  if (%s == NULL) return -1;\n" name
8531         | Key name ->
8532             pr "  %s = read_key (\"%s\");\n" name name;
8533             pr "  if (%s == NULL) return -1;\n" name
8534         | Bool name ->
8535             pr "  %s = is_true (argv[i++]) ? 1 : 0;\n" name
8536         | Int name ->
8537             let range =
8538               let min = "(-(2LL<<30))"
8539               and max = "((2LL<<30)-1)"
8540               and comment =
8541                 "The Int type in the generator is a signed 31 bit int." in
8542               Some (min, max, comment) in
8543             parse_integer "xstrtoll" "long long" "int" range name
8544         | Int64 name ->
8545             parse_integer "xstrtoll" "long long" "int64_t" None name
8546       ) (snd style);
8547
8548       (* Call C API function. *)
8549       pr "  r = guestfs_%s " name;
8550       generate_c_call_args ~handle:"g" style;
8551       pr ";\n";
8552
8553       List.iter (
8554         function
8555         | Device _ | String _
8556         | OptString _ | Bool _
8557         | Int _ | Int64 _
8558         | BufferIn _ -> ()
8559         | Pathname name | Dev_or_Path name | FileOut name
8560         | Key name ->
8561             pr "  free (%s);\n" name
8562         | FileIn name ->
8563             pr "  free_file_in (%s);\n" name
8564         | StringList name | DeviceList name ->
8565             pr "  free_strings (%s);\n" name
8566       ) (snd style);
8567
8568       (* Any output flags? *)
8569       let fish_output =
8570         let flags = filter_map (
8571           function FishOutput flag -> Some flag | _ -> None
8572         ) flags in
8573         match flags with
8574         | [] -> None
8575         | [f] -> Some f
8576         | _ ->
8577             failwithf "%s: more than one FishOutput flag is not allowed" name in
8578
8579       (* Check return value for errors and display command results. *)
8580       (match fst style with
8581        | RErr -> pr "  return r;\n"
8582        | RInt _ ->
8583            pr "  if (r == -1) return -1;\n";
8584            (match fish_output with
8585             | None ->
8586                 pr "  printf (\"%%d\\n\", r);\n";
8587             | Some FishOutputOctal ->
8588                 pr "  printf (\"%%s%%o\\n\", r != 0 ? \"0\" : \"\", r);\n";
8589             | Some FishOutputHexadecimal ->
8590                 pr "  printf (\"%%s%%x\\n\", r != 0 ? \"0x\" : \"\", r);\n");
8591            pr "  return 0;\n"
8592        | RInt64 _ ->
8593            pr "  if (r == -1) return -1;\n";
8594            (match fish_output with
8595             | None ->
8596                 pr "  printf (\"%%\" PRIi64 \"\\n\", r);\n";
8597             | Some FishOutputOctal ->
8598                 pr "  printf (\"%%s%%\" PRIo64 \"\\n\", r != 0 ? \"0\" : \"\", r);\n";
8599             | Some FishOutputHexadecimal ->
8600                 pr "  printf (\"%%s%%\" PRIx64 \"\\n\", r != 0 ? \"0x\" : \"\", r);\n");
8601            pr "  return 0;\n"
8602        | RBool _ ->
8603            pr "  if (r == -1) return -1;\n";
8604            pr "  if (r) printf (\"true\\n\"); else printf (\"false\\n\");\n";
8605            pr "  return 0;\n"
8606        | RConstString _ ->
8607            pr "  if (r == NULL) return -1;\n";
8608            pr "  printf (\"%%s\\n\", r);\n";
8609            pr "  return 0;\n"
8610        | RConstOptString _ ->
8611            pr "  printf (\"%%s\\n\", r ? : \"(null)\");\n";
8612            pr "  return 0;\n"
8613        | RString _ ->
8614            pr "  if (r == NULL) return -1;\n";
8615            pr "  printf (\"%%s\\n\", r);\n";
8616            pr "  free (r);\n";
8617            pr "  return 0;\n"
8618        | RStringList _ ->
8619            pr "  if (r == NULL) return -1;\n";
8620            pr "  print_strings (r);\n";
8621            pr "  free_strings (r);\n";
8622            pr "  return 0;\n"
8623        | RStruct (_, typ) ->
8624            pr "  if (r == NULL) return -1;\n";
8625            pr "  print_%s (r);\n" typ;
8626            pr "  guestfs_free_%s (r);\n" typ;
8627            pr "  return 0;\n"
8628        | RStructList (_, typ) ->
8629            pr "  if (r == NULL) return -1;\n";
8630            pr "  print_%s_list (r);\n" typ;
8631            pr "  guestfs_free_%s_list (r);\n" typ;
8632            pr "  return 0;\n"
8633        | RHashtable _ ->
8634            pr "  if (r == NULL) return -1;\n";
8635            pr "  print_table (r);\n";
8636            pr "  free_strings (r);\n";
8637            pr "  return 0;\n"
8638        | RBufferOut _ ->
8639            pr "  if (r == NULL) return -1;\n";
8640            pr "  if (full_write (1, r, size) != size) {\n";
8641            pr "    perror (\"write\");\n";
8642            pr "    free (r);\n";
8643            pr "    return -1;\n";
8644            pr "  }\n";
8645            pr "  free (r);\n";
8646            pr "  return 0;\n"
8647       );
8648       pr "}\n";
8649       pr "\n"
8650   ) all_functions;
8651
8652   (* run_action function *)
8653   pr "int run_action (const char *cmd, int argc, char *argv[])\n";
8654   pr "{\n";
8655   List.iter (
8656     fun (name, _, _, flags, _, _, _) ->
8657       let name2 = replace_char name '_' '-' in
8658       let alias =
8659         try find_map (function FishAlias n -> Some n | _ -> None) flags
8660         with Not_found -> name in
8661       pr "  if (";
8662       pr "STRCASEEQ (cmd, \"%s\")" name;
8663       if name <> name2 then
8664         pr " || STRCASEEQ (cmd, \"%s\")" name2;
8665       if name <> alias then
8666         pr " || STRCASEEQ (cmd, \"%s\")" alias;
8667       pr ")\n";
8668       pr "    return run_%s (cmd, argc, argv);\n" name;
8669       pr "  else\n";
8670   ) all_functions;
8671   pr "    {\n";
8672   pr "      fprintf (stderr, _(\"%%s: unknown command\\n\"), cmd);\n";
8673   pr "      if (command_num == 1)\n";
8674   pr "        extended_help_message ();\n";
8675   pr "      return -1;\n";
8676   pr "    }\n";
8677   pr "  return 0;\n";
8678   pr "}\n";
8679   pr "\n"
8680
8681 (* Readline completion for guestfish. *)
8682 and generate_fish_completion () =
8683   generate_header CStyle GPLv2plus;
8684
8685   let all_functions =
8686     List.filter (
8687       fun (_, _, _, flags, _, _, _) -> not (List.mem NotInFish flags)
8688     ) all_functions in
8689
8690   pr "\
8691 #include <config.h>
8692
8693 #include <stdio.h>
8694 #include <stdlib.h>
8695 #include <string.h>
8696
8697 #ifdef HAVE_LIBREADLINE
8698 #include <readline/readline.h>
8699 #endif
8700
8701 #include \"fish.h\"
8702
8703 #ifdef HAVE_LIBREADLINE
8704
8705 static const char *const commands[] = {
8706   BUILTIN_COMMANDS_FOR_COMPLETION,
8707 ";
8708
8709   (* Get the commands, including the aliases.  They don't need to be
8710    * sorted - the generator() function just does a dumb linear search.
8711    *)
8712   let commands =
8713     List.map (
8714       fun (name, _, _, flags, _, _, _) ->
8715         let name2 = replace_char name '_' '-' in
8716         let alias =
8717           try find_map (function FishAlias n -> Some n | _ -> None) flags
8718           with Not_found -> name in
8719
8720         if name <> alias then [name2; alias] else [name2]
8721     ) all_functions in
8722   let commands = List.flatten commands in
8723
8724   List.iter (pr "  \"%s\",\n") commands;
8725
8726   pr "  NULL
8727 };
8728
8729 static char *
8730 generator (const char *text, int state)
8731 {
8732   static size_t index, len;
8733   const char *name;
8734
8735   if (!state) {
8736     index = 0;
8737     len = strlen (text);
8738   }
8739
8740   rl_attempted_completion_over = 1;
8741
8742   while ((name = commands[index]) != NULL) {
8743     index++;
8744     if (STRCASEEQLEN (name, text, len))
8745       return strdup (name);
8746   }
8747
8748   return NULL;
8749 }
8750
8751 #endif /* HAVE_LIBREADLINE */
8752
8753 #ifdef HAVE_RL_COMPLETION_MATCHES
8754 #define RL_COMPLETION_MATCHES rl_completion_matches
8755 #else
8756 #ifdef HAVE_COMPLETION_MATCHES
8757 #define RL_COMPLETION_MATCHES completion_matches
8758 #endif
8759 #endif /* else just fail if we don't have either symbol */
8760
8761 char **
8762 do_completion (const char *text, int start, int end)
8763 {
8764   char **matches = NULL;
8765
8766 #ifdef HAVE_LIBREADLINE
8767   rl_completion_append_character = ' ';
8768
8769   if (start == 0)
8770     matches = RL_COMPLETION_MATCHES (text, generator);
8771   else if (complete_dest_paths)
8772     matches = RL_COMPLETION_MATCHES (text, complete_dest_paths_generator);
8773 #endif
8774
8775   return matches;
8776 }
8777 ";
8778
8779 (* Generate the POD documentation for guestfish. *)
8780 and generate_fish_actions_pod () =
8781   let all_functions_sorted =
8782     List.filter (
8783       fun (_, _, _, flags, _, _, _) ->
8784         not (List.mem NotInFish flags || List.mem NotInDocs flags)
8785     ) all_functions_sorted in
8786
8787   let rex = Str.regexp "C<guestfs_\\([^>]+\\)>" in
8788
8789   List.iter (
8790     fun (name, style, _, flags, _, _, longdesc) ->
8791       let longdesc =
8792         Str.global_substitute rex (
8793           fun s ->
8794             let sub =
8795               try Str.matched_group 1 s
8796               with Not_found ->
8797                 failwithf "error substituting C<guestfs_...> in longdesc of function %s" name in
8798             "C<" ^ replace_char sub '_' '-' ^ ">"
8799         ) longdesc in
8800       let name = replace_char name '_' '-' in
8801       let alias =
8802         try find_map (function FishAlias n -> Some n | _ -> None) flags
8803         with Not_found -> name in
8804
8805       pr "=head2 %s" name;
8806       if name <> alias then
8807         pr " | %s" alias;
8808       pr "\n";
8809       pr "\n";
8810       pr " %s" name;
8811       List.iter (
8812         function
8813         | Pathname n | Device n | Dev_or_Path n | String n ->
8814             pr " %s" n
8815         | OptString n -> pr " %s" n
8816         | StringList n | DeviceList n -> pr " '%s ...'" n
8817         | Bool _ -> pr " true|false"
8818         | Int n -> pr " %s" n
8819         | Int64 n -> pr " %s" n
8820         | FileIn n | FileOut n -> pr " (%s|-)" n
8821         | BufferIn n -> pr " %s" n
8822         | Key _ -> () (* keys are entered at a prompt *)
8823       ) (snd style);
8824       pr "\n";
8825       pr "\n";
8826       pr "%s\n\n" longdesc;
8827
8828       if List.exists (function FileIn _ | FileOut _ -> true
8829                       | _ -> false) (snd style) then
8830         pr "Use C<-> instead of a filename to read/write from stdin/stdout.\n\n";
8831
8832       if List.exists (function Key _ -> true | _ -> false) (snd style) then
8833         pr "This command has one or more key or passphrase parameters.
8834 Guestfish will prompt for these separately.\n\n";
8835
8836       if List.mem ProtocolLimitWarning flags then
8837         pr "%s\n\n" protocol_limit_warning;
8838
8839       if List.mem DangerWillRobinson flags then
8840         pr "%s\n\n" danger_will_robinson;
8841
8842       match deprecation_notice flags with
8843       | None -> ()
8844       | Some txt -> pr "%s\n\n" txt
8845   ) all_functions_sorted
8846
8847 and generate_fish_prep_options_h () =
8848   generate_header CStyle GPLv2plus;
8849
8850   pr "#ifndef PREPOPTS_H\n";
8851   pr "\n";
8852
8853   pr "\
8854 struct prep {
8855   const char *name;             /* eg. \"fs\" */
8856
8857   size_t nr_params;             /* optional parameters */
8858   struct prep_param *params;
8859
8860   const char *shortdesc;        /* short description */
8861   const char *longdesc;         /* long description */
8862
8863                                 /* functions to implement it */
8864   void (*prelaunch) (const char *filename, prep_data *);
8865   void (*postlaunch) (const char *filename, prep_data *, const char *device);
8866 };
8867
8868 struct prep_param {
8869   const char *pname;            /* parameter name */
8870   const char *pdefault;         /* parameter default */
8871   const char *pdesc;            /* parameter description */
8872 };
8873
8874 extern const struct prep preps[];
8875 #define NR_PREPS %d
8876
8877 " (List.length prepopts);
8878
8879   List.iter (
8880     fun (name, shortdesc, args, longdesc) ->
8881       pr "\
8882 extern void prep_prelaunch_%s (const char *filename, prep_data *data);
8883 extern void prep_postlaunch_%s (const char *filename, prep_data *data, const char *device);
8884
8885 " name name;
8886   ) prepopts;
8887
8888   pr "\n";
8889   pr "#endif /* PREPOPTS_H */\n"
8890
8891 and generate_fish_prep_options_c () =
8892   generate_header CStyle GPLv2plus;
8893
8894   pr "\
8895 #include \"fish.h\"
8896 #include \"prepopts.h\"
8897
8898 ";
8899
8900   List.iter (
8901     fun (name, shortdesc, args, longdesc) ->
8902       pr "static struct prep_param %s_args[] = {\n" name;
8903       List.iter (
8904         fun (n, default, desc) ->
8905           pr "  { \"%s\", \"%s\", \"%s\" },\n" n default desc
8906       ) args;
8907       pr "};\n";
8908       pr "\n";
8909   ) prepopts;
8910
8911   pr "const struct prep preps[] = {\n";
8912   List.iter (
8913     fun (name, shortdesc, args, longdesc) ->
8914       pr "  { \"%s\", %d, %s_args,
8915     \"%s\",
8916     \"%s\",
8917     prep_prelaunch_%s, prep_postlaunch_%s },
8918 "
8919         name (List.length args) name
8920         (c_quote shortdesc) (c_quote longdesc)
8921         name name;
8922   ) prepopts;
8923   pr "};\n"
8924
8925 (* Generate a C function prototype. *)
8926 and generate_prototype ?(extern = true) ?(static = false) ?(semicolon = true)
8927     ?(single_line = false) ?(newline = false) ?(in_daemon = false)
8928     ?(prefix = "")
8929     ?handle name style =
8930   if extern then pr "extern ";
8931   if static then pr "static ";
8932   (match fst style with
8933    | RErr -> pr "int "
8934    | RInt _ -> pr "int "
8935    | RInt64 _ -> pr "int64_t "
8936    | RBool _ -> pr "int "
8937    | RConstString _ | RConstOptString _ -> pr "const char *"
8938    | RString _ | RBufferOut _ -> pr "char *"
8939    | RStringList _ | RHashtable _ -> pr "char **"
8940    | RStruct (_, typ) ->
8941        if not in_daemon then pr "struct guestfs_%s *" typ
8942        else pr "guestfs_int_%s *" typ
8943    | RStructList (_, typ) ->
8944        if not in_daemon then pr "struct guestfs_%s_list *" typ
8945        else pr "guestfs_int_%s_list *" typ
8946   );
8947   let is_RBufferOut = match fst style with RBufferOut _ -> true | _ -> false in
8948   pr "%s%s (" prefix name;
8949   if handle = None && List.length (snd style) = 0 && not is_RBufferOut then
8950     pr "void"
8951   else (
8952     let comma = ref false in
8953     (match handle with
8954      | None -> ()
8955      | Some handle -> pr "guestfs_h *%s" handle; comma := true
8956     );
8957     let next () =
8958       if !comma then (
8959         if single_line then pr ", " else pr ",\n\t\t"
8960       );
8961       comma := true
8962     in
8963     List.iter (
8964       function
8965       | Pathname n
8966       | Device n | Dev_or_Path n
8967       | String n
8968       | OptString n
8969       | Key n ->
8970           next ();
8971           pr "const char *%s" n
8972       | StringList n | DeviceList n ->
8973           next ();
8974           pr "char *const *%s" n
8975       | Bool n -> next (); pr "int %s" n
8976       | Int n -> next (); pr "int %s" n
8977       | Int64 n -> next (); pr "int64_t %s" n
8978       | FileIn n
8979       | FileOut n ->
8980           if not in_daemon then (next (); pr "const char *%s" n)
8981       | BufferIn n ->
8982           next ();
8983           pr "const char *%s" n;
8984           next ();
8985           pr "size_t %s_size" n
8986     ) (snd style);
8987     if is_RBufferOut then (next (); pr "size_t *size_r");
8988   );
8989   pr ")";
8990   if semicolon then pr ";";
8991   if newline then pr "\n"
8992
8993 (* Generate C call arguments, eg "(handle, foo, bar)" *)
8994 and generate_c_call_args ?handle ?(decl = false) style =
8995   pr "(";
8996   let comma = ref false in
8997   let next () =
8998     if !comma then pr ", ";
8999     comma := true
9000   in
9001   (match handle with
9002    | None -> ()
9003    | Some handle -> pr "%s" handle; comma := true
9004   );
9005   List.iter (
9006     function
9007     | BufferIn n ->
9008         next ();
9009         pr "%s, %s_size" n n
9010     | arg ->
9011         next ();
9012         pr "%s" (name_of_argt arg)
9013   ) (snd style);
9014   (* For RBufferOut calls, add implicit &size parameter. *)
9015   if not decl then (
9016     match fst style with
9017     | RBufferOut _ ->
9018         next ();
9019         pr "&size"
9020     | _ -> ()
9021   );
9022   pr ")"
9023
9024 (* Generate the OCaml bindings interface. *)
9025 and generate_ocaml_mli () =
9026   generate_header OCamlStyle LGPLv2plus;
9027
9028   pr "\
9029 (** For API documentation you should refer to the C API
9030     in the guestfs(3) manual page.  The OCaml API uses almost
9031     exactly the same calls. *)
9032
9033 type t
9034 (** A [guestfs_h] handle. *)
9035
9036 exception Error of string
9037 (** This exception is raised when there is an error. *)
9038
9039 exception Handle_closed of string
9040 (** This exception is raised if you use a {!Guestfs.t} handle
9041     after calling {!close} on it.  The string is the name of
9042     the function. *)
9043
9044 val create : unit -> t
9045 (** Create a {!Guestfs.t} handle. *)
9046
9047 val close : t -> unit
9048 (** Close the {!Guestfs.t} handle and free up all resources used
9049     by it immediately.
9050
9051     Handles are closed by the garbage collector when they become
9052     unreferenced, but callers can call this in order to provide
9053     predictable cleanup. *)
9054
9055 type progress_cb = int -> int -> int64 -> int64 -> unit
9056
9057 val set_progress_callback : t -> progress_cb -> unit
9058 (** [set_progress_callback g f] sets [f] as the progress callback function.
9059     For some long-running functions, [f] will be called repeatedly
9060     during the function with progress updates.
9061
9062     The callback is [f proc_nr serial position total].  See
9063     the description of [guestfs_set_progress_callback] in guestfs(3)
9064     for the meaning of these four numbers.
9065
9066     Note that if the closure captures a reference to the handle,
9067     this reference will prevent the handle from being
9068     automatically closed by the garbage collector.  There are
9069     three ways to avoid this: be careful not to capture the handle
9070     in the closure, or use a weak reference, or call
9071     {!Guestfs.clear_progress_callback} to remove the reference. *)
9072
9073 val clear_progress_callback : t -> unit
9074 (** [clear_progress_callback g] removes any progress callback function
9075     associated with the handle.  See {!Guestfs.set_progress_callback}. *)
9076
9077 ";
9078   generate_ocaml_structure_decls ();
9079
9080   (* The actions. *)
9081   List.iter (
9082     fun (name, style, _, _, _, shortdesc, _) ->
9083       generate_ocaml_prototype name style;
9084       pr "(** %s *)\n" shortdesc;
9085       pr "\n"
9086   ) all_functions_sorted
9087
9088 (* Generate the OCaml bindings implementation. *)
9089 and generate_ocaml_ml () =
9090   generate_header OCamlStyle LGPLv2plus;
9091
9092   pr "\
9093 type t
9094
9095 exception Error of string
9096 exception Handle_closed of string
9097
9098 external create : unit -> t = \"ocaml_guestfs_create\"
9099 external close : t -> unit = \"ocaml_guestfs_close\"
9100
9101 type progress_cb = int -> int -> int64 -> int64 -> unit
9102
9103 external set_progress_callback : t -> progress_cb -> unit
9104   = \"ocaml_guestfs_set_progress_callback\"
9105 external clear_progress_callback : t -> unit
9106   = \"ocaml_guestfs_clear_progress_callback\"
9107
9108 (* Give the exceptions names, so they can be raised from the C code. *)
9109 let () =
9110   Callback.register_exception \"ocaml_guestfs_error\" (Error \"\");
9111   Callback.register_exception \"ocaml_guestfs_closed\" (Handle_closed \"\")
9112
9113 ";
9114
9115   generate_ocaml_structure_decls ();
9116
9117   (* The actions. *)
9118   List.iter (
9119     fun (name, style, _, _, _, shortdesc, _) ->
9120       generate_ocaml_prototype ~is_external:true name style;
9121   ) all_functions_sorted
9122
9123 (* Generate the OCaml bindings C implementation. *)
9124 and generate_ocaml_c () =
9125   generate_header CStyle LGPLv2plus;
9126
9127   pr "\
9128 #include <stdio.h>
9129 #include <stdlib.h>
9130 #include <string.h>
9131
9132 #include <caml/config.h>
9133 #include <caml/alloc.h>
9134 #include <caml/callback.h>
9135 #include <caml/fail.h>
9136 #include <caml/memory.h>
9137 #include <caml/mlvalues.h>
9138 #include <caml/signals.h>
9139
9140 #include \"guestfs.h\"
9141
9142 #include \"guestfs_c.h\"
9143
9144 /* Copy a hashtable of string pairs into an assoc-list.  We return
9145  * the list in reverse order, but hashtables aren't supposed to be
9146  * ordered anyway.
9147  */
9148 static CAMLprim value
9149 copy_table (char * const * argv)
9150 {
9151   CAMLparam0 ();
9152   CAMLlocal5 (rv, pairv, kv, vv, cons);
9153   size_t i;
9154
9155   rv = Val_int (0);
9156   for (i = 0; argv[i] != NULL; i += 2) {
9157     kv = caml_copy_string (argv[i]);
9158     vv = caml_copy_string (argv[i+1]);
9159     pairv = caml_alloc (2, 0);
9160     Store_field (pairv, 0, kv);
9161     Store_field (pairv, 1, vv);
9162     cons = caml_alloc (2, 0);
9163     Store_field (cons, 1, rv);
9164     rv = cons;
9165     Store_field (cons, 0, pairv);
9166   }
9167
9168   CAMLreturn (rv);
9169 }
9170
9171 ";
9172
9173   (* Struct copy functions. *)
9174
9175   let emit_ocaml_copy_list_function typ =
9176     pr "static CAMLprim value\n";
9177     pr "copy_%s_list (const struct guestfs_%s_list *%ss)\n" typ typ typ;
9178     pr "{\n";
9179     pr "  CAMLparam0 ();\n";
9180     pr "  CAMLlocal2 (rv, v);\n";
9181     pr "  unsigned int i;\n";
9182     pr "\n";
9183     pr "  if (%ss->len == 0)\n" typ;
9184     pr "    CAMLreturn (Atom (0));\n";
9185     pr "  else {\n";
9186     pr "    rv = caml_alloc (%ss->len, 0);\n" typ;
9187     pr "    for (i = 0; i < %ss->len; ++i) {\n" typ;
9188     pr "      v = copy_%s (&%ss->val[i]);\n" typ typ;
9189     pr "      caml_modify (&Field (rv, i), v);\n";
9190     pr "    }\n";
9191     pr "    CAMLreturn (rv);\n";
9192     pr "  }\n";
9193     pr "}\n";
9194     pr "\n";
9195   in
9196
9197   List.iter (
9198     fun (typ, cols) ->
9199       let has_optpercent_col =
9200         List.exists (function (_, FOptPercent) -> true | _ -> false) cols in
9201
9202       pr "static CAMLprim value\n";
9203       pr "copy_%s (const struct guestfs_%s *%s)\n" typ typ typ;
9204       pr "{\n";
9205       pr "  CAMLparam0 ();\n";
9206       if has_optpercent_col then
9207         pr "  CAMLlocal3 (rv, v, v2);\n"
9208       else
9209         pr "  CAMLlocal2 (rv, v);\n";
9210       pr "\n";
9211       pr "  rv = caml_alloc (%d, 0);\n" (List.length cols);
9212       iteri (
9213         fun i col ->
9214           (match col with
9215            | name, FString ->
9216                pr "  v = caml_copy_string (%s->%s);\n" typ name
9217            | name, FBuffer ->
9218                pr "  v = caml_alloc_string (%s->%s_len);\n" typ name;
9219                pr "  memcpy (String_val (v), %s->%s, %s->%s_len);\n"
9220                  typ name typ name
9221            | name, FUUID ->
9222                pr "  v = caml_alloc_string (32);\n";
9223                pr "  memcpy (String_val (v), %s->%s, 32);\n" typ name
9224            | name, (FBytes|FInt64|FUInt64) ->
9225                pr "  v = caml_copy_int64 (%s->%s);\n" typ name
9226            | name, (FInt32|FUInt32) ->
9227                pr "  v = caml_copy_int32 (%s->%s);\n" typ name
9228            | name, FOptPercent ->
9229                pr "  if (%s->%s >= 0) { /* Some %s */\n" typ name name;
9230                pr "    v2 = caml_copy_double (%s->%s);\n" typ name;
9231                pr "    v = caml_alloc (1, 0);\n";
9232                pr "    Store_field (v, 0, v2);\n";
9233                pr "  } else /* None */\n";
9234                pr "    v = Val_int (0);\n";
9235            | name, FChar ->
9236                pr "  v = Val_int (%s->%s);\n" typ name
9237           );
9238           pr "  Store_field (rv, %d, v);\n" i
9239       ) cols;
9240       pr "  CAMLreturn (rv);\n";
9241       pr "}\n";
9242       pr "\n";
9243   ) structs;
9244
9245   (* Emit a copy_TYPE_list function definition only if that function is used. *)
9246   List.iter (
9247     function
9248     | typ, (RStructListOnly | RStructAndList) ->
9249         (* generate the function for typ *)
9250         emit_ocaml_copy_list_function typ
9251     | typ, _ -> () (* empty *)
9252   ) (rstructs_used_by all_functions);
9253
9254   (* The wrappers. *)
9255   List.iter (
9256     fun (name, style, _, _, _, _, _) ->
9257       pr "/* Automatically generated wrapper for function\n";
9258       pr " * ";
9259       generate_ocaml_prototype name style;
9260       pr " */\n";
9261       pr "\n";
9262
9263       let params =
9264         "gv" :: List.map (fun arg -> name_of_argt arg ^ "v") (snd style) in
9265
9266       let needs_extra_vs =
9267         match fst style with RConstOptString _ -> true | _ -> false in
9268
9269       pr "/* Emit prototype to appease gcc's -Wmissing-prototypes. */\n";
9270       pr "CAMLprim value ocaml_guestfs_%s (value %s" name (List.hd params);
9271       List.iter (pr ", value %s") (List.tl params); pr ");\n";
9272       pr "\n";
9273
9274       pr "CAMLprim value\n";
9275       pr "ocaml_guestfs_%s (value %s" name (List.hd params);
9276       List.iter (pr ", value %s") (List.tl params);
9277       pr ")\n";
9278       pr "{\n";
9279
9280       (match params with
9281        | [p1; p2; p3; p4; p5] ->
9282            pr "  CAMLparam5 (%s);\n" (String.concat ", " params)
9283        | p1 :: p2 :: p3 :: p4 :: p5 :: rest ->
9284            pr "  CAMLparam5 (%s);\n" (String.concat ", " [p1; p2; p3; p4; p5]);
9285            pr "  CAMLxparam%d (%s);\n"
9286              (List.length rest) (String.concat ", " rest)
9287        | ps ->
9288            pr "  CAMLparam%d (%s);\n" (List.length ps) (String.concat ", " ps)
9289       );
9290       if not needs_extra_vs then
9291         pr "  CAMLlocal1 (rv);\n"
9292       else
9293         pr "  CAMLlocal3 (rv, v, v2);\n";
9294       pr "\n";
9295
9296       pr "  guestfs_h *g = Guestfs_val (gv);\n";
9297       pr "  if (g == NULL)\n";
9298       pr "    ocaml_guestfs_raise_closed (\"%s\");\n" name;
9299       pr "\n";
9300
9301       List.iter (
9302         function
9303         | Pathname n
9304         | Device n | Dev_or_Path n
9305         | String n
9306         | FileIn n
9307         | FileOut n
9308         | Key n ->
9309             (* Copy strings in case the GC moves them: RHBZ#604691 *)
9310             pr "  char *%s = guestfs_safe_strdup (g, String_val (%sv));\n" n n
9311         | OptString n ->
9312             pr "  char *%s =\n" n;
9313             pr "    %sv != Val_int (0) ?" n;
9314             pr "      guestfs_safe_strdup (g, String_val (Field (%sv, 0))) : NULL;\n" n
9315         | BufferIn n ->
9316             pr "  size_t %s_size = caml_string_length (%sv);\n" n n;
9317             pr "  char *%s = guestfs_safe_memdup (g, String_val (%sv), %s_size);\n" n n n
9318         | StringList n | DeviceList n ->
9319             pr "  char **%s = ocaml_guestfs_strings_val (g, %sv);\n" n n
9320         | Bool n ->
9321             pr "  int %s = Bool_val (%sv);\n" n n
9322         | Int n ->
9323             pr "  int %s = Int_val (%sv);\n" n n
9324         | Int64 n ->
9325             pr "  int64_t %s = Int64_val (%sv);\n" n n
9326       ) (snd style);
9327       let error_code =
9328         match fst style with
9329         | RErr -> pr "  int r;\n"; "-1"
9330         | RInt _ -> pr "  int r;\n"; "-1"
9331         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
9332         | RBool _ -> pr "  int r;\n"; "-1"
9333         | RConstString _ | RConstOptString _ ->
9334             pr "  const char *r;\n"; "NULL"
9335         | RString _ -> pr "  char *r;\n"; "NULL"
9336         | RStringList _ ->
9337             pr "  size_t i;\n";
9338             pr "  char **r;\n";
9339             "NULL"
9340         | RStruct (_, typ) ->
9341             pr "  struct guestfs_%s *r;\n" typ; "NULL"
9342         | RStructList (_, typ) ->
9343             pr "  struct guestfs_%s_list *r;\n" typ; "NULL"
9344         | RHashtable _ ->
9345             pr "  size_t i;\n";
9346             pr "  char **r;\n";
9347             "NULL"
9348         | RBufferOut _ ->
9349             pr "  char *r;\n";
9350             pr "  size_t size;\n";
9351             "NULL" in
9352       pr "\n";
9353
9354       pr "  caml_enter_blocking_section ();\n";
9355       pr "  r = guestfs_%s " name;
9356       generate_c_call_args ~handle:"g" style;
9357       pr ";\n";
9358       pr "  caml_leave_blocking_section ();\n";
9359
9360       (* Free strings if we copied them above. *)
9361       List.iter (
9362         function
9363         | Pathname n | Device n | Dev_or_Path n | String n | OptString n
9364         | FileIn n | FileOut n | BufferIn n | Key n ->
9365             pr "  free (%s);\n" n
9366         | StringList n | DeviceList n ->
9367             pr "  ocaml_guestfs_free_strings (%s);\n" n;
9368         | Bool _ | Int _ | Int64 _ -> ()
9369       ) (snd style);
9370
9371       pr "  if (r == %s)\n" error_code;
9372       pr "    ocaml_guestfs_raise_error (g, \"%s\");\n" name;
9373       pr "\n";
9374
9375       (match fst style with
9376        | RErr -> pr "  rv = Val_unit;\n"
9377        | RInt _ -> pr "  rv = Val_int (r);\n"
9378        | RInt64 _ ->
9379            pr "  rv = caml_copy_int64 (r);\n"
9380        | RBool _ -> pr "  rv = Val_bool (r);\n"
9381        | RConstString _ ->
9382            pr "  rv = caml_copy_string (r);\n"
9383        | RConstOptString _ ->
9384            pr "  if (r) { /* Some string */\n";
9385            pr "    v = caml_alloc (1, 0);\n";
9386            pr "    v2 = caml_copy_string (r);\n";
9387            pr "    Store_field (v, 0, v2);\n";
9388            pr "  } else /* None */\n";
9389            pr "    v = Val_int (0);\n";
9390        | RString _ ->
9391            pr "  rv = caml_copy_string (r);\n";
9392            pr "  free (r);\n"
9393        | RStringList _ ->
9394            pr "  rv = caml_copy_string_array ((const char **) r);\n";
9395            pr "  for (i = 0; r[i] != NULL; ++i) free (r[i]);\n";
9396            pr "  free (r);\n"
9397        | RStruct (_, typ) ->
9398            pr "  rv = copy_%s (r);\n" typ;
9399            pr "  guestfs_free_%s (r);\n" typ;
9400        | RStructList (_, typ) ->
9401            pr "  rv = copy_%s_list (r);\n" typ;
9402            pr "  guestfs_free_%s_list (r);\n" typ;
9403        | RHashtable _ ->
9404            pr "  rv = copy_table (r);\n";
9405            pr "  for (i = 0; r[i] != NULL; ++i) free (r[i]);\n";
9406            pr "  free (r);\n";
9407        | RBufferOut _ ->
9408            pr "  rv = caml_alloc_string (size);\n";
9409            pr "  memcpy (String_val (rv), r, size);\n";
9410       );
9411
9412       pr "  CAMLreturn (rv);\n";
9413       pr "}\n";
9414       pr "\n";
9415
9416       if List.length params > 5 then (
9417         pr "/* Emit prototype to appease gcc's -Wmissing-prototypes. */\n";
9418         pr "CAMLprim value ";
9419         pr "ocaml_guestfs_%s_byte (value *argv, int argn);\n" name;
9420         pr "CAMLprim value\n";
9421         pr "ocaml_guestfs_%s_byte (value *argv, int argn)\n" name;
9422         pr "{\n";
9423         pr "  return ocaml_guestfs_%s (argv[0]" name;
9424         iteri (fun i _ -> pr ", argv[%d]" i) (List.tl params);
9425         pr ");\n";
9426         pr "}\n";
9427         pr "\n"
9428       )
9429   ) all_functions_sorted
9430
9431 and generate_ocaml_structure_decls () =
9432   List.iter (
9433     fun (typ, cols) ->
9434       pr "type %s = {\n" typ;
9435       List.iter (
9436         function
9437         | name, FString -> pr "  %s : string;\n" name
9438         | name, FBuffer -> pr "  %s : string;\n" name
9439         | name, FUUID -> pr "  %s : string;\n" name
9440         | name, (FBytes|FInt64|FUInt64) -> pr "  %s : int64;\n" name
9441         | name, (FInt32|FUInt32) -> pr "  %s : int32;\n" name
9442         | name, FChar -> pr "  %s : char;\n" name
9443         | name, FOptPercent -> pr "  %s : float option;\n" name
9444       ) cols;
9445       pr "}\n";
9446       pr "\n"
9447   ) structs
9448
9449 and generate_ocaml_prototype ?(is_external = false) name style =
9450   if is_external then pr "external " else pr "val ";
9451   pr "%s : t -> " name;
9452   List.iter (
9453     function
9454     | Pathname _ | Device _ | Dev_or_Path _ | String _ | FileIn _ | FileOut _
9455     | BufferIn _ | Key _ -> pr "string -> "
9456     | OptString _ -> pr "string option -> "
9457     | StringList _ | DeviceList _ -> pr "string array -> "
9458     | Bool _ -> pr "bool -> "
9459     | Int _ -> pr "int -> "
9460     | Int64 _ -> pr "int64 -> "
9461   ) (snd style);
9462   (match fst style with
9463    | RErr -> pr "unit" (* all errors are turned into exceptions *)
9464    | RInt _ -> pr "int"
9465    | RInt64 _ -> pr "int64"
9466    | RBool _ -> pr "bool"
9467    | RConstString _ -> pr "string"
9468    | RConstOptString _ -> pr "string option"
9469    | RString _ | RBufferOut _ -> pr "string"
9470    | RStringList _ -> pr "string array"
9471    | RStruct (_, typ) -> pr "%s" typ
9472    | RStructList (_, typ) -> pr "%s array" typ
9473    | RHashtable _ -> pr "(string * string) list"
9474   );
9475   if is_external then (
9476     pr " = ";
9477     if List.length (snd style) + 1 > 5 then
9478       pr "\"ocaml_guestfs_%s_byte\" " name;
9479     pr "\"ocaml_guestfs_%s\"" name
9480   );
9481   pr "\n"
9482
9483 (* Generate Perl xs code, a sort of crazy variation of C with macros. *)
9484 and generate_perl_xs () =
9485   generate_header CStyle LGPLv2plus;
9486
9487   pr "\
9488 #include \"EXTERN.h\"
9489 #include \"perl.h\"
9490 #include \"XSUB.h\"
9491
9492 #include <guestfs.h>
9493
9494 #ifndef PRId64
9495 #define PRId64 \"lld\"
9496 #endif
9497
9498 static SV *
9499 my_newSVll(long long val) {
9500 #ifdef USE_64_BIT_ALL
9501   return newSViv(val);
9502 #else
9503   char buf[100];
9504   int len;
9505   len = snprintf(buf, 100, \"%%\" PRId64, val);
9506   return newSVpv(buf, len);
9507 #endif
9508 }
9509
9510 #ifndef PRIu64
9511 #define PRIu64 \"llu\"
9512 #endif
9513
9514 static SV *
9515 my_newSVull(unsigned long long val) {
9516 #ifdef USE_64_BIT_ALL
9517   return newSVuv(val);
9518 #else
9519   char buf[100];
9520   int len;
9521   len = snprintf(buf, 100, \"%%\" PRIu64, val);
9522   return newSVpv(buf, len);
9523 #endif
9524 }
9525
9526 /* http://www.perlmonks.org/?node_id=680842 */
9527 static char **
9528 XS_unpack_charPtrPtr (SV *arg) {
9529   char **ret;
9530   AV *av;
9531   I32 i;
9532
9533   if (!arg || !SvOK (arg) || !SvROK (arg) || SvTYPE (SvRV (arg)) != SVt_PVAV)
9534     croak (\"array reference expected\");
9535
9536   av = (AV *)SvRV (arg);
9537   ret = malloc ((av_len (av) + 1 + 1) * sizeof (char *));
9538   if (!ret)
9539     croak (\"malloc failed\");
9540
9541   for (i = 0; i <= av_len (av); i++) {
9542     SV **elem = av_fetch (av, i, 0);
9543
9544     if (!elem || !*elem)
9545       croak (\"missing element in list\");
9546
9547     ret[i] = SvPV_nolen (*elem);
9548   }
9549
9550   ret[i] = NULL;
9551
9552   return ret;
9553 }
9554
9555 #define PROGRESS_KEY \"_perl_progress_cb\"
9556
9557 static void
9558 _clear_progress_callback (guestfs_h *g)
9559 {
9560   guestfs_set_progress_callback (g, NULL, NULL);
9561   SV *cb = guestfs_get_private (g, PROGRESS_KEY);
9562   if (cb) {
9563     guestfs_set_private (g, PROGRESS_KEY, NULL);
9564     SvREFCNT_dec (cb);
9565   }
9566 }
9567
9568 /* http://www.perlmonks.org/?node=338857 */
9569 static void
9570 _progress_callback (guestfs_h *g, void *cb,
9571                     int proc_nr, int serial, uint64_t position, uint64_t total)
9572 {
9573   dSP;
9574   ENTER;
9575   SAVETMPS;
9576   PUSHMARK (SP);
9577   XPUSHs (sv_2mortal (newSViv (proc_nr)));
9578   XPUSHs (sv_2mortal (newSViv (serial)));
9579   XPUSHs (sv_2mortal (my_newSVull (position)));
9580   XPUSHs (sv_2mortal (my_newSVull (total)));
9581   PUTBACK;
9582   call_sv ((SV *) cb, G_VOID | G_DISCARD | G_EVAL);
9583   FREETMPS;
9584   LEAVE;
9585 }
9586
9587 static void
9588 _close_handle (guestfs_h *g)
9589 {
9590   assert (g != NULL);
9591   _clear_progress_callback (g);
9592   guestfs_close (g);
9593 }
9594
9595 MODULE = Sys::Guestfs  PACKAGE = Sys::Guestfs
9596
9597 PROTOTYPES: ENABLE
9598
9599 guestfs_h *
9600 _create ()
9601    CODE:
9602       RETVAL = guestfs_create ();
9603       if (!RETVAL)
9604         croak (\"could not create guestfs handle\");
9605       guestfs_set_error_handler (RETVAL, NULL, NULL);
9606  OUTPUT:
9607       RETVAL
9608
9609 void
9610 DESTROY (sv)
9611       SV *sv;
9612  PPCODE:
9613       /* For the 'g' argument above we do the conversion explicitly and
9614        * don't rely on the typemap, because if the handle has been
9615        * explicitly closed we don't want the typemap conversion to
9616        * display an error.
9617        */
9618       HV *hv = (HV *) SvRV (sv);
9619       SV **svp = hv_fetch (hv, \"_g\", 2, 0);
9620       if (svp != NULL) {
9621         guestfs_h *g = (guestfs_h *) SvIV (*svp);
9622         _close_handle (g);
9623       }
9624
9625 void
9626 close (g)
9627       guestfs_h *g;
9628  PPCODE:
9629       _close_handle (g);
9630       /* Avoid double-free in DESTROY method. */
9631       HV *hv = (HV *) SvRV (ST(0));
9632       (void) hv_delete (hv, \"_g\", 2, G_DISCARD);
9633
9634 void
9635 set_progress_callback (g, cb)
9636       guestfs_h *g;
9637       SV *cb;
9638  PPCODE:
9639       _clear_progress_callback (g);
9640       SvREFCNT_inc (cb);
9641       guestfs_set_private (g, PROGRESS_KEY, cb);
9642       guestfs_set_progress_callback (g, _progress_callback, cb);
9643
9644 void
9645 clear_progress_callback (g)
9646       guestfs_h *g;
9647  PPCODE:
9648       _clear_progress_callback (g);
9649
9650 ";
9651
9652   List.iter (
9653     fun (name, style, _, _, _, _, _) ->
9654       (match fst style with
9655        | RErr -> pr "void\n"
9656        | RInt _ -> pr "SV *\n"
9657        | RInt64 _ -> pr "SV *\n"
9658        | RBool _ -> pr "SV *\n"
9659        | RConstString _ -> pr "SV *\n"
9660        | RConstOptString _ -> pr "SV *\n"
9661        | RString _ -> pr "SV *\n"
9662        | RBufferOut _ -> pr "SV *\n"
9663        | RStringList _
9664        | RStruct _ | RStructList _
9665        | RHashtable _ ->
9666            pr "void\n" (* all lists returned implictly on the stack *)
9667       );
9668       (* Call and arguments. *)
9669       pr "%s (g" name;
9670       List.iter (
9671         fun arg -> pr ", %s" (name_of_argt arg)
9672       ) (snd style);
9673       pr ")\n";
9674       pr "      guestfs_h *g;\n";
9675       iteri (
9676         fun i ->
9677           function
9678           | Pathname n | Device n | Dev_or_Path n | String n
9679           | FileIn n | FileOut n | Key n ->
9680               pr "      char *%s;\n" n
9681           | BufferIn n ->
9682               pr "      char *%s;\n" n;
9683               pr "      size_t %s_size = SvCUR (ST(%d));\n" n (i+1)
9684           | OptString n ->
9685               (* http://www.perlmonks.org/?node_id=554277
9686                * Note that the implicit handle argument means we have
9687                * to add 1 to the ST(x) operator.
9688                *)
9689               pr "      char *%s = SvOK(ST(%d)) ? SvPV_nolen(ST(%d)) : NULL;\n" n (i+1) (i+1)
9690           | StringList n | DeviceList n -> pr "      char **%s;\n" n
9691           | Bool n -> pr "      int %s;\n" n
9692           | Int n -> pr "      int %s;\n" n
9693           | Int64 n -> pr "      int64_t %s;\n" n
9694       ) (snd style);
9695
9696       let do_cleanups () =
9697         List.iter (
9698           function
9699           | Pathname _ | Device _ | Dev_or_Path _ | String _ | OptString _
9700           | Bool _ | Int _ | Int64 _
9701           | FileIn _ | FileOut _
9702           | BufferIn _ | Key _ -> ()
9703           | StringList n | DeviceList n -> pr "      free (%s);\n" n
9704         ) (snd style)
9705       in
9706
9707       (* Code. *)
9708       (match fst style with
9709        | RErr ->
9710            pr "PREINIT:\n";
9711            pr "      int r;\n";
9712            pr " PPCODE:\n";
9713            pr "      r = guestfs_%s " name;
9714            generate_c_call_args ~handle:"g" style;
9715            pr ";\n";
9716            do_cleanups ();
9717            pr "      if (r == -1)\n";
9718            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9719        | RInt n
9720        | RBool n ->
9721            pr "PREINIT:\n";
9722            pr "      int %s;\n" n;
9723            pr "   CODE:\n";
9724            pr "      %s = guestfs_%s " n name;
9725            generate_c_call_args ~handle:"g" style;
9726            pr ";\n";
9727            do_cleanups ();
9728            pr "      if (%s == -1)\n" n;
9729            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9730            pr "      RETVAL = newSViv (%s);\n" n;
9731            pr " OUTPUT:\n";
9732            pr "      RETVAL\n"
9733        | RInt64 n ->
9734            pr "PREINIT:\n";
9735            pr "      int64_t %s;\n" n;
9736            pr "   CODE:\n";
9737            pr "      %s = guestfs_%s " n name;
9738            generate_c_call_args ~handle:"g" style;
9739            pr ";\n";
9740            do_cleanups ();
9741            pr "      if (%s == -1)\n" n;
9742            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9743            pr "      RETVAL = my_newSVll (%s);\n" n;
9744            pr " OUTPUT:\n";
9745            pr "      RETVAL\n"
9746        | RConstString n ->
9747            pr "PREINIT:\n";
9748            pr "      const char *%s;\n" n;
9749            pr "   CODE:\n";
9750            pr "      %s = guestfs_%s " n name;
9751            generate_c_call_args ~handle:"g" style;
9752            pr ";\n";
9753            do_cleanups ();
9754            pr "      if (%s == NULL)\n" n;
9755            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9756            pr "      RETVAL = newSVpv (%s, 0);\n" n;
9757            pr " OUTPUT:\n";
9758            pr "      RETVAL\n"
9759        | RConstOptString n ->
9760            pr "PREINIT:\n";
9761            pr "      const char *%s;\n" n;
9762            pr "   CODE:\n";
9763            pr "      %s = guestfs_%s " n name;
9764            generate_c_call_args ~handle:"g" style;
9765            pr ";\n";
9766            do_cleanups ();
9767            pr "      if (%s == NULL)\n" n;
9768            pr "        RETVAL = &PL_sv_undef;\n";
9769            pr "      else\n";
9770            pr "        RETVAL = newSVpv (%s, 0);\n" n;
9771            pr " OUTPUT:\n";
9772            pr "      RETVAL\n"
9773        | RString n ->
9774            pr "PREINIT:\n";
9775            pr "      char *%s;\n" n;
9776            pr "   CODE:\n";
9777            pr "      %s = guestfs_%s " n name;
9778            generate_c_call_args ~handle:"g" style;
9779            pr ";\n";
9780            do_cleanups ();
9781            pr "      if (%s == NULL)\n" n;
9782            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9783            pr "      RETVAL = newSVpv (%s, 0);\n" n;
9784            pr "      free (%s);\n" n;
9785            pr " OUTPUT:\n";
9786            pr "      RETVAL\n"
9787        | RStringList n | RHashtable n ->
9788            pr "PREINIT:\n";
9789            pr "      char **%s;\n" n;
9790            pr "      size_t i, n;\n";
9791            pr " PPCODE:\n";
9792            pr "      %s = guestfs_%s " n name;
9793            generate_c_call_args ~handle:"g" style;
9794            pr ";\n";
9795            do_cleanups ();
9796            pr "      if (%s == NULL)\n" n;
9797            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9798            pr "      for (n = 0; %s[n] != NULL; ++n) /**/;\n" n;
9799            pr "      EXTEND (SP, n);\n";
9800            pr "      for (i = 0; i < n; ++i) {\n";
9801            pr "        PUSHs (sv_2mortal (newSVpv (%s[i], 0)));\n" n;
9802            pr "        free (%s[i]);\n" n;
9803            pr "      }\n";
9804            pr "      free (%s);\n" n;
9805        | RStruct (n, typ) ->
9806            let cols = cols_of_struct typ in
9807            generate_perl_struct_code typ cols name style n do_cleanups
9808        | RStructList (n, typ) ->
9809            let cols = cols_of_struct typ in
9810            generate_perl_struct_list_code typ cols name style n do_cleanups
9811        | RBufferOut n ->
9812            pr "PREINIT:\n";
9813            pr "      char *%s;\n" n;
9814            pr "      size_t size;\n";
9815            pr "   CODE:\n";
9816            pr "      %s = guestfs_%s " n name;
9817            generate_c_call_args ~handle:"g" style;
9818            pr ";\n";
9819            do_cleanups ();
9820            pr "      if (%s == NULL)\n" n;
9821            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9822            pr "      RETVAL = newSVpvn (%s, size);\n" n;
9823            pr "      free (%s);\n" n;
9824            pr " OUTPUT:\n";
9825            pr "      RETVAL\n"
9826       );
9827
9828       pr "\n"
9829   ) all_functions
9830
9831 and generate_perl_struct_list_code typ cols name style n do_cleanups =
9832   pr "PREINIT:\n";
9833   pr "      struct guestfs_%s_list *%s;\n" typ n;
9834   pr "      size_t i;\n";
9835   pr "      HV *hv;\n";
9836   pr " PPCODE:\n";
9837   pr "      %s = guestfs_%s " n name;
9838   generate_c_call_args ~handle:"g" style;
9839   pr ";\n";
9840   do_cleanups ();
9841   pr "      if (%s == NULL)\n" n;
9842   pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9843   pr "      EXTEND (SP, %s->len);\n" n;
9844   pr "      for (i = 0; i < %s->len; ++i) {\n" n;
9845   pr "        hv = newHV ();\n";
9846   List.iter (
9847     function
9848     | name, FString ->
9849         pr "        (void) hv_store (hv, \"%s\", %d, newSVpv (%s->val[i].%s, 0), 0);\n"
9850           name (String.length name) n name
9851     | name, FUUID ->
9852         pr "        (void) hv_store (hv, \"%s\", %d, newSVpv (%s->val[i].%s, 32), 0);\n"
9853           name (String.length name) n name
9854     | name, FBuffer ->
9855         pr "        (void) hv_store (hv, \"%s\", %d, newSVpvn (%s->val[i].%s, %s->val[i].%s_len), 0);\n"
9856           name (String.length name) n name n name
9857     | name, (FBytes|FUInt64) ->
9858         pr "        (void) hv_store (hv, \"%s\", %d, my_newSVull (%s->val[i].%s), 0);\n"
9859           name (String.length name) n name
9860     | name, FInt64 ->
9861         pr "        (void) hv_store (hv, \"%s\", %d, my_newSVll (%s->val[i].%s), 0);\n"
9862           name (String.length name) n name
9863     | name, (FInt32|FUInt32) ->
9864         pr "        (void) hv_store (hv, \"%s\", %d, newSVnv (%s->val[i].%s), 0);\n"
9865           name (String.length name) n name
9866     | name, FChar ->
9867         pr "        (void) hv_store (hv, \"%s\", %d, newSVpv (&%s->val[i].%s, 1), 0);\n"
9868           name (String.length name) n name
9869     | name, FOptPercent ->
9870         pr "        (void) hv_store (hv, \"%s\", %d, newSVnv (%s->val[i].%s), 0);\n"
9871           name (String.length name) n name
9872   ) cols;
9873   pr "        PUSHs (sv_2mortal (newRV ((SV *) hv)));\n";
9874   pr "      }\n";
9875   pr "      guestfs_free_%s_list (%s);\n" typ n
9876
9877 and generate_perl_struct_code typ cols name style n do_cleanups =
9878   pr "PREINIT:\n";
9879   pr "      struct guestfs_%s *%s;\n" typ n;
9880   pr " PPCODE:\n";
9881   pr "      %s = guestfs_%s " n name;
9882   generate_c_call_args ~handle:"g" style;
9883   pr ";\n";
9884   do_cleanups ();
9885   pr "      if (%s == NULL)\n" n;
9886   pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9887   pr "      EXTEND (SP, 2 * %d);\n" (List.length cols);
9888   List.iter (
9889     fun ((name, _) as col) ->
9890       pr "      PUSHs (sv_2mortal (newSVpv (\"%s\", 0)));\n" name;
9891
9892       match col with
9893       | name, FString ->
9894           pr "      PUSHs (sv_2mortal (newSVpv (%s->%s, 0)));\n"
9895             n name
9896       | name, FBuffer ->
9897           pr "      PUSHs (sv_2mortal (newSVpvn (%s->%s, %s->%s_len)));\n"
9898             n name n name
9899       | name, FUUID ->
9900           pr "      PUSHs (sv_2mortal (newSVpv (%s->%s, 32)));\n"
9901             n name
9902       | name, (FBytes|FUInt64) ->
9903           pr "      PUSHs (sv_2mortal (my_newSVull (%s->%s)));\n"
9904             n name
9905       | name, FInt64 ->
9906           pr "      PUSHs (sv_2mortal (my_newSVll (%s->%s)));\n"
9907             n name
9908       | name, (FInt32|FUInt32) ->
9909           pr "      PUSHs (sv_2mortal (newSVnv (%s->%s)));\n"
9910             n name
9911       | name, FChar ->
9912           pr "      PUSHs (sv_2mortal (newSVpv (&%s->%s, 1)));\n"
9913             n name
9914       | name, FOptPercent ->
9915           pr "      PUSHs (sv_2mortal (newSVnv (%s->%s)));\n"
9916             n name
9917   ) cols;
9918   pr "      free (%s);\n" n
9919
9920 (* Generate Sys/Guestfs.pm. *)
9921 and generate_perl_pm () =
9922   generate_header HashStyle LGPLv2plus;
9923
9924   pr "\
9925 =pod
9926
9927 =head1 NAME
9928
9929 Sys::Guestfs - Perl bindings for libguestfs
9930
9931 =head1 SYNOPSIS
9932
9933  use Sys::Guestfs;
9934
9935  my $h = Sys::Guestfs->new ();
9936  $h->add_drive ('guest.img');
9937  $h->launch ();
9938  $h->mount ('/dev/sda1', '/');
9939  $h->touch ('/hello');
9940  $h->sync ();
9941
9942 =head1 DESCRIPTION
9943
9944 The C<Sys::Guestfs> module provides a Perl XS binding to the
9945 libguestfs API for examining and modifying virtual machine
9946 disk images.
9947
9948 Amongst the things this is good for: making batch configuration
9949 changes to guests, getting disk used/free statistics (see also:
9950 virt-df), migrating between virtualization systems (see also:
9951 virt-p2v), performing partial backups, performing partial guest
9952 clones, cloning guests and changing registry/UUID/hostname info, and
9953 much else besides.
9954
9955 Libguestfs uses Linux kernel and qemu code, and can access any type of
9956 guest filesystem that Linux and qemu can, including but not limited
9957 to: ext2/3/4, btrfs, FAT and NTFS, LVM, many different disk partition
9958 schemes, qcow, qcow2, vmdk.
9959
9960 Libguestfs provides ways to enumerate guest storage (eg. partitions,
9961 LVs, what filesystem is in each LV, etc.).  It can also run commands
9962 in the context of the guest.  Also you can access filesystems over
9963 FUSE.
9964
9965 See also L<Sys::Guestfs::Lib(3)> for a set of useful library
9966 functions for using libguestfs from Perl, including integration
9967 with libvirt.
9968
9969 =head1 ERRORS
9970
9971 All errors turn into calls to C<croak> (see L<Carp(3)>).
9972
9973 =head1 METHODS
9974
9975 =over 4
9976
9977 =cut
9978
9979 package Sys::Guestfs;
9980
9981 use strict;
9982 use warnings;
9983
9984 # This version number changes whenever a new function
9985 # is added to the libguestfs API.  It is not directly
9986 # related to the libguestfs version number.
9987 use vars qw($VERSION);
9988 $VERSION = '0.%d';
9989
9990 require XSLoader;
9991 XSLoader::load ('Sys::Guestfs');
9992
9993 =item $h = Sys::Guestfs->new ();
9994
9995 Create a new guestfs handle.
9996
9997 =cut
9998
9999 sub new {
10000   my $proto = shift;
10001   my $class = ref ($proto) || $proto;
10002
10003   my $g = Sys::Guestfs::_create ();
10004   my $self = { _g => $g };
10005   bless $self, $class;
10006   return $self;
10007 }
10008
10009 =item $h->close ();
10010
10011 Explicitly close the guestfs handle.
10012
10013 B<Note:> You should not usually call this function.  The handle will
10014 be closed implicitly when its reference count goes to zero (eg.
10015 when it goes out of scope or the program ends).  This call is
10016 only required in some exceptional cases, such as where the program
10017 may contain cached references to the handle 'somewhere' and you
10018 really have to have the close happen right away.  After calling
10019 C<close> the program must not call any method (including C<close>)
10020 on the handle (but the implicit call to C<DESTROY> that happens
10021 when the final reference is cleaned up is OK).
10022
10023 =item $h->set_progress_callback (\\&cb);
10024
10025 Set the progress notification callback for this handle
10026 to the Perl closure C<cb>.
10027
10028 C<cb> will be called whenever a long-running operation
10029 generates a progress notification message.  The 4 parameters
10030 to the function are: C<proc_nr>, C<serial>, C<position>
10031 and C<total>.
10032
10033 You should carefully read the documentation for
10034 L<guestfs(3)/guestfs_set_progress_callback> before using
10035 this function.
10036
10037 =item $h->clear_progress_callback ();
10038
10039 This removes any progress callback function associated with
10040 the handle.
10041
10042 =cut
10043
10044 " max_proc_nr;
10045
10046   (* Actions.  We only need to print documentation for these as
10047    * they are pulled in from the XS code automatically.
10048    *)
10049   List.iter (
10050     fun (name, style, _, flags, _, _, longdesc) ->
10051       if not (List.mem NotInDocs flags) then (
10052         let longdesc = replace_str longdesc "C<guestfs_" "C<$h-E<gt>" in
10053         pr "=item ";
10054         generate_perl_prototype name style;
10055         pr "\n\n";
10056         pr "%s\n\n" longdesc;
10057         if List.mem ProtocolLimitWarning flags then
10058           pr "%s\n\n" protocol_limit_warning;
10059         if List.mem DangerWillRobinson flags then
10060           pr "%s\n\n" danger_will_robinson;
10061         match deprecation_notice flags with
10062         | None -> ()
10063         | Some txt -> pr "%s\n\n" txt
10064       )
10065   ) all_functions_sorted;
10066
10067   (* End of file. *)
10068   pr "\
10069 =cut
10070
10071 1;
10072
10073 =back
10074
10075 =head1 AVAILABILITY
10076
10077 From time to time we add new libguestfs APIs.  Also some libguestfs
10078 APIs won't be available in all builds of libguestfs (the Fedora
10079 build is full-featured, but other builds may disable features).
10080 How do you test whether the APIs that your Perl program needs are
10081 available in the version of C<Sys::Guestfs> that you are using?
10082
10083 To test if a particular function is available in the C<Sys::Guestfs>
10084 class, use the ordinary Perl UNIVERSAL method C<can(METHOD)>
10085 (see L<perlobj(1)>).  For example:
10086
10087  use Sys::Guestfs;
10088  if (defined (Sys::Guestfs->can (\"set_verbose\"))) {
10089    print \"\\$h->set_verbose is available\\n\";
10090  }
10091
10092 To test if particular features are supported by the current
10093 build, use the L</available> method like the example below.  Note
10094 that the appliance must be launched first.
10095
10096  $h->available ( [\"augeas\"] );
10097
10098 Since the L</available> method croaks if the feature is not supported,
10099 you might also want to wrap this in an eval and return a boolean.
10100 In fact this has already been done for you: use
10101 L<Sys::Guestfs::Lib(3)/feature_available>.
10102
10103 For further discussion on this topic, refer to
10104 L<guestfs(3)/AVAILABILITY>.
10105
10106 =head1 STORING DATA IN THE HANDLE
10107
10108 The handle returned from L</new> is a hash reference.  The hash
10109 normally contains a single element:
10110
10111  {
10112    _g => [private data used by libguestfs]
10113  }
10114
10115 Callers can add other elements to this hash to store data for their own
10116 purposes.  The data lasts for the lifetime of the handle.
10117
10118 Any fields whose names begin with an underscore are reserved
10119 for private use by libguestfs.  We may add more in future.
10120
10121 It is recommended that callers prefix the name of their field(s)
10122 with some unique string, to avoid conflicts with other users.
10123
10124 =head1 COPYRIGHT
10125
10126 Copyright (C) %s Red Hat Inc.
10127
10128 =head1 LICENSE
10129
10130 Please see the file COPYING.LIB for the full license.
10131
10132 =head1 SEE ALSO
10133
10134 L<guestfs(3)>,
10135 L<guestfish(1)>,
10136 L<http://libguestfs.org>,
10137 L<Sys::Guestfs::Lib(3)>.
10138
10139 =cut
10140 " copyright_years
10141
10142 and generate_perl_prototype name style =
10143   (match fst style with
10144    | RErr -> ()
10145    | RBool n
10146    | RInt n
10147    | RInt64 n
10148    | RConstString n
10149    | RConstOptString n
10150    | RString n
10151    | RBufferOut n -> pr "$%s = " n
10152    | RStruct (n,_)
10153    | RHashtable n -> pr "%%%s = " n
10154    | RStringList n
10155    | RStructList (n,_) -> pr "@%s = " n
10156   );
10157   pr "$h->%s (" name;
10158   let comma = ref false in
10159   List.iter (
10160     fun arg ->
10161       if !comma then pr ", ";
10162       comma := true;
10163       match arg with
10164       | Pathname n | Device n | Dev_or_Path n | String n
10165       | OptString n | Bool n | Int n | Int64 n | FileIn n | FileOut n
10166       | BufferIn n | Key n ->
10167           pr "$%s" n
10168       | StringList n | DeviceList n ->
10169           pr "\\@%s" n
10170   ) (snd style);
10171   pr ");"
10172
10173 (* Generate Python C module. *)
10174 and generate_python_c () =
10175   generate_header CStyle LGPLv2plus;
10176
10177   pr "\
10178 #define PY_SSIZE_T_CLEAN 1
10179 #include <Python.h>
10180
10181 #if PY_VERSION_HEX < 0x02050000
10182 typedef int Py_ssize_t;
10183 #define PY_SSIZE_T_MAX INT_MAX
10184 #define PY_SSIZE_T_MIN INT_MIN
10185 #endif
10186
10187 #include <stdio.h>
10188 #include <stdlib.h>
10189 #include <assert.h>
10190
10191 #include \"guestfs.h\"
10192
10193 #ifndef HAVE_PYCAPSULE_NEW
10194 typedef struct {
10195   PyObject_HEAD
10196   guestfs_h *g;
10197 } Pyguestfs_Object;
10198 #endif
10199
10200 static guestfs_h *
10201 get_handle (PyObject *obj)
10202 {
10203   assert (obj);
10204   assert (obj != Py_None);
10205 #ifndef HAVE_PYCAPSULE_NEW
10206   return ((Pyguestfs_Object *) obj)->g;
10207 #else
10208   return (guestfs_h*) PyCapsule_GetPointer(obj, \"guestfs_h\");
10209 #endif
10210 }
10211
10212 static PyObject *
10213 put_handle (guestfs_h *g)
10214 {
10215   assert (g);
10216 #ifndef HAVE_PYCAPSULE_NEW
10217   return
10218     PyCObject_FromVoidPtrAndDesc ((void *) g, (char *) \"guestfs_h\", NULL);
10219 #else
10220   return PyCapsule_New ((void *) g, \"guestfs_h\", NULL);
10221 #endif
10222 }
10223
10224 /* This list should be freed (but not the strings) after use. */
10225 static char **
10226 get_string_list (PyObject *obj)
10227 {
10228   size_t i, len;
10229   char **r;
10230
10231   assert (obj);
10232
10233   if (!PyList_Check (obj)) {
10234     PyErr_SetString (PyExc_RuntimeError, \"expecting a list parameter\");
10235     return NULL;
10236   }
10237
10238   Py_ssize_t slen = PyList_Size (obj);
10239   if (slen == -1) {
10240     PyErr_SetString (PyExc_RuntimeError, \"get_string_list: PyList_Size failure\");
10241     return NULL;
10242   }
10243   len = (size_t) slen;
10244   r = malloc (sizeof (char *) * (len+1));
10245   if (r == NULL) {
10246     PyErr_SetString (PyExc_RuntimeError, \"get_string_list: out of memory\");
10247     return NULL;
10248   }
10249
10250   for (i = 0; i < len; ++i)
10251     r[i] = PyString_AsString (PyList_GetItem (obj, i));
10252   r[len] = NULL;
10253
10254   return r;
10255 }
10256
10257 static PyObject *
10258 put_string_list (char * const * const argv)
10259 {
10260   PyObject *list;
10261   int argc, i;
10262
10263   for (argc = 0; argv[argc] != NULL; ++argc)
10264     ;
10265
10266   list = PyList_New (argc);
10267   for (i = 0; i < argc; ++i)
10268     PyList_SetItem (list, i, PyString_FromString (argv[i]));
10269
10270   return list;
10271 }
10272
10273 static PyObject *
10274 put_table (char * const * const argv)
10275 {
10276   PyObject *list, *item;
10277   int argc, i;
10278
10279   for (argc = 0; argv[argc] != NULL; ++argc)
10280     ;
10281
10282   list = PyList_New (argc >> 1);
10283   for (i = 0; i < argc; i += 2) {
10284     item = PyTuple_New (2);
10285     PyTuple_SetItem (item, 0, PyString_FromString (argv[i]));
10286     PyTuple_SetItem (item, 1, PyString_FromString (argv[i+1]));
10287     PyList_SetItem (list, i >> 1, item);
10288   }
10289
10290   return list;
10291 }
10292
10293 static void
10294 free_strings (char **argv)
10295 {
10296   int argc;
10297
10298   for (argc = 0; argv[argc] != NULL; ++argc)
10299     free (argv[argc]);
10300   free (argv);
10301 }
10302
10303 static PyObject *
10304 py_guestfs_create (PyObject *self, PyObject *args)
10305 {
10306   guestfs_h *g;
10307
10308   g = guestfs_create ();
10309   if (g == NULL) {
10310     PyErr_SetString (PyExc_RuntimeError,
10311                      \"guestfs.create: failed to allocate handle\");
10312     return NULL;
10313   }
10314   guestfs_set_error_handler (g, NULL, NULL);
10315   /* This can return NULL, but in that case put_handle will have
10316    * set the Python error string.
10317    */
10318   return put_handle (g);
10319 }
10320
10321 static PyObject *
10322 py_guestfs_close (PyObject *self, PyObject *args)
10323 {
10324   PyObject *py_g;
10325   guestfs_h *g;
10326
10327   if (!PyArg_ParseTuple (args, (char *) \"O:guestfs_close\", &py_g))
10328     return NULL;
10329   g = get_handle (py_g);
10330
10331   guestfs_close (g);
10332
10333   Py_INCREF (Py_None);
10334   return Py_None;
10335 }
10336
10337 ";
10338
10339   let emit_put_list_function typ =
10340     pr "static PyObject *\n";
10341     pr "put_%s_list (struct guestfs_%s_list *%ss)\n" typ typ typ;
10342     pr "{\n";
10343     pr "  PyObject *list;\n";
10344     pr "  size_t i;\n";
10345     pr "\n";
10346     pr "  list = PyList_New (%ss->len);\n" typ;
10347     pr "  for (i = 0; i < %ss->len; ++i)\n" typ;
10348     pr "    PyList_SetItem (list, i, put_%s (&%ss->val[i]));\n" typ typ;
10349     pr "  return list;\n";
10350     pr "};\n";
10351     pr "\n"
10352   in
10353
10354   (* Structures, turned into Python dictionaries. *)
10355   List.iter (
10356     fun (typ, cols) ->
10357       pr "static PyObject *\n";
10358       pr "put_%s (struct guestfs_%s *%s)\n" typ typ typ;
10359       pr "{\n";
10360       pr "  PyObject *dict;\n";
10361       pr "\n";
10362       pr "  dict = PyDict_New ();\n";
10363       List.iter (
10364         function
10365         | name, FString ->
10366             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
10367             pr "                        PyString_FromString (%s->%s));\n"
10368               typ name
10369         | name, FBuffer ->
10370             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
10371             pr "                        PyString_FromStringAndSize (%s->%s, %s->%s_len));\n"
10372               typ name typ name
10373         | name, FUUID ->
10374             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
10375             pr "                        PyString_FromStringAndSize (%s->%s, 32));\n"
10376               typ name
10377         | name, (FBytes|FUInt64) ->
10378             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
10379             pr "                        PyLong_FromUnsignedLongLong (%s->%s));\n"
10380               typ name
10381         | name, FInt64 ->
10382             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
10383             pr "                        PyLong_FromLongLong (%s->%s));\n"
10384               typ name
10385         | name, FUInt32 ->
10386             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
10387             pr "                        PyLong_FromUnsignedLong (%s->%s));\n"
10388               typ name
10389         | name, FInt32 ->
10390             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
10391             pr "                        PyLong_FromLong (%s->%s));\n"
10392               typ name
10393         | name, FOptPercent ->
10394             pr "  if (%s->%s >= 0)\n" typ name;
10395             pr "    PyDict_SetItemString (dict, \"%s\",\n" name;
10396             pr "                          PyFloat_FromDouble ((double) %s->%s));\n"
10397               typ name;
10398             pr "  else {\n";
10399             pr "    Py_INCREF (Py_None);\n";
10400             pr "    PyDict_SetItemString (dict, \"%s\", Py_None);\n" name;
10401             pr "  }\n"
10402         | name, FChar ->
10403             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
10404             pr "                        PyString_FromStringAndSize (&dirent->%s, 1));\n" name
10405       ) cols;
10406       pr "  return dict;\n";
10407       pr "};\n";
10408       pr "\n";
10409
10410   ) structs;
10411
10412   (* Emit a put_TYPE_list function definition only if that function is used. *)
10413   List.iter (
10414     function
10415     | typ, (RStructListOnly | RStructAndList) ->
10416         (* generate the function for typ *)
10417         emit_put_list_function typ
10418     | typ, _ -> () (* empty *)
10419   ) (rstructs_used_by all_functions);
10420
10421   (* Python wrapper functions. *)
10422   List.iter (
10423     fun (name, style, _, _, _, _, _) ->
10424       pr "static PyObject *\n";
10425       pr "py_guestfs_%s (PyObject *self, PyObject *args)\n" name;
10426       pr "{\n";
10427
10428       pr "  PyObject *py_g;\n";
10429       pr "  guestfs_h *g;\n";
10430       pr "  PyObject *py_r;\n";
10431
10432       let error_code =
10433         match fst style with
10434         | RErr | RInt _ | RBool _ -> pr "  int r;\n"; "-1"
10435         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
10436         | RConstString _ | RConstOptString _ ->
10437             pr "  const char *r;\n"; "NULL"
10438         | RString _ -> pr "  char *r;\n"; "NULL"
10439         | RStringList _ | RHashtable _ -> pr "  char **r;\n"; "NULL"
10440         | RStruct (_, typ) -> pr "  struct guestfs_%s *r;\n" typ; "NULL"
10441         | RStructList (_, typ) ->
10442             pr "  struct guestfs_%s_list *r;\n" typ; "NULL"
10443         | RBufferOut _ ->
10444             pr "  char *r;\n";
10445             pr "  size_t size;\n";
10446             "NULL" in
10447
10448       List.iter (
10449         function
10450         | Pathname n | Device n | Dev_or_Path n | String n | Key n
10451         | FileIn n | FileOut n ->
10452             pr "  const char *%s;\n" n
10453         | OptString n -> pr "  const char *%s;\n" n
10454         | BufferIn n ->
10455             pr "  const char *%s;\n" n;
10456             pr "  Py_ssize_t %s_size;\n" n
10457         | StringList n | DeviceList n ->
10458             pr "  PyObject *py_%s;\n" n;
10459             pr "  char **%s;\n" n
10460         | Bool n -> pr "  int %s;\n" n
10461         | Int n -> pr "  int %s;\n" n
10462         | Int64 n -> pr "  long long %s;\n" n
10463       ) (snd style);
10464
10465       pr "\n";
10466
10467       (* Convert the parameters. *)
10468       pr "  if (!PyArg_ParseTuple (args, (char *) \"O";
10469       List.iter (
10470         function
10471         | Pathname _ | Device _ | Dev_or_Path _ | String _ | Key _
10472         | FileIn _ | FileOut _ -> pr "s"
10473         | OptString _ -> pr "z"
10474         | StringList _ | DeviceList _ -> pr "O"
10475         | Bool _ -> pr "i" (* XXX Python has booleans? *)
10476         | Int _ -> pr "i"
10477         | Int64 _ -> pr "L" (* XXX Whoever thought it was a good idea to
10478                              * emulate C's int/long/long long in Python?
10479                              *)
10480         | BufferIn _ -> pr "s#"
10481       ) (snd style);
10482       pr ":guestfs_%s\",\n" name;
10483       pr "                         &py_g";
10484       List.iter (
10485         function
10486         | Pathname n | Device n | Dev_or_Path n | String n | Key n
10487         | FileIn n | FileOut n -> pr ", &%s" n
10488         | OptString n -> pr ", &%s" n
10489         | StringList n | DeviceList n -> pr ", &py_%s" n
10490         | Bool n -> pr ", &%s" n
10491         | Int n -> pr ", &%s" n
10492         | Int64 n -> pr ", &%s" n
10493         | BufferIn n -> pr ", &%s, &%s_size" n n
10494       ) (snd style);
10495
10496       pr "))\n";
10497       pr "    return NULL;\n";
10498
10499       pr "  g = get_handle (py_g);\n";
10500       List.iter (
10501         function
10502         | Pathname _ | Device _ | Dev_or_Path _ | String _ | Key _
10503         | FileIn _ | FileOut _ | OptString _ | Bool _ | Int _ | Int64 _
10504         | BufferIn _ -> ()
10505         | StringList n | DeviceList n ->
10506             pr "  %s = get_string_list (py_%s);\n" n n;
10507             pr "  if (!%s) return NULL;\n" n
10508       ) (snd style);
10509
10510       pr "\n";
10511
10512       pr "  r = guestfs_%s " name;
10513       generate_c_call_args ~handle:"g" style;
10514       pr ";\n";
10515
10516       List.iter (
10517         function
10518         | Pathname _ | Device _ | Dev_or_Path _ | String _ | Key _
10519         | FileIn _ | FileOut _ | OptString _ | Bool _ | Int _ | Int64 _
10520         | BufferIn _ -> ()
10521         | StringList n | DeviceList n ->
10522             pr "  free (%s);\n" n
10523       ) (snd style);
10524
10525       pr "  if (r == %s) {\n" error_code;
10526       pr "    PyErr_SetString (PyExc_RuntimeError, guestfs_last_error (g));\n";
10527       pr "    return NULL;\n";
10528       pr "  }\n";
10529       pr "\n";
10530
10531       (match fst style with
10532        | RErr ->
10533            pr "  Py_INCREF (Py_None);\n";
10534            pr "  py_r = Py_None;\n"
10535        | RInt _
10536        | RBool _ -> pr "  py_r = PyInt_FromLong ((long) r);\n"
10537        | RInt64 _ -> pr "  py_r = PyLong_FromLongLong (r);\n"
10538        | RConstString _ -> pr "  py_r = PyString_FromString (r);\n"
10539        | RConstOptString _ ->
10540            pr "  if (r)\n";
10541            pr "    py_r = PyString_FromString (r);\n";
10542            pr "  else {\n";
10543            pr "    Py_INCREF (Py_None);\n";
10544            pr "    py_r = Py_None;\n";
10545            pr "  }\n"
10546        | RString _ ->
10547            pr "  py_r = PyString_FromString (r);\n";
10548            pr "  free (r);\n"
10549        | RStringList _ ->
10550            pr "  py_r = put_string_list (r);\n";
10551            pr "  free_strings (r);\n"
10552        | RStruct (_, typ) ->
10553            pr "  py_r = put_%s (r);\n" typ;
10554            pr "  guestfs_free_%s (r);\n" typ
10555        | RStructList (_, typ) ->
10556            pr "  py_r = put_%s_list (r);\n" typ;
10557            pr "  guestfs_free_%s_list (r);\n" typ
10558        | RHashtable n ->
10559            pr "  py_r = put_table (r);\n";
10560            pr "  free_strings (r);\n"
10561        | RBufferOut _ ->
10562            pr "  py_r = PyString_FromStringAndSize (r, size);\n";
10563            pr "  free (r);\n"
10564       );
10565
10566       pr "  return py_r;\n";
10567       pr "}\n";
10568       pr "\n"
10569   ) all_functions;
10570
10571   (* Table of functions. *)
10572   pr "static PyMethodDef methods[] = {\n";
10573   pr "  { (char *) \"create\", py_guestfs_create, METH_VARARGS, NULL },\n";
10574   pr "  { (char *) \"close\", py_guestfs_close, METH_VARARGS, NULL },\n";
10575   List.iter (
10576     fun (name, _, _, _, _, _, _) ->
10577       pr "  { (char *) \"%s\", py_guestfs_%s, METH_VARARGS, NULL },\n"
10578         name name
10579   ) all_functions;
10580   pr "  { NULL, NULL, 0, NULL }\n";
10581   pr "};\n";
10582   pr "\n";
10583
10584   (* Init function. *)
10585   pr "\
10586 void
10587 initlibguestfsmod (void)
10588 {
10589   static int initialized = 0;
10590
10591   if (initialized) return;
10592   Py_InitModule ((char *) \"libguestfsmod\", methods);
10593   initialized = 1;
10594 }
10595 "
10596
10597 (* Generate Python module. *)
10598 and generate_python_py () =
10599   generate_header HashStyle LGPLv2plus;
10600
10601   pr "\
10602 u\"\"\"Python bindings for libguestfs
10603
10604 import guestfs
10605 g = guestfs.GuestFS ()
10606 g.add_drive (\"guest.img\")
10607 g.launch ()
10608 parts = g.list_partitions ()
10609
10610 The guestfs module provides a Python binding to the libguestfs API
10611 for examining and modifying virtual machine disk images.
10612
10613 Amongst the things this is good for: making batch configuration
10614 changes to guests, getting disk used/free statistics (see also:
10615 virt-df), migrating between virtualization systems (see also:
10616 virt-p2v), performing partial backups, performing partial guest
10617 clones, cloning guests and changing registry/UUID/hostname info, and
10618 much else besides.
10619
10620 Libguestfs uses Linux kernel and qemu code, and can access any type of
10621 guest filesystem that Linux and qemu can, including but not limited
10622 to: ext2/3/4, btrfs, FAT and NTFS, LVM, many different disk partition
10623 schemes, qcow, qcow2, vmdk.
10624
10625 Libguestfs provides ways to enumerate guest storage (eg. partitions,
10626 LVs, what filesystem is in each LV, etc.).  It can also run commands
10627 in the context of the guest.  Also you can access filesystems over
10628 FUSE.
10629
10630 Errors which happen while using the API are turned into Python
10631 RuntimeError exceptions.
10632
10633 To create a guestfs handle you usually have to perform the following
10634 sequence of calls:
10635
10636 # Create the handle, call add_drive at least once, and possibly
10637 # several times if the guest has multiple block devices:
10638 g = guestfs.GuestFS ()
10639 g.add_drive (\"guest.img\")
10640
10641 # Launch the qemu subprocess and wait for it to become ready:
10642 g.launch ()
10643
10644 # Now you can issue commands, for example:
10645 logvols = g.lvs ()
10646
10647 \"\"\"
10648
10649 import libguestfsmod
10650
10651 class GuestFS:
10652     \"\"\"Instances of this class are libguestfs API handles.\"\"\"
10653
10654     def __init__ (self):
10655         \"\"\"Create a new libguestfs handle.\"\"\"
10656         self._o = libguestfsmod.create ()
10657
10658     def __del__ (self):
10659         libguestfsmod.close (self._o)
10660
10661 ";
10662
10663   List.iter (
10664     fun (name, style, _, flags, _, _, longdesc) ->
10665       pr "    def %s " name;
10666       generate_py_call_args ~handle:"self" (snd style);
10667       pr ":\n";
10668
10669       if not (List.mem NotInDocs flags) then (
10670         let doc = replace_str longdesc "C<guestfs_" "C<g." in
10671         let doc =
10672           match fst style with
10673           | RErr | RInt _ | RInt64 _ | RBool _
10674           | RConstOptString _ | RConstString _
10675           | RString _ | RBufferOut _ -> doc
10676           | RStringList _ ->
10677               doc ^ "\n\nThis function returns a list of strings."
10678           | RStruct (_, typ) ->
10679               doc ^ sprintf "\n\nThis function returns a dictionary, with keys matching the various fields in the guestfs_%s structure." typ
10680           | RStructList (_, typ) ->
10681               doc ^ sprintf "\n\nThis function returns a list of %ss.  Each %s is represented as a dictionary." typ typ
10682           | RHashtable _ ->
10683               doc ^ "\n\nThis function returns a dictionary." in
10684         let doc =
10685           if List.mem ProtocolLimitWarning flags then
10686             doc ^ "\n\n" ^ protocol_limit_warning
10687           else doc in
10688         let doc =
10689           if List.mem DangerWillRobinson flags then
10690             doc ^ "\n\n" ^ danger_will_robinson
10691           else doc in
10692         let doc =
10693           match deprecation_notice flags with
10694           | None -> doc
10695           | Some txt -> doc ^ "\n\n" ^ txt in
10696         let doc = pod2text ~width:60 name doc in
10697         let doc = List.map (fun line -> replace_str line "\\" "\\\\") doc in
10698         let doc = String.concat "\n        " doc in
10699         pr "        u\"\"\"%s\"\"\"\n" doc;
10700       );
10701       pr "        return libguestfsmod.%s " name;
10702       generate_py_call_args ~handle:"self._o" (snd style);
10703       pr "\n";
10704       pr "\n";
10705   ) all_functions
10706
10707 (* Generate Python call arguments, eg "(handle, foo, bar)" *)
10708 and generate_py_call_args ~handle args =
10709   pr "(%s" handle;
10710   List.iter (fun arg -> pr ", %s" (name_of_argt arg)) args;
10711   pr ")"
10712
10713 (* Useful if you need the longdesc POD text as plain text.  Returns a
10714  * list of lines.
10715  *
10716  * Because this is very slow (the slowest part of autogeneration),
10717  * we memoize the results.
10718  *)
10719 and pod2text ~width name longdesc =
10720   let key = width, name, longdesc in
10721   try Hashtbl.find pod2text_memo key
10722   with Not_found ->
10723     let filename, chan = Filename.open_temp_file "gen" ".tmp" in
10724     fprintf chan "=head1 %s\n\n%s\n" name longdesc;
10725     close_out chan;
10726     let cmd = sprintf "pod2text -w %d %s" width (Filename.quote filename) in
10727     let chan = open_process_in cmd in
10728     let lines = ref [] in
10729     let rec loop i =
10730       let line = input_line chan in
10731       if i = 1 then             (* discard the first line of output *)
10732         loop (i+1)
10733       else (
10734         let line = triml line in
10735         lines := line :: !lines;
10736         loop (i+1)
10737       ) in
10738     let lines = try loop 1 with End_of_file -> List.rev !lines in
10739     unlink filename;
10740     (match close_process_in chan with
10741      | WEXITED 0 -> ()
10742      | WEXITED i ->
10743          failwithf "pod2text: process exited with non-zero status (%d)" i
10744      | WSIGNALED i | WSTOPPED i ->
10745          failwithf "pod2text: process signalled or stopped by signal %d" i
10746     );
10747     Hashtbl.add pod2text_memo key lines;
10748     pod2text_memo_updated ();
10749     lines
10750
10751 (* Generate ruby bindings. *)
10752 and generate_ruby_c () =
10753   generate_header CStyle LGPLv2plus;
10754
10755   pr "\
10756 #include <stdio.h>
10757 #include <stdlib.h>
10758
10759 #include <ruby.h>
10760
10761 #include \"guestfs.h\"
10762
10763 #include \"extconf.h\"
10764
10765 /* For Ruby < 1.9 */
10766 #ifndef RARRAY_LEN
10767 #define RARRAY_LEN(r) (RARRAY((r))->len)
10768 #endif
10769
10770 static VALUE m_guestfs;                 /* guestfs module */
10771 static VALUE c_guestfs;                 /* guestfs_h handle */
10772 static VALUE e_Error;                   /* used for all errors */
10773
10774 static void ruby_guestfs_free (void *p)
10775 {
10776   if (!p) return;
10777   guestfs_close ((guestfs_h *) p);
10778 }
10779
10780 static VALUE ruby_guestfs_create (VALUE m)
10781 {
10782   guestfs_h *g;
10783
10784   g = guestfs_create ();
10785   if (!g)
10786     rb_raise (e_Error, \"failed to create guestfs handle\");
10787
10788   /* Don't print error messages to stderr by default. */
10789   guestfs_set_error_handler (g, NULL, NULL);
10790
10791   /* Wrap it, and make sure the close function is called when the
10792    * handle goes away.
10793    */
10794   return Data_Wrap_Struct (c_guestfs, NULL, ruby_guestfs_free, g);
10795 }
10796
10797 static VALUE ruby_guestfs_close (VALUE gv)
10798 {
10799   guestfs_h *g;
10800   Data_Get_Struct (gv, guestfs_h, g);
10801
10802   ruby_guestfs_free (g);
10803   DATA_PTR (gv) = NULL;
10804
10805   return Qnil;
10806 }
10807
10808 ";
10809
10810   List.iter (
10811     fun (name, style, _, _, _, _, _) ->
10812       pr "static VALUE ruby_guestfs_%s (VALUE gv" name;
10813       List.iter (fun arg -> pr ", VALUE %sv" (name_of_argt arg)) (snd style);
10814       pr ")\n";
10815       pr "{\n";
10816       pr "  guestfs_h *g;\n";
10817       pr "  Data_Get_Struct (gv, guestfs_h, g);\n";
10818       pr "  if (!g)\n";
10819       pr "    rb_raise (rb_eArgError, \"%%s: used handle after closing it\", \"%s\");\n"
10820         name;
10821       pr "\n";
10822
10823       List.iter (
10824         function
10825         | Pathname n | Device n | Dev_or_Path n | String n | Key n
10826         | FileIn n | FileOut n ->
10827             pr "  Check_Type (%sv, T_STRING);\n" n;
10828             pr "  const char *%s = StringValueCStr (%sv);\n" n n;
10829             pr "  if (!%s)\n" n;
10830             pr "    rb_raise (rb_eTypeError, \"expected string for parameter %%s of %%s\",\n";
10831             pr "              \"%s\", \"%s\");\n" n name
10832         | BufferIn n ->
10833             pr "  Check_Type (%sv, T_STRING);\n" n;
10834             pr "  const char *%s = RSTRING (%sv)->ptr;\n" n n;
10835             pr "  if (!%s)\n" n;
10836             pr "    rb_raise (rb_eTypeError, \"expected string for parameter %%s of %%s\",\n";
10837             pr "              \"%s\", \"%s\");\n" n name;
10838             pr "  size_t %s_size = RSTRING (%sv)->len;\n" n n
10839         | OptString n ->
10840             pr "  const char *%s = !NIL_P (%sv) ? StringValueCStr (%sv) : NULL;\n" n n n
10841         | StringList n | DeviceList n ->
10842             pr "  char **%s;\n" n;
10843             pr "  Check_Type (%sv, T_ARRAY);\n" n;
10844             pr "  {\n";
10845             pr "    size_t i, len;\n";
10846             pr "    len = RARRAY_LEN (%sv);\n" n;
10847             pr "    %s = guestfs_safe_malloc (g, sizeof (char *) * (len+1));\n"
10848               n;
10849             pr "    for (i = 0; i < len; ++i) {\n";
10850             pr "      VALUE v = rb_ary_entry (%sv, i);\n" n;
10851             pr "      %s[i] = StringValueCStr (v);\n" n;
10852             pr "    }\n";
10853             pr "    %s[len] = NULL;\n" n;
10854             pr "  }\n";
10855         | Bool n ->
10856             pr "  int %s = RTEST (%sv);\n" n n
10857         | Int n ->
10858             pr "  int %s = NUM2INT (%sv);\n" n n
10859         | Int64 n ->
10860             pr "  long long %s = NUM2LL (%sv);\n" n n
10861       ) (snd style);
10862       pr "\n";
10863
10864       let error_code =
10865         match fst style with
10866         | RErr | RInt _ | RBool _ -> pr "  int r;\n"; "-1"
10867         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
10868         | RConstString _ | RConstOptString _ ->
10869             pr "  const char *r;\n"; "NULL"
10870         | RString _ -> pr "  char *r;\n"; "NULL"
10871         | RStringList _ | RHashtable _ -> pr "  char **r;\n"; "NULL"
10872         | RStruct (_, typ) -> pr "  struct guestfs_%s *r;\n" typ; "NULL"
10873         | RStructList (_, typ) ->
10874             pr "  struct guestfs_%s_list *r;\n" typ; "NULL"
10875         | RBufferOut _ ->
10876             pr "  char *r;\n";
10877             pr "  size_t size;\n";
10878             "NULL" in
10879       pr "\n";
10880
10881       pr "  r = guestfs_%s " name;
10882       generate_c_call_args ~handle:"g" style;
10883       pr ";\n";
10884
10885       List.iter (
10886         function
10887         | Pathname _ | Device _ | Dev_or_Path _ | String _ | Key _
10888         | FileIn _ | FileOut _ | OptString _ | Bool _ | Int _ | Int64 _
10889         | BufferIn _ -> ()
10890         | StringList n | DeviceList n ->
10891             pr "  free (%s);\n" n
10892       ) (snd style);
10893
10894       pr "  if (r == %s)\n" error_code;
10895       pr "    rb_raise (e_Error, \"%%s\", guestfs_last_error (g));\n";
10896       pr "\n";
10897
10898       (match fst style with
10899        | RErr ->
10900            pr "  return Qnil;\n"
10901        | RInt _ | RBool _ ->
10902            pr "  return INT2NUM (r);\n"
10903        | RInt64 _ ->
10904            pr "  return ULL2NUM (r);\n"
10905        | RConstString _ ->
10906            pr "  return rb_str_new2 (r);\n";
10907        | RConstOptString _ ->
10908            pr "  if (r)\n";
10909            pr "    return rb_str_new2 (r);\n";
10910            pr "  else\n";
10911            pr "    return Qnil;\n";
10912        | RString _ ->
10913            pr "  VALUE rv = rb_str_new2 (r);\n";
10914            pr "  free (r);\n";
10915            pr "  return rv;\n";
10916        | RStringList _ ->
10917            pr "  size_t i, len = 0;\n";
10918            pr "  for (i = 0; r[i] != NULL; ++i) len++;\n";
10919            pr "  VALUE rv = rb_ary_new2 (len);\n";
10920            pr "  for (i = 0; r[i] != NULL; ++i) {\n";
10921            pr "    rb_ary_push (rv, rb_str_new2 (r[i]));\n";
10922            pr "    free (r[i]);\n";
10923            pr "  }\n";
10924            pr "  free (r);\n";
10925            pr "  return rv;\n"
10926        | RStruct (_, typ) ->
10927            let cols = cols_of_struct typ in
10928            generate_ruby_struct_code typ cols
10929        | RStructList (_, typ) ->
10930            let cols = cols_of_struct typ in
10931            generate_ruby_struct_list_code typ cols
10932        | RHashtable _ ->
10933            pr "  VALUE rv = rb_hash_new ();\n";
10934            pr "  size_t i;\n";
10935            pr "  for (i = 0; r[i] != NULL; i+=2) {\n";
10936            pr "    rb_hash_aset (rv, rb_str_new2 (r[i]), rb_str_new2 (r[i+1]));\n";
10937            pr "    free (r[i]);\n";
10938            pr "    free (r[i+1]);\n";
10939            pr "  }\n";
10940            pr "  free (r);\n";
10941            pr "  return rv;\n"
10942        | RBufferOut _ ->
10943            pr "  VALUE rv = rb_str_new (r, size);\n";
10944            pr "  free (r);\n";
10945            pr "  return rv;\n";
10946       );
10947
10948       pr "}\n";
10949       pr "\n"
10950   ) all_functions;
10951
10952   pr "\
10953 /* Initialize the module. */
10954 void Init__guestfs ()
10955 {
10956   m_guestfs = rb_define_module (\"Guestfs\");
10957   c_guestfs = rb_define_class_under (m_guestfs, \"Guestfs\", rb_cObject);
10958   e_Error = rb_define_class_under (m_guestfs, \"Error\", rb_eStandardError);
10959
10960 #ifdef HAVE_RB_DEFINE_ALLOC_FUNC
10961   rb_define_alloc_func (c_guestfs, ruby_guestfs_create);
10962 #endif
10963
10964   rb_define_module_function (m_guestfs, \"create\", ruby_guestfs_create, 0);
10965   rb_define_method (c_guestfs, \"close\", ruby_guestfs_close, 0);
10966
10967 ";
10968   (* Define the rest of the methods. *)
10969   List.iter (
10970     fun (name, style, _, _, _, _, _) ->
10971       pr "  rb_define_method (c_guestfs, \"%s\",\n" name;
10972       pr "        ruby_guestfs_%s, %d);\n" name (List.length (snd style))
10973   ) all_functions;
10974
10975   pr "}\n"
10976
10977 (* Ruby code to return a struct. *)
10978 and generate_ruby_struct_code typ cols =
10979   pr "  VALUE rv = rb_hash_new ();\n";
10980   List.iter (
10981     function
10982     | name, FString ->
10983         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_str_new2 (r->%s));\n" name name
10984     | name, FBuffer ->
10985         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_str_new (r->%s, r->%s_len));\n" name name name
10986     | name, FUUID ->
10987         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_str_new (r->%s, 32));\n" name name
10988     | name, (FBytes|FUInt64) ->
10989         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), ULL2NUM (r->%s));\n" name name
10990     | name, FInt64 ->
10991         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), LL2NUM (r->%s));\n" name name
10992     | name, FUInt32 ->
10993         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), UINT2NUM (r->%s));\n" name name
10994     | name, FInt32 ->
10995         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), INT2NUM (r->%s));\n" name name
10996     | name, FOptPercent ->
10997         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_dbl2big (r->%s));\n" name name
10998     | name, FChar -> (* XXX wrong? *)
10999         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), ULL2NUM (r->%s));\n" name name
11000   ) cols;
11001   pr "  guestfs_free_%s (r);\n" typ;
11002   pr "  return rv;\n"
11003
11004 (* Ruby code to return a struct list. *)
11005 and generate_ruby_struct_list_code typ cols =
11006   pr "  VALUE rv = rb_ary_new2 (r->len);\n";
11007   pr "  size_t i;\n";
11008   pr "  for (i = 0; i < r->len; ++i) {\n";
11009   pr "    VALUE hv = rb_hash_new ();\n";
11010   List.iter (
11011     function
11012     | name, FString ->
11013         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_str_new2 (r->val[i].%s));\n" name name
11014     | name, FBuffer ->
11015         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_str_new (r->val[i].%s, r->val[i].%s_len));\n" name name name
11016     | name, FUUID ->
11017         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_str_new (r->val[i].%s, 32));\n" name name
11018     | name, (FBytes|FUInt64) ->
11019         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), ULL2NUM (r->val[i].%s));\n" name name
11020     | name, FInt64 ->
11021         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), LL2NUM (r->val[i].%s));\n" name name
11022     | name, FUInt32 ->
11023         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), UINT2NUM (r->val[i].%s));\n" name name
11024     | name, FInt32 ->
11025         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), INT2NUM (r->val[i].%s));\n" name name
11026     | name, FOptPercent ->
11027         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_dbl2big (r->val[i].%s));\n" name name
11028     | name, FChar -> (* XXX wrong? *)
11029         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), ULL2NUM (r->val[i].%s));\n" name name
11030   ) cols;
11031   pr "    rb_ary_push (rv, hv);\n";
11032   pr "  }\n";
11033   pr "  guestfs_free_%s_list (r);\n" typ;
11034   pr "  return rv;\n"
11035
11036 (* Generate Java bindings GuestFS.java file. *)
11037 and generate_java_java () =
11038   generate_header CStyle LGPLv2plus;
11039
11040   pr "\
11041 package com.redhat.et.libguestfs;
11042
11043 import java.util.HashMap;
11044 import com.redhat.et.libguestfs.LibGuestFSException;
11045 import com.redhat.et.libguestfs.PV;
11046 import com.redhat.et.libguestfs.VG;
11047 import com.redhat.et.libguestfs.LV;
11048 import com.redhat.et.libguestfs.Stat;
11049 import com.redhat.et.libguestfs.StatVFS;
11050 import com.redhat.et.libguestfs.IntBool;
11051 import com.redhat.et.libguestfs.Dirent;
11052
11053 /**
11054  * The GuestFS object is a libguestfs handle.
11055  *
11056  * @author rjones
11057  */
11058 public class GuestFS {
11059   // Load the native code.
11060   static {
11061     System.loadLibrary (\"guestfs_jni\");
11062   }
11063
11064   /**
11065    * The native guestfs_h pointer.
11066    */
11067   long g;
11068
11069   /**
11070    * Create a libguestfs handle.
11071    *
11072    * @throws LibGuestFSException
11073    */
11074   public GuestFS () throws LibGuestFSException
11075   {
11076     g = _create ();
11077   }
11078   private native long _create () throws LibGuestFSException;
11079
11080   /**
11081    * Close a libguestfs handle.
11082    *
11083    * You can also leave handles to be collected by the garbage
11084    * collector, but this method ensures that the resources used
11085    * by the handle are freed up immediately.  If you call any
11086    * other methods after closing the handle, you will get an
11087    * exception.
11088    *
11089    * @throws LibGuestFSException
11090    */
11091   public void close () throws LibGuestFSException
11092   {
11093     if (g != 0)
11094       _close (g);
11095     g = 0;
11096   }
11097   private native void _close (long g) throws LibGuestFSException;
11098
11099   public void finalize () throws LibGuestFSException
11100   {
11101     close ();
11102   }
11103
11104 ";
11105
11106   List.iter (
11107     fun (name, style, _, flags, _, shortdesc, longdesc) ->
11108       if not (List.mem NotInDocs flags); then (
11109         let doc = replace_str longdesc "C<guestfs_" "C<g." in
11110         let doc =
11111           if List.mem ProtocolLimitWarning flags then
11112             doc ^ "\n\n" ^ protocol_limit_warning
11113           else doc in
11114         let doc =
11115           if List.mem DangerWillRobinson flags then
11116             doc ^ "\n\n" ^ danger_will_robinson
11117           else doc in
11118         let doc =
11119           match deprecation_notice flags with
11120           | None -> doc
11121           | Some txt -> doc ^ "\n\n" ^ txt in
11122         let doc = pod2text ~width:60 name doc in
11123         let doc = List.map (            (* RHBZ#501883 *)
11124           function
11125           | "" -> "<p>"
11126           | nonempty -> nonempty
11127         ) doc in
11128         let doc = String.concat "\n   * " doc in
11129
11130         pr "  /**\n";
11131         pr "   * %s\n" shortdesc;
11132         pr "   * <p>\n";
11133         pr "   * %s\n" doc;
11134         pr "   * @throws LibGuestFSException\n";
11135         pr "   */\n";
11136         pr "  ";
11137       );
11138       generate_java_prototype ~public:true ~semicolon:false name style;
11139       pr "\n";
11140       pr "  {\n";
11141       pr "    if (g == 0)\n";
11142       pr "      throw new LibGuestFSException (\"%s: handle is closed\");\n"
11143         name;
11144       pr "    ";
11145       if fst style <> RErr then pr "return ";
11146       pr "_%s " name;
11147       generate_java_call_args ~handle:"g" (snd style);
11148       pr ";\n";
11149       pr "  }\n";
11150       pr "  ";
11151       generate_java_prototype ~privat:true ~native:true name style;
11152       pr "\n";
11153       pr "\n";
11154   ) all_functions;
11155
11156   pr "}\n"
11157
11158 (* Generate Java call arguments, eg "(handle, foo, bar)" *)
11159 and generate_java_call_args ~handle args =
11160   pr "(%s" handle;
11161   List.iter (fun arg -> pr ", %s" (name_of_argt arg)) args;
11162   pr ")"
11163
11164 and generate_java_prototype ?(public=false) ?(privat=false) ?(native=false)
11165     ?(semicolon=true) name style =
11166   if privat then pr "private ";
11167   if public then pr "public ";
11168   if native then pr "native ";
11169
11170   (* return type *)
11171   (match fst style with
11172    | RErr -> pr "void ";
11173    | RInt _ -> pr "int ";
11174    | RInt64 _ -> pr "long ";
11175    | RBool _ -> pr "boolean ";
11176    | RConstString _ | RConstOptString _ | RString _
11177    | RBufferOut _ -> pr "String ";
11178    | RStringList _ -> pr "String[] ";
11179    | RStruct (_, typ) ->
11180        let name = java_name_of_struct typ in
11181        pr "%s " name;
11182    | RStructList (_, typ) ->
11183        let name = java_name_of_struct typ in
11184        pr "%s[] " name;
11185    | RHashtable _ -> pr "HashMap<String,String> ";
11186   );
11187
11188   if native then pr "_%s " name else pr "%s " name;
11189   pr "(";
11190   let needs_comma = ref false in
11191   if native then (
11192     pr "long g";
11193     needs_comma := true
11194   );
11195
11196   (* args *)
11197   List.iter (
11198     fun arg ->
11199       if !needs_comma then pr ", ";
11200       needs_comma := true;
11201
11202       match arg with
11203       | Pathname n
11204       | Device n | Dev_or_Path n
11205       | String n
11206       | OptString n
11207       | FileIn n
11208       | FileOut n
11209       | Key n ->
11210           pr "String %s" n
11211       | BufferIn n ->
11212           pr "byte[] %s" n
11213       | StringList n | DeviceList n ->
11214           pr "String[] %s" n
11215       | Bool n ->
11216           pr "boolean %s" n
11217       | Int n ->
11218           pr "int %s" n
11219       | Int64 n ->
11220           pr "long %s" n
11221   ) (snd style);
11222
11223   pr ")\n";
11224   pr "    throws LibGuestFSException";
11225   if semicolon then pr ";"
11226
11227 and generate_java_struct jtyp cols () =
11228   generate_header CStyle LGPLv2plus;
11229
11230   pr "\
11231 package com.redhat.et.libguestfs;
11232
11233 /**
11234  * Libguestfs %s structure.
11235  *
11236  * @author rjones
11237  * @see GuestFS
11238  */
11239 public class %s {
11240 " jtyp jtyp;
11241
11242   List.iter (
11243     function
11244     | name, FString
11245     | name, FUUID
11246     | name, FBuffer -> pr "  public String %s;\n" name
11247     | name, (FBytes|FUInt64|FInt64) -> pr "  public long %s;\n" name
11248     | name, (FUInt32|FInt32) -> pr "  public int %s;\n" name
11249     | name, FChar -> pr "  public char %s;\n" name
11250     | name, FOptPercent ->
11251         pr "  /* The next field is [0..100] or -1 meaning 'not present': */\n";
11252         pr "  public float %s;\n" name
11253   ) cols;
11254
11255   pr "}\n"
11256
11257 and generate_java_c () =
11258   generate_header CStyle LGPLv2plus;
11259
11260   pr "\
11261 #include <stdio.h>
11262 #include <stdlib.h>
11263 #include <string.h>
11264
11265 #include \"com_redhat_et_libguestfs_GuestFS.h\"
11266 #include \"guestfs.h\"
11267
11268 /* Note that this function returns.  The exception is not thrown
11269  * until after the wrapper function returns.
11270  */
11271 static void
11272 throw_exception (JNIEnv *env, const char *msg)
11273 {
11274   jclass cl;
11275   cl = (*env)->FindClass (env,
11276                           \"com/redhat/et/libguestfs/LibGuestFSException\");
11277   (*env)->ThrowNew (env, cl, msg);
11278 }
11279
11280 JNIEXPORT jlong JNICALL
11281 Java_com_redhat_et_libguestfs_GuestFS__1create
11282   (JNIEnv *env, jobject obj)
11283 {
11284   guestfs_h *g;
11285
11286   g = guestfs_create ();
11287   if (g == NULL) {
11288     throw_exception (env, \"GuestFS.create: failed to allocate handle\");
11289     return 0;
11290   }
11291   guestfs_set_error_handler (g, NULL, NULL);
11292   return (jlong) (long) g;
11293 }
11294
11295 JNIEXPORT void JNICALL
11296 Java_com_redhat_et_libguestfs_GuestFS__1close
11297   (JNIEnv *env, jobject obj, jlong jg)
11298 {
11299   guestfs_h *g = (guestfs_h *) (long) jg;
11300   guestfs_close (g);
11301 }
11302
11303 ";
11304
11305   List.iter (
11306     fun (name, style, _, _, _, _, _) ->
11307       pr "JNIEXPORT ";
11308       (match fst style with
11309        | RErr -> pr "void ";
11310        | RInt _ -> pr "jint ";
11311        | RInt64 _ -> pr "jlong ";
11312        | RBool _ -> pr "jboolean ";
11313        | RConstString _ | RConstOptString _ | RString _
11314        | RBufferOut _ -> pr "jstring ";
11315        | RStruct _ | RHashtable _ ->
11316            pr "jobject ";
11317        | RStringList _ | RStructList _ ->
11318            pr "jobjectArray ";
11319       );
11320       pr "JNICALL\n";
11321       pr "Java_com_redhat_et_libguestfs_GuestFS_";
11322       pr "%s" (replace_str ("_" ^ name) "_" "_1");
11323       pr "\n";
11324       pr "  (JNIEnv *env, jobject obj, jlong jg";
11325       List.iter (
11326         function
11327         | Pathname n
11328         | Device n | Dev_or_Path n
11329         | String n
11330         | OptString n
11331         | FileIn n
11332         | FileOut n
11333         | Key n ->
11334             pr ", jstring j%s" n
11335         | BufferIn n ->
11336             pr ", jbyteArray j%s" n
11337         | StringList n | DeviceList n ->
11338             pr ", jobjectArray j%s" n
11339         | Bool n ->
11340             pr ", jboolean j%s" n
11341         | Int n ->
11342             pr ", jint j%s" n
11343         | Int64 n ->
11344             pr ", jlong j%s" n
11345       ) (snd style);
11346       pr ")\n";
11347       pr "{\n";
11348       pr "  guestfs_h *g = (guestfs_h *) (long) jg;\n";
11349       let error_code, no_ret =
11350         match fst style with
11351         | RErr -> pr "  int r;\n"; "-1", ""
11352         | RBool _
11353         | RInt _ -> pr "  int r;\n"; "-1", "0"
11354         | RInt64 _ -> pr "  int64_t r;\n"; "-1", "0"
11355         | RConstString _ -> pr "  const char *r;\n"; "NULL", "NULL"
11356         | RConstOptString _ -> pr "  const char *r;\n"; "NULL", "NULL"
11357         | RString _ ->
11358             pr "  jstring jr;\n";
11359             pr "  char *r;\n"; "NULL", "NULL"
11360         | RStringList _ ->
11361             pr "  jobjectArray jr;\n";
11362             pr "  int r_len;\n";
11363             pr "  jclass cl;\n";
11364             pr "  jstring jstr;\n";
11365             pr "  char **r;\n"; "NULL", "NULL"
11366         | RStruct (_, typ) ->
11367             pr "  jobject jr;\n";
11368             pr "  jclass cl;\n";
11369             pr "  jfieldID fl;\n";
11370             pr "  struct guestfs_%s *r;\n" typ; "NULL", "NULL"
11371         | RStructList (_, typ) ->
11372             pr "  jobjectArray jr;\n";
11373             pr "  jclass cl;\n";
11374             pr "  jfieldID fl;\n";
11375             pr "  jobject jfl;\n";
11376             pr "  struct guestfs_%s_list *r;\n" typ; "NULL", "NULL"
11377         | RHashtable _ -> pr "  char **r;\n"; "NULL", "NULL"
11378         | RBufferOut _ ->
11379             pr "  jstring jr;\n";
11380             pr "  char *r;\n";
11381             pr "  size_t size;\n";
11382             "NULL", "NULL" in
11383       List.iter (
11384         function
11385         | Pathname n
11386         | Device n | Dev_or_Path n
11387         | String n
11388         | OptString n
11389         | FileIn n
11390         | FileOut n
11391         | Key n ->
11392             pr "  const char *%s;\n" n
11393         | BufferIn n ->
11394             pr "  jbyte *%s;\n" n;
11395             pr "  size_t %s_size;\n" n
11396         | StringList n | DeviceList n ->
11397             pr "  int %s_len;\n" n;
11398             pr "  const char **%s;\n" n
11399         | Bool n
11400         | Int n ->
11401             pr "  int %s;\n" n
11402         | Int64 n ->
11403             pr "  int64_t %s;\n" n
11404       ) (snd style);
11405
11406       let needs_i =
11407         (match fst style with
11408          | RStringList _ | RStructList _ -> true
11409          | RErr | RBool _ | RInt _ | RInt64 _ | RConstString _
11410          | RConstOptString _
11411          | RString _ | RBufferOut _ | RStruct _ | RHashtable _ -> false) ||
11412           List.exists (function
11413                        | StringList _ -> true
11414                        | DeviceList _ -> true
11415                        | _ -> false) (snd style) in
11416       if needs_i then
11417         pr "  size_t i;\n";
11418
11419       pr "\n";
11420
11421       (* Get the parameters. *)
11422       List.iter (
11423         function
11424         | Pathname n
11425         | Device n | Dev_or_Path n
11426         | String n
11427         | FileIn n
11428         | FileOut n
11429         | Key n ->
11430             pr "  %s = (*env)->GetStringUTFChars (env, j%s, NULL);\n" n n
11431         | OptString n ->
11432             (* This is completely undocumented, but Java null becomes
11433              * a NULL parameter.
11434              *)
11435             pr "  %s = j%s ? (*env)->GetStringUTFChars (env, j%s, NULL) : NULL;\n" n n n
11436         | BufferIn n ->
11437             pr "  %s = (*env)->GetByteArrayElements (env, j%s, NULL);\n" n n;
11438             pr "  %s_size = (*env)->GetArrayLength (env, j%s);\n" n n
11439         | StringList n | DeviceList n ->
11440             pr "  %s_len = (*env)->GetArrayLength (env, j%s);\n" n n;
11441             pr "  %s = guestfs_safe_malloc (g, sizeof (char *) * (%s_len+1));\n" n n;
11442             pr "  for (i = 0; i < %s_len; ++i) {\n" n;
11443             pr "    jobject o = (*env)->GetObjectArrayElement (env, j%s, i);\n"
11444               n;
11445             pr "    %s[i] = (*env)->GetStringUTFChars (env, o, NULL);\n" n;
11446             pr "  }\n";
11447             pr "  %s[%s_len] = NULL;\n" n n;
11448         | Bool n
11449         | Int n
11450         | Int64 n ->
11451             pr "  %s = j%s;\n" n n
11452       ) (snd style);
11453
11454       (* Make the call. *)
11455       pr "  r = guestfs_%s " name;
11456       generate_c_call_args ~handle:"g" style;
11457       pr ";\n";
11458
11459       (* Release the parameters. *)
11460       List.iter (
11461         function
11462         | Pathname n
11463         | Device n | Dev_or_Path n
11464         | String n
11465         | FileIn n
11466         | FileOut n
11467         | Key n ->
11468             pr "  (*env)->ReleaseStringUTFChars (env, j%s, %s);\n" n n
11469         | OptString n ->
11470             pr "  if (j%s)\n" n;
11471             pr "    (*env)->ReleaseStringUTFChars (env, j%s, %s);\n" n n
11472         | BufferIn n ->
11473             pr "  (*env)->ReleaseByteArrayElements (env, j%s, %s, 0);\n" n n
11474         | StringList n | DeviceList n ->
11475             pr "  for (i = 0; i < %s_len; ++i) {\n" n;
11476             pr "    jobject o = (*env)->GetObjectArrayElement (env, j%s, i);\n"
11477               n;
11478             pr "    (*env)->ReleaseStringUTFChars (env, o, %s[i]);\n" n;
11479             pr "  }\n";
11480             pr "  free (%s);\n" n
11481         | Bool n
11482         | Int n
11483         | Int64 n -> ()
11484       ) (snd style);
11485
11486       (* Check for errors. *)
11487       pr "  if (r == %s) {\n" error_code;
11488       pr "    throw_exception (env, guestfs_last_error (g));\n";
11489       pr "    return %s;\n" no_ret;
11490       pr "  }\n";
11491
11492       (* Return value. *)
11493       (match fst style with
11494        | RErr -> ()
11495        | RInt _ -> pr "  return (jint) r;\n"
11496        | RBool _ -> pr "  return (jboolean) r;\n"
11497        | RInt64 _ -> pr "  return (jlong) r;\n"
11498        | RConstString _ -> pr "  return (*env)->NewStringUTF (env, r);\n"
11499        | RConstOptString _ ->
11500            pr "  return (*env)->NewStringUTF (env, r); /* XXX r NULL? */\n"
11501        | RString _ ->
11502            pr "  jr = (*env)->NewStringUTF (env, r);\n";
11503            pr "  free (r);\n";
11504            pr "  return jr;\n"
11505        | RStringList _ ->
11506            pr "  for (r_len = 0; r[r_len] != NULL; ++r_len) ;\n";
11507            pr "  cl = (*env)->FindClass (env, \"java/lang/String\");\n";
11508            pr "  jstr = (*env)->NewStringUTF (env, \"\");\n";
11509            pr "  jr = (*env)->NewObjectArray (env, r_len, cl, jstr);\n";
11510            pr "  for (i = 0; i < r_len; ++i) {\n";
11511            pr "    jstr = (*env)->NewStringUTF (env, r[i]);\n";
11512            pr "    (*env)->SetObjectArrayElement (env, jr, i, jstr);\n";
11513            pr "    free (r[i]);\n";
11514            pr "  }\n";
11515            pr "  free (r);\n";
11516            pr "  return jr;\n"
11517        | RStruct (_, typ) ->
11518            let jtyp = java_name_of_struct typ in
11519            let cols = cols_of_struct typ in
11520            generate_java_struct_return typ jtyp cols
11521        | RStructList (_, typ) ->
11522            let jtyp = java_name_of_struct typ in
11523            let cols = cols_of_struct typ in
11524            generate_java_struct_list_return typ jtyp cols
11525        | RHashtable _ ->
11526            (* XXX *)
11527            pr "  throw_exception (env, \"%s: internal error: please let us know how to make a Java HashMap from JNI bindings!\");\n" name;
11528            pr "  return NULL;\n"
11529        | RBufferOut _ ->
11530            pr "  jr = (*env)->NewStringUTF (env, r); /* XXX size */\n";
11531            pr "  free (r);\n";
11532            pr "  return jr;\n"
11533       );
11534
11535       pr "}\n";
11536       pr "\n"
11537   ) all_functions
11538
11539 and generate_java_struct_return typ jtyp cols =
11540   pr "  cl = (*env)->FindClass (env, \"com/redhat/et/libguestfs/%s\");\n" jtyp;
11541   pr "  jr = (*env)->AllocObject (env, cl);\n";
11542   List.iter (
11543     function
11544     | name, FString ->
11545         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
11546         pr "  (*env)->SetObjectField (env, jr, fl, (*env)->NewStringUTF (env, r->%s));\n" name;
11547     | name, FUUID ->
11548         pr "  {\n";
11549         pr "    char s[33];\n";
11550         pr "    memcpy (s, r->%s, 32);\n" name;
11551         pr "    s[32] = 0;\n";
11552         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
11553         pr "    (*env)->SetObjectField (env, jr, fl, (*env)->NewStringUTF (env, s));\n";
11554         pr "  }\n";
11555     | name, FBuffer ->
11556         pr "  {\n";
11557         pr "    int len = r->%s_len;\n" name;
11558         pr "    char s[len+1];\n";
11559         pr "    memcpy (s, r->%s, len);\n" name;
11560         pr "    s[len] = 0;\n";
11561         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
11562         pr "    (*env)->SetObjectField (env, jr, fl, (*env)->NewStringUTF (env, s));\n";
11563         pr "  }\n";
11564     | name, (FBytes|FUInt64|FInt64) ->
11565         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"J\");\n" name;
11566         pr "  (*env)->SetLongField (env, jr, fl, r->%s);\n" name;
11567     | name, (FUInt32|FInt32) ->
11568         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"I\");\n" name;
11569         pr "  (*env)->SetLongField (env, jr, fl, r->%s);\n" name;
11570     | name, FOptPercent ->
11571         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"F\");\n" name;
11572         pr "  (*env)->SetFloatField (env, jr, fl, r->%s);\n" name;
11573     | name, FChar ->
11574         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"C\");\n" name;
11575         pr "  (*env)->SetLongField (env, jr, fl, r->%s);\n" name;
11576   ) cols;
11577   pr "  free (r);\n";
11578   pr "  return jr;\n"
11579
11580 and generate_java_struct_list_return typ jtyp cols =
11581   pr "  cl = (*env)->FindClass (env, \"com/redhat/et/libguestfs/%s\");\n" jtyp;
11582   pr "  jr = (*env)->NewObjectArray (env, r->len, cl, NULL);\n";
11583   pr "  for (i = 0; i < r->len; ++i) {\n";
11584   pr "    jfl = (*env)->AllocObject (env, cl);\n";
11585   List.iter (
11586     function
11587     | name, FString ->
11588         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
11589         pr "    (*env)->SetObjectField (env, jfl, fl, (*env)->NewStringUTF (env, r->val[i].%s));\n" name;
11590     | name, FUUID ->
11591         pr "    {\n";
11592         pr "      char s[33];\n";
11593         pr "      memcpy (s, r->val[i].%s, 32);\n" name;
11594         pr "      s[32] = 0;\n";
11595         pr "      fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
11596         pr "      (*env)->SetObjectField (env, jfl, fl, (*env)->NewStringUTF (env, s));\n";
11597         pr "    }\n";
11598     | name, FBuffer ->
11599         pr "    {\n";
11600         pr "      int len = r->val[i].%s_len;\n" name;
11601         pr "      char s[len+1];\n";
11602         pr "      memcpy (s, r->val[i].%s, len);\n" name;
11603         pr "      s[len] = 0;\n";
11604         pr "      fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
11605         pr "      (*env)->SetObjectField (env, jfl, fl, (*env)->NewStringUTF (env, s));\n";
11606         pr "    }\n";
11607     | name, (FBytes|FUInt64|FInt64) ->
11608         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"J\");\n" name;
11609         pr "    (*env)->SetLongField (env, jfl, fl, r->val[i].%s);\n" name;
11610     | name, (FUInt32|FInt32) ->
11611         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"I\");\n" name;
11612         pr "    (*env)->SetLongField (env, jfl, fl, r->val[i].%s);\n" name;
11613     | name, FOptPercent ->
11614         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"F\");\n" name;
11615         pr "    (*env)->SetFloatField (env, jfl, fl, r->val[i].%s);\n" name;
11616     | name, FChar ->
11617         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"C\");\n" name;
11618         pr "    (*env)->SetLongField (env, jfl, fl, r->val[i].%s);\n" name;
11619   ) cols;
11620   pr "    (*env)->SetObjectArrayElement (env, jfl, i, jfl);\n";
11621   pr "  }\n";
11622   pr "  guestfs_free_%s_list (r);\n" typ;
11623   pr "  return jr;\n"
11624
11625 and generate_java_makefile_inc () =
11626   generate_header HashStyle GPLv2plus;
11627
11628   pr "java_built_sources = \\\n";
11629   List.iter (
11630     fun (typ, jtyp) ->
11631         pr "\tcom/redhat/et/libguestfs/%s.java \\\n" jtyp;
11632   ) java_structs;
11633   pr "\tcom/redhat/et/libguestfs/GuestFS.java\n"
11634
11635 and generate_haskell_hs () =
11636   generate_header HaskellStyle LGPLv2plus;
11637
11638   (* XXX We only know how to generate partial FFI for Haskell
11639    * at the moment.  Please help out!
11640    *)
11641   let can_generate style =
11642     match style with
11643     | RErr, _
11644     | RInt _, _
11645     | RInt64 _, _ -> true
11646     | RBool _, _
11647     | RConstString _, _
11648     | RConstOptString _, _
11649     | RString _, _
11650     | RStringList _, _
11651     | RStruct _, _
11652     | RStructList _, _
11653     | RHashtable _, _
11654     | RBufferOut _, _ -> false in
11655
11656   pr "\
11657 {-# INCLUDE <guestfs.h> #-}
11658 {-# LANGUAGE ForeignFunctionInterface #-}
11659
11660 module Guestfs (
11661   create";
11662
11663   (* List out the names of the actions we want to export. *)
11664   List.iter (
11665     fun (name, style, _, _, _, _, _) ->
11666       if can_generate style then pr ",\n  %s" name
11667   ) all_functions;
11668
11669   pr "
11670   ) where
11671
11672 -- Unfortunately some symbols duplicate ones already present
11673 -- in Prelude.  We don't know which, so we hard-code a list
11674 -- here.
11675 import Prelude hiding (truncate)
11676
11677 import Foreign
11678 import Foreign.C
11679 import Foreign.C.Types
11680 import IO
11681 import Control.Exception
11682 import Data.Typeable
11683
11684 data GuestfsS = GuestfsS            -- represents the opaque C struct
11685 type GuestfsP = Ptr GuestfsS        -- guestfs_h *
11686 type GuestfsH = ForeignPtr GuestfsS -- guestfs_h * with attached finalizer
11687
11688 -- XXX define properly later XXX
11689 data PV = PV
11690 data VG = VG
11691 data LV = LV
11692 data IntBool = IntBool
11693 data Stat = Stat
11694 data StatVFS = StatVFS
11695 data Hashtable = Hashtable
11696
11697 foreign import ccall unsafe \"guestfs_create\" c_create
11698   :: IO GuestfsP
11699 foreign import ccall unsafe \"&guestfs_close\" c_close
11700   :: FunPtr (GuestfsP -> IO ())
11701 foreign import ccall unsafe \"guestfs_set_error_handler\" c_set_error_handler
11702   :: GuestfsP -> Ptr CInt -> Ptr CInt -> IO ()
11703
11704 create :: IO GuestfsH
11705 create = do
11706   p <- c_create
11707   c_set_error_handler p nullPtr nullPtr
11708   h <- newForeignPtr c_close p
11709   return h
11710
11711 foreign import ccall unsafe \"guestfs_last_error\" c_last_error
11712   :: GuestfsP -> IO CString
11713
11714 -- last_error :: GuestfsH -> IO (Maybe String)
11715 -- last_error h = do
11716 --   str <- withForeignPtr h (\\p -> c_last_error p)
11717 --   maybePeek peekCString str
11718
11719 last_error :: GuestfsH -> IO (String)
11720 last_error h = do
11721   str <- withForeignPtr h (\\p -> c_last_error p)
11722   if (str == nullPtr)
11723     then return \"no error\"
11724     else peekCString str
11725
11726 ";
11727
11728   (* Generate wrappers for each foreign function. *)
11729   List.iter (
11730     fun (name, style, _, _, _, _, _) ->
11731       if can_generate style then (
11732         pr "foreign import ccall unsafe \"guestfs_%s\" c_%s\n" name name;
11733         pr "  :: ";
11734         generate_haskell_prototype ~handle:"GuestfsP" style;
11735         pr "\n";
11736         pr "\n";
11737         pr "%s :: " name;
11738         generate_haskell_prototype ~handle:"GuestfsH" ~hs:true style;
11739         pr "\n";
11740         pr "%s %s = do\n" name
11741           (String.concat " " ("h" :: List.map name_of_argt (snd style)));
11742         pr "  r <- ";
11743         (* Convert pointer arguments using with* functions. *)
11744         List.iter (
11745           function
11746           | FileIn n
11747           | FileOut n
11748           | Pathname n | Device n | Dev_or_Path n | String n | Key n ->
11749               pr "withCString %s $ \\%s -> " n n
11750           | BufferIn n ->
11751               pr "withCStringLen %s $ \\(%s, %s_size) -> " n n n
11752           | OptString n -> pr "maybeWith withCString %s $ \\%s -> " n n
11753           | StringList n | DeviceList n -> pr "withMany withCString %s $ \\%s -> withArray0 nullPtr %s $ \\%s -> " n n n n
11754           | Bool _ | Int _ | Int64 _ -> ()
11755         ) (snd style);
11756         (* Convert integer arguments. *)
11757         let args =
11758           List.map (
11759             function
11760             | Bool n -> sprintf "(fromBool %s)" n
11761             | Int n -> sprintf "(fromIntegral %s)" n
11762             | Int64 n -> sprintf "(fromIntegral %s)" n
11763             | FileIn n | FileOut n
11764             | Pathname n | Device n | Dev_or_Path n
11765             | String n | OptString n
11766             | StringList n | DeviceList n
11767             | Key n -> n
11768             | BufferIn n -> sprintf "%s (fromIntegral %s_size)" n n
11769           ) (snd style) in
11770         pr "withForeignPtr h (\\p -> c_%s %s)\n" name
11771           (String.concat " " ("p" :: args));
11772         (match fst style with
11773          | RErr | RInt _ | RInt64 _ | RBool _ ->
11774              pr "  if (r == -1)\n";
11775              pr "    then do\n";
11776              pr "      err <- last_error h\n";
11777              pr "      fail err\n";
11778          | RConstString _ | RConstOptString _ | RString _
11779          | RStringList _ | RStruct _
11780          | RStructList _ | RHashtable _ | RBufferOut _ ->
11781              pr "  if (r == nullPtr)\n";
11782              pr "    then do\n";
11783              pr "      err <- last_error h\n";
11784              pr "      fail err\n";
11785         );
11786         (match fst style with
11787          | RErr ->
11788              pr "    else return ()\n"
11789          | RInt _ ->
11790              pr "    else return (fromIntegral r)\n"
11791          | RInt64 _ ->
11792              pr "    else return (fromIntegral r)\n"
11793          | RBool _ ->
11794              pr "    else return (toBool r)\n"
11795          | RConstString _
11796          | RConstOptString _
11797          | RString _
11798          | RStringList _
11799          | RStruct _
11800          | RStructList _
11801          | RHashtable _
11802          | RBufferOut _ ->
11803              pr "    else return ()\n" (* XXXXXXXXXXXXXXXXXXXX *)
11804         );
11805         pr "\n";
11806       )
11807   ) all_functions
11808
11809 and generate_haskell_prototype ~handle ?(hs = false) style =
11810   pr "%s -> " handle;
11811   let string = if hs then "String" else "CString" in
11812   let int = if hs then "Int" else "CInt" in
11813   let bool = if hs then "Bool" else "CInt" in
11814   let int64 = if hs then "Integer" else "Int64" in
11815   List.iter (
11816     fun arg ->
11817       (match arg with
11818        | Pathname _ | Device _ | Dev_or_Path _ | String _ | Key _ ->
11819            pr "%s" string
11820        | BufferIn _ ->
11821            if hs then pr "String"
11822            else pr "CString -> CInt"
11823        | OptString _ -> if hs then pr "Maybe String" else pr "CString"
11824        | StringList _ | DeviceList _ -> if hs then pr "[String]" else pr "Ptr CString"
11825        | Bool _ -> pr "%s" bool
11826        | Int _ -> pr "%s" int
11827        | Int64 _ -> pr "%s" int
11828        | FileIn _ -> pr "%s" string
11829        | FileOut _ -> pr "%s" string
11830       );
11831       pr " -> ";
11832   ) (snd style);
11833   pr "IO (";
11834   (match fst style with
11835    | RErr -> if not hs then pr "CInt"
11836    | RInt _ -> pr "%s" int
11837    | RInt64 _ -> pr "%s" int64
11838    | RBool _ -> pr "%s" bool
11839    | RConstString _ -> pr "%s" string
11840    | RConstOptString _ -> pr "Maybe %s" string
11841    | RString _ -> pr "%s" string
11842    | RStringList _ -> pr "[%s]" string
11843    | RStruct (_, typ) ->
11844        let name = java_name_of_struct typ in
11845        pr "%s" name
11846    | RStructList (_, typ) ->
11847        let name = java_name_of_struct typ in
11848        pr "[%s]" name
11849    | RHashtable _ -> pr "Hashtable"
11850    | RBufferOut _ -> pr "%s" string
11851   );
11852   pr ")"
11853
11854 and generate_csharp () =
11855   generate_header CPlusPlusStyle LGPLv2plus;
11856
11857   (* XXX Make this configurable by the C# assembly users. *)
11858   let library = "libguestfs.so.0" in
11859
11860   pr "\
11861 // These C# bindings are highly experimental at present.
11862 //
11863 // Firstly they only work on Linux (ie. Mono).  In order to get them
11864 // to work on Windows (ie. .Net) you would need to port the library
11865 // itself to Windows first.
11866 //
11867 // The second issue is that some calls are known to be incorrect and
11868 // can cause Mono to segfault.  Particularly: calls which pass or
11869 // return string[], or return any structure value.  This is because
11870 // we haven't worked out the correct way to do this from C#.
11871 //
11872 // The third issue is that when compiling you get a lot of warnings.
11873 // We are not sure whether the warnings are important or not.
11874 //
11875 // Fourthly we do not routinely build or test these bindings as part
11876 // of the make && make check cycle, which means that regressions might
11877 // go unnoticed.
11878 //
11879 // Suggestions and patches are welcome.
11880
11881 // To compile:
11882 //
11883 // gmcs Libguestfs.cs
11884 // mono Libguestfs.exe
11885 //
11886 // (You'll probably want to add a Test class / static main function
11887 // otherwise this won't do anything useful).
11888
11889 using System;
11890 using System.IO;
11891 using System.Runtime.InteropServices;
11892 using System.Runtime.Serialization;
11893 using System.Collections;
11894
11895 namespace Guestfs
11896 {
11897   class Error : System.ApplicationException
11898   {
11899     public Error (string message) : base (message) {}
11900     protected Error (SerializationInfo info, StreamingContext context) {}
11901   }
11902
11903   class Guestfs
11904   {
11905     IntPtr _handle;
11906
11907     [DllImport (\"%s\")]
11908     static extern IntPtr guestfs_create ();
11909
11910     public Guestfs ()
11911     {
11912       _handle = guestfs_create ();
11913       if (_handle == IntPtr.Zero)
11914         throw new Error (\"could not create guestfs handle\");
11915     }
11916
11917     [DllImport (\"%s\")]
11918     static extern void guestfs_close (IntPtr h);
11919
11920     ~Guestfs ()
11921     {
11922       guestfs_close (_handle);
11923     }
11924
11925     [DllImport (\"%s\")]
11926     static extern string guestfs_last_error (IntPtr h);
11927
11928 " library library library;
11929
11930   (* Generate C# structure bindings.  We prefix struct names with
11931    * underscore because C# cannot have conflicting struct names and
11932    * method names (eg. "class stat" and "stat").
11933    *)
11934   List.iter (
11935     fun (typ, cols) ->
11936       pr "    [StructLayout (LayoutKind.Sequential)]\n";
11937       pr "    public class _%s {\n" typ;
11938       List.iter (
11939         function
11940         | name, FChar -> pr "      char %s;\n" name
11941         | name, FString -> pr "      string %s;\n" name
11942         | name, FBuffer ->
11943             pr "      uint %s_len;\n" name;
11944             pr "      string %s;\n" name
11945         | name, FUUID ->
11946             pr "      [MarshalAs (UnmanagedType.ByValTStr, SizeConst=16)]\n";
11947             pr "      string %s;\n" name
11948         | name, FUInt32 -> pr "      uint %s;\n" name
11949         | name, FInt32 -> pr "      int %s;\n" name
11950         | name, (FUInt64|FBytes) -> pr "      ulong %s;\n" name
11951         | name, FInt64 -> pr "      long %s;\n" name
11952         | name, FOptPercent -> pr "      float %s; /* [0..100] or -1 */\n" name
11953       ) cols;
11954       pr "    }\n";
11955       pr "\n"
11956   ) structs;
11957
11958   (* Generate C# function bindings. *)
11959   List.iter (
11960     fun (name, style, _, _, _, shortdesc, _) ->
11961       let rec csharp_return_type () =
11962         match fst style with
11963         | RErr -> "void"
11964         | RBool n -> "bool"
11965         | RInt n -> "int"
11966         | RInt64 n -> "long"
11967         | RConstString n
11968         | RConstOptString n
11969         | RString n
11970         | RBufferOut n -> "string"
11971         | RStruct (_,n) -> "_" ^ n
11972         | RHashtable n -> "Hashtable"
11973         | RStringList n -> "string[]"
11974         | RStructList (_,n) -> sprintf "_%s[]" n
11975
11976       and c_return_type () =
11977         match fst style with
11978         | RErr
11979         | RBool _
11980         | RInt _ -> "int"
11981         | RInt64 _ -> "long"
11982         | RConstString _
11983         | RConstOptString _
11984         | RString _
11985         | RBufferOut _ -> "string"
11986         | RStruct (_,n) -> "_" ^ n
11987         | RHashtable _
11988         | RStringList _ -> "string[]"
11989         | RStructList (_,n) -> sprintf "_%s[]" n
11990
11991       and c_error_comparison () =
11992         match fst style with
11993         | RErr
11994         | RBool _
11995         | RInt _
11996         | RInt64 _ -> "== -1"
11997         | RConstString _
11998         | RConstOptString _
11999         | RString _
12000         | RBufferOut _
12001         | RStruct (_,_)
12002         | RHashtable _
12003         | RStringList _
12004         | RStructList (_,_) -> "== null"
12005
12006       and generate_extern_prototype () =
12007         pr "    static extern %s guestfs_%s (IntPtr h"
12008           (c_return_type ()) name;
12009         List.iter (
12010           function
12011           | Pathname n | Device n | Dev_or_Path n | String n | OptString n
12012           | FileIn n | FileOut n
12013           | Key n
12014           | BufferIn n ->
12015               pr ", [In] string %s" n
12016           | StringList n | DeviceList n ->
12017               pr ", [In] string[] %s" n
12018           | Bool n ->
12019               pr ", bool %s" n
12020           | Int n ->
12021               pr ", int %s" n
12022           | Int64 n ->
12023               pr ", long %s" n
12024         ) (snd style);
12025         pr ");\n"
12026
12027       and generate_public_prototype () =
12028         pr "    public %s %s (" (csharp_return_type ()) name;
12029         let comma = ref false in
12030         let next () =
12031           if !comma then pr ", ";
12032           comma := true
12033         in
12034         List.iter (
12035           function
12036           | Pathname n | Device n | Dev_or_Path n | String n | OptString n
12037           | FileIn n | FileOut n
12038           | Key n
12039           | BufferIn n ->
12040               next (); pr "string %s" n
12041           | StringList n | DeviceList n ->
12042               next (); pr "string[] %s" n
12043           | Bool n ->
12044               next (); pr "bool %s" n
12045           | Int n ->
12046               next (); pr "int %s" n
12047           | Int64 n ->
12048               next (); pr "long %s" n
12049         ) (snd style);
12050         pr ")\n"
12051
12052       and generate_call () =
12053         pr "guestfs_%s (_handle" name;
12054         List.iter (fun arg -> pr ", %s" (name_of_argt arg)) (snd style);
12055         pr ");\n";
12056       in
12057
12058       pr "    [DllImport (\"%s\")]\n" library;
12059       generate_extern_prototype ();
12060       pr "\n";
12061       pr "    /// <summary>\n";
12062       pr "    /// %s\n" shortdesc;
12063       pr "    /// </summary>\n";
12064       generate_public_prototype ();
12065       pr "    {\n";
12066       pr "      %s r;\n" (c_return_type ());
12067       pr "      r = ";
12068       generate_call ();
12069       pr "      if (r %s)\n" (c_error_comparison ());
12070       pr "        throw new Error (guestfs_last_error (_handle));\n";
12071       (match fst style with
12072        | RErr -> ()
12073        | RBool _ ->
12074            pr "      return r != 0 ? true : false;\n"
12075        | RHashtable _ ->
12076            pr "      Hashtable rr = new Hashtable ();\n";
12077            pr "      for (size_t i = 0; i < r.Length; i += 2)\n";
12078            pr "        rr.Add (r[i], r[i+1]);\n";
12079            pr "      return rr;\n"
12080        | RInt _ | RInt64 _ | RConstString _ | RConstOptString _
12081        | RString _ | RBufferOut _ | RStruct _ | RStringList _
12082        | RStructList _ ->
12083            pr "      return r;\n"
12084       );
12085       pr "    }\n";
12086       pr "\n";
12087   ) all_functions_sorted;
12088
12089   pr "  }
12090 }
12091 "
12092
12093 and generate_php_h () =
12094   generate_header CStyle LGPLv2plus;
12095
12096   pr "\
12097 #ifndef PHP_GUESTFS_PHP_H
12098 #define PHP_GUESTFS_PHP_H 1
12099
12100 #ifdef ZTS
12101 #include \"TSRM.h\"
12102 #endif
12103
12104 #define PHP_GUESTFS_PHP_EXTNAME \"guestfs_php\"
12105 #define PHP_GUESTFS_PHP_VERSION \"1.0\"
12106
12107 PHP_MINIT_FUNCTION (guestfs_php);
12108
12109 #define PHP_GUESTFS_HANDLE_RES_NAME \"guestfs_h\"
12110
12111 PHP_FUNCTION (guestfs_create);
12112 PHP_FUNCTION (guestfs_last_error);
12113 ";
12114
12115   List.iter (
12116     fun (shortname, style, _, _, _, _, _) ->
12117       pr "PHP_FUNCTION (guestfs_%s);\n" shortname
12118   ) all_functions_sorted;
12119
12120   pr "\
12121
12122 extern zend_module_entry guestfs_php_module_entry;
12123 #define phpext_guestfs_php_ptr &guestfs_php_module_entry
12124
12125 #endif /* PHP_GUESTFS_PHP_H */
12126 "
12127
12128 and generate_php_c () =
12129   generate_header CStyle LGPLv2plus;
12130
12131   pr "\
12132 /* NOTE: Be very careful with all macros in PHP header files.  The
12133  * morons who wrote them aren't good at making them safe for inclusion
12134  * in arbitrary places in C code, eg. not using 'do ... while(0)'
12135  * or parenthesizing any of the arguments.
12136  */
12137
12138 /* NOTE (2): Some parts of the API can't be used on 32 bit platforms.
12139  * Any 64 bit numbers will be truncated.  There's no easy way around
12140  * this in PHP.
12141  */
12142
12143 #include <config.h>
12144
12145 #include <stdio.h>
12146 #include <stdlib.h>
12147
12148 #include <php.h>
12149 #include <php_guestfs_php.h>
12150
12151 #include \"guestfs.h\"
12152
12153 static int res_guestfs_h;
12154
12155 static void
12156 guestfs_php_handle_dtor (zend_rsrc_list_entry *rsrc TSRMLS_DC)
12157 {
12158   guestfs_h *g = (guestfs_h *) rsrc->ptr;
12159   if (g != NULL)
12160     guestfs_close (g);
12161 }
12162
12163 PHP_MINIT_FUNCTION (guestfs_php)
12164 {
12165   res_guestfs_h =
12166     zend_register_list_destructors_ex (guestfs_php_handle_dtor,
12167     NULL, PHP_GUESTFS_HANDLE_RES_NAME, module_number);
12168 }
12169
12170 static function_entry guestfs_php_functions[] = {
12171   PHP_FE (guestfs_create, NULL)
12172   PHP_FE (guestfs_last_error, NULL)
12173 ";
12174
12175   List.iter (
12176     fun (shortname, style, _, _, _, _, _) ->
12177       pr "  PHP_FE (guestfs_%s, NULL)\n" shortname
12178   ) all_functions_sorted;
12179
12180   pr "  { NULL, NULL, NULL }
12181 };
12182
12183 zend_module_entry guestfs_php_module_entry = {
12184 #if ZEND_MODULE_API_NO >= 20010901
12185   STANDARD_MODULE_HEADER,
12186 #endif
12187   PHP_GUESTFS_PHP_EXTNAME,
12188   guestfs_php_functions,
12189   PHP_MINIT (guestfs_php),
12190   NULL,
12191   NULL,
12192   NULL,
12193   NULL,
12194 #if ZEND_MODULE_API_NO >= 20010901
12195   PHP_GUESTFS_PHP_VERSION,
12196 #endif
12197   STANDARD_MODULE_PROPERTIES
12198 };
12199
12200 #ifdef COMPILE_DL_GUESTFS_PHP
12201 ZEND_GET_MODULE (guestfs_php)
12202 #endif
12203
12204 PHP_FUNCTION (guestfs_create)
12205 {
12206   guestfs_h *g = guestfs_create ();
12207   if (g == NULL) {
12208     RETURN_FALSE;
12209   }
12210
12211   guestfs_set_error_handler (g, NULL, NULL);
12212
12213   ZEND_REGISTER_RESOURCE (return_value, g, res_guestfs_h);
12214 }
12215
12216 PHP_FUNCTION (guestfs_last_error)
12217 {
12218   zval *z_g;
12219   guestfs_h *g;
12220
12221   if (zend_parse_parameters (ZEND_NUM_ARGS() TSRMLS_CC, \"r\",
12222                              &z_g) == FAILURE) {
12223     RETURN_FALSE;
12224   }
12225
12226   ZEND_FETCH_RESOURCE (g, guestfs_h *, &z_g, -1, PHP_GUESTFS_HANDLE_RES_NAME,
12227                        res_guestfs_h);
12228   if (g == NULL) {
12229     RETURN_FALSE;
12230   }
12231
12232   const char *err = guestfs_last_error (g);
12233   if (err) {
12234     RETURN_STRING (err, 1);
12235   } else {
12236     RETURN_NULL ();
12237   }
12238 }
12239
12240 ";
12241
12242   (* Now generate the PHP bindings for each action. *)
12243   List.iter (
12244     fun (shortname, style, _, _, _, _, _) ->
12245       pr "PHP_FUNCTION (guestfs_%s)\n" shortname;
12246       pr "{\n";
12247       pr "  zval *z_g;\n";
12248       pr "  guestfs_h *g;\n";
12249
12250       List.iter (
12251         function
12252         | String n | Device n | Pathname n | Dev_or_Path n
12253         | FileIn n | FileOut n | Key n
12254         | OptString n
12255         | BufferIn n ->
12256             pr "  char *%s;\n" n;
12257             pr "  int %s_size;\n" n
12258         | StringList n
12259         | DeviceList n ->
12260             pr "  zval *z_%s;\n" n;
12261             pr "  char **%s;\n" n;
12262         | Bool n ->
12263             pr "  zend_bool %s;\n" n
12264         | Int n | Int64 n ->
12265             pr "  long %s;\n" n
12266         ) (snd style);
12267
12268       pr "\n";
12269
12270       (* Parse the parameters. *)
12271       let param_string = String.concat "" (
12272         List.map (
12273           function
12274           | String n | Device n | Pathname n | Dev_or_Path n
12275           | FileIn n | FileOut n | BufferIn n | Key n -> "s"
12276           | OptString n -> "s!"
12277           | StringList n | DeviceList n -> "a"
12278           | Bool n -> "b"
12279           | Int n | Int64 n -> "l"
12280         ) (snd style)
12281       ) in
12282
12283       pr "  if (zend_parse_parameters (ZEND_NUM_ARGS() TSRMLS_CC, \"r%s\",\n"
12284         param_string;
12285       pr "        &z_g";
12286       List.iter (
12287         function
12288         | String n | Device n | Pathname n | Dev_or_Path n
12289         | FileIn n | FileOut n | BufferIn n | Key n
12290         | OptString n ->
12291             pr ", &%s, &%s_size" n n
12292         | StringList n | DeviceList n ->
12293             pr ", &z_%s" n
12294         | Bool n ->
12295             pr ", &%s" n
12296         | Int n | Int64 n ->
12297             pr ", &%s" n
12298       ) (snd style);
12299       pr ") == FAILURE) {\n";
12300       pr "    RETURN_FALSE;\n";
12301       pr "  }\n";
12302       pr "\n";
12303       pr "  ZEND_FETCH_RESOURCE (g, guestfs_h *, &z_g, -1, PHP_GUESTFS_HANDLE_RES_NAME,\n";
12304       pr "                       res_guestfs_h);\n";
12305       pr "  if (g == NULL) {\n";
12306       pr "    RETURN_FALSE;\n";
12307       pr "  }\n";
12308       pr "\n";
12309
12310       List.iter (
12311         function
12312         | String n | Device n | Pathname n | Dev_or_Path n
12313         | FileIn n | FileOut n | Key n
12314         | OptString n ->
12315             (* Just need to check the string doesn't contain any ASCII
12316              * NUL characters, which won't be supported by the C API.
12317              *)
12318             pr "  if (strlen (%s) != %s_size) {\n" n n;
12319             pr "    fprintf (stderr, \"libguestfs: %s: parameter '%s' contains embedded ASCII NUL.\\n\");\n" shortname n;
12320             pr "    RETURN_FALSE;\n";
12321             pr "  }\n";
12322             pr "\n"
12323         | BufferIn n -> ()
12324         | StringList n
12325         | DeviceList n ->
12326             (* Convert array to list of strings.
12327              * http://marc.info/?l=pecl-dev&m=112205192100631&w=2
12328              *)
12329             pr "  {\n";
12330             pr "    HashTable *a;\n";
12331             pr "    int n;\n";
12332             pr "    HashPosition p;\n";
12333             pr "    zval **d;\n";
12334             pr "    size_t c = 0;\n";
12335             pr "\n";
12336             pr "    a = Z_ARRVAL_P (z_%s);\n" n;
12337             pr "    n = zend_hash_num_elements (a);\n";
12338             pr "    %s = safe_emalloc (n + 1, sizeof (char *), 0);\n" n;
12339             pr "    for (zend_hash_internal_pointer_reset_ex (a, &p);\n";
12340             pr "         zend_hash_get_current_data_ex (a, (void **) &d, &p) == SUCCESS;\n";
12341             pr "         zend_hash_move_forward_ex (a, &p)) {\n";
12342             pr "      zval t = **d;\n";
12343             pr "      zval_copy_ctor (&t);\n";
12344             pr "      convert_to_string (&t);\n";
12345             pr "      %s[c] = Z_STRVAL (t);\n" n;
12346             pr "      c++;\n";
12347             pr "    }\n";
12348             pr "    %s[c] = NULL;\n" n;
12349             pr "  }\n";
12350             pr "\n"
12351         | Bool n | Int n | Int64 n -> ()
12352         ) (snd style);
12353
12354       (* Return value. *)
12355       let error_code =
12356         match fst style with
12357         | RErr -> pr "  int r;\n"; "-1"
12358         | RBool _
12359         | RInt _ -> pr "  int r;\n"; "-1"
12360         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
12361         | RConstString _ -> pr "  const char *r;\n"; "NULL"
12362         | RConstOptString _ -> pr "  const char *r;\n"; "NULL"
12363         | RString _ ->
12364             pr "  char *r;\n"; "NULL"
12365         | RStringList _ ->
12366             pr "  char **r;\n"; "NULL"
12367         | RStruct (_, typ) ->
12368             pr "  struct guestfs_%s *r;\n" typ; "NULL"
12369         | RStructList (_, typ) ->
12370             pr "  struct guestfs_%s_list *r;\n" typ; "NULL"
12371         | RHashtable _ ->
12372             pr "  char **r;\n"; "NULL"
12373         | RBufferOut _ ->
12374             pr "  char *r;\n";
12375             pr "  size_t size;\n";
12376             "NULL" in
12377
12378       (* Call the function. *)
12379       pr "  r = guestfs_%s " shortname;
12380       generate_c_call_args ~handle:"g" style;
12381       pr ";\n";
12382       pr "\n";
12383
12384       (* Free up parameters. *)
12385       List.iter (
12386         function
12387         | String n | Device n | Pathname n | Dev_or_Path n
12388         | FileIn n | FileOut n | Key n
12389         | OptString n -> ()
12390         | BufferIn n -> ()
12391         | StringList n
12392         | DeviceList n ->
12393             pr "  {\n";
12394             pr "    size_t c = 0;\n";
12395             pr "\n";
12396             pr "    for (c = 0; %s[c] != NULL; ++c)\n" n;
12397             pr "      efree (%s[c]);\n" n;
12398             pr "    efree (%s);\n" n;
12399             pr "  }\n";
12400             pr "\n"
12401         | Bool n | Int n | Int64 n -> ()
12402         ) (snd style);
12403
12404       (* Check for errors. *)
12405       pr "  if (r == %s) {\n" error_code;
12406       pr "    RETURN_FALSE;\n";
12407       pr "  }\n";
12408       pr "\n";
12409
12410       (* Convert the return value. *)
12411       (match fst style with
12412        | RErr ->
12413            pr "  RETURN_TRUE;\n"
12414        | RBool _ ->
12415            pr "  RETURN_BOOL (r);\n"
12416        | RInt _ ->
12417            pr "  RETURN_LONG (r);\n"
12418        | RInt64 _ ->
12419            pr "  RETURN_LONG (r);\n"
12420        | RConstString _ ->
12421            pr "  RETURN_STRING (r, 1);\n"
12422        | RConstOptString _ ->
12423            pr "  if (r) { RETURN_STRING (r, 1); }\n";
12424            pr "  else { RETURN_NULL (); }\n"
12425        | RString _ ->
12426            pr "  char *r_copy = estrdup (r);\n";
12427            pr "  free (r);\n";
12428            pr "  RETURN_STRING (r_copy, 0);\n"
12429        | RBufferOut _ ->
12430            pr "  char *r_copy = estrndup (r, size);\n";
12431            pr "  free (r);\n";
12432            pr "  RETURN_STRING (r_copy, 0);\n"
12433        | RStringList _ ->
12434            pr "  size_t c = 0;\n";
12435            pr "  array_init (return_value);\n";
12436            pr "  for (c = 0; r[c] != NULL; ++c) {\n";
12437            pr "    add_next_index_string (return_value, r[c], 1);\n";
12438            pr "    free (r[c]);\n";
12439            pr "  }\n";
12440            pr "  free (r);\n";
12441        | RHashtable _ ->
12442            pr "  size_t c = 0;\n";
12443            pr "  array_init (return_value);\n";
12444            pr "  for (c = 0; r[c] != NULL; c += 2) {\n";
12445            pr "    add_assoc_string (return_value, r[c], r[c+1], 1);\n";
12446            pr "    free (r[c]);\n";
12447            pr "    free (r[c+1]);\n";
12448            pr "  }\n";
12449            pr "  free (r);\n";
12450        | RStruct (_, typ) ->
12451            let cols = cols_of_struct typ in
12452            generate_php_struct_code typ cols
12453        | RStructList (_, typ) ->
12454            let cols = cols_of_struct typ in
12455            generate_php_struct_list_code typ cols
12456       );
12457
12458       pr "}\n";
12459       pr "\n"
12460   ) all_functions_sorted
12461
12462 and generate_php_struct_code typ cols =
12463   pr "  array_init (return_value);\n";
12464   List.iter (
12465     function
12466     | name, FString ->
12467         pr "  add_assoc_string (return_value, \"%s\", r->%s, 1);\n" name name
12468     | name, FBuffer ->
12469         pr "  add_assoc_stringl (return_value, \"%s\", r->%s, r->%s_len, 1);\n"
12470           name name name
12471     | name, FUUID ->
12472         pr "  add_assoc_stringl (return_value, \"%s\", r->%s, 32, 1);\n"
12473           name name
12474     | name, (FBytes|FUInt64|FInt64|FInt32|FUInt32) ->
12475         pr "  add_assoc_long (return_value, \"%s\", r->%s);\n"
12476           name name
12477     | name, FChar ->
12478         pr "  add_assoc_stringl (return_value, \"%s\", &r->%s, 1, 1);\n"
12479           name name
12480     | name, FOptPercent ->
12481         pr "  add_assoc_double (return_value, \"%s\", r->%s);\n"
12482           name name
12483   ) cols;
12484   pr "  guestfs_free_%s (r);\n" typ
12485
12486 and generate_php_struct_list_code typ cols =
12487   pr "  array_init (return_value);\n";
12488   pr "  size_t c = 0;\n";
12489   pr "  for (c = 0; c < r->len; ++c) {\n";
12490   pr "    zval *z_elem;\n";
12491   pr "    ALLOC_INIT_ZVAL (z_elem);\n";
12492   pr "    array_init (z_elem);\n";
12493   List.iter (
12494     function
12495     | name, FString ->
12496         pr "    add_assoc_string (z_elem, \"%s\", r->val[c].%s, 1);\n"
12497           name name
12498     | name, FBuffer ->
12499         pr "    add_assoc_stringl (z_elem, \"%s\", r->val[c].%s, r->val[c].%s_len, 1);\n"
12500           name name name
12501     | name, FUUID ->
12502         pr "    add_assoc_stringl (z_elem, \"%s\", r->val[c].%s, 32, 1);\n"
12503           name name
12504     | name, (FBytes|FUInt64|FInt64|FInt32|FUInt32) ->
12505         pr "    add_assoc_long (z_elem, \"%s\", r->val[c].%s);\n"
12506           name name
12507     | name, FChar ->
12508         pr "    add_assoc_stringl (z_elem, \"%s\", &r->val[c].%s, 1, 1);\n"
12509           name name
12510     | name, FOptPercent ->
12511         pr "    add_assoc_double (z_elem, \"%s\", r->val[c].%s);\n"
12512           name name
12513   ) cols;
12514   pr "    add_next_index_zval (return_value, z_elem);\n";
12515   pr "  }\n";
12516   pr "  guestfs_free_%s_list (r);\n" typ
12517
12518 and generate_bindtests () =
12519   generate_header CStyle LGPLv2plus;
12520
12521   pr "\
12522 #include <stdio.h>
12523 #include <stdlib.h>
12524 #include <inttypes.h>
12525 #include <string.h>
12526
12527 #include \"guestfs.h\"
12528 #include \"guestfs-internal.h\"
12529 #include \"guestfs-internal-actions.h\"
12530 #include \"guestfs_protocol.h\"
12531
12532 #define error guestfs_error
12533 #define safe_calloc guestfs_safe_calloc
12534 #define safe_malloc guestfs_safe_malloc
12535
12536 static void
12537 print_strings (char *const *argv)
12538 {
12539   size_t argc;
12540
12541   printf (\"[\");
12542   for (argc = 0; argv[argc] != NULL; ++argc) {
12543     if (argc > 0) printf (\", \");
12544     printf (\"\\\"%%s\\\"\", argv[argc]);
12545   }
12546   printf (\"]\\n\");
12547 }
12548
12549 /* The test0 function prints its parameters to stdout. */
12550 ";
12551
12552   let test0, tests =
12553     match test_functions with
12554     | [] -> assert false
12555     | test0 :: tests -> test0, tests in
12556
12557   let () =
12558     let (name, style, _, _, _, _, _) = test0 in
12559     generate_prototype ~extern:false ~semicolon:false ~newline:true
12560       ~handle:"g" ~prefix:"guestfs__" name style;
12561     pr "{\n";
12562     List.iter (
12563       function
12564       | Pathname n
12565       | Device n | Dev_or_Path n
12566       | String n
12567       | FileIn n
12568       | FileOut n
12569       | Key n -> pr "  printf (\"%%s\\n\", %s);\n" n
12570       | BufferIn n ->
12571           pr "  {\n";
12572           pr "    size_t i;\n";
12573           pr "    for (i = 0; i < %s_size; ++i)\n" n;
12574           pr "      printf (\"<%%02x>\", %s[i]);\n" n;
12575           pr "    printf (\"\\n\");\n";
12576           pr "  }\n";
12577       | OptString n -> pr "  printf (\"%%s\\n\", %s ? %s : \"null\");\n" n n
12578       | StringList n | DeviceList n -> pr "  print_strings (%s);\n" n
12579       | Bool n -> pr "  printf (\"%%s\\n\", %s ? \"true\" : \"false\");\n" n
12580       | Int n -> pr "  printf (\"%%d\\n\", %s);\n" n
12581       | Int64 n -> pr "  printf (\"%%\" PRIi64 \"\\n\", %s);\n" n
12582     ) (snd style);
12583     pr "  /* Java changes stdout line buffering so we need this: */\n";
12584     pr "  fflush (stdout);\n";
12585     pr "  return 0;\n";
12586     pr "}\n";
12587     pr "\n" in
12588
12589   List.iter (
12590     fun (name, style, _, _, _, _, _) ->
12591       if String.sub name (String.length name - 3) 3 <> "err" then (
12592         pr "/* Test normal return. */\n";
12593         generate_prototype ~extern:false ~semicolon:false ~newline:true
12594           ~handle:"g" ~prefix:"guestfs__" name style;
12595         pr "{\n";
12596         (match fst style with
12597          | RErr ->
12598              pr "  return 0;\n"
12599          | RInt _ ->
12600              pr "  int r;\n";
12601              pr "  sscanf (val, \"%%d\", &r);\n";
12602              pr "  return r;\n"
12603          | RInt64 _ ->
12604              pr "  int64_t r;\n";
12605              pr "  sscanf (val, \"%%\" SCNi64, &r);\n";
12606              pr "  return r;\n"
12607          | RBool _ ->
12608              pr "  return STREQ (val, \"true\");\n"
12609          | RConstString _
12610          | RConstOptString _ ->
12611              (* Can't return the input string here.  Return a static
12612               * string so we ensure we get a segfault if the caller
12613               * tries to free it.
12614               *)
12615              pr "  return \"static string\";\n"
12616          | RString _ ->
12617              pr "  return strdup (val);\n"
12618          | RStringList _ ->
12619              pr "  char **strs;\n";
12620              pr "  int n, i;\n";
12621              pr "  sscanf (val, \"%%d\", &n);\n";
12622              pr "  strs = safe_malloc (g, (n+1) * sizeof (char *));\n";
12623              pr "  for (i = 0; i < n; ++i) {\n";
12624              pr "    strs[i] = safe_malloc (g, 16);\n";
12625              pr "    snprintf (strs[i], 16, \"%%d\", i);\n";
12626              pr "  }\n";
12627              pr "  strs[n] = NULL;\n";
12628              pr "  return strs;\n"
12629          | RStruct (_, typ) ->
12630              pr "  struct guestfs_%s *r;\n" typ;
12631              pr "  r = safe_calloc (g, sizeof *r, 1);\n";
12632              pr "  return r;\n"
12633          | RStructList (_, typ) ->
12634              pr "  struct guestfs_%s_list *r;\n" typ;
12635              pr "  r = safe_calloc (g, sizeof *r, 1);\n";
12636              pr "  sscanf (val, \"%%d\", &r->len);\n";
12637              pr "  r->val = safe_calloc (g, r->len, sizeof *r->val);\n";
12638              pr "  return r;\n"
12639          | RHashtable _ ->
12640              pr "  char **strs;\n";
12641              pr "  int n, i;\n";
12642              pr "  sscanf (val, \"%%d\", &n);\n";
12643              pr "  strs = safe_malloc (g, (n*2+1) * sizeof (*strs));\n";
12644              pr "  for (i = 0; i < n; ++i) {\n";
12645              pr "    strs[i*2] = safe_malloc (g, 16);\n";
12646              pr "    strs[i*2+1] = safe_malloc (g, 16);\n";
12647              pr "    snprintf (strs[i*2], 16, \"%%d\", i);\n";
12648              pr "    snprintf (strs[i*2+1], 16, \"%%d\", i);\n";
12649              pr "  }\n";
12650              pr "  strs[n*2] = NULL;\n";
12651              pr "  return strs;\n"
12652          | RBufferOut _ ->
12653              pr "  return strdup (val);\n"
12654         );
12655         pr "}\n";
12656         pr "\n"
12657       ) else (
12658         pr "/* Test error return. */\n";
12659         generate_prototype ~extern:false ~semicolon:false ~newline:true
12660           ~handle:"g" ~prefix:"guestfs__" name style;
12661         pr "{\n";
12662         pr "  error (g, \"error\");\n";
12663         (match fst style with
12664          | RErr | RInt _ | RInt64 _ | RBool _ ->
12665              pr "  return -1;\n"
12666          | RConstString _ | RConstOptString _
12667          | RString _ | RStringList _ | RStruct _
12668          | RStructList _
12669          | RHashtable _
12670          | RBufferOut _ ->
12671              pr "  return NULL;\n"
12672         );
12673         pr "}\n";
12674         pr "\n"
12675       )
12676   ) tests
12677
12678 and generate_ocaml_bindtests () =
12679   generate_header OCamlStyle GPLv2plus;
12680
12681   pr "\
12682 let () =
12683   let g = Guestfs.create () in
12684 ";
12685
12686   let mkargs args =
12687     String.concat " " (
12688       List.map (
12689         function
12690         | CallString s -> "\"" ^ s ^ "\""
12691         | CallOptString None -> "None"
12692         | CallOptString (Some s) -> sprintf "(Some \"%s\")" s
12693         | CallStringList xs ->
12694             "[|" ^ String.concat ";" (List.map (sprintf "\"%s\"") xs) ^ "|]"
12695         | CallInt i when i >= 0 -> string_of_int i
12696         | CallInt i (* when i < 0 *) -> "(" ^ string_of_int i ^ ")"
12697         | CallInt64 i when i >= 0L -> Int64.to_string i ^ "L"
12698         | CallInt64 i (* when i < 0L *) -> "(" ^ Int64.to_string i ^ "L)"
12699         | CallBool b -> string_of_bool b
12700         | CallBuffer s -> sprintf "%S" s
12701       ) args
12702     )
12703   in
12704
12705   generate_lang_bindtests (
12706     fun f args -> pr "  Guestfs.%s g %s;\n" f (mkargs args)
12707   );
12708
12709   pr "print_endline \"EOF\"\n"
12710
12711 and generate_perl_bindtests () =
12712   pr "#!/usr/bin/perl -w\n";
12713   generate_header HashStyle GPLv2plus;
12714
12715   pr "\
12716 use strict;
12717
12718 use Sys::Guestfs;
12719
12720 my $g = Sys::Guestfs->new ();
12721 ";
12722
12723   let mkargs args =
12724     String.concat ", " (
12725       List.map (
12726         function
12727         | CallString s -> "\"" ^ s ^ "\""
12728         | CallOptString None -> "undef"
12729         | CallOptString (Some s) -> sprintf "\"%s\"" s
12730         | CallStringList xs ->
12731             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
12732         | CallInt i -> string_of_int i
12733         | CallInt64 i -> Int64.to_string i
12734         | CallBool b -> if b then "1" else "0"
12735         | CallBuffer s -> "\"" ^ c_quote s ^ "\""
12736       ) args
12737     )
12738   in
12739
12740   generate_lang_bindtests (
12741     fun f args -> pr "$g->%s (%s);\n" f (mkargs args)
12742   );
12743
12744   pr "print \"EOF\\n\"\n"
12745
12746 and generate_python_bindtests () =
12747   generate_header HashStyle GPLv2plus;
12748
12749   pr "\
12750 import guestfs
12751
12752 g = guestfs.GuestFS ()
12753 ";
12754
12755   let mkargs args =
12756     String.concat ", " (
12757       List.map (
12758         function
12759         | CallString s -> "\"" ^ s ^ "\""
12760         | CallOptString None -> "None"
12761         | CallOptString (Some s) -> sprintf "\"%s\"" s
12762         | CallStringList xs ->
12763             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
12764         | CallInt i -> string_of_int i
12765         | CallInt64 i -> Int64.to_string i
12766         | CallBool b -> if b then "1" else "0"
12767         | CallBuffer s -> "\"" ^ c_quote s ^ "\""
12768       ) args
12769     )
12770   in
12771
12772   generate_lang_bindtests (
12773     fun f args -> pr "g.%s (%s)\n" f (mkargs args)
12774   );
12775
12776   pr "print \"EOF\"\n"
12777
12778 and generate_ruby_bindtests () =
12779   generate_header HashStyle GPLv2plus;
12780
12781   pr "\
12782 require 'guestfs'
12783
12784 g = Guestfs::create()
12785 ";
12786
12787   let mkargs args =
12788     String.concat ", " (
12789       List.map (
12790         function
12791         | CallString s -> "\"" ^ s ^ "\""
12792         | CallOptString None -> "nil"
12793         | CallOptString (Some s) -> sprintf "\"%s\"" s
12794         | CallStringList xs ->
12795             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
12796         | CallInt i -> string_of_int i
12797         | CallInt64 i -> Int64.to_string i
12798         | CallBool b -> string_of_bool b
12799         | CallBuffer s -> "\"" ^ c_quote s ^ "\""
12800       ) args
12801     )
12802   in
12803
12804   generate_lang_bindtests (
12805     fun f args -> pr "g.%s(%s)\n" f (mkargs args)
12806   );
12807
12808   pr "print \"EOF\\n\"\n"
12809
12810 and generate_java_bindtests () =
12811   generate_header CStyle GPLv2plus;
12812
12813   pr "\
12814 import com.redhat.et.libguestfs.*;
12815
12816 public class Bindtests {
12817     public static void main (String[] argv)
12818     {
12819         try {
12820             GuestFS g = new GuestFS ();
12821 ";
12822
12823   let mkargs args =
12824     String.concat ", " (
12825       List.map (
12826         function
12827         | CallString s -> "\"" ^ s ^ "\""
12828         | CallOptString None -> "null"
12829         | CallOptString (Some s) -> sprintf "\"%s\"" s
12830         | CallStringList xs ->
12831             "new String[]{" ^
12832               String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "}"
12833         | CallInt i -> string_of_int i
12834         | CallInt64 i -> Int64.to_string i
12835         | CallBool b -> string_of_bool b
12836         | CallBuffer s ->
12837             "new byte[] { " ^ String.concat "," (
12838               map_chars (fun c -> string_of_int (Char.code c)) s
12839             ) ^ " }"
12840       ) args
12841     )
12842   in
12843
12844   generate_lang_bindtests (
12845     fun f args -> pr "            g.%s (%s);\n" f (mkargs args)
12846   );
12847
12848   pr "
12849             System.out.println (\"EOF\");
12850         }
12851         catch (Exception exn) {
12852             System.err.println (exn);
12853             System.exit (1);
12854         }
12855     }
12856 }
12857 "
12858
12859 and generate_haskell_bindtests () =
12860   generate_header HaskellStyle GPLv2plus;
12861
12862   pr "\
12863 module Bindtests where
12864 import qualified Guestfs
12865
12866 main = do
12867   g <- Guestfs.create
12868 ";
12869
12870   let mkargs args =
12871     String.concat " " (
12872       List.map (
12873         function
12874         | CallString s -> "\"" ^ s ^ "\""
12875         | CallOptString None -> "Nothing"
12876         | CallOptString (Some s) -> sprintf "(Just \"%s\")" s
12877         | CallStringList xs ->
12878             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
12879         | CallInt i when i < 0 -> "(" ^ string_of_int i ^ ")"
12880         | CallInt i -> string_of_int i
12881         | CallInt64 i when i < 0L -> "(" ^ Int64.to_string i ^ ")"
12882         | CallInt64 i -> Int64.to_string i
12883         | CallBool true -> "True"
12884         | CallBool false -> "False"
12885         | CallBuffer s -> "\"" ^ c_quote s ^ "\""
12886       ) args
12887     )
12888   in
12889
12890   generate_lang_bindtests (
12891     fun f args -> pr "  Guestfs.%s g %s\n" f (mkargs args)
12892   );
12893
12894   pr "  putStrLn \"EOF\"\n"
12895
12896 (* Language-independent bindings tests - we do it this way to
12897  * ensure there is parity in testing bindings across all languages.
12898  *)
12899 and generate_lang_bindtests call =
12900   call "test0" [CallString "abc"; CallOptString (Some "def");
12901                 CallStringList []; CallBool false;
12902                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
12903                 CallBuffer "abc\000abc"];
12904   call "test0" [CallString "abc"; CallOptString None;
12905                 CallStringList []; CallBool false;
12906                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
12907                 CallBuffer "abc\000abc"];
12908   call "test0" [CallString ""; CallOptString (Some "def");
12909                 CallStringList []; CallBool false;
12910                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
12911                 CallBuffer "abc\000abc"];
12912   call "test0" [CallString ""; CallOptString (Some "");
12913                 CallStringList []; CallBool false;
12914                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
12915                 CallBuffer "abc\000abc"];
12916   call "test0" [CallString "abc"; CallOptString (Some "def");
12917                 CallStringList ["1"]; CallBool false;
12918                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
12919                 CallBuffer "abc\000abc"];
12920   call "test0" [CallString "abc"; CallOptString (Some "def");
12921                 CallStringList ["1"; "2"]; CallBool false;
12922                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
12923                 CallBuffer "abc\000abc"];
12924   call "test0" [CallString "abc"; CallOptString (Some "def");
12925                 CallStringList ["1"]; CallBool true;
12926                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
12927                 CallBuffer "abc\000abc"];
12928   call "test0" [CallString "abc"; CallOptString (Some "def");
12929                 CallStringList ["1"]; CallBool false;
12930                 CallInt (-1); CallInt64 (-1L); CallString "123"; CallString "456";
12931                 CallBuffer "abc\000abc"];
12932   call "test0" [CallString "abc"; CallOptString (Some "def");
12933                 CallStringList ["1"]; CallBool false;
12934                 CallInt (-2); CallInt64 (-2L); CallString "123"; CallString "456";
12935                 CallBuffer "abc\000abc"];
12936   call "test0" [CallString "abc"; CallOptString (Some "def");
12937                 CallStringList ["1"]; CallBool false;
12938                 CallInt 1; CallInt64 1L; CallString "123"; CallString "456";
12939                 CallBuffer "abc\000abc"];
12940   call "test0" [CallString "abc"; CallOptString (Some "def");
12941                 CallStringList ["1"]; CallBool false;
12942                 CallInt 2; CallInt64 2L; CallString "123"; CallString "456";
12943                 CallBuffer "abc\000abc"];
12944   call "test0" [CallString "abc"; CallOptString (Some "def");
12945                 CallStringList ["1"]; CallBool false;
12946                 CallInt 4095; CallInt64 4095L; CallString "123"; CallString "456";
12947                 CallBuffer "abc\000abc"];
12948   call "test0" [CallString "abc"; CallOptString (Some "def");
12949                 CallStringList ["1"]; CallBool false;
12950                 CallInt 0; CallInt64 0L; CallString ""; CallString "";
12951                 CallBuffer "abc\000abc"]
12952
12953 (* XXX Add here tests of the return and error functions. *)
12954
12955 and generate_max_proc_nr () =
12956   pr "%d\n" max_proc_nr
12957
12958 let output_to filename k =
12959   let filename_new = filename ^ ".new" in
12960   chan := open_out filename_new;
12961   k ();
12962   close_out !chan;
12963   chan := Pervasives.stdout;
12964
12965   (* Is the new file different from the current file? *)
12966   if Sys.file_exists filename && files_equal filename filename_new then
12967     unlink filename_new                 (* same, so skip it *)
12968   else (
12969     (* different, overwrite old one *)
12970     (try chmod filename 0o644 with Unix_error _ -> ());
12971     rename filename_new filename;
12972     chmod filename 0o444;
12973     printf "written %s\n%!" filename;
12974   )
12975
12976 let perror msg = function
12977   | Unix_error (err, _, _) ->
12978       eprintf "%s: %s\n" msg (error_message err)
12979   | exn ->
12980       eprintf "%s: %s\n" msg (Printexc.to_string exn)
12981
12982 (* Main program. *)
12983 let () =
12984   let lock_fd =
12985     try openfile "HACKING" [O_RDWR] 0
12986     with
12987     | Unix_error (ENOENT, _, _) ->
12988         eprintf "\
12989 You are probably running this from the wrong directory.
12990 Run it from the top source directory using the command
12991   src/generator.ml
12992 ";
12993         exit 1
12994     | exn ->
12995         perror "open: HACKING" exn;
12996         exit 1 in
12997
12998   (* Acquire a lock so parallel builds won't try to run the generator
12999    * twice at the same time.  Subsequent builds will wait for the first
13000    * one to finish.  Note the lock is released implicitly when the
13001    * program exits.
13002    *)
13003   (try lockf lock_fd F_LOCK 1
13004    with exn ->
13005      perror "lock: HACKING" exn;
13006      exit 1);
13007
13008   check_functions ();
13009
13010   output_to "src/guestfs_protocol.x" generate_xdr;
13011   output_to "src/guestfs-structs.h" generate_structs_h;
13012   output_to "src/guestfs-actions.h" generate_actions_h;
13013   output_to "src/guestfs-internal-actions.h" generate_internal_actions_h;
13014   output_to "src/actions.c" generate_client_actions;
13015   output_to "src/bindtests.c" generate_bindtests;
13016   output_to "src/guestfs-structs.pod" generate_structs_pod;
13017   output_to "src/guestfs-actions.pod" generate_actions_pod;
13018   output_to "src/guestfs-availability.pod" generate_availability_pod;
13019   output_to "src/MAX_PROC_NR" generate_max_proc_nr;
13020   output_to "src/libguestfs.syms" generate_linker_script;
13021   output_to "daemon/actions.h" generate_daemon_actions_h;
13022   output_to "daemon/stubs.c" generate_daemon_actions;
13023   output_to "daemon/names.c" generate_daemon_names;
13024   output_to "daemon/optgroups.c" generate_daemon_optgroups_c;
13025   output_to "daemon/optgroups.h" generate_daemon_optgroups_h;
13026   output_to "capitests/tests.c" generate_tests;
13027   output_to "fish/cmds.c" generate_fish_cmds;
13028   output_to "fish/completion.c" generate_fish_completion;
13029   output_to "fish/guestfish-actions.pod" generate_fish_actions_pod;
13030   output_to "fish/prepopts.c" generate_fish_prep_options_c;
13031   output_to "fish/prepopts.h" generate_fish_prep_options_h;
13032   output_to "ocaml/guestfs.mli" generate_ocaml_mli;
13033   output_to "ocaml/guestfs.ml" generate_ocaml_ml;
13034   output_to "ocaml/guestfs_c_actions.c" generate_ocaml_c;
13035   output_to "ocaml/bindtests.ml" generate_ocaml_bindtests;
13036   output_to "perl/Guestfs.xs" generate_perl_xs;
13037   output_to "perl/lib/Sys/Guestfs.pm" generate_perl_pm;
13038   output_to "perl/bindtests.pl" generate_perl_bindtests;
13039   output_to "python/guestfs-py.c" generate_python_c;
13040   output_to "python/guestfs.py" generate_python_py;
13041   output_to "python/bindtests.py" generate_python_bindtests;
13042   output_to "ruby/ext/guestfs/_guestfs.c" generate_ruby_c;
13043   output_to "ruby/bindtests.rb" generate_ruby_bindtests;
13044   output_to "java/com/redhat/et/libguestfs/GuestFS.java" generate_java_java;
13045
13046   List.iter (
13047     fun (typ, jtyp) ->
13048       let cols = cols_of_struct typ in
13049       let filename = sprintf "java/com/redhat/et/libguestfs/%s.java" jtyp in
13050       output_to filename (generate_java_struct jtyp cols);
13051   ) java_structs;
13052
13053   output_to "java/Makefile.inc" generate_java_makefile_inc;
13054   output_to "java/com_redhat_et_libguestfs_GuestFS.c" generate_java_c;
13055   output_to "java/Bindtests.java" generate_java_bindtests;
13056   output_to "haskell/Guestfs.hs" generate_haskell_hs;
13057   output_to "haskell/Bindtests.hs" generate_haskell_bindtests;
13058   output_to "csharp/Libguestfs.cs" generate_csharp;
13059   output_to "php/extension/php_guestfs_php.h" generate_php_h;
13060   output_to "php/extension/guestfs_php.c" generate_php_c;
13061
13062   (* Always generate this file last, and unconditionally.  It's used
13063    * by the Makefile to know when we must re-run the generator.
13064    *)
13065   let chan = open_out "src/stamp-generator" in
13066   fprintf chan "1\n";
13067   close_out chan;
13068
13069   printf "generated %d lines of code\n" !lines