syntax: Replace -a and -o with && and || for portability.
[libguestfs.git] / src / generator.ml
1 #!/usr/bin/env ocaml
2 (* libguestfs
3  * Copyright (C) 2009-2010 Red Hat Inc.
4  *
5  * This program is free software; you can redistribute it and/or modify
6  * it under the terms of the GNU General Public License as published by
7  * the Free Software Foundation; either version 2 of the License, or
8  * (at your option) any later version.
9  *
10  * This program is distributed in the hope that it will be useful,
11  * but WITHOUT ANY WARRANTY; without even the implied warranty of
12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
13  * GNU General Public License for more details.
14  *
15  * You should have received a copy of the GNU General Public License
16  * along with this program; if not, write to the Free Software
17  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
18  *)
19
20 (* This script generates a large amount of code and documentation for
21  * all the daemon actions.
22  *
23  * To add a new action there are only two files you need to change,
24  * this one to describe the interface (see the big table of
25  * 'daemon_functions' below), and daemon/<somefile>.c to write the
26  * implementation.
27  *
28  * After editing this file, run it (./src/generator.ml) to regenerate
29  * all the output files.  'make' will rerun this automatically when
30  * necessary.  Note that if you are using a separate build directory
31  * you must run generator.ml from the _source_ directory.
32  *
33  * IMPORTANT: This script should NOT print any warnings.  If it prints
34  * warnings, you should treat them as errors.
35  *
36  * OCaml tips:
37  * (1) In emacs, install tuareg-mode to display and format OCaml code
38  * correctly.  'vim' comes with a good OCaml editing mode by default.
39  * (2) Read the resources at http://ocaml-tutorial.org/
40  *)
41
42 #load "unix.cma";;
43 #load "str.cma";;
44 #directory "+xml-light";;
45 #directory "+../pkg-lib/xml-light";; (* for GODI users *)
46 #load "xml-light.cma";;
47
48 open Unix
49 open Printf
50
51 type style = ret * args
52 and ret =
53     (* "RErr" as a return value means an int used as a simple error
54      * indication, ie. 0 or -1.
55      *)
56   | RErr
57
58     (* "RInt" as a return value means an int which is -1 for error
59      * or any value >= 0 on success.  Only use this for smallish
60      * positive ints (0 <= i < 2^30).
61      *)
62   | RInt of string
63
64     (* "RInt64" is the same as RInt, but is guaranteed to be able
65      * to return a full 64 bit value, _except_ that -1 means error
66      * (so -1 cannot be a valid, non-error return value).
67      *)
68   | RInt64 of string
69
70     (* "RBool" is a bool return value which can be true/false or
71      * -1 for error.
72      *)
73   | RBool of string
74
75     (* "RConstString" is a string that refers to a constant value.
76      * The return value must NOT be NULL (since NULL indicates
77      * an error).
78      *
79      * Try to avoid using this.  In particular you cannot use this
80      * for values returned from the daemon, because there is no
81      * thread-safe way to return them in the C API.
82      *)
83   | RConstString of string
84
85     (* "RConstOptString" is an even more broken version of
86      * "RConstString".  The returned string may be NULL and there
87      * is no way to return an error indication.  Avoid using this!
88      *)
89   | RConstOptString of string
90
91     (* "RString" is a returned string.  It must NOT be NULL, since
92      * a NULL return indicates an error.  The caller frees this.
93      *)
94   | RString of string
95
96     (* "RStringList" is a list of strings.  No string in the list
97      * can be NULL.  The caller frees the strings and the array.
98      *)
99   | RStringList of string
100
101     (* "RStruct" is a function which returns a single named structure
102      * or an error indication (in C, a struct, and in other languages
103      * with varying representations, but usually very efficient).  See
104      * after the function list below for the structures.
105      *)
106   | RStruct of string * string          (* name of retval, name of struct *)
107
108     (* "RStructList" is a function which returns either a list/array
109      * of structures (could be zero-length), or an error indication.
110      *)
111   | RStructList of string * string      (* name of retval, name of struct *)
112
113     (* Key-value pairs of untyped strings.  Turns into a hashtable or
114      * dictionary in languages which support it.  DON'T use this as a
115      * general "bucket" for results.  Prefer a stronger typed return
116      * value if one is available, or write a custom struct.  Don't use
117      * this if the list could potentially be very long, since it is
118      * inefficient.  Keys should be unique.  NULLs are not permitted.
119      *)
120   | RHashtable of string
121
122     (* "RBufferOut" is handled almost exactly like RString, but
123      * it allows the string to contain arbitrary 8 bit data including
124      * ASCII NUL.  In the C API this causes an implicit extra parameter
125      * to be added of type <size_t *size_r>.  The extra parameter
126      * returns the actual size of the return buffer in bytes.
127      *
128      * Other programming languages support strings with arbitrary 8 bit
129      * data.
130      *
131      * At the RPC layer we have to use the opaque<> type instead of
132      * string<>.  Returned data is still limited to the max message
133      * size (ie. ~ 2 MB).
134      *)
135   | RBufferOut of string
136
137 and args = argt list    (* Function parameters, guestfs handle is implicit. *)
138
139     (* Note in future we should allow a "variable args" parameter as
140      * the final parameter, to allow commands like
141      *   chmod mode file [file(s)...]
142      * This is not implemented yet, but many commands (such as chmod)
143      * are currently defined with the argument order keeping this future
144      * possibility in mind.
145      *)
146 and argt =
147   | String of string    (* const char *name, cannot be NULL *)
148   | Device of string    (* /dev device name, cannot be NULL *)
149   | Pathname of string  (* file name, cannot be NULL *)
150   | Dev_or_Path of string (* /dev device name or Pathname, cannot be NULL *)
151   | OptString of string (* const char *name, may be NULL *)
152   | StringList of string(* list of strings (each string cannot be NULL) *)
153   | DeviceList of string(* list of Device names (each cannot be NULL) *)
154   | Bool of string      (* boolean *)
155   | Int of string       (* int (smallish ints, signed, <= 31 bits) *)
156   | Int64 of string     (* any 64 bit int *)
157     (* These are treated as filenames (simple string parameters) in
158      * the C API and bindings.  But in the RPC protocol, we transfer
159      * the actual file content up to or down from the daemon.
160      * FileIn: local machine -> daemon (in request)
161      * FileOut: daemon -> local machine (in reply)
162      * In guestfish (only), the special name "-" means read from
163      * stdin or write to stdout.
164      *)
165   | FileIn of string
166   | FileOut of string
167     (* Opaque buffer which can contain arbitrary 8 bit data.
168      * In the C API, this is expressed as <const char *, size_t> pair.
169      * Most other languages have a string type which can contain
170      * ASCII NUL.  We use whatever type is appropriate for each
171      * language.
172      * Buffers are limited by the total message size.  To transfer
173      * large blocks of data, use FileIn/FileOut parameters instead.
174      * To return an arbitrary buffer, use RBufferOut.
175      *)
176   | BufferIn of string
177     (* Key material / passphrase.  Eventually we should treat this
178      * as sensitive and mlock it into physical RAM.  However this
179      * is highly complex because of all the places that XDR-encoded
180      * strings can end up.  So currently the only difference from
181      * 'String' is the way that guestfish requests these parameters
182      * from the user.
183      *)
184   | Key of string
185
186 type flags =
187   | ProtocolLimitWarning  (* display warning about protocol size limits *)
188   | DangerWillRobinson    (* flags particularly dangerous commands *)
189   | FishAlias of string   (* provide an alias for this cmd in guestfish *)
190   | FishOutput of fish_output_t (* how to display output in guestfish *)
191   | NotInFish             (* do not export via guestfish *)
192   | NotInDocs             (* do not add this function to documentation *)
193   | DeprecatedBy of string (* function is deprecated, use .. instead *)
194   | Optional of string    (* function is part of an optional group *)
195   | Progress              (* function can generate progress messages *)
196
197 and fish_output_t =
198   | FishOutputOctal       (* for int return, print in octal *)
199   | FishOutputHexadecimal (* for int return, print in hex *)
200
201 (* You can supply zero or as many tests as you want per API call.
202  *
203  * Note that the test environment has 3 block devices, of size 500MB,
204  * 50MB and 10MB (respectively /dev/sda, /dev/sdb, /dev/sdc), and
205  * a fourth ISO block device with some known files on it (/dev/sdd).
206  *
207  * Note for partitioning purposes, the 500MB device has 1015 cylinders.
208  * Number of cylinders was 63 for IDE emulated disks with precisely
209  * the same size.  How exactly this is calculated is a mystery.
210  *
211  * The ISO block device (/dev/sdd) comes from images/test.iso.
212  *
213  * To be able to run the tests in a reasonable amount of time,
214  * the virtual machine and block devices are reused between tests.
215  * So don't try testing kill_subprocess :-x
216  *
217  * Between each test we blockdev-setrw, umount-all, lvm-remove-all.
218  *
219  * Don't assume anything about the previous contents of the block
220  * devices.  Use 'Init*' to create some initial scenarios.
221  *
222  * You can add a prerequisite clause to any individual test.  This
223  * is a run-time check, which, if it fails, causes the test to be
224  * skipped.  Useful if testing a command which might not work on
225  * all variations of libguestfs builds.  A test that has prerequisite
226  * of 'Always' is run unconditionally.
227  *
228  * In addition, packagers can skip individual tests by setting the
229  * environment variables:     eg:
230  *   SKIP_TEST_<CMD>_<NUM>=1  SKIP_TEST_COMMAND_3=1  (skips test #3 of command)
231  *   SKIP_TEST_<CMD>=1        SKIP_TEST_ZEROFREE=1   (skips all zerofree tests)
232  *)
233 type tests = (test_init * test_prereq * test) list
234 and test =
235     (* Run the command sequence and just expect nothing to fail. *)
236   | TestRun of seq
237
238     (* Run the command sequence and expect the output of the final
239      * command to be the string.
240      *)
241   | TestOutput of seq * string
242
243     (* Run the command sequence and expect the output of the final
244      * command to be the list of strings.
245      *)
246   | TestOutputList of seq * string list
247
248     (* Run the command sequence and expect the output of the final
249      * command to be the list of block devices (could be either
250      * "/dev/sd.." or "/dev/hd.." form - we don't check the 5th
251      * character of each string).
252      *)
253   | TestOutputListOfDevices of seq * string list
254
255     (* Run the command sequence and expect the output of the final
256      * command to be the integer.
257      *)
258   | TestOutputInt of seq * int
259
260     (* Run the command sequence and expect the output of the final
261      * command to be <op> <int>, eg. ">=", "1".
262      *)
263   | TestOutputIntOp of seq * string * int
264
265     (* Run the command sequence and expect the output of the final
266      * command to be a true value (!= 0 or != NULL).
267      *)
268   | TestOutputTrue of seq
269
270     (* Run the command sequence and expect the output of the final
271      * command to be a false value (== 0 or == NULL, but not an error).
272      *)
273   | TestOutputFalse of seq
274
275     (* Run the command sequence and expect the output of the final
276      * command to be a list of the given length (but don't care about
277      * content).
278      *)
279   | TestOutputLength of seq * int
280
281     (* Run the command sequence and expect the output of the final
282      * command to be a buffer (RBufferOut), ie. string + size.
283      *)
284   | TestOutputBuffer of seq * string
285
286     (* Run the command sequence and expect the output of the final
287      * command to be a structure.
288      *)
289   | TestOutputStruct of seq * test_field_compare list
290
291     (* Run the command sequence and expect the final command (only)
292      * to fail.
293      *)
294   | TestLastFail of seq
295
296 and test_field_compare =
297   | CompareWithInt of string * int
298   | CompareWithIntOp of string * string * int
299   | CompareWithString of string * string
300   | CompareFieldsIntEq of string * string
301   | CompareFieldsStrEq of string * string
302
303 (* Test prerequisites. *)
304 and test_prereq =
305     (* Test always runs. *)
306   | Always
307
308     (* Test is currently disabled - eg. it fails, or it tests some
309      * unimplemented feature.
310      *)
311   | Disabled
312
313     (* 'string' is some C code (a function body) that should return
314      * true or false.  The test will run if the code returns true.
315      *)
316   | If of string
317
318     (* As for 'If' but the test runs _unless_ the code returns true. *)
319   | Unless of string
320
321     (* Run the test only if 'string' is available in the daemon. *)
322   | IfAvailable of string
323
324 (* Some initial scenarios for testing. *)
325 and test_init =
326     (* Do nothing, block devices could contain random stuff including
327      * LVM PVs, and some filesystems might be mounted.  This is usually
328      * a bad idea.
329      *)
330   | InitNone
331
332     (* Block devices are empty and no filesystems are mounted. *)
333   | InitEmpty
334
335     (* /dev/sda contains a single partition /dev/sda1, with random
336      * content.  /dev/sdb and /dev/sdc may have random content.
337      * No LVM.
338      *)
339   | InitPartition
340
341     (* /dev/sda contains a single partition /dev/sda1, which is formatted
342      * as ext2, empty [except for lost+found] and mounted on /.
343      * /dev/sdb and /dev/sdc may have random content.
344      * No LVM.
345      *)
346   | InitBasicFS
347
348     (* /dev/sda:
349      *   /dev/sda1 (is a PV):
350      *     /dev/VG/LV (size 8MB):
351      *       formatted as ext2, empty [except for lost+found], mounted on /
352      * /dev/sdb and /dev/sdc may have random content.
353      *)
354   | InitBasicFSonLVM
355
356     (* /dev/sdd (the ISO, see images/ directory in source)
357      * is mounted on /
358      *)
359   | InitISOFS
360
361 (* Sequence of commands for testing. *)
362 and seq = cmd list
363 and cmd = string list
364
365 (* Note about long descriptions: When referring to another
366  * action, use the format C<guestfs_other> (ie. the full name of
367  * the C function).  This will be replaced as appropriate in other
368  * language bindings.
369  *
370  * Apart from that, long descriptions are just perldoc paragraphs.
371  *)
372
373 (* Generate a random UUID (used in tests). *)
374 let uuidgen () =
375   let chan = open_process_in "uuidgen" in
376   let uuid = input_line chan in
377   (match close_process_in chan with
378    | WEXITED 0 -> ()
379    | WEXITED _ ->
380        failwith "uuidgen: process exited with non-zero status"
381    | WSIGNALED _ | WSTOPPED _ ->
382        failwith "uuidgen: process signalled or stopped by signal"
383   );
384   uuid
385
386 (* These test functions are used in the language binding tests. *)
387
388 let test_all_args = [
389   String "str";
390   OptString "optstr";
391   StringList "strlist";
392   Bool "b";
393   Int "integer";
394   Int64 "integer64";
395   FileIn "filein";
396   FileOut "fileout";
397   BufferIn "bufferin";
398 ]
399
400 let test_all_rets = [
401   (* except for RErr, which is tested thoroughly elsewhere *)
402   "test0rint",         RInt "valout";
403   "test0rint64",       RInt64 "valout";
404   "test0rbool",        RBool "valout";
405   "test0rconststring", RConstString "valout";
406   "test0rconstoptstring", RConstOptString "valout";
407   "test0rstring",      RString "valout";
408   "test0rstringlist",  RStringList "valout";
409   "test0rstruct",      RStruct ("valout", "lvm_pv");
410   "test0rstructlist",  RStructList ("valout", "lvm_pv");
411   "test0rhashtable",   RHashtable "valout";
412 ]
413
414 let test_functions = [
415   ("test0", (RErr, test_all_args), -1, [NotInFish; NotInDocs],
416    [],
417    "internal test function - do not use",
418    "\
419 This is an internal test function which is used to test whether
420 the automatically generated bindings can handle every possible
421 parameter type correctly.
422
423 It echos the contents of each parameter to stdout.
424
425 You probably don't want to call this function.");
426 ] @ List.flatten (
427   List.map (
428     fun (name, ret) ->
429       [(name, (ret, [String "val"]), -1, [NotInFish; NotInDocs],
430         [],
431         "internal test function - do not use",
432         "\
433 This is an internal test function which is used to test whether
434 the automatically generated bindings can handle every possible
435 return type correctly.
436
437 It converts string C<val> to the return type.
438
439 You probably don't want to call this function.");
440        (name ^ "err", (ret, []), -1, [NotInFish; NotInDocs],
441         [],
442         "internal test function - do not use",
443         "\
444 This is an internal test function which is used to test whether
445 the automatically generated bindings can handle every possible
446 return type correctly.
447
448 This function always returns an error.
449
450 You probably don't want to call this function.")]
451   ) test_all_rets
452 )
453
454 (* non_daemon_functions are any functions which don't get processed
455  * in the daemon, eg. functions for setting and getting local
456  * configuration values.
457  *)
458
459 let non_daemon_functions = test_functions @ [
460   ("launch", (RErr, []), -1, [FishAlias "run"],
461    [],
462    "launch the qemu subprocess",
463    "\
464 Internally libguestfs is implemented by running a virtual machine
465 using L<qemu(1)>.
466
467 You should call this after configuring the handle
468 (eg. adding drives) but before performing any actions.");
469
470   ("wait_ready", (RErr, []), -1, [NotInFish],
471    [],
472    "wait until the qemu subprocess launches (no op)",
473    "\
474 This function is a no op.
475
476 In versions of the API E<lt> 1.0.71 you had to call this function
477 just after calling C<guestfs_launch> to wait for the launch
478 to complete.  However this is no longer necessary because
479 C<guestfs_launch> now does the waiting.
480
481 If you see any calls to this function in code then you can just
482 remove them, unless you want to retain compatibility with older
483 versions of the API.");
484
485   ("kill_subprocess", (RErr, []), -1, [],
486    [],
487    "kill the qemu subprocess",
488    "\
489 This kills the qemu subprocess.  You should never need to call this.");
490
491   ("add_drive", (RErr, [String "filename"]), -1, [FishAlias "add"],
492    [],
493    "add an image to examine or modify",
494    "\
495 This function adds a virtual machine disk image C<filename> to the
496 guest.  The first time you call this function, the disk appears as IDE
497 disk 0 (C</dev/sda>) in the guest, the second time as C</dev/sdb>, and
498 so on.
499
500 You don't necessarily need to be root when using libguestfs.  However
501 you obviously do need sufficient permissions to access the filename
502 for whatever operations you want to perform (ie. read access if you
503 just want to read the image or write access if you want to modify the
504 image).
505
506 This is equivalent to the qemu parameter
507 C<-drive file=filename,cache=off,if=...>.
508
509 C<cache=off> is omitted in cases where it is not supported by
510 the underlying filesystem.
511
512 C<if=...> is set at compile time by the configuration option
513 C<./configure --with-drive-if=...>.  In the rare case where you
514 might need to change this at run time, use C<guestfs_add_drive_with_if>
515 or C<guestfs_add_drive_ro_with_if>.
516
517 Note that this call checks for the existence of C<filename>.  This
518 stops you from specifying other types of drive which are supported
519 by qemu such as C<nbd:> and C<http:> URLs.  To specify those, use
520 the general C<guestfs_config> call instead.");
521
522   ("add_cdrom", (RErr, [String "filename"]), -1, [FishAlias "cdrom"],
523    [],
524    "add a CD-ROM disk image to examine",
525    "\
526 This function adds a virtual CD-ROM disk image to the guest.
527
528 This is equivalent to the qemu parameter C<-cdrom filename>.
529
530 Notes:
531
532 =over 4
533
534 =item *
535
536 This call checks for the existence of C<filename>.  This
537 stops you from specifying other types of drive which are supported
538 by qemu such as C<nbd:> and C<http:> URLs.  To specify those, use
539 the general C<guestfs_config> call instead.
540
541 =item *
542
543 If you just want to add an ISO file (often you use this as an
544 efficient way to transfer large files into the guest), then you
545 should probably use C<guestfs_add_drive_ro> instead.
546
547 =back");
548
549   ("add_drive_ro", (RErr, [String "filename"]), -1, [FishAlias "add-ro"],
550    [],
551    "add a drive in snapshot mode (read-only)",
552    "\
553 This adds a drive in snapshot mode, making it effectively
554 read-only.
555
556 Note that writes to the device are allowed, and will be seen for
557 the duration of the guestfs handle, but they are written
558 to a temporary file which is discarded as soon as the guestfs
559 handle is closed.  We don't currently have any method to enable
560 changes to be committed, although qemu can support this.
561
562 This is equivalent to the qemu parameter
563 C<-drive file=filename,snapshot=on,if=...>.
564
565 C<if=...> is set at compile time by the configuration option
566 C<./configure --with-drive-if=...>.  In the rare case where you
567 might need to change this at run time, use C<guestfs_add_drive_with_if>
568 or C<guestfs_add_drive_ro_with_if>.
569
570 Note that this call checks for the existence of C<filename>.  This
571 stops you from specifying other types of drive which are supported
572 by qemu such as C<nbd:> and C<http:> URLs.  To specify those, use
573 the general C<guestfs_config> call instead.");
574
575   ("config", (RErr, [String "qemuparam"; OptString "qemuvalue"]), -1, [],
576    [],
577    "add qemu parameters",
578    "\
579 This can be used to add arbitrary qemu command line parameters
580 of the form C<-param value>.  Actually it's not quite arbitrary - we
581 prevent you from setting some parameters which would interfere with
582 parameters that we use.
583
584 The first character of C<param> string must be a C<-> (dash).
585
586 C<value> can be NULL.");
587
588   ("set_qemu", (RErr, [OptString "qemu"]), -1, [FishAlias "qemu"],
589    [],
590    "set the qemu binary",
591    "\
592 Set the qemu binary that we will use.
593
594 The default is chosen when the library was compiled by the
595 configure script.
596
597 You can also override this by setting the C<LIBGUESTFS_QEMU>
598 environment variable.
599
600 Setting C<qemu> to C<NULL> restores the default qemu binary.
601
602 Note that you should call this function as early as possible
603 after creating the handle.  This is because some pre-launch
604 operations depend on testing qemu features (by running C<qemu -help>).
605 If the qemu binary changes, we don't retest features, and
606 so you might see inconsistent results.  Using the environment
607 variable C<LIBGUESTFS_QEMU> is safest of all since that picks
608 the qemu binary at the same time as the handle is created.");
609
610   ("get_qemu", (RConstString "qemu", []), -1, [],
611    [InitNone, Always, TestRun (
612       [["get_qemu"]])],
613    "get the qemu binary",
614    "\
615 Return the current qemu binary.
616
617 This is always non-NULL.  If it wasn't set already, then this will
618 return the default qemu binary name.");
619
620   ("set_path", (RErr, [OptString "searchpath"]), -1, [FishAlias "path"],
621    [],
622    "set the search path",
623    "\
624 Set the path that libguestfs searches for kernel and initrd.img.
625
626 The default is C<$libdir/guestfs> unless overridden by setting
627 C<LIBGUESTFS_PATH> environment variable.
628
629 Setting C<path> to C<NULL> restores the default path.");
630
631   ("get_path", (RConstString "path", []), -1, [],
632    [InitNone, Always, TestRun (
633       [["get_path"]])],
634    "get the search path",
635    "\
636 Return the current search path.
637
638 This is always non-NULL.  If it wasn't set already, then this will
639 return the default path.");
640
641   ("set_append", (RErr, [OptString "append"]), -1, [FishAlias "append"],
642    [],
643    "add options to kernel command line",
644    "\
645 This function is used to add additional options to the
646 guest kernel command line.
647
648 The default is C<NULL> unless overridden by setting
649 C<LIBGUESTFS_APPEND> environment variable.
650
651 Setting C<append> to C<NULL> means I<no> additional options
652 are passed (libguestfs always adds a few of its own).");
653
654   ("get_append", (RConstOptString "append", []), -1, [],
655    (* This cannot be tested with the current framework.  The
656     * function can return NULL in normal operations, which the
657     * test framework interprets as an error.
658     *)
659    [],
660    "get the additional kernel options",
661    "\
662 Return the additional kernel options which are added to the
663 guest kernel command line.
664
665 If C<NULL> then no options are added.");
666
667   ("set_autosync", (RErr, [Bool "autosync"]), -1, [FishAlias "autosync"],
668    [],
669    "set autosync mode",
670    "\
671 If C<autosync> is true, this enables autosync.  Libguestfs will make a
672 best effort attempt to run C<guestfs_umount_all> followed by
673 C<guestfs_sync> when the handle is closed
674 (also if the program exits without closing handles).
675
676 This is disabled by default (except in guestfish where it is
677 enabled by default).");
678
679   ("get_autosync", (RBool "autosync", []), -1, [],
680    [InitNone, Always, TestRun (
681       [["get_autosync"]])],
682    "get autosync mode",
683    "\
684 Get the autosync flag.");
685
686   ("set_verbose", (RErr, [Bool "verbose"]), -1, [FishAlias "verbose"],
687    [],
688    "set verbose mode",
689    "\
690 If C<verbose> is true, this turns on verbose messages (to C<stderr>).
691
692 Verbose messages are disabled unless the environment variable
693 C<LIBGUESTFS_DEBUG> is defined and set to C<1>.");
694
695   ("get_verbose", (RBool "verbose", []), -1, [],
696    [],
697    "get verbose mode",
698    "\
699 This returns the verbose messages flag.");
700
701   ("is_ready", (RBool "ready", []), -1, [],
702    [InitNone, Always, TestOutputTrue (
703       [["is_ready"]])],
704    "is ready to accept commands",
705    "\
706 This returns true iff this handle is ready to accept commands
707 (in the C<READY> state).
708
709 For more information on states, see L<guestfs(3)>.");
710
711   ("is_config", (RBool "config", []), -1, [],
712    [InitNone, Always, TestOutputFalse (
713       [["is_config"]])],
714    "is in configuration state",
715    "\
716 This returns true iff this handle is being configured
717 (in the C<CONFIG> state).
718
719 For more information on states, see L<guestfs(3)>.");
720
721   ("is_launching", (RBool "launching", []), -1, [],
722    [InitNone, Always, TestOutputFalse (
723       [["is_launching"]])],
724    "is launching subprocess",
725    "\
726 This returns true iff this handle is launching the subprocess
727 (in the C<LAUNCHING> state).
728
729 For more information on states, see L<guestfs(3)>.");
730
731   ("is_busy", (RBool "busy", []), -1, [],
732    [InitNone, Always, TestOutputFalse (
733       [["is_busy"]])],
734    "is busy processing a command",
735    "\
736 This returns true iff this handle is busy processing a command
737 (in the C<BUSY> state).
738
739 For more information on states, see L<guestfs(3)>.");
740
741   ("get_state", (RInt "state", []), -1, [],
742    [],
743    "get the current state",
744    "\
745 This returns the current state as an opaque integer.  This is
746 only useful for printing debug and internal error messages.
747
748 For more information on states, see L<guestfs(3)>.");
749
750   ("set_memsize", (RErr, [Int "memsize"]), -1, [FishAlias "memsize"],
751    [InitNone, Always, TestOutputInt (
752       [["set_memsize"; "500"];
753        ["get_memsize"]], 500)],
754    "set memory allocated to the qemu subprocess",
755    "\
756 This sets the memory size in megabytes allocated to the
757 qemu subprocess.  This only has any effect if called before
758 C<guestfs_launch>.
759
760 You can also change this by setting the environment
761 variable C<LIBGUESTFS_MEMSIZE> before the handle is
762 created.
763
764 For more information on the architecture of libguestfs,
765 see L<guestfs(3)>.");
766
767   ("get_memsize", (RInt "memsize", []), -1, [],
768    [InitNone, Always, TestOutputIntOp (
769       [["get_memsize"]], ">=", 256)],
770    "get memory allocated to the qemu subprocess",
771    "\
772 This gets the memory size in megabytes allocated to the
773 qemu subprocess.
774
775 If C<guestfs_set_memsize> was not called
776 on this handle, and if C<LIBGUESTFS_MEMSIZE> was not set,
777 then this returns the compiled-in default value for memsize.
778
779 For more information on the architecture of libguestfs,
780 see L<guestfs(3)>.");
781
782   ("get_pid", (RInt "pid", []), -1, [FishAlias "pid"],
783    [InitNone, Always, TestOutputIntOp (
784       [["get_pid"]], ">=", 1)],
785    "get PID of qemu subprocess",
786    "\
787 Return the process ID of the qemu subprocess.  If there is no
788 qemu subprocess, then this will return an error.
789
790 This is an internal call used for debugging and testing.");
791
792   ("version", (RStruct ("version", "version"), []), -1, [],
793    [InitNone, Always, TestOutputStruct (
794       [["version"]], [CompareWithInt ("major", 1)])],
795    "get the library version number",
796    "\
797 Return the libguestfs version number that the program is linked
798 against.
799
800 Note that because of dynamic linking this is not necessarily
801 the version of libguestfs that you compiled against.  You can
802 compile the program, and then at runtime dynamically link
803 against a completely different C<libguestfs.so> library.
804
805 This call was added in version C<1.0.58>.  In previous
806 versions of libguestfs there was no way to get the version
807 number.  From C code you can use dynamic linker functions
808 to find out if this symbol exists (if it doesn't, then
809 it's an earlier version).
810
811 The call returns a structure with four elements.  The first
812 three (C<major>, C<minor> and C<release>) are numbers and
813 correspond to the usual version triplet.  The fourth element
814 (C<extra>) is a string and is normally empty, but may be
815 used for distro-specific information.
816
817 To construct the original version string:
818 C<$major.$minor.$release$extra>
819
820 See also: L<guestfs(3)/LIBGUESTFS VERSION NUMBERS>.
821
822 I<Note:> Don't use this call to test for availability
823 of features.  In enterprise distributions we backport
824 features from later versions into earlier versions,
825 making this an unreliable way to test for features.
826 Use C<guestfs_available> instead.");
827
828   ("set_selinux", (RErr, [Bool "selinux"]), -1, [FishAlias "selinux"],
829    [InitNone, Always, TestOutputTrue (
830       [["set_selinux"; "true"];
831        ["get_selinux"]])],
832    "set SELinux enabled or disabled at appliance boot",
833    "\
834 This sets the selinux flag that is passed to the appliance
835 at boot time.  The default is C<selinux=0> (disabled).
836
837 Note that if SELinux is enabled, it is always in
838 Permissive mode (C<enforcing=0>).
839
840 For more information on the architecture of libguestfs,
841 see L<guestfs(3)>.");
842
843   ("get_selinux", (RBool "selinux", []), -1, [],
844    [],
845    "get SELinux enabled flag",
846    "\
847 This returns the current setting of the selinux flag which
848 is passed to the appliance at boot time.  See C<guestfs_set_selinux>.
849
850 For more information on the architecture of libguestfs,
851 see L<guestfs(3)>.");
852
853   ("set_trace", (RErr, [Bool "trace"]), -1, [FishAlias "trace"],
854    [InitNone, Always, TestOutputFalse (
855       [["set_trace"; "false"];
856        ["get_trace"]])],
857    "enable or disable command traces",
858    "\
859 If the command trace flag is set to 1, then commands are
860 printed on stderr before they are executed in a format
861 which is very similar to the one used by guestfish.  In
862 other words, you can run a program with this enabled, and
863 you will get out a script which you can feed to guestfish
864 to perform the same set of actions.
865
866 If you want to trace C API calls into libguestfs (and
867 other libraries) then possibly a better way is to use
868 the external ltrace(1) command.
869
870 Command traces are disabled unless the environment variable
871 C<LIBGUESTFS_TRACE> is defined and set to C<1>.");
872
873   ("get_trace", (RBool "trace", []), -1, [],
874    [],
875    "get command trace enabled flag",
876    "\
877 Return the command trace flag.");
878
879   ("set_direct", (RErr, [Bool "direct"]), -1, [FishAlias "direct"],
880    [InitNone, Always, TestOutputFalse (
881       [["set_direct"; "false"];
882        ["get_direct"]])],
883    "enable or disable direct appliance mode",
884    "\
885 If the direct appliance mode flag is enabled, then stdin and
886 stdout are passed directly through to the appliance once it
887 is launched.
888
889 One consequence of this is that log messages aren't caught
890 by the library and handled by C<guestfs_set_log_message_callback>,
891 but go straight to stdout.
892
893 You probably don't want to use this unless you know what you
894 are doing.
895
896 The default is disabled.");
897
898   ("get_direct", (RBool "direct", []), -1, [],
899    [],
900    "get direct appliance mode flag",
901    "\
902 Return the direct appliance mode flag.");
903
904   ("set_recovery_proc", (RErr, [Bool "recoveryproc"]), -1, [FishAlias "recovery-proc"],
905    [InitNone, Always, TestOutputTrue (
906       [["set_recovery_proc"; "true"];
907        ["get_recovery_proc"]])],
908    "enable or disable the recovery process",
909    "\
910 If this is called with the parameter C<false> then
911 C<guestfs_launch> does not create a recovery process.  The
912 purpose of the recovery process is to stop runaway qemu
913 processes in the case where the main program aborts abruptly.
914
915 This only has any effect if called before C<guestfs_launch>,
916 and the default is true.
917
918 About the only time when you would want to disable this is
919 if the main process will fork itself into the background
920 (\"daemonize\" itself).  In this case the recovery process
921 thinks that the main program has disappeared and so kills
922 qemu, which is not very helpful.");
923
924   ("get_recovery_proc", (RBool "recoveryproc", []), -1, [],
925    [],
926    "get recovery process enabled flag",
927    "\
928 Return the recovery process enabled flag.");
929
930   ("add_drive_with_if", (RErr, [String "filename"; String "iface"]), -1, [],
931    [],
932    "add a drive specifying the QEMU block emulation to use",
933    "\
934 This is the same as C<guestfs_add_drive> but it allows you
935 to specify the QEMU interface emulation to use at run time.");
936
937   ("add_drive_ro_with_if", (RErr, [String "filename"; String "iface"]), -1, [],
938    [],
939    "add a drive read-only specifying the QEMU block emulation to use",
940    "\
941 This is the same as C<guestfs_add_drive_ro> but it allows you
942 to specify the QEMU interface emulation to use at run time.");
943
944   ("file_architecture", (RString "arch", [Pathname "filename"]), -1, [],
945    [InitISOFS, Always, TestOutput (
946       [["file_architecture"; "/bin-i586-dynamic"]], "i386");
947     InitISOFS, Always, TestOutput (
948       [["file_architecture"; "/bin-sparc-dynamic"]], "sparc");
949     InitISOFS, Always, TestOutput (
950       [["file_architecture"; "/bin-win32.exe"]], "i386");
951     InitISOFS, Always, TestOutput (
952       [["file_architecture"; "/bin-win64.exe"]], "x86_64");
953     InitISOFS, Always, TestOutput (
954       [["file_architecture"; "/bin-x86_64-dynamic"]], "x86_64");
955     InitISOFS, Always, TestOutput (
956       [["file_architecture"; "/lib-i586.so"]], "i386");
957     InitISOFS, Always, TestOutput (
958       [["file_architecture"; "/lib-sparc.so"]], "sparc");
959     InitISOFS, Always, TestOutput (
960       [["file_architecture"; "/lib-win32.dll"]], "i386");
961     InitISOFS, Always, TestOutput (
962       [["file_architecture"; "/lib-win64.dll"]], "x86_64");
963     InitISOFS, Always, TestOutput (
964       [["file_architecture"; "/lib-x86_64.so"]], "x86_64");
965     InitISOFS, Always, TestOutput (
966       [["file_architecture"; "/initrd-x86_64.img"]], "x86_64");
967     InitISOFS, Always, TestOutput (
968       [["file_architecture"; "/initrd-x86_64.img.gz"]], "x86_64");],
969    "detect the architecture of a binary file",
970    "\
971 This detects the architecture of the binary C<filename>,
972 and returns it if known.
973
974 Currently defined architectures are:
975
976 =over 4
977
978 =item \"i386\"
979
980 This string is returned for all 32 bit i386, i486, i586, i686 binaries
981 irrespective of the precise processor requirements of the binary.
982
983 =item \"x86_64\"
984
985 64 bit x86-64.
986
987 =item \"sparc\"
988
989 32 bit SPARC.
990
991 =item \"sparc64\"
992
993 64 bit SPARC V9 and above.
994
995 =item \"ia64\"
996
997 Intel Itanium.
998
999 =item \"ppc\"
1000
1001 32 bit Power PC.
1002
1003 =item \"ppc64\"
1004
1005 64 bit Power PC.
1006
1007 =back
1008
1009 Libguestfs may return other architecture strings in future.
1010
1011 The function works on at least the following types of files:
1012
1013 =over 4
1014
1015 =item *
1016
1017 many types of Un*x and Linux binary
1018
1019 =item *
1020
1021 many types of Un*x and Linux shared library
1022
1023 =item *
1024
1025 Windows Win32 and Win64 binaries
1026
1027 =item *
1028
1029 Windows Win32 and Win64 DLLs
1030
1031 Win32 binaries and DLLs return C<i386>.
1032
1033 Win64 binaries and DLLs return C<x86_64>.
1034
1035 =item *
1036
1037 Linux kernel modules
1038
1039 =item *
1040
1041 Linux new-style initrd images
1042
1043 =item *
1044
1045 some non-x86 Linux vmlinuz kernels
1046
1047 =back
1048
1049 What it can't do currently:
1050
1051 =over 4
1052
1053 =item *
1054
1055 static libraries (libfoo.a)
1056
1057 =item *
1058
1059 Linux old-style initrd as compressed ext2 filesystem (RHEL 3)
1060
1061 =item *
1062
1063 x86 Linux vmlinuz kernels
1064
1065 x86 vmlinuz images (bzImage format) consist of a mix of 16-, 32- and
1066 compressed code, and are horribly hard to unpack.  If you want to find
1067 the architecture of a kernel, use the architecture of the associated
1068 initrd or kernel module(s) instead.
1069
1070 =back");
1071
1072   ("inspect_os", (RStringList "roots", []), -1, [],
1073    [],
1074    "inspect disk and return list of operating systems found",
1075    "\
1076 This function uses other libguestfs functions and certain
1077 heuristics to inspect the disk(s) (usually disks belonging to
1078 a virtual machine), looking for operating systems.
1079
1080 The list returned is empty if no operating systems were found.
1081
1082 If one operating system was found, then this returns a list with
1083 a single element, which is the name of the root filesystem of
1084 this operating system.  It is also possible for this function
1085 to return a list containing more than one element, indicating
1086 a dual-boot or multi-boot virtual machine, with each element being
1087 the root filesystem of one of the operating systems.
1088
1089 You can pass the root string(s) returned to other
1090 C<guestfs_inspect_get_*> functions in order to query further
1091 information about each operating system, such as the name
1092 and version.
1093
1094 This function uses other libguestfs features such as
1095 C<guestfs_mount_ro> and C<guestfs_umount_all> in order to mount
1096 and unmount filesystems and look at the contents.  This should
1097 be called with no disks currently mounted.  The function may also
1098 use Augeas, so any existing Augeas handle will be closed.
1099
1100 This function cannot decrypt encrypted disks.  The caller
1101 must do that first (supplying the necessary keys) if the
1102 disk is encrypted.
1103
1104 Please read L<guestfs(3)/INSPECTION> for more details.");
1105
1106   ("inspect_get_type", (RString "name", [Device "root"]), -1, [],
1107    [],
1108    "get type of inspected operating system",
1109    "\
1110 This function should only be called with a root device string
1111 as returned by C<guestfs_inspect_os>.
1112
1113 This returns the type of the inspected operating system.
1114 Currently defined types are:
1115
1116 =over 4
1117
1118 =item \"linux\"
1119
1120 Any Linux-based operating system.
1121
1122 =item \"windows\"
1123
1124 Any Microsoft Windows operating system.
1125
1126 =item \"unknown\"
1127
1128 The operating system type could not be determined.
1129
1130 =back
1131
1132 Future versions of libguestfs may return other strings here.
1133 The caller should be prepared to handle any string.
1134
1135 Please read L<guestfs(3)/INSPECTION> for more details.");
1136
1137   ("inspect_get_arch", (RString "arch", [Device "root"]), -1, [],
1138    [],
1139    "get architecture of inspected operating system",
1140    "\
1141 This function should only be called with a root device string
1142 as returned by C<guestfs_inspect_os>.
1143
1144 This returns the architecture of the inspected operating system.
1145 The possible return values are listed under
1146 C<guestfs_file_architecture>.
1147
1148 If the architecture could not be determined, then the
1149 string C<unknown> is returned.
1150
1151 Please read L<guestfs(3)/INSPECTION> for more details.");
1152
1153   ("inspect_get_distro", (RString "distro", [Device "root"]), -1, [],
1154    [],
1155    "get distro of inspected operating system",
1156    "\
1157 This function should only be called with a root device string
1158 as returned by C<guestfs_inspect_os>.
1159
1160 This returns the distro (distribution) of the inspected operating
1161 system.
1162
1163 Currently defined distros are:
1164
1165 =over 4
1166
1167 =item \"debian\"
1168
1169 Debian or a Debian-derived distro such as Ubuntu.
1170
1171 =item \"fedora\"
1172
1173 Fedora.
1174
1175 =item \"redhat-based\"
1176
1177 Some Red Hat-derived distro.
1178
1179 =item \"rhel\"
1180
1181 Red Hat Enterprise Linux and some derivatives.
1182
1183 =item \"windows\"
1184
1185 Windows does not have distributions.  This string is
1186 returned if the OS type is Windows.
1187
1188 =item \"unknown\"
1189
1190 The distro could not be determined.
1191
1192 =back
1193
1194 Future versions of libguestfs may return other strings here.
1195 The caller should be prepared to handle any string.
1196
1197 Please read L<guestfs(3)/INSPECTION> for more details.");
1198
1199   ("inspect_get_major_version", (RInt "major", [Device "root"]), -1, [],
1200    [],
1201    "get major version of inspected operating system",
1202    "\
1203 This function should only be called with a root device string
1204 as returned by C<guestfs_inspect_os>.
1205
1206 This returns the major version number of the inspected operating
1207 system.
1208
1209 Windows uses a consistent versioning scheme which is I<not>
1210 reflected in the popular public names used by the operating system.
1211 Notably the operating system known as \"Windows 7\" is really
1212 version 6.1 (ie. major = 6, minor = 1).  You can find out the
1213 real versions corresponding to releases of Windows by consulting
1214 Wikipedia or MSDN.
1215
1216 If the version could not be determined, then C<0> is returned.
1217
1218 Please read L<guestfs(3)/INSPECTION> for more details.");
1219
1220   ("inspect_get_minor_version", (RInt "minor", [Device "root"]), -1, [],
1221    [],
1222    "get minor version of inspected operating system",
1223    "\
1224 This function should only be called with a root device string
1225 as returned by C<guestfs_inspect_os>.
1226
1227 This returns the minor version number of the inspected operating
1228 system.
1229
1230 If the version could not be determined, then C<0> is returned.
1231
1232 Please read L<guestfs(3)/INSPECTION> for more details.
1233 See also C<guestfs_inspect_get_major_version>.");
1234
1235   ("inspect_get_product_name", (RString "product", [Device "root"]), -1, [],
1236    [],
1237    "get product name of inspected operating system",
1238    "\
1239 This function should only be called with a root device string
1240 as returned by C<guestfs_inspect_os>.
1241
1242 This returns the product name of the inspected operating
1243 system.  The product name is generally some freeform string
1244 which can be displayed to the user, but should not be
1245 parsed by programs.
1246
1247 If the product name could not be determined, then the
1248 string C<unknown> is returned.
1249
1250 Please read L<guestfs(3)/INSPECTION> for more details.");
1251
1252   ("inspect_get_mountpoints", (RHashtable "mountpoints", [Device "root"]), -1, [],
1253    [],
1254    "get mountpoints of inspected operating system",
1255    "\
1256 This function should only be called with a root device string
1257 as returned by C<guestfs_inspect_os>.
1258
1259 This returns a hash of where we think the filesystems
1260 associated with this operating system should be mounted.
1261 Callers should note that this is at best an educated guess
1262 made by reading configuration files such as C</etc/fstab>.
1263
1264 Each element in the returned hashtable has a key which
1265 is the path of the mountpoint (eg. C</boot>) and a value
1266 which is the filesystem that would be mounted there
1267 (eg. C</dev/sda1>).
1268
1269 Non-mounted devices such as swap devices are I<not>
1270 returned in this list.
1271
1272 Please read L<guestfs(3)/INSPECTION> for more details.
1273 See also C<guestfs_inspect_get_filesystems>.");
1274
1275   ("inspect_get_filesystems", (RStringList "filesystems", [Device "root"]), -1, [],
1276    [],
1277    "get filesystems associated with inspected operating system",
1278    "\
1279 This function should only be called with a root device string
1280 as returned by C<guestfs_inspect_os>.
1281
1282 This returns a list of all the filesystems that we think
1283 are associated with this operating system.  This includes
1284 the root filesystem, other ordinary filesystems, and
1285 non-mounted devices like swap partitions.
1286
1287 In the case of a multi-boot virtual machine, it is possible
1288 for a filesystem to be shared between operating systems.
1289
1290 Please read L<guestfs(3)/INSPECTION> for more details.
1291 See also C<guestfs_inspect_get_mountpoints>.");
1292
1293   ("set_network", (RErr, [Bool "network"]), -1, [FishAlias "network"],
1294    [],
1295    "set enable network flag",
1296    "\
1297 If C<network> is true, then the network is enabled in the
1298 libguestfs appliance.  The default is false.
1299
1300 This affects whether commands are able to access the network
1301 (see L<guestfs(3)/RUNNING COMMANDS>).
1302
1303 You must call this before calling C<guestfs_launch>, otherwise
1304 it has no effect.");
1305
1306   ("get_network", (RBool "network", []), -1, [],
1307    [],
1308    "get enable network flag",
1309    "\
1310 This returns the enable network flag.");
1311
1312 ]
1313
1314 (* daemon_functions are any functions which cause some action
1315  * to take place in the daemon.
1316  *)
1317
1318 let daemon_functions = [
1319   ("mount", (RErr, [Device "device"; String "mountpoint"]), 1, [],
1320    [InitEmpty, Always, TestOutput (
1321       [["part_disk"; "/dev/sda"; "mbr"];
1322        ["mkfs"; "ext2"; "/dev/sda1"];
1323        ["mount"; "/dev/sda1"; "/"];
1324        ["write"; "/new"; "new file contents"];
1325        ["cat"; "/new"]], "new file contents")],
1326    "mount a guest disk at a position in the filesystem",
1327    "\
1328 Mount a guest disk at a position in the filesystem.  Block devices
1329 are named C</dev/sda>, C</dev/sdb> and so on, as they were added to
1330 the guest.  If those block devices contain partitions, they will have
1331 the usual names (eg. C</dev/sda1>).  Also LVM C</dev/VG/LV>-style
1332 names can be used.
1333
1334 The rules are the same as for L<mount(2)>:  A filesystem must
1335 first be mounted on C</> before others can be mounted.  Other
1336 filesystems can only be mounted on directories which already
1337 exist.
1338
1339 The mounted filesystem is writable, if we have sufficient permissions
1340 on the underlying device.
1341
1342 B<Important note:>
1343 When you use this call, the filesystem options C<sync> and C<noatime>
1344 are set implicitly.  This was originally done because we thought it
1345 would improve reliability, but it turns out that I<-o sync> has a
1346 very large negative performance impact and negligible effect on
1347 reliability.  Therefore we recommend that you avoid using
1348 C<guestfs_mount> in any code that needs performance, and instead
1349 use C<guestfs_mount_options> (use an empty string for the first
1350 parameter if you don't want any options).");
1351
1352   ("sync", (RErr, []), 2, [],
1353    [ InitEmpty, Always, TestRun [["sync"]]],
1354    "sync disks, writes are flushed through to the disk image",
1355    "\
1356 This syncs the disk, so that any writes are flushed through to the
1357 underlying disk image.
1358
1359 You should always call this if you have modified a disk image, before
1360 closing the handle.");
1361
1362   ("touch", (RErr, [Pathname "path"]), 3, [],
1363    [InitBasicFS, Always, TestOutputTrue (
1364       [["touch"; "/new"];
1365        ["exists"; "/new"]])],
1366    "update file timestamps or create a new file",
1367    "\
1368 Touch acts like the L<touch(1)> command.  It can be used to
1369 update the timestamps on a file, or, if the file does not exist,
1370 to create a new zero-length file.
1371
1372 This command only works on regular files, and will fail on other
1373 file types such as directories, symbolic links, block special etc.");
1374
1375   ("cat", (RString "content", [Pathname "path"]), 4, [ProtocolLimitWarning],
1376    [InitISOFS, Always, TestOutput (
1377       [["cat"; "/known-2"]], "abcdef\n")],
1378    "list the contents of a file",
1379    "\
1380 Return the contents of the file named C<path>.
1381
1382 Note that this function cannot correctly handle binary files
1383 (specifically, files containing C<\\0> character which is treated
1384 as end of string).  For those you need to use the C<guestfs_read_file>
1385 or C<guestfs_download> functions which have a more complex interface.");
1386
1387   ("ll", (RString "listing", [Pathname "directory"]), 5, [],
1388    [], (* XXX Tricky to test because it depends on the exact format
1389         * of the 'ls -l' command, which changes between F10 and F11.
1390         *)
1391    "list the files in a directory (long format)",
1392    "\
1393 List the files in C<directory> (relative to the root directory,
1394 there is no cwd) in the format of 'ls -la'.
1395
1396 This command is mostly useful for interactive sessions.  It
1397 is I<not> intended that you try to parse the output string.");
1398
1399   ("ls", (RStringList "listing", [Pathname "directory"]), 6, [],
1400    [InitBasicFS, Always, TestOutputList (
1401       [["touch"; "/new"];
1402        ["touch"; "/newer"];
1403        ["touch"; "/newest"];
1404        ["ls"; "/"]], ["lost+found"; "new"; "newer"; "newest"])],
1405    "list the files in a directory",
1406    "\
1407 List the files in C<directory> (relative to the root directory,
1408 there is no cwd).  The '.' and '..' entries are not returned, but
1409 hidden files are shown.
1410
1411 This command is mostly useful for interactive sessions.  Programs
1412 should probably use C<guestfs_readdir> instead.");
1413
1414   ("list_devices", (RStringList "devices", []), 7, [],
1415    [InitEmpty, Always, TestOutputListOfDevices (
1416       [["list_devices"]], ["/dev/sda"; "/dev/sdb"; "/dev/sdc"; "/dev/sdd"])],
1417    "list the block devices",
1418    "\
1419 List all the block devices.
1420
1421 The full block device names are returned, eg. C</dev/sda>");
1422
1423   ("list_partitions", (RStringList "partitions", []), 8, [],
1424    [InitBasicFS, Always, TestOutputListOfDevices (
1425       [["list_partitions"]], ["/dev/sda1"]);
1426     InitEmpty, Always, TestOutputListOfDevices (
1427       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1428        ["list_partitions"]], ["/dev/sda1"; "/dev/sda2"; "/dev/sda3"])],
1429    "list the partitions",
1430    "\
1431 List all the partitions detected on all block devices.
1432
1433 The full partition device names are returned, eg. C</dev/sda1>
1434
1435 This does not return logical volumes.  For that you will need to
1436 call C<guestfs_lvs>.");
1437
1438   ("pvs", (RStringList "physvols", []), 9, [Optional "lvm2"],
1439    [InitBasicFSonLVM, Always, TestOutputListOfDevices (
1440       [["pvs"]], ["/dev/sda1"]);
1441     InitEmpty, Always, TestOutputListOfDevices (
1442       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1443        ["pvcreate"; "/dev/sda1"];
1444        ["pvcreate"; "/dev/sda2"];
1445        ["pvcreate"; "/dev/sda3"];
1446        ["pvs"]], ["/dev/sda1"; "/dev/sda2"; "/dev/sda3"])],
1447    "list the LVM physical volumes (PVs)",
1448    "\
1449 List all the physical volumes detected.  This is the equivalent
1450 of the L<pvs(8)> command.
1451
1452 This returns a list of just the device names that contain
1453 PVs (eg. C</dev/sda2>).
1454
1455 See also C<guestfs_pvs_full>.");
1456
1457   ("vgs", (RStringList "volgroups", []), 10, [Optional "lvm2"],
1458    [InitBasicFSonLVM, Always, TestOutputList (
1459       [["vgs"]], ["VG"]);
1460     InitEmpty, Always, TestOutputList (
1461       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1462        ["pvcreate"; "/dev/sda1"];
1463        ["pvcreate"; "/dev/sda2"];
1464        ["pvcreate"; "/dev/sda3"];
1465        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1466        ["vgcreate"; "VG2"; "/dev/sda3"];
1467        ["vgs"]], ["VG1"; "VG2"])],
1468    "list the LVM volume groups (VGs)",
1469    "\
1470 List all the volumes groups detected.  This is the equivalent
1471 of the L<vgs(8)> command.
1472
1473 This returns a list of just the volume group names that were
1474 detected (eg. C<VolGroup00>).
1475
1476 See also C<guestfs_vgs_full>.");
1477
1478   ("lvs", (RStringList "logvols", []), 11, [Optional "lvm2"],
1479    [InitBasicFSonLVM, Always, TestOutputList (
1480       [["lvs"]], ["/dev/VG/LV"]);
1481     InitEmpty, Always, TestOutputList (
1482       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1483        ["pvcreate"; "/dev/sda1"];
1484        ["pvcreate"; "/dev/sda2"];
1485        ["pvcreate"; "/dev/sda3"];
1486        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1487        ["vgcreate"; "VG2"; "/dev/sda3"];
1488        ["lvcreate"; "LV1"; "VG1"; "50"];
1489        ["lvcreate"; "LV2"; "VG1"; "50"];
1490        ["lvcreate"; "LV3"; "VG2"; "50"];
1491        ["lvs"]], ["/dev/VG1/LV1"; "/dev/VG1/LV2"; "/dev/VG2/LV3"])],
1492    "list the LVM logical volumes (LVs)",
1493    "\
1494 List all the logical volumes detected.  This is the equivalent
1495 of the L<lvs(8)> command.
1496
1497 This returns a list of the logical volume device names
1498 (eg. C</dev/VolGroup00/LogVol00>).
1499
1500 See also C<guestfs_lvs_full>.");
1501
1502   ("pvs_full", (RStructList ("physvols", "lvm_pv"), []), 12, [Optional "lvm2"],
1503    [], (* XXX how to test? *)
1504    "list the LVM physical volumes (PVs)",
1505    "\
1506 List all the physical volumes detected.  This is the equivalent
1507 of the L<pvs(8)> command.  The \"full\" version includes all fields.");
1508
1509   ("vgs_full", (RStructList ("volgroups", "lvm_vg"), []), 13, [Optional "lvm2"],
1510    [], (* XXX how to test? *)
1511    "list the LVM volume groups (VGs)",
1512    "\
1513 List all the volumes groups detected.  This is the equivalent
1514 of the L<vgs(8)> command.  The \"full\" version includes all fields.");
1515
1516   ("lvs_full", (RStructList ("logvols", "lvm_lv"), []), 14, [Optional "lvm2"],
1517    [], (* XXX how to test? *)
1518    "list the LVM logical volumes (LVs)",
1519    "\
1520 List all the logical volumes detected.  This is the equivalent
1521 of the L<lvs(8)> command.  The \"full\" version includes all fields.");
1522
1523   ("read_lines", (RStringList "lines", [Pathname "path"]), 15, [],
1524    [InitISOFS, Always, TestOutputList (
1525       [["read_lines"; "/known-4"]], ["abc"; "def"; "ghi"]);
1526     InitISOFS, Always, TestOutputList (
1527       [["read_lines"; "/empty"]], [])],
1528    "read file as lines",
1529    "\
1530 Return the contents of the file named C<path>.
1531
1532 The file contents are returned as a list of lines.  Trailing
1533 C<LF> and C<CRLF> character sequences are I<not> returned.
1534
1535 Note that this function cannot correctly handle binary files
1536 (specifically, files containing C<\\0> character which is treated
1537 as end of line).  For those you need to use the C<guestfs_read_file>
1538 function which has a more complex interface.");
1539
1540   ("aug_init", (RErr, [Pathname "root"; Int "flags"]), 16, [Optional "augeas"],
1541    [], (* XXX Augeas code needs tests. *)
1542    "create a new Augeas handle",
1543    "\
1544 Create a new Augeas handle for editing configuration files.
1545 If there was any previous Augeas handle associated with this
1546 guestfs session, then it is closed.
1547
1548 You must call this before using any other C<guestfs_aug_*>
1549 commands.
1550
1551 C<root> is the filesystem root.  C<root> must not be NULL,
1552 use C</> instead.
1553
1554 The flags are the same as the flags defined in
1555 E<lt>augeas.hE<gt>, the logical I<or> of the following
1556 integers:
1557
1558 =over 4
1559
1560 =item C<AUG_SAVE_BACKUP> = 1
1561
1562 Keep the original file with a C<.augsave> extension.
1563
1564 =item C<AUG_SAVE_NEWFILE> = 2
1565
1566 Save changes into a file with extension C<.augnew>, and
1567 do not overwrite original.  Overrides C<AUG_SAVE_BACKUP>.
1568
1569 =item C<AUG_TYPE_CHECK> = 4
1570
1571 Typecheck lenses (can be expensive).
1572
1573 =item C<AUG_NO_STDINC> = 8
1574
1575 Do not use standard load path for modules.
1576
1577 =item C<AUG_SAVE_NOOP> = 16
1578
1579 Make save a no-op, just record what would have been changed.
1580
1581 =item C<AUG_NO_LOAD> = 32
1582
1583 Do not load the tree in C<guestfs_aug_init>.
1584
1585 =back
1586
1587 To close the handle, you can call C<guestfs_aug_close>.
1588
1589 To find out more about Augeas, see L<http://augeas.net/>.");
1590
1591   ("aug_close", (RErr, []), 26, [Optional "augeas"],
1592    [], (* XXX Augeas code needs tests. *)
1593    "close the current Augeas handle",
1594    "\
1595 Close the current Augeas handle and free up any resources
1596 used by it.  After calling this, you have to call
1597 C<guestfs_aug_init> again before you can use any other
1598 Augeas functions.");
1599
1600   ("aug_defvar", (RInt "nrnodes", [String "name"; OptString "expr"]), 17, [Optional "augeas"],
1601    [], (* XXX Augeas code needs tests. *)
1602    "define an Augeas variable",
1603    "\
1604 Defines an Augeas variable C<name> whose value is the result
1605 of evaluating C<expr>.  If C<expr> is NULL, then C<name> is
1606 undefined.
1607
1608 On success this returns the number of nodes in C<expr>, or
1609 C<0> if C<expr> evaluates to something which is not a nodeset.");
1610
1611   ("aug_defnode", (RStruct ("nrnodescreated", "int_bool"), [String "name"; String "expr"; String "val"]), 18, [Optional "augeas"],
1612    [], (* XXX Augeas code needs tests. *)
1613    "define an Augeas node",
1614    "\
1615 Defines a variable C<name> whose value is the result of
1616 evaluating C<expr>.
1617
1618 If C<expr> evaluates to an empty nodeset, a node is created,
1619 equivalent to calling C<guestfs_aug_set> C<expr>, C<value>.
1620 C<name> will be the nodeset containing that single node.
1621
1622 On success this returns a pair containing the
1623 number of nodes in the nodeset, and a boolean flag
1624 if a node was created.");
1625
1626   ("aug_get", (RString "val", [String "augpath"]), 19, [Optional "augeas"],
1627    [], (* XXX Augeas code needs tests. *)
1628    "look up the value of an Augeas path",
1629    "\
1630 Look up the value associated with C<path>.  If C<path>
1631 matches exactly one node, the C<value> is returned.");
1632
1633   ("aug_set", (RErr, [String "augpath"; String "val"]), 20, [Optional "augeas"],
1634    [], (* XXX Augeas code needs tests. *)
1635    "set Augeas path to value",
1636    "\
1637 Set the value associated with C<path> to C<val>.
1638
1639 In the Augeas API, it is possible to clear a node by setting
1640 the value to NULL.  Due to an oversight in the libguestfs API
1641 you cannot do that with this call.  Instead you must use the
1642 C<guestfs_aug_clear> call.");
1643
1644   ("aug_insert", (RErr, [String "augpath"; String "label"; Bool "before"]), 21, [Optional "augeas"],
1645    [], (* XXX Augeas code needs tests. *)
1646    "insert a sibling Augeas node",
1647    "\
1648 Create a new sibling C<label> for C<path>, inserting it into
1649 the tree before or after C<path> (depending on the boolean
1650 flag C<before>).
1651
1652 C<path> must match exactly one existing node in the tree, and
1653 C<label> must be a label, ie. not contain C</>, C<*> or end
1654 with a bracketed index C<[N]>.");
1655
1656   ("aug_rm", (RInt "nrnodes", [String "augpath"]), 22, [Optional "augeas"],
1657    [], (* XXX Augeas code needs tests. *)
1658    "remove an Augeas path",
1659    "\
1660 Remove C<path> and all of its children.
1661
1662 On success this returns the number of entries which were removed.");
1663
1664   ("aug_mv", (RErr, [String "src"; String "dest"]), 23, [Optional "augeas"],
1665    [], (* XXX Augeas code needs tests. *)
1666    "move Augeas node",
1667    "\
1668 Move the node C<src> to C<dest>.  C<src> must match exactly
1669 one node.  C<dest> is overwritten if it exists.");
1670
1671   ("aug_match", (RStringList "matches", [String "augpath"]), 24, [Optional "augeas"],
1672    [], (* XXX Augeas code needs tests. *)
1673    "return Augeas nodes which match augpath",
1674    "\
1675 Returns a list of paths which match the path expression C<path>.
1676 The returned paths are sufficiently qualified so that they match
1677 exactly one node in the current tree.");
1678
1679   ("aug_save", (RErr, []), 25, [Optional "augeas"],
1680    [], (* XXX Augeas code needs tests. *)
1681    "write all pending Augeas changes to disk",
1682    "\
1683 This writes all pending changes to disk.
1684
1685 The flags which were passed to C<guestfs_aug_init> affect exactly
1686 how files are saved.");
1687
1688   ("aug_load", (RErr, []), 27, [Optional "augeas"],
1689    [], (* XXX Augeas code needs tests. *)
1690    "load files into the tree",
1691    "\
1692 Load files into the tree.
1693
1694 See C<aug_load> in the Augeas documentation for the full gory
1695 details.");
1696
1697   ("aug_ls", (RStringList "matches", [String "augpath"]), 28, [Optional "augeas"],
1698    [], (* XXX Augeas code needs tests. *)
1699    "list Augeas nodes under augpath",
1700    "\
1701 This is just a shortcut for listing C<guestfs_aug_match>
1702 C<path/*> and sorting the resulting nodes into alphabetical order.");
1703
1704   ("rm", (RErr, [Pathname "path"]), 29, [],
1705    [InitBasicFS, Always, TestRun
1706       [["touch"; "/new"];
1707        ["rm"; "/new"]];
1708     InitBasicFS, Always, TestLastFail
1709       [["rm"; "/new"]];
1710     InitBasicFS, Always, TestLastFail
1711       [["mkdir"; "/new"];
1712        ["rm"; "/new"]]],
1713    "remove a file",
1714    "\
1715 Remove the single file C<path>.");
1716
1717   ("rmdir", (RErr, [Pathname "path"]), 30, [],
1718    [InitBasicFS, Always, TestRun
1719       [["mkdir"; "/new"];
1720        ["rmdir"; "/new"]];
1721     InitBasicFS, Always, TestLastFail
1722       [["rmdir"; "/new"]];
1723     InitBasicFS, Always, TestLastFail
1724       [["touch"; "/new"];
1725        ["rmdir"; "/new"]]],
1726    "remove a directory",
1727    "\
1728 Remove the single directory C<path>.");
1729
1730   ("rm_rf", (RErr, [Pathname "path"]), 31, [],
1731    [InitBasicFS, Always, TestOutputFalse
1732       [["mkdir"; "/new"];
1733        ["mkdir"; "/new/foo"];
1734        ["touch"; "/new/foo/bar"];
1735        ["rm_rf"; "/new"];
1736        ["exists"; "/new"]]],
1737    "remove a file or directory recursively",
1738    "\
1739 Remove the file or directory C<path>, recursively removing the
1740 contents if its a directory.  This is like the C<rm -rf> shell
1741 command.");
1742
1743   ("mkdir", (RErr, [Pathname "path"]), 32, [],
1744    [InitBasicFS, Always, TestOutputTrue
1745       [["mkdir"; "/new"];
1746        ["is_dir"; "/new"]];
1747     InitBasicFS, Always, TestLastFail
1748       [["mkdir"; "/new/foo/bar"]]],
1749    "create a directory",
1750    "\
1751 Create a directory named C<path>.");
1752
1753   ("mkdir_p", (RErr, [Pathname "path"]), 33, [],
1754    [InitBasicFS, Always, TestOutputTrue
1755       [["mkdir_p"; "/new/foo/bar"];
1756        ["is_dir"; "/new/foo/bar"]];
1757     InitBasicFS, Always, TestOutputTrue
1758       [["mkdir_p"; "/new/foo/bar"];
1759        ["is_dir"; "/new/foo"]];
1760     InitBasicFS, Always, TestOutputTrue
1761       [["mkdir_p"; "/new/foo/bar"];
1762        ["is_dir"; "/new"]];
1763     (* Regression tests for RHBZ#503133: *)
1764     InitBasicFS, Always, TestRun
1765       [["mkdir"; "/new"];
1766        ["mkdir_p"; "/new"]];
1767     InitBasicFS, Always, TestLastFail
1768       [["touch"; "/new"];
1769        ["mkdir_p"; "/new"]]],
1770    "create a directory and parents",
1771    "\
1772 Create a directory named C<path>, creating any parent directories
1773 as necessary.  This is like the C<mkdir -p> shell command.");
1774
1775   ("chmod", (RErr, [Int "mode"; Pathname "path"]), 34, [],
1776    [], (* XXX Need stat command to test *)
1777    "change file mode",
1778    "\
1779 Change the mode (permissions) of C<path> to C<mode>.  Only
1780 numeric modes are supported.
1781
1782 I<Note>: When using this command from guestfish, C<mode>
1783 by default would be decimal, unless you prefix it with
1784 C<0> to get octal, ie. use C<0700> not C<700>.
1785
1786 The mode actually set is affected by the umask.");
1787
1788   ("chown", (RErr, [Int "owner"; Int "group"; Pathname "path"]), 35, [],
1789    [], (* XXX Need stat command to test *)
1790    "change file owner and group",
1791    "\
1792 Change the file owner to C<owner> and group to C<group>.
1793
1794 Only numeric uid and gid are supported.  If you want to use
1795 names, you will need to locate and parse the password file
1796 yourself (Augeas support makes this relatively easy).");
1797
1798   ("exists", (RBool "existsflag", [Pathname "path"]), 36, [],
1799    [InitISOFS, Always, TestOutputTrue (
1800       [["exists"; "/empty"]]);
1801     InitISOFS, Always, TestOutputTrue (
1802       [["exists"; "/directory"]])],
1803    "test if file or directory exists",
1804    "\
1805 This returns C<true> if and only if there is a file, directory
1806 (or anything) with the given C<path> name.
1807
1808 See also C<guestfs_is_file>, C<guestfs_is_dir>, C<guestfs_stat>.");
1809
1810   ("is_file", (RBool "fileflag", [Pathname "path"]), 37, [],
1811    [InitISOFS, Always, TestOutputTrue (
1812       [["is_file"; "/known-1"]]);
1813     InitISOFS, Always, TestOutputFalse (
1814       [["is_file"; "/directory"]])],
1815    "test if a regular file",
1816    "\
1817 This returns C<true> if and only if there is a regular file
1818 with the given C<path> name.  Note that it returns false for
1819 other objects like directories.
1820
1821 See also C<guestfs_stat>.");
1822
1823   ("is_dir", (RBool "dirflag", [Pathname "path"]), 38, [],
1824    [InitISOFS, Always, TestOutputFalse (
1825       [["is_dir"; "/known-3"]]);
1826     InitISOFS, Always, TestOutputTrue (
1827       [["is_dir"; "/directory"]])],
1828    "test if a directory",
1829    "\
1830 This returns C<true> if and only if there is a directory
1831 with the given C<path> name.  Note that it returns false for
1832 other objects like files.
1833
1834 See also C<guestfs_stat>.");
1835
1836   ("pvcreate", (RErr, [Device "device"]), 39, [Optional "lvm2"],
1837    [InitEmpty, Always, TestOutputListOfDevices (
1838       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1839        ["pvcreate"; "/dev/sda1"];
1840        ["pvcreate"; "/dev/sda2"];
1841        ["pvcreate"; "/dev/sda3"];
1842        ["pvs"]], ["/dev/sda1"; "/dev/sda2"; "/dev/sda3"])],
1843    "create an LVM physical volume",
1844    "\
1845 This creates an LVM physical volume on the named C<device>,
1846 where C<device> should usually be a partition name such
1847 as C</dev/sda1>.");
1848
1849   ("vgcreate", (RErr, [String "volgroup"; DeviceList "physvols"]), 40, [Optional "lvm2"],
1850    [InitEmpty, Always, TestOutputList (
1851       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1852        ["pvcreate"; "/dev/sda1"];
1853        ["pvcreate"; "/dev/sda2"];
1854        ["pvcreate"; "/dev/sda3"];
1855        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1856        ["vgcreate"; "VG2"; "/dev/sda3"];
1857        ["vgs"]], ["VG1"; "VG2"])],
1858    "create an LVM volume group",
1859    "\
1860 This creates an LVM volume group called C<volgroup>
1861 from the non-empty list of physical volumes C<physvols>.");
1862
1863   ("lvcreate", (RErr, [String "logvol"; String "volgroup"; Int "mbytes"]), 41, [Optional "lvm2"],
1864    [InitEmpty, Always, TestOutputList (
1865       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1866        ["pvcreate"; "/dev/sda1"];
1867        ["pvcreate"; "/dev/sda2"];
1868        ["pvcreate"; "/dev/sda3"];
1869        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1870        ["vgcreate"; "VG2"; "/dev/sda3"];
1871        ["lvcreate"; "LV1"; "VG1"; "50"];
1872        ["lvcreate"; "LV2"; "VG1"; "50"];
1873        ["lvcreate"; "LV3"; "VG2"; "50"];
1874        ["lvcreate"; "LV4"; "VG2"; "50"];
1875        ["lvcreate"; "LV5"; "VG2"; "50"];
1876        ["lvs"]],
1877       ["/dev/VG1/LV1"; "/dev/VG1/LV2";
1878        "/dev/VG2/LV3"; "/dev/VG2/LV4"; "/dev/VG2/LV5"])],
1879    "create an LVM logical volume",
1880    "\
1881 This creates an LVM logical volume called C<logvol>
1882 on the volume group C<volgroup>, with C<size> megabytes.");
1883
1884   ("mkfs", (RErr, [String "fstype"; Device "device"]), 42, [],
1885    [InitEmpty, Always, TestOutput (
1886       [["part_disk"; "/dev/sda"; "mbr"];
1887        ["mkfs"; "ext2"; "/dev/sda1"];
1888        ["mount_options"; ""; "/dev/sda1"; "/"];
1889        ["write"; "/new"; "new file contents"];
1890        ["cat"; "/new"]], "new file contents")],
1891    "make a filesystem",
1892    "\
1893 This creates a filesystem on C<device> (usually a partition
1894 or LVM logical volume).  The filesystem type is C<fstype>, for
1895 example C<ext3>.");
1896
1897   ("sfdisk", (RErr, [Device "device";
1898                      Int "cyls"; Int "heads"; Int "sectors";
1899                      StringList "lines"]), 43, [DangerWillRobinson],
1900    [],
1901    "create partitions on a block device",
1902    "\
1903 This is a direct interface to the L<sfdisk(8)> program for creating
1904 partitions on block devices.
1905
1906 C<device> should be a block device, for example C</dev/sda>.
1907
1908 C<cyls>, C<heads> and C<sectors> are the number of cylinders, heads
1909 and sectors on the device, which are passed directly to sfdisk as
1910 the I<-C>, I<-H> and I<-S> parameters.  If you pass C<0> for any
1911 of these, then the corresponding parameter is omitted.  Usually for
1912 'large' disks, you can just pass C<0> for these, but for small
1913 (floppy-sized) disks, sfdisk (or rather, the kernel) cannot work
1914 out the right geometry and you will need to tell it.
1915
1916 C<lines> is a list of lines that we feed to C<sfdisk>.  For more
1917 information refer to the L<sfdisk(8)> manpage.
1918
1919 To create a single partition occupying the whole disk, you would
1920 pass C<lines> as a single element list, when the single element being
1921 the string C<,> (comma).
1922
1923 See also: C<guestfs_sfdisk_l>, C<guestfs_sfdisk_N>,
1924 C<guestfs_part_init>");
1925
1926   ("write_file", (RErr, [Pathname "path"; String "content"; Int "size"]), 44, [ProtocolLimitWarning; DeprecatedBy "write"],
1927    (* Regression test for RHBZ#597135. *)
1928    [InitBasicFS, Always, TestLastFail
1929       [["write_file"; "/new"; "abc"; "10000"]]],
1930    "create a file",
1931    "\
1932 This call creates a file called C<path>.  The contents of the
1933 file is the string C<content> (which can contain any 8 bit data),
1934 with length C<size>.
1935
1936 As a special case, if C<size> is C<0>
1937 then the length is calculated using C<strlen> (so in this case
1938 the content cannot contain embedded ASCII NULs).
1939
1940 I<NB.> Owing to a bug, writing content containing ASCII NUL
1941 characters does I<not> work, even if the length is specified.");
1942
1943   ("umount", (RErr, [String "pathordevice"]), 45, [FishAlias "unmount"],
1944    [InitEmpty, Always, TestOutputListOfDevices (
1945       [["part_disk"; "/dev/sda"; "mbr"];
1946        ["mkfs"; "ext2"; "/dev/sda1"];
1947        ["mount_options"; ""; "/dev/sda1"; "/"];
1948        ["mounts"]], ["/dev/sda1"]);
1949     InitEmpty, Always, TestOutputList (
1950       [["part_disk"; "/dev/sda"; "mbr"];
1951        ["mkfs"; "ext2"; "/dev/sda1"];
1952        ["mount_options"; ""; "/dev/sda1"; "/"];
1953        ["umount"; "/"];
1954        ["mounts"]], [])],
1955    "unmount a filesystem",
1956    "\
1957 This unmounts the given filesystem.  The filesystem may be
1958 specified either by its mountpoint (path) or the device which
1959 contains the filesystem.");
1960
1961   ("mounts", (RStringList "devices", []), 46, [],
1962    [InitBasicFS, Always, TestOutputListOfDevices (
1963       [["mounts"]], ["/dev/sda1"])],
1964    "show mounted filesystems",
1965    "\
1966 This returns the list of currently mounted filesystems.  It returns
1967 the list of devices (eg. C</dev/sda1>, C</dev/VG/LV>).
1968
1969 Some internal mounts are not shown.
1970
1971 See also: C<guestfs_mountpoints>");
1972
1973   ("umount_all", (RErr, []), 47, [FishAlias "unmount-all"],
1974    [InitBasicFS, Always, TestOutputList (
1975       [["umount_all"];
1976        ["mounts"]], []);
1977     (* check that umount_all can unmount nested mounts correctly: *)
1978     InitEmpty, Always, TestOutputList (
1979       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1980        ["mkfs"; "ext2"; "/dev/sda1"];
1981        ["mkfs"; "ext2"; "/dev/sda2"];
1982        ["mkfs"; "ext2"; "/dev/sda3"];
1983        ["mount_options"; ""; "/dev/sda1"; "/"];
1984        ["mkdir"; "/mp1"];
1985        ["mount_options"; ""; "/dev/sda2"; "/mp1"];
1986        ["mkdir"; "/mp1/mp2"];
1987        ["mount_options"; ""; "/dev/sda3"; "/mp1/mp2"];
1988        ["mkdir"; "/mp1/mp2/mp3"];
1989        ["umount_all"];
1990        ["mounts"]], [])],
1991    "unmount all filesystems",
1992    "\
1993 This unmounts all mounted filesystems.
1994
1995 Some internal mounts are not unmounted by this call.");
1996
1997   ("lvm_remove_all", (RErr, []), 48, [DangerWillRobinson; Optional "lvm2"],
1998    [],
1999    "remove all LVM LVs, VGs and PVs",
2000    "\
2001 This command removes all LVM logical volumes, volume groups
2002 and physical volumes.");
2003
2004   ("file", (RString "description", [Dev_or_Path "path"]), 49, [],
2005    [InitISOFS, Always, TestOutput (
2006       [["file"; "/empty"]], "empty");
2007     InitISOFS, Always, TestOutput (
2008       [["file"; "/known-1"]], "ASCII text");
2009     InitISOFS, Always, TestLastFail (
2010       [["file"; "/notexists"]]);
2011     InitISOFS, Always, TestOutput (
2012       [["file"; "/abssymlink"]], "symbolic link");
2013     InitISOFS, Always, TestOutput (
2014       [["file"; "/directory"]], "directory")],
2015    "determine file type",
2016    "\
2017 This call uses the standard L<file(1)> command to determine
2018 the type or contents of the file.
2019
2020 This call will also transparently look inside various types
2021 of compressed file.
2022
2023 The exact command which runs is C<file -zb path>.  Note in
2024 particular that the filename is not prepended to the output
2025 (the C<-b> option).
2026
2027 This command can also be used on C</dev/> devices
2028 (and partitions, LV names).  You can for example use this
2029 to determine if a device contains a filesystem, although
2030 it's usually better to use C<guestfs_vfs_type>.
2031
2032 If the C<path> does not begin with C</dev/> then
2033 this command only works for the content of regular files.
2034 For other file types (directory, symbolic link etc) it
2035 will just return the string C<directory> etc.");
2036
2037   ("command", (RString "output", [StringList "arguments"]), 50, [ProtocolLimitWarning],
2038    [InitBasicFS, Always, TestOutput (
2039       [["upload"; "test-command"; "/test-command"];
2040        ["chmod"; "0o755"; "/test-command"];
2041        ["command"; "/test-command 1"]], "Result1");
2042     InitBasicFS, Always, TestOutput (
2043       [["upload"; "test-command"; "/test-command"];
2044        ["chmod"; "0o755"; "/test-command"];
2045        ["command"; "/test-command 2"]], "Result2\n");
2046     InitBasicFS, Always, TestOutput (
2047       [["upload"; "test-command"; "/test-command"];
2048        ["chmod"; "0o755"; "/test-command"];
2049        ["command"; "/test-command 3"]], "\nResult3");
2050     InitBasicFS, Always, TestOutput (
2051       [["upload"; "test-command"; "/test-command"];
2052        ["chmod"; "0o755"; "/test-command"];
2053        ["command"; "/test-command 4"]], "\nResult4\n");
2054     InitBasicFS, Always, TestOutput (
2055       [["upload"; "test-command"; "/test-command"];
2056        ["chmod"; "0o755"; "/test-command"];
2057        ["command"; "/test-command 5"]], "\nResult5\n\n");
2058     InitBasicFS, Always, TestOutput (
2059       [["upload"; "test-command"; "/test-command"];
2060        ["chmod"; "0o755"; "/test-command"];
2061        ["command"; "/test-command 6"]], "\n\nResult6\n\n");
2062     InitBasicFS, Always, TestOutput (
2063       [["upload"; "test-command"; "/test-command"];
2064        ["chmod"; "0o755"; "/test-command"];
2065        ["command"; "/test-command 7"]], "");
2066     InitBasicFS, Always, TestOutput (
2067       [["upload"; "test-command"; "/test-command"];
2068        ["chmod"; "0o755"; "/test-command"];
2069        ["command"; "/test-command 8"]], "\n");
2070     InitBasicFS, Always, TestOutput (
2071       [["upload"; "test-command"; "/test-command"];
2072        ["chmod"; "0o755"; "/test-command"];
2073        ["command"; "/test-command 9"]], "\n\n");
2074     InitBasicFS, Always, TestOutput (
2075       [["upload"; "test-command"; "/test-command"];
2076        ["chmod"; "0o755"; "/test-command"];
2077        ["command"; "/test-command 10"]], "Result10-1\nResult10-2\n");
2078     InitBasicFS, Always, TestOutput (
2079       [["upload"; "test-command"; "/test-command"];
2080        ["chmod"; "0o755"; "/test-command"];
2081        ["command"; "/test-command 11"]], "Result11-1\nResult11-2");
2082     InitBasicFS, Always, TestLastFail (
2083       [["upload"; "test-command"; "/test-command"];
2084        ["chmod"; "0o755"; "/test-command"];
2085        ["command"; "/test-command"]])],
2086    "run a command from the guest filesystem",
2087    "\
2088 This call runs a command from the guest filesystem.  The
2089 filesystem must be mounted, and must contain a compatible
2090 operating system (ie. something Linux, with the same
2091 or compatible processor architecture).
2092
2093 The single parameter is an argv-style list of arguments.
2094 The first element is the name of the program to run.
2095 Subsequent elements are parameters.  The list must be
2096 non-empty (ie. must contain a program name).  Note that
2097 the command runs directly, and is I<not> invoked via
2098 the shell (see C<guestfs_sh>).
2099
2100 The return value is anything printed to I<stdout> by
2101 the command.
2102
2103 If the command returns a non-zero exit status, then
2104 this function returns an error message.  The error message
2105 string is the content of I<stderr> from the command.
2106
2107 The C<$PATH> environment variable will contain at least
2108 C</usr/bin> and C</bin>.  If you require a program from
2109 another location, you should provide the full path in the
2110 first parameter.
2111
2112 Shared libraries and data files required by the program
2113 must be available on filesystems which are mounted in the
2114 correct places.  It is the caller's responsibility to ensure
2115 all filesystems that are needed are mounted at the right
2116 locations.");
2117
2118   ("command_lines", (RStringList "lines", [StringList "arguments"]), 51, [ProtocolLimitWarning],
2119    [InitBasicFS, Always, TestOutputList (
2120       [["upload"; "test-command"; "/test-command"];
2121        ["chmod"; "0o755"; "/test-command"];
2122        ["command_lines"; "/test-command 1"]], ["Result1"]);
2123     InitBasicFS, Always, TestOutputList (
2124       [["upload"; "test-command"; "/test-command"];
2125        ["chmod"; "0o755"; "/test-command"];
2126        ["command_lines"; "/test-command 2"]], ["Result2"]);
2127     InitBasicFS, Always, TestOutputList (
2128       [["upload"; "test-command"; "/test-command"];
2129        ["chmod"; "0o755"; "/test-command"];
2130        ["command_lines"; "/test-command 3"]], ["";"Result3"]);
2131     InitBasicFS, Always, TestOutputList (
2132       [["upload"; "test-command"; "/test-command"];
2133        ["chmod"; "0o755"; "/test-command"];
2134        ["command_lines"; "/test-command 4"]], ["";"Result4"]);
2135     InitBasicFS, Always, TestOutputList (
2136       [["upload"; "test-command"; "/test-command"];
2137        ["chmod"; "0o755"; "/test-command"];
2138        ["command_lines"; "/test-command 5"]], ["";"Result5";""]);
2139     InitBasicFS, Always, TestOutputList (
2140       [["upload"; "test-command"; "/test-command"];
2141        ["chmod"; "0o755"; "/test-command"];
2142        ["command_lines"; "/test-command 6"]], ["";"";"Result6";""]);
2143     InitBasicFS, Always, TestOutputList (
2144       [["upload"; "test-command"; "/test-command"];
2145        ["chmod"; "0o755"; "/test-command"];
2146        ["command_lines"; "/test-command 7"]], []);
2147     InitBasicFS, Always, TestOutputList (
2148       [["upload"; "test-command"; "/test-command"];
2149        ["chmod"; "0o755"; "/test-command"];
2150        ["command_lines"; "/test-command 8"]], [""]);
2151     InitBasicFS, Always, TestOutputList (
2152       [["upload"; "test-command"; "/test-command"];
2153        ["chmod"; "0o755"; "/test-command"];
2154        ["command_lines"; "/test-command 9"]], ["";""]);
2155     InitBasicFS, Always, TestOutputList (
2156       [["upload"; "test-command"; "/test-command"];
2157        ["chmod"; "0o755"; "/test-command"];
2158        ["command_lines"; "/test-command 10"]], ["Result10-1";"Result10-2"]);
2159     InitBasicFS, Always, TestOutputList (
2160       [["upload"; "test-command"; "/test-command"];
2161        ["chmod"; "0o755"; "/test-command"];
2162        ["command_lines"; "/test-command 11"]], ["Result11-1";"Result11-2"])],
2163    "run a command, returning lines",
2164    "\
2165 This is the same as C<guestfs_command>, but splits the
2166 result into a list of lines.
2167
2168 See also: C<guestfs_sh_lines>");
2169
2170   ("stat", (RStruct ("statbuf", "stat"), [Pathname "path"]), 52, [],
2171    [InitISOFS, Always, TestOutputStruct (
2172       [["stat"; "/empty"]], [CompareWithInt ("size", 0)])],
2173    "get file information",
2174    "\
2175 Returns file information for the given C<path>.
2176
2177 This is the same as the C<stat(2)> system call.");
2178
2179   ("lstat", (RStruct ("statbuf", "stat"), [Pathname "path"]), 53, [],
2180    [InitISOFS, Always, TestOutputStruct (
2181       [["lstat"; "/empty"]], [CompareWithInt ("size", 0)])],
2182    "get file information for a symbolic link",
2183    "\
2184 Returns file information for the given C<path>.
2185
2186 This is the same as C<guestfs_stat> except that if C<path>
2187 is a symbolic link, then the link is stat-ed, not the file it
2188 refers to.
2189
2190 This is the same as the C<lstat(2)> system call.");
2191
2192   ("statvfs", (RStruct ("statbuf", "statvfs"), [Pathname "path"]), 54, [],
2193    [InitISOFS, Always, TestOutputStruct (
2194       [["statvfs"; "/"]], [CompareWithInt ("namemax", 255)])],
2195    "get file system statistics",
2196    "\
2197 Returns file system statistics for any mounted file system.
2198 C<path> should be a file or directory in the mounted file system
2199 (typically it is the mount point itself, but it doesn't need to be).
2200
2201 This is the same as the C<statvfs(2)> system call.");
2202
2203   ("tune2fs_l", (RHashtable "superblock", [Device "device"]), 55, [],
2204    [], (* XXX test *)
2205    "get ext2/ext3/ext4 superblock details",
2206    "\
2207 This returns the contents of the ext2, ext3 or ext4 filesystem
2208 superblock on C<device>.
2209
2210 It is the same as running C<tune2fs -l device>.  See L<tune2fs(8)>
2211 manpage for more details.  The list of fields returned isn't
2212 clearly defined, and depends on both the version of C<tune2fs>
2213 that libguestfs was built against, and the filesystem itself.");
2214
2215   ("blockdev_setro", (RErr, [Device "device"]), 56, [],
2216    [InitEmpty, Always, TestOutputTrue (
2217       [["blockdev_setro"; "/dev/sda"];
2218        ["blockdev_getro"; "/dev/sda"]])],
2219    "set block device to read-only",
2220    "\
2221 Sets the block device named C<device> to read-only.
2222
2223 This uses the L<blockdev(8)> command.");
2224
2225   ("blockdev_setrw", (RErr, [Device "device"]), 57, [],
2226    [InitEmpty, Always, TestOutputFalse (
2227       [["blockdev_setrw"; "/dev/sda"];
2228        ["blockdev_getro"; "/dev/sda"]])],
2229    "set block device to read-write",
2230    "\
2231 Sets the block device named C<device> to read-write.
2232
2233 This uses the L<blockdev(8)> command.");
2234
2235   ("blockdev_getro", (RBool "ro", [Device "device"]), 58, [],
2236    [InitEmpty, Always, TestOutputTrue (
2237       [["blockdev_setro"; "/dev/sda"];
2238        ["blockdev_getro"; "/dev/sda"]])],
2239    "is block device set to read-only",
2240    "\
2241 Returns a boolean indicating if the block device is read-only
2242 (true if read-only, false if not).
2243
2244 This uses the L<blockdev(8)> command.");
2245
2246   ("blockdev_getss", (RInt "sectorsize", [Device "device"]), 59, [],
2247    [InitEmpty, Always, TestOutputInt (
2248       [["blockdev_getss"; "/dev/sda"]], 512)],
2249    "get sectorsize of block device",
2250    "\
2251 This returns the size of sectors on a block device.
2252 Usually 512, but can be larger for modern devices.
2253
2254 (Note, this is not the size in sectors, use C<guestfs_blockdev_getsz>
2255 for that).
2256
2257 This uses the L<blockdev(8)> command.");
2258
2259   ("blockdev_getbsz", (RInt "blocksize", [Device "device"]), 60, [],
2260    [InitEmpty, Always, TestOutputInt (
2261       [["blockdev_getbsz"; "/dev/sda"]], 4096)],
2262    "get blocksize of block device",
2263    "\
2264 This returns the block size of a device.
2265
2266 (Note this is different from both I<size in blocks> and
2267 I<filesystem block size>).
2268
2269 This uses the L<blockdev(8)> command.");
2270
2271   ("blockdev_setbsz", (RErr, [Device "device"; Int "blocksize"]), 61, [],
2272    [], (* XXX test *)
2273    "set blocksize of block device",
2274    "\
2275 This sets the block size of a device.
2276
2277 (Note this is different from both I<size in blocks> and
2278 I<filesystem block size>).
2279
2280 This uses the L<blockdev(8)> command.");
2281
2282   ("blockdev_getsz", (RInt64 "sizeinsectors", [Device "device"]), 62, [],
2283    [InitEmpty, Always, TestOutputInt (
2284       [["blockdev_getsz"; "/dev/sda"]], 1024000)],
2285    "get total size of device in 512-byte sectors",
2286    "\
2287 This returns the size of the device in units of 512-byte sectors
2288 (even if the sectorsize isn't 512 bytes ... weird).
2289
2290 See also C<guestfs_blockdev_getss> for the real sector size of
2291 the device, and C<guestfs_blockdev_getsize64> for the more
2292 useful I<size in bytes>.
2293
2294 This uses the L<blockdev(8)> command.");
2295
2296   ("blockdev_getsize64", (RInt64 "sizeinbytes", [Device "device"]), 63, [],
2297    [InitEmpty, Always, TestOutputInt (
2298       [["blockdev_getsize64"; "/dev/sda"]], 524288000)],
2299    "get total size of device in bytes",
2300    "\
2301 This returns the size of the device in bytes.
2302
2303 See also C<guestfs_blockdev_getsz>.
2304
2305 This uses the L<blockdev(8)> command.");
2306
2307   ("blockdev_flushbufs", (RErr, [Device "device"]), 64, [],
2308    [InitEmpty, Always, TestRun
2309       [["blockdev_flushbufs"; "/dev/sda"]]],
2310    "flush device buffers",
2311    "\
2312 This tells the kernel to flush internal buffers associated
2313 with C<device>.
2314
2315 This uses the L<blockdev(8)> command.");
2316
2317   ("blockdev_rereadpt", (RErr, [Device "device"]), 65, [],
2318    [InitEmpty, Always, TestRun
2319       [["blockdev_rereadpt"; "/dev/sda"]]],
2320    "reread partition table",
2321    "\
2322 Reread the partition table on C<device>.
2323
2324 This uses the L<blockdev(8)> command.");
2325
2326   ("upload", (RErr, [FileIn "filename"; Dev_or_Path "remotefilename"]), 66, [],
2327    [InitBasicFS, Always, TestOutput (
2328       (* Pick a file from cwd which isn't likely to change. *)
2329       [["upload"; "../COPYING.LIB"; "/COPYING.LIB"];
2330        ["checksum"; "md5"; "/COPYING.LIB"]],
2331       Digest.to_hex (Digest.file "COPYING.LIB"))],
2332    "upload a file from the local machine",
2333    "\
2334 Upload local file C<filename> to C<remotefilename> on the
2335 filesystem.
2336
2337 C<filename> can also be a named pipe.
2338
2339 See also C<guestfs_download>.");
2340
2341   ("download", (RErr, [Dev_or_Path "remotefilename"; FileOut "filename"]), 67, [Progress],
2342    [InitBasicFS, Always, TestOutput (
2343       (* Pick a file from cwd which isn't likely to change. *)
2344       [["upload"; "../COPYING.LIB"; "/COPYING.LIB"];
2345        ["download"; "/COPYING.LIB"; "testdownload.tmp"];
2346        ["upload"; "testdownload.tmp"; "/upload"];
2347        ["checksum"; "md5"; "/upload"]],
2348       Digest.to_hex (Digest.file "COPYING.LIB"))],
2349    "download a file to the local machine",
2350    "\
2351 Download file C<remotefilename> and save it as C<filename>
2352 on the local machine.
2353
2354 C<filename> can also be a named pipe.
2355
2356 See also C<guestfs_upload>, C<guestfs_cat>.");
2357
2358   ("checksum", (RString "checksum", [String "csumtype"; Pathname "path"]), 68, [],
2359    [InitISOFS, Always, TestOutput (
2360       [["checksum"; "crc"; "/known-3"]], "2891671662");
2361     InitISOFS, Always, TestLastFail (
2362       [["checksum"; "crc"; "/notexists"]]);
2363     InitISOFS, Always, TestOutput (
2364       [["checksum"; "md5"; "/known-3"]], "46d6ca27ee07cdc6fa99c2e138cc522c");
2365     InitISOFS, Always, TestOutput (
2366       [["checksum"; "sha1"; "/known-3"]], "b7ebccc3ee418311091c3eda0a45b83c0a770f15");
2367     InitISOFS, Always, TestOutput (
2368       [["checksum"; "sha224"; "/known-3"]], "d2cd1774b28f3659c14116be0a6dc2bb5c4b350ce9cd5defac707741");
2369     InitISOFS, Always, TestOutput (
2370       [["checksum"; "sha256"; "/known-3"]], "75bb71b90cd20cb13f86d2bea8dad63ac7194e7517c3b52b8d06ff52d3487d30");
2371     InitISOFS, Always, TestOutput (
2372       [["checksum"; "sha384"; "/known-3"]], "5fa7883430f357b5d7b7271d3a1d2872b51d73cba72731de6863d3dea55f30646af2799bef44d5ea776a5ec7941ac640");
2373     InitISOFS, Always, TestOutput (
2374       [["checksum"; "sha512"; "/known-3"]], "2794062c328c6b216dca90443b7f7134c5f40e56bd0ed7853123275a09982a6f992e6ca682f9d2fba34a4c5e870d8fe077694ff831e3032a004ee077e00603f6");
2375     (* Test for RHBZ#579608, absolute symbolic links. *)
2376     InitISOFS, Always, TestOutput (
2377       [["checksum"; "sha512"; "/abssymlink"]], "5f57d0639bc95081c53afc63a449403883818edc64da48930ad6b1a4fb49be90404686877743fbcd7c99811f3def7df7bc22635c885c6a8cf79c806b43451c1a")],
2378    "compute MD5, SHAx or CRC checksum of file",
2379    "\
2380 This call computes the MD5, SHAx or CRC checksum of the
2381 file named C<path>.
2382
2383 The type of checksum to compute is given by the C<csumtype>
2384 parameter which must have one of the following values:
2385
2386 =over 4
2387
2388 =item C<crc>
2389
2390 Compute the cyclic redundancy check (CRC) specified by POSIX
2391 for the C<cksum> command.
2392
2393 =item C<md5>
2394
2395 Compute the MD5 hash (using the C<md5sum> program).
2396
2397 =item C<sha1>
2398
2399 Compute the SHA1 hash (using the C<sha1sum> program).
2400
2401 =item C<sha224>
2402
2403 Compute the SHA224 hash (using the C<sha224sum> program).
2404
2405 =item C<sha256>
2406
2407 Compute the SHA256 hash (using the C<sha256sum> program).
2408
2409 =item C<sha384>
2410
2411 Compute the SHA384 hash (using the C<sha384sum> program).
2412
2413 =item C<sha512>
2414
2415 Compute the SHA512 hash (using the C<sha512sum> program).
2416
2417 =back
2418
2419 The checksum is returned as a printable string.
2420
2421 To get the checksum for a device, use C<guestfs_checksum_device>.
2422
2423 To get the checksums for many files, use C<guestfs_checksums_out>.");
2424
2425   ("tar_in", (RErr, [FileIn "tarfile"; Pathname "directory"]), 69, [],
2426    [InitBasicFS, Always, TestOutput (
2427       [["tar_in"; "../images/helloworld.tar"; "/"];
2428        ["cat"; "/hello"]], "hello\n")],
2429    "unpack tarfile to directory",
2430    "\
2431 This command uploads and unpacks local file C<tarfile> (an
2432 I<uncompressed> tar file) into C<directory>.
2433
2434 To upload a compressed tarball, use C<guestfs_tgz_in>
2435 or C<guestfs_txz_in>.");
2436
2437   ("tar_out", (RErr, [String "directory"; FileOut "tarfile"]), 70, [],
2438    [],
2439    "pack directory into tarfile",
2440    "\
2441 This command packs the contents of C<directory> and downloads
2442 it to local file C<tarfile>.
2443
2444 To download a compressed tarball, use C<guestfs_tgz_out>
2445 or C<guestfs_txz_out>.");
2446
2447   ("tgz_in", (RErr, [FileIn "tarball"; Pathname "directory"]), 71, [],
2448    [InitBasicFS, Always, TestOutput (
2449       [["tgz_in"; "../images/helloworld.tar.gz"; "/"];
2450        ["cat"; "/hello"]], "hello\n")],
2451    "unpack compressed tarball to directory",
2452    "\
2453 This command uploads and unpacks local file C<tarball> (a
2454 I<gzip compressed> tar file) into C<directory>.
2455
2456 To upload an uncompressed tarball, use C<guestfs_tar_in>.");
2457
2458   ("tgz_out", (RErr, [Pathname "directory"; FileOut "tarball"]), 72, [],
2459    [],
2460    "pack directory into compressed tarball",
2461    "\
2462 This command packs the contents of C<directory> and downloads
2463 it to local file C<tarball>.
2464
2465 To download an uncompressed tarball, use C<guestfs_tar_out>.");
2466
2467   ("mount_ro", (RErr, [Device "device"; String "mountpoint"]), 73, [],
2468    [InitBasicFS, Always, TestLastFail (
2469       [["umount"; "/"];
2470        ["mount_ro"; "/dev/sda1"; "/"];
2471        ["touch"; "/new"]]);
2472     InitBasicFS, Always, TestOutput (
2473       [["write"; "/new"; "data"];
2474        ["umount"; "/"];
2475        ["mount_ro"; "/dev/sda1"; "/"];
2476        ["cat"; "/new"]], "data")],
2477    "mount a guest disk, read-only",
2478    "\
2479 This is the same as the C<guestfs_mount> command, but it
2480 mounts the filesystem with the read-only (I<-o ro>) flag.");
2481
2482   ("mount_options", (RErr, [String "options"; Device "device"; String "mountpoint"]), 74, [],
2483    [],
2484    "mount a guest disk with mount options",
2485    "\
2486 This is the same as the C<guestfs_mount> command, but it
2487 allows you to set the mount options as for the
2488 L<mount(8)> I<-o> flag.
2489
2490 If the C<options> parameter is an empty string, then
2491 no options are passed (all options default to whatever
2492 the filesystem uses).");
2493
2494   ("mount_vfs", (RErr, [String "options"; String "vfstype"; Device "device"; String "mountpoint"]), 75, [],
2495    [],
2496    "mount a guest disk with mount options and vfstype",
2497    "\
2498 This is the same as the C<guestfs_mount> command, but it
2499 allows you to set both the mount options and the vfstype
2500 as for the L<mount(8)> I<-o> and I<-t> flags.");
2501
2502   ("debug", (RString "result", [String "subcmd"; StringList "extraargs"]), 76, [],
2503    [],
2504    "debugging and internals",
2505    "\
2506 The C<guestfs_debug> command exposes some internals of
2507 C<guestfsd> (the guestfs daemon) that runs inside the
2508 qemu subprocess.
2509
2510 There is no comprehensive help for this command.  You have
2511 to look at the file C<daemon/debug.c> in the libguestfs source
2512 to find out what you can do.");
2513
2514   ("lvremove", (RErr, [Device "device"]), 77, [Optional "lvm2"],
2515    [InitEmpty, Always, TestOutputList (
2516       [["part_disk"; "/dev/sda"; "mbr"];
2517        ["pvcreate"; "/dev/sda1"];
2518        ["vgcreate"; "VG"; "/dev/sda1"];
2519        ["lvcreate"; "LV1"; "VG"; "50"];
2520        ["lvcreate"; "LV2"; "VG"; "50"];
2521        ["lvremove"; "/dev/VG/LV1"];
2522        ["lvs"]], ["/dev/VG/LV2"]);
2523     InitEmpty, Always, TestOutputList (
2524       [["part_disk"; "/dev/sda"; "mbr"];
2525        ["pvcreate"; "/dev/sda1"];
2526        ["vgcreate"; "VG"; "/dev/sda1"];
2527        ["lvcreate"; "LV1"; "VG"; "50"];
2528        ["lvcreate"; "LV2"; "VG"; "50"];
2529        ["lvremove"; "/dev/VG"];
2530        ["lvs"]], []);
2531     InitEmpty, Always, TestOutputList (
2532       [["part_disk"; "/dev/sda"; "mbr"];
2533        ["pvcreate"; "/dev/sda1"];
2534        ["vgcreate"; "VG"; "/dev/sda1"];
2535        ["lvcreate"; "LV1"; "VG"; "50"];
2536        ["lvcreate"; "LV2"; "VG"; "50"];
2537        ["lvremove"; "/dev/VG"];
2538        ["vgs"]], ["VG"])],
2539    "remove an LVM logical volume",
2540    "\
2541 Remove an LVM logical volume C<device>, where C<device> is
2542 the path to the LV, such as C</dev/VG/LV>.
2543
2544 You can also remove all LVs in a volume group by specifying
2545 the VG name, C</dev/VG>.");
2546
2547   ("vgremove", (RErr, [String "vgname"]), 78, [Optional "lvm2"],
2548    [InitEmpty, Always, TestOutputList (
2549       [["part_disk"; "/dev/sda"; "mbr"];
2550        ["pvcreate"; "/dev/sda1"];
2551        ["vgcreate"; "VG"; "/dev/sda1"];
2552        ["lvcreate"; "LV1"; "VG"; "50"];
2553        ["lvcreate"; "LV2"; "VG"; "50"];
2554        ["vgremove"; "VG"];
2555        ["lvs"]], []);
2556     InitEmpty, Always, TestOutputList (
2557       [["part_disk"; "/dev/sda"; "mbr"];
2558        ["pvcreate"; "/dev/sda1"];
2559        ["vgcreate"; "VG"; "/dev/sda1"];
2560        ["lvcreate"; "LV1"; "VG"; "50"];
2561        ["lvcreate"; "LV2"; "VG"; "50"];
2562        ["vgremove"; "VG"];
2563        ["vgs"]], [])],
2564    "remove an LVM volume group",
2565    "\
2566 Remove an LVM volume group C<vgname>, (for example C<VG>).
2567
2568 This also forcibly removes all logical volumes in the volume
2569 group (if any).");
2570
2571   ("pvremove", (RErr, [Device "device"]), 79, [Optional "lvm2"],
2572    [InitEmpty, Always, TestOutputListOfDevices (
2573       [["part_disk"; "/dev/sda"; "mbr"];
2574        ["pvcreate"; "/dev/sda1"];
2575        ["vgcreate"; "VG"; "/dev/sda1"];
2576        ["lvcreate"; "LV1"; "VG"; "50"];
2577        ["lvcreate"; "LV2"; "VG"; "50"];
2578        ["vgremove"; "VG"];
2579        ["pvremove"; "/dev/sda1"];
2580        ["lvs"]], []);
2581     InitEmpty, Always, TestOutputListOfDevices (
2582       [["part_disk"; "/dev/sda"; "mbr"];
2583        ["pvcreate"; "/dev/sda1"];
2584        ["vgcreate"; "VG"; "/dev/sda1"];
2585        ["lvcreate"; "LV1"; "VG"; "50"];
2586        ["lvcreate"; "LV2"; "VG"; "50"];
2587        ["vgremove"; "VG"];
2588        ["pvremove"; "/dev/sda1"];
2589        ["vgs"]], []);
2590     InitEmpty, Always, TestOutputListOfDevices (
2591       [["part_disk"; "/dev/sda"; "mbr"];
2592        ["pvcreate"; "/dev/sda1"];
2593        ["vgcreate"; "VG"; "/dev/sda1"];
2594        ["lvcreate"; "LV1"; "VG"; "50"];
2595        ["lvcreate"; "LV2"; "VG"; "50"];
2596        ["vgremove"; "VG"];
2597        ["pvremove"; "/dev/sda1"];
2598        ["pvs"]], [])],
2599    "remove an LVM physical volume",
2600    "\
2601 This wipes a physical volume C<device> so that LVM will no longer
2602 recognise it.
2603
2604 The implementation uses the C<pvremove> command which refuses to
2605 wipe physical volumes that contain any volume groups, so you have
2606 to remove those first.");
2607
2608   ("set_e2label", (RErr, [Device "device"; String "label"]), 80, [],
2609    [InitBasicFS, Always, TestOutput (
2610       [["set_e2label"; "/dev/sda1"; "testlabel"];
2611        ["get_e2label"; "/dev/sda1"]], "testlabel")],
2612    "set the ext2/3/4 filesystem label",
2613    "\
2614 This sets the ext2/3/4 filesystem label of the filesystem on
2615 C<device> to C<label>.  Filesystem labels are limited to
2616 16 characters.
2617
2618 You can use either C<guestfs_tune2fs_l> or C<guestfs_get_e2label>
2619 to return the existing label on a filesystem.");
2620
2621   ("get_e2label", (RString "label", [Device "device"]), 81, [DeprecatedBy "vfs_label"],
2622    [],
2623    "get the ext2/3/4 filesystem label",
2624    "\
2625 This returns the ext2/3/4 filesystem label of the filesystem on
2626 C<device>.");
2627
2628   ("set_e2uuid", (RErr, [Device "device"; String "uuid"]), 82, [],
2629    (let uuid = uuidgen () in
2630     [InitBasicFS, Always, TestOutput (
2631        [["set_e2uuid"; "/dev/sda1"; uuid];
2632         ["get_e2uuid"; "/dev/sda1"]], uuid);
2633      InitBasicFS, Always, TestOutput (
2634        [["set_e2uuid"; "/dev/sda1"; "clear"];
2635         ["get_e2uuid"; "/dev/sda1"]], "");
2636      (* We can't predict what UUIDs will be, so just check the commands run. *)
2637      InitBasicFS, Always, TestRun (
2638        [["set_e2uuid"; "/dev/sda1"; "random"]]);
2639      InitBasicFS, Always, TestRun (
2640        [["set_e2uuid"; "/dev/sda1"; "time"]])]),
2641    "set the ext2/3/4 filesystem UUID",
2642    "\
2643 This sets the ext2/3/4 filesystem UUID of the filesystem on
2644 C<device> to C<uuid>.  The format of the UUID and alternatives
2645 such as C<clear>, C<random> and C<time> are described in the
2646 L<tune2fs(8)> manpage.
2647
2648 You can use either C<guestfs_tune2fs_l> or C<guestfs_get_e2uuid>
2649 to return the existing UUID of a filesystem.");
2650
2651   ("get_e2uuid", (RString "uuid", [Device "device"]), 83, [DeprecatedBy "vfs_uuid"],
2652    (* Regression test for RHBZ#597112. *)
2653    (let uuid = uuidgen () in
2654     [InitBasicFS, Always, TestOutput (
2655        [["mke2journal"; "1024"; "/dev/sdb"];
2656         ["set_e2uuid"; "/dev/sdb"; uuid];
2657         ["get_e2uuid"; "/dev/sdb"]], uuid)]),
2658    "get the ext2/3/4 filesystem UUID",
2659    "\
2660 This returns the ext2/3/4 filesystem UUID of the filesystem on
2661 C<device>.");
2662
2663   ("fsck", (RInt "status", [String "fstype"; Device "device"]), 84, [FishOutput FishOutputHexadecimal],
2664    [InitBasicFS, Always, TestOutputInt (
2665       [["umount"; "/dev/sda1"];
2666        ["fsck"; "ext2"; "/dev/sda1"]], 0);
2667     InitBasicFS, Always, TestOutputInt (
2668       [["umount"; "/dev/sda1"];
2669        ["zero"; "/dev/sda1"];
2670        ["fsck"; "ext2"; "/dev/sda1"]], 8)],
2671    "run the filesystem checker",
2672    "\
2673 This runs the filesystem checker (fsck) on C<device> which
2674 should have filesystem type C<fstype>.
2675
2676 The returned integer is the status.  See L<fsck(8)> for the
2677 list of status codes from C<fsck>.
2678
2679 Notes:
2680
2681 =over 4
2682
2683 =item *
2684
2685 Multiple status codes can be summed together.
2686
2687 =item *
2688
2689 A non-zero return code can mean \"success\", for example if
2690 errors have been corrected on the filesystem.
2691
2692 =item *
2693
2694 Checking or repairing NTFS volumes is not supported
2695 (by linux-ntfs).
2696
2697 =back
2698
2699 This command is entirely equivalent to running C<fsck -a -t fstype device>.");
2700
2701   ("zero", (RErr, [Device "device"]), 85, [Progress],
2702    [InitBasicFS, Always, TestOutput (
2703       [["umount"; "/dev/sda1"];
2704        ["zero"; "/dev/sda1"];
2705        ["file"; "/dev/sda1"]], "data")],
2706    "write zeroes to the device",
2707    "\
2708 This command writes zeroes over the first few blocks of C<device>.
2709
2710 How many blocks are zeroed isn't specified (but it's I<not> enough
2711 to securely wipe the device).  It should be sufficient to remove
2712 any partition tables, filesystem superblocks and so on.
2713
2714 See also: C<guestfs_zero_device>, C<guestfs_scrub_device>.");
2715
2716   ("grub_install", (RErr, [Pathname "root"; Device "device"]), 86, [],
2717    (* See:
2718     * https://bugzilla.redhat.com/show_bug.cgi?id=484986
2719     * https://bugzilla.redhat.com/show_bug.cgi?id=479760
2720     *)
2721    [InitBasicFS, Always, TestOutputTrue (
2722       [["mkdir_p"; "/boot/grub"];
2723        ["write"; "/boot/grub/device.map"; "(hd0) /dev/vda"];
2724        ["grub_install"; "/"; "/dev/vda"];
2725        ["is_dir"; "/boot"]])],
2726    "install GRUB",
2727    "\
2728 This command installs GRUB (the Grand Unified Bootloader) on
2729 C<device>, with the root directory being C<root>.
2730
2731 Note: If grub-install reports the error
2732 \"No suitable drive was found in the generated device map.\"
2733 it may be that you need to create a C</boot/grub/device.map>
2734 file first that contains the mapping between grub device names
2735 and Linux device names.  It is usually sufficient to create
2736 a file containing:
2737
2738  (hd0) /dev/vda
2739
2740 replacing C</dev/vda> with the name of the installation device.");
2741
2742   ("cp", (RErr, [Pathname "src"; Pathname "dest"]), 87, [],
2743    [InitBasicFS, Always, TestOutput (
2744       [["write"; "/old"; "file content"];
2745        ["cp"; "/old"; "/new"];
2746        ["cat"; "/new"]], "file content");
2747     InitBasicFS, Always, TestOutputTrue (
2748       [["write"; "/old"; "file content"];
2749        ["cp"; "/old"; "/new"];
2750        ["is_file"; "/old"]]);
2751     InitBasicFS, Always, TestOutput (
2752       [["write"; "/old"; "file content"];
2753        ["mkdir"; "/dir"];
2754        ["cp"; "/old"; "/dir/new"];
2755        ["cat"; "/dir/new"]], "file content")],
2756    "copy a file",
2757    "\
2758 This copies a file from C<src> to C<dest> where C<dest> is
2759 either a destination filename or destination directory.");
2760
2761   ("cp_a", (RErr, [Pathname "src"; Pathname "dest"]), 88, [],
2762    [InitBasicFS, Always, TestOutput (
2763       [["mkdir"; "/olddir"];
2764        ["mkdir"; "/newdir"];
2765        ["write"; "/olddir/file"; "file content"];
2766        ["cp_a"; "/olddir"; "/newdir"];
2767        ["cat"; "/newdir/olddir/file"]], "file content")],
2768    "copy a file or directory recursively",
2769    "\
2770 This copies a file or directory from C<src> to C<dest>
2771 recursively using the C<cp -a> command.");
2772
2773   ("mv", (RErr, [Pathname "src"; Pathname "dest"]), 89, [],
2774    [InitBasicFS, Always, TestOutput (
2775       [["write"; "/old"; "file content"];
2776        ["mv"; "/old"; "/new"];
2777        ["cat"; "/new"]], "file content");
2778     InitBasicFS, Always, TestOutputFalse (
2779       [["write"; "/old"; "file content"];
2780        ["mv"; "/old"; "/new"];
2781        ["is_file"; "/old"]])],
2782    "move a file",
2783    "\
2784 This moves a file from C<src> to C<dest> where C<dest> is
2785 either a destination filename or destination directory.");
2786
2787   ("drop_caches", (RErr, [Int "whattodrop"]), 90, [],
2788    [InitEmpty, Always, TestRun (
2789       [["drop_caches"; "3"]])],
2790    "drop kernel page cache, dentries and inodes",
2791    "\
2792 This instructs the guest kernel to drop its page cache,
2793 and/or dentries and inode caches.  The parameter C<whattodrop>
2794 tells the kernel what precisely to drop, see
2795 L<http://linux-mm.org/Drop_Caches>
2796
2797 Setting C<whattodrop> to 3 should drop everything.
2798
2799 This automatically calls L<sync(2)> before the operation,
2800 so that the maximum guest memory is freed.");
2801
2802   ("dmesg", (RString "kmsgs", []), 91, [],
2803    [InitEmpty, Always, TestRun (
2804       [["dmesg"]])],
2805    "return kernel messages",
2806    "\
2807 This returns the kernel messages (C<dmesg> output) from
2808 the guest kernel.  This is sometimes useful for extended
2809 debugging of problems.
2810
2811 Another way to get the same information is to enable
2812 verbose messages with C<guestfs_set_verbose> or by setting
2813 the environment variable C<LIBGUESTFS_DEBUG=1> before
2814 running the program.");
2815
2816   ("ping_daemon", (RErr, []), 92, [],
2817    [InitEmpty, Always, TestRun (
2818       [["ping_daemon"]])],
2819    "ping the guest daemon",
2820    "\
2821 This is a test probe into the guestfs daemon running inside
2822 the qemu subprocess.  Calling this function checks that the
2823 daemon responds to the ping message, without affecting the daemon
2824 or attached block device(s) in any other way.");
2825
2826   ("equal", (RBool "equality", [Pathname "file1"; Pathname "file2"]), 93, [],
2827    [InitBasicFS, Always, TestOutputTrue (
2828       [["write"; "/file1"; "contents of a file"];
2829        ["cp"; "/file1"; "/file2"];
2830        ["equal"; "/file1"; "/file2"]]);
2831     InitBasicFS, Always, TestOutputFalse (
2832       [["write"; "/file1"; "contents of a file"];
2833        ["write"; "/file2"; "contents of another file"];
2834        ["equal"; "/file1"; "/file2"]]);
2835     InitBasicFS, Always, TestLastFail (
2836       [["equal"; "/file1"; "/file2"]])],
2837    "test if two files have equal contents",
2838    "\
2839 This compares the two files C<file1> and C<file2> and returns
2840 true if their content is exactly equal, or false otherwise.
2841
2842 The external L<cmp(1)> program is used for the comparison.");
2843
2844   ("strings", (RStringList "stringsout", [Pathname "path"]), 94, [ProtocolLimitWarning],
2845    [InitISOFS, Always, TestOutputList (
2846       [["strings"; "/known-5"]], ["abcdefghi"; "jklmnopqr"]);
2847     InitISOFS, Always, TestOutputList (
2848       [["strings"; "/empty"]], []);
2849     (* Test for RHBZ#579608, absolute symbolic links. *)
2850     InitISOFS, Always, TestRun (
2851       [["strings"; "/abssymlink"]])],
2852    "print the printable strings in a file",
2853    "\
2854 This runs the L<strings(1)> command on a file and returns
2855 the list of printable strings found.");
2856
2857   ("strings_e", (RStringList "stringsout", [String "encoding"; Pathname "path"]), 95, [ProtocolLimitWarning],
2858    [InitISOFS, Always, TestOutputList (
2859       [["strings_e"; "b"; "/known-5"]], []);
2860     InitBasicFS, Always, TestOutputList (
2861       [["write"; "/new"; "\000h\000e\000l\000l\000o\000\n\000w\000o\000r\000l\000d\000\n"];
2862        ["strings_e"; "b"; "/new"]], ["hello"; "world"])],
2863    "print the printable strings in a file",
2864    "\
2865 This is like the C<guestfs_strings> command, but allows you to
2866 specify the encoding of strings that are looked for in
2867 the source file C<path>.
2868
2869 Allowed encodings are:
2870
2871 =over 4
2872
2873 =item s
2874
2875 Single 7-bit-byte characters like ASCII and the ASCII-compatible
2876 parts of ISO-8859-X (this is what C<guestfs_strings> uses).
2877
2878 =item S
2879
2880 Single 8-bit-byte characters.
2881
2882 =item b
2883
2884 16-bit big endian strings such as those encoded in
2885 UTF-16BE or UCS-2BE.
2886
2887 =item l (lower case letter L)
2888
2889 16-bit little endian such as UTF-16LE and UCS-2LE.
2890 This is useful for examining binaries in Windows guests.
2891
2892 =item B
2893
2894 32-bit big endian such as UCS-4BE.
2895
2896 =item L
2897
2898 32-bit little endian such as UCS-4LE.
2899
2900 =back
2901
2902 The returned strings are transcoded to UTF-8.");
2903
2904   ("hexdump", (RString "dump", [Pathname "path"]), 96, [ProtocolLimitWarning],
2905    [InitISOFS, Always, TestOutput (
2906       [["hexdump"; "/known-4"]], "00000000  61 62 63 0a 64 65 66 0a  67 68 69                 |abc.def.ghi|\n0000000b\n");
2907     (* Test for RHBZ#501888c2 regression which caused large hexdump
2908      * commands to segfault.
2909      *)
2910     InitISOFS, Always, TestRun (
2911       [["hexdump"; "/100krandom"]]);
2912     (* Test for RHBZ#579608, absolute symbolic links. *)
2913     InitISOFS, Always, TestRun (
2914       [["hexdump"; "/abssymlink"]])],
2915    "dump a file in hexadecimal",
2916    "\
2917 This runs C<hexdump -C> on the given C<path>.  The result is
2918 the human-readable, canonical hex dump of the file.");
2919
2920   ("zerofree", (RErr, [Device "device"]), 97, [Optional "zerofree"],
2921    [InitNone, Always, TestOutput (
2922       [["part_disk"; "/dev/sda"; "mbr"];
2923        ["mkfs"; "ext3"; "/dev/sda1"];
2924        ["mount_options"; ""; "/dev/sda1"; "/"];
2925        ["write"; "/new"; "test file"];
2926        ["umount"; "/dev/sda1"];
2927        ["zerofree"; "/dev/sda1"];
2928        ["mount_options"; ""; "/dev/sda1"; "/"];
2929        ["cat"; "/new"]], "test file")],
2930    "zero unused inodes and disk blocks on ext2/3 filesystem",
2931    "\
2932 This runs the I<zerofree> program on C<device>.  This program
2933 claims to zero unused inodes and disk blocks on an ext2/3
2934 filesystem, thus making it possible to compress the filesystem
2935 more effectively.
2936
2937 You should B<not> run this program if the filesystem is
2938 mounted.
2939
2940 It is possible that using this program can damage the filesystem
2941 or data on the filesystem.");
2942
2943   ("pvresize", (RErr, [Device "device"]), 98, [Optional "lvm2"],
2944    [],
2945    "resize an LVM physical volume",
2946    "\
2947 This resizes (expands or shrinks) an existing LVM physical
2948 volume to match the new size of the underlying device.");
2949
2950   ("sfdisk_N", (RErr, [Device "device"; Int "partnum";
2951                        Int "cyls"; Int "heads"; Int "sectors";
2952                        String "line"]), 99, [DangerWillRobinson],
2953    [],
2954    "modify a single partition on a block device",
2955    "\
2956 This runs L<sfdisk(8)> option to modify just the single
2957 partition C<n> (note: C<n> counts from 1).
2958
2959 For other parameters, see C<guestfs_sfdisk>.  You should usually
2960 pass C<0> for the cyls/heads/sectors parameters.
2961
2962 See also: C<guestfs_part_add>");
2963
2964   ("sfdisk_l", (RString "partitions", [Device "device"]), 100, [],
2965    [],
2966    "display the partition table",
2967    "\
2968 This displays the partition table on C<device>, in the
2969 human-readable output of the L<sfdisk(8)> command.  It is
2970 not intended to be parsed.
2971
2972 See also: C<guestfs_part_list>");
2973
2974   ("sfdisk_kernel_geometry", (RString "partitions", [Device "device"]), 101, [],
2975    [],
2976    "display the kernel geometry",
2977    "\
2978 This displays the kernel's idea of the geometry of C<device>.
2979
2980 The result is in human-readable format, and not designed to
2981 be parsed.");
2982
2983   ("sfdisk_disk_geometry", (RString "partitions", [Device "device"]), 102, [],
2984    [],
2985    "display the disk geometry from the partition table",
2986    "\
2987 This displays the disk geometry of C<device> read from the
2988 partition table.  Especially in the case where the underlying
2989 block device has been resized, this can be different from the
2990 kernel's idea of the geometry (see C<guestfs_sfdisk_kernel_geometry>).
2991
2992 The result is in human-readable format, and not designed to
2993 be parsed.");
2994
2995   ("vg_activate_all", (RErr, [Bool "activate"]), 103, [Optional "lvm2"],
2996    [],
2997    "activate or deactivate all volume groups",
2998    "\
2999 This command activates or (if C<activate> is false) deactivates
3000 all logical volumes in all volume groups.
3001 If activated, then they are made known to the
3002 kernel, ie. they appear as C</dev/mapper> devices.  If deactivated,
3003 then those devices disappear.
3004
3005 This command is the same as running C<vgchange -a y|n>");
3006
3007   ("vg_activate", (RErr, [Bool "activate"; StringList "volgroups"]), 104, [Optional "lvm2"],
3008    [],
3009    "activate or deactivate some volume groups",
3010    "\
3011 This command activates or (if C<activate> is false) deactivates
3012 all logical volumes in the listed volume groups C<volgroups>.
3013 If activated, then they are made known to the
3014 kernel, ie. they appear as C</dev/mapper> devices.  If deactivated,
3015 then those devices disappear.
3016
3017 This command is the same as running C<vgchange -a y|n volgroups...>
3018
3019 Note that if C<volgroups> is an empty list then B<all> volume groups
3020 are activated or deactivated.");
3021
3022   ("lvresize", (RErr, [Device "device"; Int "mbytes"]), 105, [Optional "lvm2"],
3023    [InitNone, Always, TestOutput (
3024       [["part_disk"; "/dev/sda"; "mbr"];
3025        ["pvcreate"; "/dev/sda1"];
3026        ["vgcreate"; "VG"; "/dev/sda1"];
3027        ["lvcreate"; "LV"; "VG"; "10"];
3028        ["mkfs"; "ext2"; "/dev/VG/LV"];
3029        ["mount_options"; ""; "/dev/VG/LV"; "/"];
3030        ["write"; "/new"; "test content"];
3031        ["umount"; "/"];
3032        ["lvresize"; "/dev/VG/LV"; "20"];
3033        ["e2fsck_f"; "/dev/VG/LV"];
3034        ["resize2fs"; "/dev/VG/LV"];
3035        ["mount_options"; ""; "/dev/VG/LV"; "/"];
3036        ["cat"; "/new"]], "test content");
3037     InitNone, Always, TestRun (
3038       (* Make an LV smaller to test RHBZ#587484. *)
3039       [["part_disk"; "/dev/sda"; "mbr"];
3040        ["pvcreate"; "/dev/sda1"];
3041        ["vgcreate"; "VG"; "/dev/sda1"];
3042        ["lvcreate"; "LV"; "VG"; "20"];
3043        ["lvresize"; "/dev/VG/LV"; "10"]])],
3044    "resize an LVM logical volume",
3045    "\
3046 This resizes (expands or shrinks) an existing LVM logical
3047 volume to C<mbytes>.  When reducing, data in the reduced part
3048 is lost.");
3049
3050   ("resize2fs", (RErr, [Device "device"]), 106, [],
3051    [], (* lvresize tests this *)
3052    "resize an ext2, ext3 or ext4 filesystem",
3053    "\
3054 This resizes an ext2, ext3 or ext4 filesystem to match the size of
3055 the underlying device.
3056
3057 I<Note:> It is sometimes required that you run C<guestfs_e2fsck_f>
3058 on the C<device> before calling this command.  For unknown reasons
3059 C<resize2fs> sometimes gives an error about this and sometimes not.
3060 In any case, it is always safe to call C<guestfs_e2fsck_f> before
3061 calling this function.");
3062
3063   ("find", (RStringList "names", [Pathname "directory"]), 107, [ProtocolLimitWarning],
3064    [InitBasicFS, Always, TestOutputList (
3065       [["find"; "/"]], ["lost+found"]);
3066     InitBasicFS, Always, TestOutputList (
3067       [["touch"; "/a"];
3068        ["mkdir"; "/b"];
3069        ["touch"; "/b/c"];
3070        ["find"; "/"]], ["a"; "b"; "b/c"; "lost+found"]);
3071     InitBasicFS, Always, TestOutputList (
3072       [["mkdir_p"; "/a/b/c"];
3073        ["touch"; "/a/b/c/d"];
3074        ["find"; "/a/b/"]], ["c"; "c/d"])],
3075    "find all files and directories",
3076    "\
3077 This command lists out all files and directories, recursively,
3078 starting at C<directory>.  It is essentially equivalent to
3079 running the shell command C<find directory -print> but some
3080 post-processing happens on the output, described below.
3081
3082 This returns a list of strings I<without any prefix>.  Thus
3083 if the directory structure was:
3084
3085  /tmp/a
3086  /tmp/b
3087  /tmp/c/d
3088
3089 then the returned list from C<guestfs_find> C</tmp> would be
3090 4 elements:
3091
3092  a
3093  b
3094  c
3095  c/d
3096
3097 If C<directory> is not a directory, then this command returns
3098 an error.
3099
3100 The returned list is sorted.
3101
3102 See also C<guestfs_find0>.");
3103
3104   ("e2fsck_f", (RErr, [Device "device"]), 108, [],
3105    [], (* lvresize tests this *)
3106    "check an ext2/ext3 filesystem",
3107    "\
3108 This runs C<e2fsck -p -f device>, ie. runs the ext2/ext3
3109 filesystem checker on C<device>, noninteractively (C<-p>),
3110 even if the filesystem appears to be clean (C<-f>).
3111
3112 This command is only needed because of C<guestfs_resize2fs>
3113 (q.v.).  Normally you should use C<guestfs_fsck>.");
3114
3115   ("sleep", (RErr, [Int "secs"]), 109, [],
3116    [InitNone, Always, TestRun (
3117       [["sleep"; "1"]])],
3118    "sleep for some seconds",
3119    "\
3120 Sleep for C<secs> seconds.");
3121
3122   ("ntfs_3g_probe", (RInt "status", [Bool "rw"; Device "device"]), 110, [Optional "ntfs3g"],
3123    [InitNone, Always, TestOutputInt (
3124       [["part_disk"; "/dev/sda"; "mbr"];
3125        ["mkfs"; "ntfs"; "/dev/sda1"];
3126        ["ntfs_3g_probe"; "true"; "/dev/sda1"]], 0);
3127     InitNone, Always, TestOutputInt (
3128       [["part_disk"; "/dev/sda"; "mbr"];
3129        ["mkfs"; "ext2"; "/dev/sda1"];
3130        ["ntfs_3g_probe"; "true"; "/dev/sda1"]], 12)],
3131    "probe NTFS volume",
3132    "\
3133 This command runs the L<ntfs-3g.probe(8)> command which probes
3134 an NTFS C<device> for mountability.  (Not all NTFS volumes can
3135 be mounted read-write, and some cannot be mounted at all).
3136
3137 C<rw> is a boolean flag.  Set it to true if you want to test
3138 if the volume can be mounted read-write.  Set it to false if
3139 you want to test if the volume can be mounted read-only.
3140
3141 The return value is an integer which C<0> if the operation
3142 would succeed, or some non-zero value documented in the
3143 L<ntfs-3g.probe(8)> manual page.");
3144
3145   ("sh", (RString "output", [String "command"]), 111, [],
3146    [], (* XXX needs tests *)
3147    "run a command via the shell",
3148    "\
3149 This call runs a command from the guest filesystem via the
3150 guest's C</bin/sh>.
3151
3152 This is like C<guestfs_command>, but passes the command to:
3153
3154  /bin/sh -c \"command\"
3155
3156 Depending on the guest's shell, this usually results in
3157 wildcards being expanded, shell expressions being interpolated
3158 and so on.
3159
3160 All the provisos about C<guestfs_command> apply to this call.");
3161
3162   ("sh_lines", (RStringList "lines", [String "command"]), 112, [],
3163    [], (* XXX needs tests *)
3164    "run a command via the shell returning lines",
3165    "\
3166 This is the same as C<guestfs_sh>, but splits the result
3167 into a list of lines.
3168
3169 See also: C<guestfs_command_lines>");
3170
3171   ("glob_expand", (RStringList "paths", [Pathname "pattern"]), 113, [],
3172    (* Use Pathname here, and hence ABS_PATH (pattern,... in generated
3173     * code in stubs.c, since all valid glob patterns must start with "/".
3174     * There is no concept of "cwd" in libguestfs, hence no "."-relative names.
3175     *)
3176    [InitBasicFS, Always, TestOutputList (
3177       [["mkdir_p"; "/a/b/c"];
3178        ["touch"; "/a/b/c/d"];
3179        ["touch"; "/a/b/c/e"];
3180        ["glob_expand"; "/a/b/c/*"]], ["/a/b/c/d"; "/a/b/c/e"]);
3181     InitBasicFS, Always, TestOutputList (
3182       [["mkdir_p"; "/a/b/c"];
3183        ["touch"; "/a/b/c/d"];
3184        ["touch"; "/a/b/c/e"];
3185        ["glob_expand"; "/a/*/c/*"]], ["/a/b/c/d"; "/a/b/c/e"]);
3186     InitBasicFS, Always, TestOutputList (
3187       [["mkdir_p"; "/a/b/c"];
3188        ["touch"; "/a/b/c/d"];
3189        ["touch"; "/a/b/c/e"];
3190        ["glob_expand"; "/a/*/x/*"]], [])],
3191    "expand a wildcard path",
3192    "\
3193 This command searches for all the pathnames matching
3194 C<pattern> according to the wildcard expansion rules
3195 used by the shell.
3196
3197 If no paths match, then this returns an empty list
3198 (note: not an error).
3199
3200 It is just a wrapper around the C L<glob(3)> function
3201 with flags C<GLOB_MARK|GLOB_BRACE>.
3202 See that manual page for more details.");
3203
3204   ("scrub_device", (RErr, [Device "device"]), 114, [DangerWillRobinson; Optional "scrub"],
3205    [InitNone, Always, TestRun ( (* use /dev/sdc because it's smaller *)
3206       [["scrub_device"; "/dev/sdc"]])],
3207    "scrub (securely wipe) a device",
3208    "\
3209 This command writes patterns over C<device> to make data retrieval
3210 more difficult.
3211
3212 It is an interface to the L<scrub(1)> program.  See that
3213 manual page for more details.");
3214
3215   ("scrub_file", (RErr, [Pathname "file"]), 115, [Optional "scrub"],
3216    [InitBasicFS, Always, TestRun (
3217       [["write"; "/file"; "content"];
3218        ["scrub_file"; "/file"]])],
3219    "scrub (securely wipe) a file",
3220    "\
3221 This command writes patterns over a file to make data retrieval
3222 more difficult.
3223
3224 The file is I<removed> after scrubbing.
3225
3226 It is an interface to the L<scrub(1)> program.  See that
3227 manual page for more details.");
3228
3229   ("scrub_freespace", (RErr, [Pathname "dir"]), 116, [Optional "scrub"],
3230    [], (* XXX needs testing *)
3231    "scrub (securely wipe) free space",
3232    "\
3233 This command creates the directory C<dir> and then fills it
3234 with files until the filesystem is full, and scrubs the files
3235 as for C<guestfs_scrub_file>, and deletes them.
3236 The intention is to scrub any free space on the partition
3237 containing C<dir>.
3238
3239 It is an interface to the L<scrub(1)> program.  See that
3240 manual page for more details.");
3241
3242   ("mkdtemp", (RString "dir", [Pathname "template"]), 117, [],
3243    [InitBasicFS, Always, TestRun (
3244       [["mkdir"; "/tmp"];
3245        ["mkdtemp"; "/tmp/tmpXXXXXX"]])],
3246    "create a temporary directory",
3247    "\
3248 This command creates a temporary directory.  The
3249 C<template> parameter should be a full pathname for the
3250 temporary directory name with the final six characters being
3251 \"XXXXXX\".
3252
3253 For example: \"/tmp/myprogXXXXXX\" or \"/Temp/myprogXXXXXX\",
3254 the second one being suitable for Windows filesystems.
3255
3256 The name of the temporary directory that was created
3257 is returned.
3258
3259 The temporary directory is created with mode 0700
3260 and is owned by root.
3261
3262 The caller is responsible for deleting the temporary
3263 directory and its contents after use.
3264
3265 See also: L<mkdtemp(3)>");
3266
3267   ("wc_l", (RInt "lines", [Pathname "path"]), 118, [],
3268    [InitISOFS, Always, TestOutputInt (
3269       [["wc_l"; "/10klines"]], 10000);
3270     (* Test for RHBZ#579608, absolute symbolic links. *)
3271     InitISOFS, Always, TestOutputInt (
3272       [["wc_l"; "/abssymlink"]], 10000)],
3273    "count lines in a file",
3274    "\
3275 This command counts the lines in a file, using the
3276 C<wc -l> external command.");
3277
3278   ("wc_w", (RInt "words", [Pathname "path"]), 119, [],
3279    [InitISOFS, Always, TestOutputInt (
3280       [["wc_w"; "/10klines"]], 10000)],
3281    "count words in a file",
3282    "\
3283 This command counts the words in a file, using the
3284 C<wc -w> external command.");
3285
3286   ("wc_c", (RInt "chars", [Pathname "path"]), 120, [],
3287    [InitISOFS, Always, TestOutputInt (
3288       [["wc_c"; "/100kallspaces"]], 102400)],
3289    "count characters in a file",
3290    "\
3291 This command counts the characters in a file, using the
3292 C<wc -c> external command.");
3293
3294   ("head", (RStringList "lines", [Pathname "path"]), 121, [ProtocolLimitWarning],
3295    [InitISOFS, Always, TestOutputList (
3296       [["head"; "/10klines"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz";"3abcdefghijklmnopqrstuvwxyz";"4abcdefghijklmnopqrstuvwxyz";"5abcdefghijklmnopqrstuvwxyz";"6abcdefghijklmnopqrstuvwxyz";"7abcdefghijklmnopqrstuvwxyz";"8abcdefghijklmnopqrstuvwxyz";"9abcdefghijklmnopqrstuvwxyz"]);
3297     (* Test for RHBZ#579608, absolute symbolic links. *)
3298     InitISOFS, Always, TestOutputList (
3299       [["head"; "/abssymlink"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz";"3abcdefghijklmnopqrstuvwxyz";"4abcdefghijklmnopqrstuvwxyz";"5abcdefghijklmnopqrstuvwxyz";"6abcdefghijklmnopqrstuvwxyz";"7abcdefghijklmnopqrstuvwxyz";"8abcdefghijklmnopqrstuvwxyz";"9abcdefghijklmnopqrstuvwxyz"])],
3300    "return first 10 lines of a file",
3301    "\
3302 This command returns up to the first 10 lines of a file as
3303 a list of strings.");
3304
3305   ("head_n", (RStringList "lines", [Int "nrlines"; Pathname "path"]), 122, [ProtocolLimitWarning],
3306    [InitISOFS, Always, TestOutputList (
3307       [["head_n"; "3"; "/10klines"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz"]);
3308     InitISOFS, Always, TestOutputList (
3309       [["head_n"; "-9997"; "/10klines"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz"]);
3310     InitISOFS, Always, TestOutputList (
3311       [["head_n"; "0"; "/10klines"]], [])],
3312    "return first N lines of a file",
3313    "\
3314 If the parameter C<nrlines> is a positive number, this returns the first
3315 C<nrlines> lines of the file C<path>.
3316
3317 If the parameter C<nrlines> is a negative number, this returns lines
3318 from the file C<path>, excluding the last C<nrlines> lines.
3319
3320 If the parameter C<nrlines> is zero, this returns an empty list.");
3321
3322   ("tail", (RStringList "lines", [Pathname "path"]), 123, [ProtocolLimitWarning],
3323    [InitISOFS, Always, TestOutputList (
3324       [["tail"; "/10klines"]], ["9990abcdefghijklmnopqrstuvwxyz";"9991abcdefghijklmnopqrstuvwxyz";"9992abcdefghijklmnopqrstuvwxyz";"9993abcdefghijklmnopqrstuvwxyz";"9994abcdefghijklmnopqrstuvwxyz";"9995abcdefghijklmnopqrstuvwxyz";"9996abcdefghijklmnopqrstuvwxyz";"9997abcdefghijklmnopqrstuvwxyz";"9998abcdefghijklmnopqrstuvwxyz";"9999abcdefghijklmnopqrstuvwxyz"])],
3325    "return last 10 lines of a file",
3326    "\
3327 This command returns up to the last 10 lines of a file as
3328 a list of strings.");
3329
3330   ("tail_n", (RStringList "lines", [Int "nrlines"; Pathname "path"]), 124, [ProtocolLimitWarning],
3331    [InitISOFS, Always, TestOutputList (
3332       [["tail_n"; "3"; "/10klines"]], ["9997abcdefghijklmnopqrstuvwxyz";"9998abcdefghijklmnopqrstuvwxyz";"9999abcdefghijklmnopqrstuvwxyz"]);
3333     InitISOFS, Always, TestOutputList (
3334       [["tail_n"; "-9998"; "/10klines"]], ["9997abcdefghijklmnopqrstuvwxyz";"9998abcdefghijklmnopqrstuvwxyz";"9999abcdefghijklmnopqrstuvwxyz"]);
3335     InitISOFS, Always, TestOutputList (
3336       [["tail_n"; "0"; "/10klines"]], [])],
3337    "return last N lines of a file",
3338    "\
3339 If the parameter C<nrlines> is a positive number, this returns the last
3340 C<nrlines> lines of the file C<path>.
3341
3342 If the parameter C<nrlines> is a negative number, this returns lines
3343 from the file C<path>, starting with the C<-nrlines>th line.
3344
3345 If the parameter C<nrlines> is zero, this returns an empty list.");
3346
3347   ("df", (RString "output", []), 125, [],
3348    [], (* XXX Tricky to test because it depends on the exact format
3349         * of the 'df' command and other imponderables.
3350         *)
3351    "report file system disk space usage",
3352    "\
3353 This command runs the C<df> command to report disk space used.
3354
3355 This command is mostly useful for interactive sessions.  It
3356 is I<not> intended that you try to parse the output string.
3357 Use C<statvfs> from programs.");
3358
3359   ("df_h", (RString "output", []), 126, [],
3360    [], (* XXX Tricky to test because it depends on the exact format
3361         * of the 'df' command and other imponderables.
3362         *)
3363    "report file system disk space usage (human readable)",
3364    "\
3365 This command runs the C<df -h> command to report disk space used
3366 in human-readable format.
3367
3368 This command is mostly useful for interactive sessions.  It
3369 is I<not> intended that you try to parse the output string.
3370 Use C<statvfs> from programs.");
3371
3372   ("du", (RInt64 "sizekb", [Pathname "path"]), 127, [],
3373    [InitISOFS, Always, TestOutputInt (
3374       [["du"; "/directory"]], 2 (* ISO fs blocksize is 2K *))],
3375    "estimate file space usage",
3376    "\
3377 This command runs the C<du -s> command to estimate file space
3378 usage for C<path>.
3379
3380 C<path> can be a file or a directory.  If C<path> is a directory
3381 then the estimate includes the contents of the directory and all
3382 subdirectories (recursively).
3383
3384 The result is the estimated size in I<kilobytes>
3385 (ie. units of 1024 bytes).");
3386
3387   ("initrd_list", (RStringList "filenames", [Pathname "path"]), 128, [],
3388    [InitISOFS, Always, TestOutputList (
3389       [["initrd_list"; "/initrd"]], ["empty";"known-1";"known-2";"known-3";"known-4"; "known-5"])],
3390    "list files in an initrd",
3391    "\
3392 This command lists out files contained in an initrd.
3393
3394 The files are listed without any initial C</> character.  The
3395 files are listed in the order they appear (not necessarily
3396 alphabetical).  Directory names are listed as separate items.
3397
3398 Old Linux kernels (2.4 and earlier) used a compressed ext2
3399 filesystem as initrd.  We I<only> support the newer initramfs
3400 format (compressed cpio files).");
3401
3402   ("mount_loop", (RErr, [Pathname "file"; Pathname "mountpoint"]), 129, [],
3403    [],
3404    "mount a file using the loop device",
3405    "\
3406 This command lets you mount C<file> (a filesystem image
3407 in a file) on a mount point.  It is entirely equivalent to
3408 the command C<mount -o loop file mountpoint>.");
3409
3410   ("mkswap", (RErr, [Device "device"]), 130, [],
3411    [InitEmpty, Always, TestRun (
3412       [["part_disk"; "/dev/sda"; "mbr"];
3413        ["mkswap"; "/dev/sda1"]])],
3414    "create a swap partition",
3415    "\
3416 Create a swap partition on C<device>.");
3417
3418   ("mkswap_L", (RErr, [String "label"; Device "device"]), 131, [],
3419    [InitEmpty, Always, TestRun (
3420       [["part_disk"; "/dev/sda"; "mbr"];
3421        ["mkswap_L"; "hello"; "/dev/sda1"]])],
3422    "create a swap partition with a label",
3423    "\
3424 Create a swap partition on C<device> with label C<label>.
3425
3426 Note that you cannot attach a swap label to a block device
3427 (eg. C</dev/sda>), just to a partition.  This appears to be
3428 a limitation of the kernel or swap tools.");
3429
3430   ("mkswap_U", (RErr, [String "uuid"; Device "device"]), 132, [Optional "linuxfsuuid"],
3431    (let uuid = uuidgen () in
3432     [InitEmpty, Always, TestRun (
3433        [["part_disk"; "/dev/sda"; "mbr"];
3434         ["mkswap_U"; uuid; "/dev/sda1"]])]),
3435    "create a swap partition with an explicit UUID",
3436    "\
3437 Create a swap partition on C<device> with UUID C<uuid>.");
3438
3439   ("mknod", (RErr, [Int "mode"; Int "devmajor"; Int "devminor"; Pathname "path"]), 133, [Optional "mknod"],
3440    [InitBasicFS, Always, TestOutputStruct (
3441       [["mknod"; "0o10777"; "0"; "0"; "/node"];
3442        (* NB: default umask 022 means 0777 -> 0755 in these tests *)
3443        ["stat"; "/node"]], [CompareWithInt ("mode", 0o10755)]);
3444     InitBasicFS, Always, TestOutputStruct (
3445       [["mknod"; "0o60777"; "66"; "99"; "/node"];
3446        ["stat"; "/node"]], [CompareWithInt ("mode", 0o60755)])],
3447    "make block, character or FIFO devices",
3448    "\
3449 This call creates block or character special devices, or
3450 named pipes (FIFOs).
3451
3452 The C<mode> parameter should be the mode, using the standard
3453 constants.  C<devmajor> and C<devminor> are the
3454 device major and minor numbers, only used when creating block
3455 and character special devices.
3456
3457 Note that, just like L<mknod(2)>, the mode must be bitwise
3458 OR'd with S_IFBLK, S_IFCHR, S_IFIFO or S_IFSOCK (otherwise this call
3459 just creates a regular file).  These constants are
3460 available in the standard Linux header files, or you can use
3461 C<guestfs_mknod_b>, C<guestfs_mknod_c> or C<guestfs_mkfifo>
3462 which are wrappers around this command which bitwise OR
3463 in the appropriate constant for you.
3464
3465 The mode actually set is affected by the umask.");
3466
3467   ("mkfifo", (RErr, [Int "mode"; Pathname "path"]), 134, [Optional "mknod"],
3468    [InitBasicFS, Always, TestOutputStruct (
3469       [["mkfifo"; "0o777"; "/node"];
3470        ["stat"; "/node"]], [CompareWithInt ("mode", 0o10755)])],
3471    "make FIFO (named pipe)",
3472    "\
3473 This call creates a FIFO (named pipe) called C<path> with
3474 mode C<mode>.  It is just a convenient wrapper around
3475 C<guestfs_mknod>.
3476
3477 The mode actually set is affected by the umask.");
3478
3479   ("mknod_b", (RErr, [Int "mode"; Int "devmajor"; Int "devminor"; Pathname "path"]), 135, [Optional "mknod"],
3480    [InitBasicFS, Always, TestOutputStruct (
3481       [["mknod_b"; "0o777"; "99"; "66"; "/node"];
3482        ["stat"; "/node"]], [CompareWithInt ("mode", 0o60755)])],
3483    "make block device node",
3484    "\
3485 This call creates a block device node called C<path> with
3486 mode C<mode> and device major/minor C<devmajor> and C<devminor>.
3487 It is just a convenient wrapper around C<guestfs_mknod>.
3488
3489 The mode actually set is affected by the umask.");
3490
3491   ("mknod_c", (RErr, [Int "mode"; Int "devmajor"; Int "devminor"; Pathname "path"]), 136, [Optional "mknod"],
3492    [InitBasicFS, Always, TestOutputStruct (
3493       [["mknod_c"; "0o777"; "99"; "66"; "/node"];
3494        ["stat"; "/node"]], [CompareWithInt ("mode", 0o20755)])],
3495    "make char device node",
3496    "\
3497 This call creates a char device node called C<path> with
3498 mode C<mode> and device major/minor C<devmajor> and C<devminor>.
3499 It is just a convenient wrapper around C<guestfs_mknod>.
3500
3501 The mode actually set is affected by the umask.");
3502
3503   ("umask", (RInt "oldmask", [Int "mask"]), 137, [FishOutput FishOutputOctal],
3504    [InitEmpty, Always, TestOutputInt (
3505       [["umask"; "0o22"]], 0o22)],
3506    "set file mode creation mask (umask)",
3507    "\
3508 This function sets the mask used for creating new files and
3509 device nodes to C<mask & 0777>.
3510
3511 Typical umask values would be C<022> which creates new files
3512 with permissions like \"-rw-r--r--\" or \"-rwxr-xr-x\", and
3513 C<002> which creates new files with permissions like
3514 \"-rw-rw-r--\" or \"-rwxrwxr-x\".
3515
3516 The default umask is C<022>.  This is important because it
3517 means that directories and device nodes will be created with
3518 C<0644> or C<0755> mode even if you specify C<0777>.
3519
3520 See also C<guestfs_get_umask>,
3521 L<umask(2)>, C<guestfs_mknod>, C<guestfs_mkdir>.
3522
3523 This call returns the previous umask.");
3524
3525   ("readdir", (RStructList ("entries", "dirent"), [Pathname "dir"]), 138, [],
3526    [],
3527    "read directories entries",
3528    "\
3529 This returns the list of directory entries in directory C<dir>.
3530
3531 All entries in the directory are returned, including C<.> and
3532 C<..>.  The entries are I<not> sorted, but returned in the same
3533 order as the underlying filesystem.
3534
3535 Also this call returns basic file type information about each
3536 file.  The C<ftyp> field will contain one of the following characters:
3537
3538 =over 4
3539
3540 =item 'b'
3541
3542 Block special
3543
3544 =item 'c'
3545
3546 Char special
3547
3548 =item 'd'
3549
3550 Directory
3551
3552 =item 'f'
3553
3554 FIFO (named pipe)
3555
3556 =item 'l'
3557
3558 Symbolic link
3559
3560 =item 'r'
3561
3562 Regular file
3563
3564 =item 's'
3565
3566 Socket
3567
3568 =item 'u'
3569
3570 Unknown file type
3571
3572 =item '?'
3573
3574 The L<readdir(3)> call returned a C<d_type> field with an
3575 unexpected value
3576
3577 =back
3578
3579 This function is primarily intended for use by programs.  To
3580 get a simple list of names, use C<guestfs_ls>.  To get a printable
3581 directory for human consumption, use C<guestfs_ll>.");
3582
3583   ("sfdiskM", (RErr, [Device "device"; StringList "lines"]), 139, [DangerWillRobinson],
3584    [],
3585    "create partitions on a block device",
3586    "\
3587 This is a simplified interface to the C<guestfs_sfdisk>
3588 command, where partition sizes are specified in megabytes
3589 only (rounded to the nearest cylinder) and you don't need
3590 to specify the cyls, heads and sectors parameters which
3591 were rarely if ever used anyway.
3592
3593 See also: C<guestfs_sfdisk>, the L<sfdisk(8)> manpage
3594 and C<guestfs_part_disk>");
3595
3596   ("zfile", (RString "description", [String "meth"; Pathname "path"]), 140, [DeprecatedBy "file"],
3597    [],
3598    "determine file type inside a compressed file",
3599    "\
3600 This command runs C<file> after first decompressing C<path>
3601 using C<method>.
3602
3603 C<method> must be one of C<gzip>, C<compress> or C<bzip2>.
3604
3605 Since 1.0.63, use C<guestfs_file> instead which can now
3606 process compressed files.");
3607
3608   ("getxattrs", (RStructList ("xattrs", "xattr"), [Pathname "path"]), 141, [Optional "linuxxattrs"],
3609    [],
3610    "list extended attributes of a file or directory",
3611    "\
3612 This call lists the extended attributes of the file or directory
3613 C<path>.
3614
3615 At the system call level, this is a combination of the
3616 L<listxattr(2)> and L<getxattr(2)> calls.
3617
3618 See also: C<guestfs_lgetxattrs>, L<attr(5)>.");
3619
3620   ("lgetxattrs", (RStructList ("xattrs", "xattr"), [Pathname "path"]), 142, [Optional "linuxxattrs"],
3621    [],
3622    "list extended attributes of a file or directory",
3623    "\
3624 This is the same as C<guestfs_getxattrs>, but if C<path>
3625 is a symbolic link, then it returns the extended attributes
3626 of the link itself.");
3627
3628   ("setxattr", (RErr, [String "xattr";
3629                        String "val"; Int "vallen"; (* will be BufferIn *)
3630                        Pathname "path"]), 143, [Optional "linuxxattrs"],
3631    [],
3632    "set extended attribute of a file or directory",
3633    "\
3634 This call sets the extended attribute named C<xattr>
3635 of the file C<path> to the value C<val> (of length C<vallen>).
3636 The value is arbitrary 8 bit data.
3637
3638 See also: C<guestfs_lsetxattr>, L<attr(5)>.");
3639
3640   ("lsetxattr", (RErr, [String "xattr";
3641                         String "val"; Int "vallen"; (* will be BufferIn *)
3642                         Pathname "path"]), 144, [Optional "linuxxattrs"],
3643    [],
3644    "set extended attribute of a file or directory",
3645    "\
3646 This is the same as C<guestfs_setxattr>, but if C<path>
3647 is a symbolic link, then it sets an extended attribute
3648 of the link itself.");
3649
3650   ("removexattr", (RErr, [String "xattr"; Pathname "path"]), 145, [Optional "linuxxattrs"],
3651    [],
3652    "remove extended attribute of a file or directory",
3653    "\
3654 This call removes the extended attribute named C<xattr>
3655 of the file C<path>.
3656
3657 See also: C<guestfs_lremovexattr>, L<attr(5)>.");
3658
3659   ("lremovexattr", (RErr, [String "xattr"; Pathname "path"]), 146, [Optional "linuxxattrs"],
3660    [],
3661    "remove extended attribute of a file or directory",
3662    "\
3663 This is the same as C<guestfs_removexattr>, but if C<path>
3664 is a symbolic link, then it removes an extended attribute
3665 of the link itself.");
3666
3667   ("mountpoints", (RHashtable "mps", []), 147, [],
3668    [],
3669    "show mountpoints",
3670    "\
3671 This call is similar to C<guestfs_mounts>.  That call returns
3672 a list of devices.  This one returns a hash table (map) of
3673 device name to directory where the device is mounted.");
3674
3675   ("mkmountpoint", (RErr, [String "exemptpath"]), 148, [],
3676    (* This is a special case: while you would expect a parameter
3677     * of type "Pathname", that doesn't work, because it implies
3678     * NEED_ROOT in the generated calling code in stubs.c, and
3679     * this function cannot use NEED_ROOT.
3680     *)
3681    [],
3682    "create a mountpoint",
3683    "\
3684 C<guestfs_mkmountpoint> and C<guestfs_rmmountpoint> are
3685 specialized calls that can be used to create extra mountpoints
3686 before mounting the first filesystem.
3687
3688 These calls are I<only> necessary in some very limited circumstances,
3689 mainly the case where you want to mount a mix of unrelated and/or
3690 read-only filesystems together.
3691
3692 For example, live CDs often contain a \"Russian doll\" nest of
3693 filesystems, an ISO outer layer, with a squashfs image inside, with
3694 an ext2/3 image inside that.  You can unpack this as follows
3695 in guestfish:
3696
3697  add-ro Fedora-11-i686-Live.iso
3698  run
3699  mkmountpoint /cd
3700  mkmountpoint /squash
3701  mkmountpoint /ext3
3702  mount /dev/sda /cd
3703  mount-loop /cd/LiveOS/squashfs.img /squash
3704  mount-loop /squash/LiveOS/ext3fs.img /ext3
3705
3706 The inner filesystem is now unpacked under the /ext3 mountpoint.");
3707
3708   ("rmmountpoint", (RErr, [String "exemptpath"]), 149, [],
3709    [],
3710    "remove a mountpoint",
3711    "\
3712 This calls removes a mountpoint that was previously created
3713 with C<guestfs_mkmountpoint>.  See C<guestfs_mkmountpoint>
3714 for full details.");
3715
3716   ("read_file", (RBufferOut "content", [Pathname "path"]), 150, [ProtocolLimitWarning],
3717    [InitISOFS, Always, TestOutputBuffer (
3718       [["read_file"; "/known-4"]], "abc\ndef\nghi");
3719     (* Test various near large, large and too large files (RHBZ#589039). *)
3720     InitBasicFS, Always, TestLastFail (
3721       [["touch"; "/a"];
3722        ["truncate_size"; "/a"; "4194303"]; (* GUESTFS_MESSAGE_MAX - 1 *)
3723        ["read_file"; "/a"]]);
3724     InitBasicFS, Always, TestLastFail (
3725       [["touch"; "/a"];
3726        ["truncate_size"; "/a"; "4194304"]; (* GUESTFS_MESSAGE_MAX *)
3727        ["read_file"; "/a"]]);
3728     InitBasicFS, Always, TestLastFail (
3729       [["touch"; "/a"];
3730        ["truncate_size"; "/a"; "41943040"]; (* GUESTFS_MESSAGE_MAX * 10 *)
3731        ["read_file"; "/a"]])],
3732    "read a file",
3733    "\
3734 This calls returns the contents of the file C<path> as a
3735 buffer.
3736
3737 Unlike C<guestfs_cat>, this function can correctly
3738 handle files that contain embedded ASCII NUL characters.
3739 However unlike C<guestfs_download>, this function is limited
3740 in the total size of file that can be handled.");
3741
3742   ("grep", (RStringList "lines", [String "regex"; Pathname "path"]), 151, [ProtocolLimitWarning],
3743    [InitISOFS, Always, TestOutputList (
3744       [["grep"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"]);
3745     InitISOFS, Always, TestOutputList (
3746       [["grep"; "nomatch"; "/test-grep.txt"]], []);
3747     (* Test for RHBZ#579608, absolute symbolic links. *)
3748     InitISOFS, Always, TestOutputList (
3749       [["grep"; "nomatch"; "/abssymlink"]], [])],
3750    "return lines matching a pattern",
3751    "\
3752 This calls the external C<grep> program and returns the
3753 matching lines.");
3754
3755   ("egrep", (RStringList "lines", [String "regex"; Pathname "path"]), 152, [ProtocolLimitWarning],
3756    [InitISOFS, Always, TestOutputList (
3757       [["egrep"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"])],
3758    "return lines matching a pattern",
3759    "\
3760 This calls the external C<egrep> program and returns the
3761 matching lines.");
3762
3763   ("fgrep", (RStringList "lines", [String "pattern"; Pathname "path"]), 153, [ProtocolLimitWarning],
3764    [InitISOFS, Always, TestOutputList (
3765       [["fgrep"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"])],
3766    "return lines matching a pattern",
3767    "\
3768 This calls the external C<fgrep> program and returns the
3769 matching lines.");
3770
3771   ("grepi", (RStringList "lines", [String "regex"; Pathname "path"]), 154, [ProtocolLimitWarning],
3772    [InitISOFS, Always, TestOutputList (
3773       [["grepi"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"; "ABC"])],
3774    "return lines matching a pattern",
3775    "\
3776 This calls the external C<grep -i> program and returns the
3777 matching lines.");
3778
3779   ("egrepi", (RStringList "lines", [String "regex"; Pathname "path"]), 155, [ProtocolLimitWarning],
3780    [InitISOFS, Always, TestOutputList (
3781       [["egrepi"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"; "ABC"])],
3782    "return lines matching a pattern",
3783    "\
3784 This calls the external C<egrep -i> program and returns the
3785 matching lines.");
3786
3787   ("fgrepi", (RStringList "lines", [String "pattern"; Pathname "path"]), 156, [ProtocolLimitWarning],
3788    [InitISOFS, Always, TestOutputList (
3789       [["fgrepi"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"; "ABC"])],
3790    "return lines matching a pattern",
3791    "\
3792 This calls the external C<fgrep -i> program and returns the
3793 matching lines.");
3794
3795   ("zgrep", (RStringList "lines", [String "regex"; Pathname "path"]), 157, [ProtocolLimitWarning],
3796    [InitISOFS, Always, TestOutputList (
3797       [["zgrep"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"])],
3798    "return lines matching a pattern",
3799    "\
3800 This calls the external C<zgrep> program and returns the
3801 matching lines.");
3802
3803   ("zegrep", (RStringList "lines", [String "regex"; Pathname "path"]), 158, [ProtocolLimitWarning],
3804    [InitISOFS, Always, TestOutputList (
3805       [["zegrep"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"])],
3806    "return lines matching a pattern",
3807    "\
3808 This calls the external C<zegrep> program and returns the
3809 matching lines.");
3810
3811   ("zfgrep", (RStringList "lines", [String "pattern"; Pathname "path"]), 159, [ProtocolLimitWarning],
3812    [InitISOFS, Always, TestOutputList (
3813       [["zfgrep"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"])],
3814    "return lines matching a pattern",
3815    "\
3816 This calls the external C<zfgrep> program and returns the
3817 matching lines.");
3818
3819   ("zgrepi", (RStringList "lines", [String "regex"; Pathname "path"]), 160, [ProtocolLimitWarning],
3820    [InitISOFS, Always, TestOutputList (
3821       [["zgrepi"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"; "ABC"])],
3822    "return lines matching a pattern",
3823    "\
3824 This calls the external C<zgrep -i> program and returns the
3825 matching lines.");
3826
3827   ("zegrepi", (RStringList "lines", [String "regex"; Pathname "path"]), 161, [ProtocolLimitWarning],
3828    [InitISOFS, Always, TestOutputList (
3829       [["zegrepi"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"; "ABC"])],
3830    "return lines matching a pattern",
3831    "\
3832 This calls the external C<zegrep -i> program and returns the
3833 matching lines.");
3834
3835   ("zfgrepi", (RStringList "lines", [String "pattern"; Pathname "path"]), 162, [ProtocolLimitWarning],
3836    [InitISOFS, Always, TestOutputList (
3837       [["zfgrepi"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"; "ABC"])],
3838    "return lines matching a pattern",
3839    "\
3840 This calls the external C<zfgrep -i> program and returns the
3841 matching lines.");
3842
3843   ("realpath", (RString "rpath", [Pathname "path"]), 163, [Optional "realpath"],
3844    [InitISOFS, Always, TestOutput (
3845       [["realpath"; "/../directory"]], "/directory")],
3846    "canonicalized absolute pathname",
3847    "\
3848 Return the canonicalized absolute pathname of C<path>.  The
3849 returned path has no C<.>, C<..> or symbolic link path elements.");
3850
3851   ("ln", (RErr, [String "target"; Pathname "linkname"]), 164, [],
3852    [InitBasicFS, Always, TestOutputStruct (
3853       [["touch"; "/a"];
3854        ["ln"; "/a"; "/b"];
3855        ["stat"; "/b"]], [CompareWithInt ("nlink", 2)])],
3856    "create a hard link",
3857    "\
3858 This command creates a hard link using the C<ln> command.");
3859
3860   ("ln_f", (RErr, [String "target"; Pathname "linkname"]), 165, [],
3861    [InitBasicFS, Always, TestOutputStruct (
3862       [["touch"; "/a"];
3863        ["touch"; "/b"];
3864        ["ln_f"; "/a"; "/b"];
3865        ["stat"; "/b"]], [CompareWithInt ("nlink", 2)])],
3866    "create a hard link",
3867    "\
3868 This command creates a hard link using the C<ln -f> command.
3869 The C<-f> option removes the link (C<linkname>) if it exists already.");
3870
3871   ("ln_s", (RErr, [String "target"; Pathname "linkname"]), 166, [],
3872    [InitBasicFS, Always, TestOutputStruct (
3873       [["touch"; "/a"];
3874        ["ln_s"; "a"; "/b"];
3875        ["lstat"; "/b"]], [CompareWithInt ("mode", 0o120777)])],
3876    "create a symbolic link",
3877    "\
3878 This command creates a symbolic link using the C<ln -s> command.");
3879
3880   ("ln_sf", (RErr, [String "target"; Pathname "linkname"]), 167, [],
3881    [InitBasicFS, Always, TestOutput (
3882       [["mkdir_p"; "/a/b"];
3883        ["touch"; "/a/b/c"];
3884        ["ln_sf"; "../d"; "/a/b/c"];
3885        ["readlink"; "/a/b/c"]], "../d")],
3886    "create a symbolic link",
3887    "\
3888 This command creates a symbolic link using the C<ln -sf> command,
3889 The C<-f> option removes the link (C<linkname>) if it exists already.");
3890
3891   ("readlink", (RString "link", [Pathname "path"]), 168, [],
3892    [] (* XXX tested above *),
3893    "read the target of a symbolic link",
3894    "\
3895 This command reads the target of a symbolic link.");
3896
3897   ("fallocate", (RErr, [Pathname "path"; Int "len"]), 169, [DeprecatedBy "fallocate64"],
3898    [InitBasicFS, Always, TestOutputStruct (
3899       [["fallocate"; "/a"; "1000000"];
3900        ["stat"; "/a"]], [CompareWithInt ("size", 1_000_000)])],
3901    "preallocate a file in the guest filesystem",
3902    "\
3903 This command preallocates a file (containing zero bytes) named
3904 C<path> of size C<len> bytes.  If the file exists already, it
3905 is overwritten.
3906
3907 Do not confuse this with the guestfish-specific
3908 C<alloc> command which allocates a file in the host and
3909 attaches it as a device.");
3910
3911   ("swapon_device", (RErr, [Device "device"]), 170, [],
3912    [InitPartition, Always, TestRun (
3913       [["mkswap"; "/dev/sda1"];
3914        ["swapon_device"; "/dev/sda1"];
3915        ["swapoff_device"; "/dev/sda1"]])],
3916    "enable swap on device",
3917    "\
3918 This command enables the libguestfs appliance to use the
3919 swap device or partition named C<device>.  The increased
3920 memory is made available for all commands, for example
3921 those run using C<guestfs_command> or C<guestfs_sh>.
3922
3923 Note that you should not swap to existing guest swap
3924 partitions unless you know what you are doing.  They may
3925 contain hibernation information, or other information that
3926 the guest doesn't want you to trash.  You also risk leaking
3927 information about the host to the guest this way.  Instead,
3928 attach a new host device to the guest and swap on that.");
3929
3930   ("swapoff_device", (RErr, [Device "device"]), 171, [],
3931    [], (* XXX tested by swapon_device *)
3932    "disable swap on device",
3933    "\
3934 This command disables the libguestfs appliance swap
3935 device or partition named C<device>.
3936 See C<guestfs_swapon_device>.");
3937
3938   ("swapon_file", (RErr, [Pathname "file"]), 172, [],
3939    [InitBasicFS, Always, TestRun (
3940       [["fallocate"; "/swap"; "8388608"];
3941        ["mkswap_file"; "/swap"];
3942        ["swapon_file"; "/swap"];
3943        ["swapoff_file"; "/swap"]])],
3944    "enable swap on file",
3945    "\
3946 This command enables swap to a file.
3947 See C<guestfs_swapon_device> for other notes.");
3948
3949   ("swapoff_file", (RErr, [Pathname "file"]), 173, [],
3950    [], (* XXX tested by swapon_file *)
3951    "disable swap on file",
3952    "\
3953 This command disables the libguestfs appliance swap on file.");
3954
3955   ("swapon_label", (RErr, [String "label"]), 174, [],
3956    [InitEmpty, Always, TestRun (
3957       [["part_disk"; "/dev/sdb"; "mbr"];
3958        ["mkswap_L"; "swapit"; "/dev/sdb1"];
3959        ["swapon_label"; "swapit"];
3960        ["swapoff_label"; "swapit"];
3961        ["zero"; "/dev/sdb"];
3962        ["blockdev_rereadpt"; "/dev/sdb"]])],
3963    "enable swap on labeled swap partition",
3964    "\
3965 This command enables swap to a labeled swap partition.
3966 See C<guestfs_swapon_device> for other notes.");
3967
3968   ("swapoff_label", (RErr, [String "label"]), 175, [],
3969    [], (* XXX tested by swapon_label *)
3970    "disable swap on labeled swap partition",
3971    "\
3972 This command disables the libguestfs appliance swap on
3973 labeled swap partition.");
3974
3975   ("swapon_uuid", (RErr, [String "uuid"]), 176, [Optional "linuxfsuuid"],
3976    (let uuid = uuidgen () in
3977     [InitEmpty, Always, TestRun (
3978        [["mkswap_U"; uuid; "/dev/sdb"];
3979         ["swapon_uuid"; uuid];
3980         ["swapoff_uuid"; uuid]])]),
3981    "enable swap on swap partition by UUID",
3982    "\
3983 This command enables swap to a swap partition with the given UUID.
3984 See C<guestfs_swapon_device> for other notes.");
3985
3986   ("swapoff_uuid", (RErr, [String "uuid"]), 177, [Optional "linuxfsuuid"],
3987    [], (* XXX tested by swapon_uuid *)
3988    "disable swap on swap partition by UUID",
3989    "\
3990 This command disables the libguestfs appliance swap partition
3991 with the given UUID.");
3992
3993   ("mkswap_file", (RErr, [Pathname "path"]), 178, [],
3994    [InitBasicFS, Always, TestRun (
3995       [["fallocate"; "/swap"; "8388608"];
3996        ["mkswap_file"; "/swap"]])],
3997    "create a swap file",
3998    "\
3999 Create a swap file.
4000
4001 This command just writes a swap file signature to an existing
4002 file.  To create the file itself, use something like C<guestfs_fallocate>.");
4003
4004   ("inotify_init", (RErr, [Int "maxevents"]), 179, [Optional "inotify"],
4005    [InitISOFS, Always, TestRun (
4006       [["inotify_init"; "0"]])],
4007    "create an inotify handle",
4008    "\
4009 This command creates a new inotify handle.
4010 The inotify subsystem can be used to notify events which happen to
4011 objects in the guest filesystem.
4012
4013 C<maxevents> is the maximum number of events which will be
4014 queued up between calls to C<guestfs_inotify_read> or
4015 C<guestfs_inotify_files>.
4016 If this is passed as C<0>, then the kernel (or previously set)
4017 default is used.  For Linux 2.6.29 the default was 16384 events.
4018 Beyond this limit, the kernel throws away events, but records
4019 the fact that it threw them away by setting a flag
4020 C<IN_Q_OVERFLOW> in the returned structure list (see
4021 C<guestfs_inotify_read>).
4022
4023 Before any events are generated, you have to add some
4024 watches to the internal watch list.  See:
4025 C<guestfs_inotify_add_watch>,
4026 C<guestfs_inotify_rm_watch> and
4027 C<guestfs_inotify_watch_all>.
4028
4029 Queued up events should be read periodically by calling
4030 C<guestfs_inotify_read>
4031 (or C<guestfs_inotify_files> which is just a helpful
4032 wrapper around C<guestfs_inotify_read>).  If you don't
4033 read the events out often enough then you risk the internal
4034 queue overflowing.
4035
4036 The handle should be closed after use by calling
4037 C<guestfs_inotify_close>.  This also removes any
4038 watches automatically.
4039
4040 See also L<inotify(7)> for an overview of the inotify interface
4041 as exposed by the Linux kernel, which is roughly what we expose
4042 via libguestfs.  Note that there is one global inotify handle
4043 per libguestfs instance.");
4044
4045   ("inotify_add_watch", (RInt64 "wd", [Pathname "path"; Int "mask"]), 180, [Optional "inotify"],
4046    [InitBasicFS, Always, TestOutputList (
4047       [["inotify_init"; "0"];
4048        ["inotify_add_watch"; "/"; "1073741823"];
4049        ["touch"; "/a"];
4050        ["touch"; "/b"];
4051        ["inotify_files"]], ["a"; "b"])],
4052    "add an inotify watch",
4053    "\
4054 Watch C<path> for the events listed in C<mask>.
4055
4056 Note that if C<path> is a directory then events within that
4057 directory are watched, but this does I<not> happen recursively
4058 (in subdirectories).
4059
4060 Note for non-C or non-Linux callers: the inotify events are
4061 defined by the Linux kernel ABI and are listed in
4062 C</usr/include/sys/inotify.h>.");
4063
4064   ("inotify_rm_watch", (RErr, [Int(*XXX64*) "wd"]), 181, [Optional "inotify"],
4065    [],
4066    "remove an inotify watch",
4067    "\
4068 Remove a previously defined inotify watch.
4069 See C<guestfs_inotify_add_watch>.");
4070
4071   ("inotify_read", (RStructList ("events", "inotify_event"), []), 182, [Optional "inotify"],
4072    [],
4073    "return list of inotify events",
4074    "\
4075 Return the complete queue of events that have happened
4076 since the previous read call.
4077
4078 If no events have happened, this returns an empty list.
4079
4080 I<Note>: In order to make sure that all events have been
4081 read, you must call this function repeatedly until it
4082 returns an empty list.  The reason is that the call will
4083 read events up to the maximum appliance-to-host message
4084 size and leave remaining events in the queue.");
4085
4086   ("inotify_files", (RStringList "paths", []), 183, [Optional "inotify"],
4087    [],
4088    "return list of watched files that had events",
4089    "\
4090 This function is a helpful wrapper around C<guestfs_inotify_read>
4091 which just returns a list of pathnames of objects that were
4092 touched.  The returned pathnames are sorted and deduplicated.");
4093
4094   ("inotify_close", (RErr, []), 184, [Optional "inotify"],
4095    [],
4096    "close the inotify handle",
4097    "\
4098 This closes the inotify handle which was previously
4099 opened by inotify_init.  It removes all watches, throws
4100 away any pending events, and deallocates all resources.");
4101
4102   ("setcon", (RErr, [String "context"]), 185, [Optional "selinux"],
4103    [],
4104    "set SELinux security context",
4105    "\
4106 This sets the SELinux security context of the daemon
4107 to the string C<context>.
4108
4109 See the documentation about SELINUX in L<guestfs(3)>.");
4110
4111   ("getcon", (RString "context", []), 186, [Optional "selinux"],
4112    [],
4113    "get SELinux security context",
4114    "\
4115 This gets the SELinux security context of the daemon.
4116
4117 See the documentation about SELINUX in L<guestfs(3)>,
4118 and C<guestfs_setcon>");
4119
4120   ("mkfs_b", (RErr, [String "fstype"; Int "blocksize"; Device "device"]), 187, [],
4121    [InitEmpty, Always, TestOutput (
4122       [["part_disk"; "/dev/sda"; "mbr"];
4123        ["mkfs_b"; "ext2"; "4096"; "/dev/sda1"];
4124        ["mount_options"; ""; "/dev/sda1"; "/"];
4125        ["write"; "/new"; "new file contents"];
4126        ["cat"; "/new"]], "new file contents");
4127     InitEmpty, Always, TestRun (
4128       [["part_disk"; "/dev/sda"; "mbr"];
4129        ["mkfs_b"; "vfat"; "32768"; "/dev/sda1"]]);
4130     InitEmpty, Always, TestLastFail (
4131       [["part_disk"; "/dev/sda"; "mbr"];
4132        ["mkfs_b"; "vfat"; "32769"; "/dev/sda1"]]);
4133     InitEmpty, Always, TestLastFail (
4134       [["part_disk"; "/dev/sda"; "mbr"];
4135        ["mkfs_b"; "vfat"; "33280"; "/dev/sda1"]]);
4136     InitEmpty, IfAvailable "ntfsprogs", TestRun (
4137       [["part_disk"; "/dev/sda"; "mbr"];
4138        ["mkfs_b"; "ntfs"; "32768"; "/dev/sda1"]])],
4139    "make a filesystem with block size",
4140    "\
4141 This call is similar to C<guestfs_mkfs>, but it allows you to
4142 control the block size of the resulting filesystem.  Supported
4143 block sizes depend on the filesystem type, but typically they
4144 are C<1024>, C<2048> or C<4096> only.
4145
4146 For VFAT and NTFS the C<blocksize> parameter is treated as
4147 the requested cluster size.");
4148
4149   ("mke2journal", (RErr, [Int "blocksize"; Device "device"]), 188, [],
4150    [InitEmpty, Always, TestOutput (
4151       [["sfdiskM"; "/dev/sda"; ",100 ,"];
4152        ["mke2journal"; "4096"; "/dev/sda1"];
4153        ["mke2fs_J"; "ext2"; "4096"; "/dev/sda2"; "/dev/sda1"];
4154        ["mount_options"; ""; "/dev/sda2"; "/"];
4155        ["write"; "/new"; "new file contents"];
4156        ["cat"; "/new"]], "new file contents")],
4157    "make ext2/3/4 external journal",
4158    "\
4159 This creates an ext2 external journal on C<device>.  It is equivalent
4160 to the command:
4161
4162  mke2fs -O journal_dev -b blocksize device");
4163
4164   ("mke2journal_L", (RErr, [Int "blocksize"; String "label"; Device "device"]), 189, [],
4165    [InitEmpty, Always, TestOutput (
4166       [["sfdiskM"; "/dev/sda"; ",100 ,"];
4167        ["mke2journal_L"; "4096"; "JOURNAL"; "/dev/sda1"];
4168        ["mke2fs_JL"; "ext2"; "4096"; "/dev/sda2"; "JOURNAL"];
4169        ["mount_options"; ""; "/dev/sda2"; "/"];
4170        ["write"; "/new"; "new file contents"];
4171        ["cat"; "/new"]], "new file contents")],
4172    "make ext2/3/4 external journal with label",
4173    "\
4174 This creates an ext2 external journal on C<device> with label C<label>.");
4175
4176   ("mke2journal_U", (RErr, [Int "blocksize"; String "uuid"; Device "device"]), 190, [Optional "linuxfsuuid"],
4177    (let uuid = uuidgen () in
4178     [InitEmpty, Always, TestOutput (
4179        [["sfdiskM"; "/dev/sda"; ",100 ,"];
4180         ["mke2journal_U"; "4096"; uuid; "/dev/sda1"];
4181         ["mke2fs_JU"; "ext2"; "4096"; "/dev/sda2"; uuid];
4182         ["mount_options"; ""; "/dev/sda2"; "/"];
4183         ["write"; "/new"; "new file contents"];
4184         ["cat"; "/new"]], "new file contents")]),
4185    "make ext2/3/4 external journal with UUID",
4186    "\
4187 This creates an ext2 external journal on C<device> with UUID C<uuid>.");
4188
4189   ("mke2fs_J", (RErr, [String "fstype"; Int "blocksize"; Device "device"; Device "journal"]), 191, [],
4190    [],
4191    "make ext2/3/4 filesystem with external journal",
4192    "\
4193 This creates an ext2/3/4 filesystem on C<device> with
4194 an external journal on C<journal>.  It is equivalent
4195 to the command:
4196
4197  mke2fs -t fstype -b blocksize -J device=<journal> <device>
4198
4199 See also C<guestfs_mke2journal>.");
4200
4201   ("mke2fs_JL", (RErr, [String "fstype"; Int "blocksize"; Device "device"; String "label"]), 192, [],
4202    [],
4203    "make ext2/3/4 filesystem with external journal",
4204    "\
4205 This creates an ext2/3/4 filesystem on C<device> with
4206 an external journal on the journal labeled C<label>.
4207
4208 See also C<guestfs_mke2journal_L>.");
4209
4210   ("mke2fs_JU", (RErr, [String "fstype"; Int "blocksize"; Device "device"; String "uuid"]), 193, [Optional "linuxfsuuid"],
4211    [],
4212    "make ext2/3/4 filesystem with external journal",
4213    "\
4214 This creates an ext2/3/4 filesystem on C<device> with
4215 an external journal on the journal with UUID C<uuid>.
4216
4217 See also C<guestfs_mke2journal_U>.");
4218
4219   ("modprobe", (RErr, [String "modulename"]), 194, [Optional "linuxmodules"],
4220    [InitNone, Always, TestRun [["modprobe"; "fat"]]],
4221    "load a kernel module",
4222    "\
4223 This loads a kernel module in the appliance.
4224
4225 The kernel module must have been whitelisted when libguestfs
4226 was built (see C<appliance/kmod.whitelist.in> in the source).");
4227
4228   ("echo_daemon", (RString "output", [StringList "words"]), 195, [],
4229    [InitNone, Always, TestOutput (
4230       [["echo_daemon"; "This is a test"]], "This is a test"
4231     )],
4232    "echo arguments back to the client",
4233    "\
4234 This command concatenates the list of C<words> passed with single spaces
4235 between them and returns the resulting string.
4236
4237 You can use this command to test the connection through to the daemon.
4238
4239 See also C<guestfs_ping_daemon>.");
4240
4241   ("find0", (RErr, [Pathname "directory"; FileOut "files"]), 196, [],
4242    [], (* There is a regression test for this. *)
4243    "find all files and directories, returning NUL-separated list",
4244    "\
4245 This command lists out all files and directories, recursively,
4246 starting at C<directory>, placing the resulting list in the
4247 external file called C<files>.
4248
4249 This command works the same way as C<guestfs_find> with the
4250 following exceptions:
4251
4252 =over 4
4253
4254 =item *
4255
4256 The resulting list is written to an external file.
4257
4258 =item *
4259
4260 Items (filenames) in the result are separated
4261 by C<\\0> characters.  See L<find(1)> option I<-print0>.
4262
4263 =item *
4264
4265 This command is not limited in the number of names that it
4266 can return.
4267
4268 =item *
4269
4270 The result list is not sorted.
4271
4272 =back");
4273
4274   ("case_sensitive_path", (RString "rpath", [Pathname "path"]), 197, [],
4275    [InitISOFS, Always, TestOutput (
4276       [["case_sensitive_path"; "/DIRECTORY"]], "/directory");
4277     InitISOFS, Always, TestOutput (
4278       [["case_sensitive_path"; "/DIRECTORY/"]], "/directory");
4279     InitISOFS, Always, TestOutput (
4280       [["case_sensitive_path"; "/Known-1"]], "/known-1");
4281     InitISOFS, Always, TestLastFail (
4282       [["case_sensitive_path"; "/Known-1/"]]);
4283     InitBasicFS, Always, TestOutput (
4284       [["mkdir"; "/a"];
4285        ["mkdir"; "/a/bbb"];
4286        ["touch"; "/a/bbb/c"];
4287        ["case_sensitive_path"; "/A/bbB/C"]], "/a/bbb/c");
4288     InitBasicFS, Always, TestOutput (
4289       [["mkdir"; "/a"];
4290        ["mkdir"; "/a/bbb"];
4291        ["touch"; "/a/bbb/c"];
4292        ["case_sensitive_path"; "/A////bbB/C"]], "/a/bbb/c");
4293     InitBasicFS, Always, TestLastFail (
4294       [["mkdir"; "/a"];
4295        ["mkdir"; "/a/bbb"];
4296        ["touch"; "/a/bbb/c"];
4297        ["case_sensitive_path"; "/A/bbb/../bbb/C"]])],
4298    "return true path on case-insensitive filesystem",
4299    "\
4300 This can be used to resolve case insensitive paths on
4301 a filesystem which is case sensitive.  The use case is
4302 to resolve paths which you have read from Windows configuration
4303 files or the Windows Registry, to the true path.
4304
4305 The command handles a peculiarity of the Linux ntfs-3g
4306 filesystem driver (and probably others), which is that although
4307 the underlying filesystem is case-insensitive, the driver
4308 exports the filesystem to Linux as case-sensitive.
4309
4310 One consequence of this is that special directories such
4311 as C<c:\\windows> may appear as C</WINDOWS> or C</windows>
4312 (or other things) depending on the precise details of how
4313 they were created.  In Windows itself this would not be
4314 a problem.
4315
4316 Bug or feature?  You decide:
4317 L<http://www.tuxera.com/community/ntfs-3g-faq/#posixfilenames1>
4318
4319 This function resolves the true case of each element in the
4320 path and returns the case-sensitive path.
4321
4322 Thus C<guestfs_case_sensitive_path> (\"/Windows/System32\")
4323 might return C<\"/WINDOWS/system32\"> (the exact return value
4324 would depend on details of how the directories were originally
4325 created under Windows).
4326
4327 I<Note>:
4328 This function does not handle drive names, backslashes etc.
4329
4330 See also C<guestfs_realpath>.");
4331
4332   ("vfs_type", (RString "fstype", [Device "device"]), 198, [],
4333    [InitBasicFS, Always, TestOutput (
4334       [["vfs_type"; "/dev/sda1"]], "ext2")],
4335    "get the Linux VFS type corresponding to a mounted device",
4336    "\
4337 This command gets the filesystem type corresponding to
4338 the filesystem on C<device>.
4339
4340 For most filesystems, the result is the name of the Linux
4341 VFS module which would be used to mount this filesystem
4342 if you mounted it without specifying the filesystem type.
4343 For example a string such as C<ext3> or C<ntfs>.");
4344
4345   ("truncate", (RErr, [Pathname "path"]), 199, [],
4346    [InitBasicFS, Always, TestOutputStruct (
4347       [["write"; "/test"; "some stuff so size is not zero"];
4348        ["truncate"; "/test"];
4349        ["stat"; "/test"]], [CompareWithInt ("size", 0)])],
4350    "truncate a file to zero size",
4351    "\
4352 This command truncates C<path> to a zero-length file.  The
4353 file must exist already.");
4354
4355   ("truncate_size", (RErr, [Pathname "path"; Int64 "size"]), 200, [],
4356    [InitBasicFS, Always, TestOutputStruct (
4357       [["touch"; "/test"];
4358        ["truncate_size"; "/test"; "1000"];
4359        ["stat"; "/test"]], [CompareWithInt ("size", 1000)])],
4360    "truncate a file to a particular size",
4361    "\
4362 This command truncates C<path> to size C<size> bytes.  The file
4363 must exist already.
4364
4365 If the current file size is less than C<size> then
4366 the file is extended to the required size with zero bytes.
4367 This creates a sparse file (ie. disk blocks are not allocated
4368 for the file until you write to it).  To create a non-sparse
4369 file of zeroes, use C<guestfs_fallocate64> instead.");
4370
4371   ("utimens", (RErr, [Pathname "path"; Int64 "atsecs"; Int64 "atnsecs"; Int64 "mtsecs"; Int64 "mtnsecs"]), 201, [],
4372    [InitBasicFS, Always, TestOutputStruct (
4373       [["touch"; "/test"];
4374        ["utimens"; "/test"; "12345"; "67890"; "9876"; "5432"];
4375        ["stat"; "/test"]], [CompareWithInt ("mtime", 9876)])],
4376    "set timestamp of a file with nanosecond precision",
4377    "\
4378 This command sets the timestamps of a file with nanosecond
4379 precision.
4380
4381 C<atsecs, atnsecs> are the last access time (atime) in secs and
4382 nanoseconds from the epoch.
4383
4384 C<mtsecs, mtnsecs> are the last modification time (mtime) in
4385 secs and nanoseconds from the epoch.
4386
4387 If the C<*nsecs> field contains the special value C<-1> then
4388 the corresponding timestamp is set to the current time.  (The
4389 C<*secs> field is ignored in this case).
4390
4391 If the C<*nsecs> field contains the special value C<-2> then
4392 the corresponding timestamp is left unchanged.  (The
4393 C<*secs> field is ignored in this case).");
4394
4395   ("mkdir_mode", (RErr, [Pathname "path"; Int "mode"]), 202, [],
4396    [InitBasicFS, Always, TestOutputStruct (
4397       [["mkdir_mode"; "/test"; "0o111"];
4398        ["stat"; "/test"]], [CompareWithInt ("mode", 0o40111)])],
4399    "create a directory with a particular mode",
4400    "\
4401 This command creates a directory, setting the initial permissions
4402 of the directory to C<mode>.
4403
4404 For common Linux filesystems, the actual mode which is set will
4405 be C<mode & ~umask & 01777>.  Non-native-Linux filesystems may
4406 interpret the mode in other ways.
4407
4408 See also C<guestfs_mkdir>, C<guestfs_umask>");
4409
4410   ("lchown", (RErr, [Int "owner"; Int "group"; Pathname "path"]), 203, [],
4411    [], (* XXX *)
4412    "change file owner and group",
4413    "\
4414 Change the file owner to C<owner> and group to C<group>.
4415 This is like C<guestfs_chown> but if C<path> is a symlink then
4416 the link itself is changed, not the target.
4417
4418 Only numeric uid and gid are supported.  If you want to use
4419 names, you will need to locate and parse the password file
4420 yourself (Augeas support makes this relatively easy).");
4421
4422   ("lstatlist", (RStructList ("statbufs", "stat"), [Pathname "path"; StringList "names"]), 204, [],
4423    [], (* XXX *)
4424    "lstat on multiple files",
4425    "\
4426 This call allows you to perform the C<guestfs_lstat> operation
4427 on multiple files, where all files are in the directory C<path>.
4428 C<names> is the list of files from this directory.
4429
4430 On return you get a list of stat structs, with a one-to-one
4431 correspondence to the C<names> list.  If any name did not exist
4432 or could not be lstat'd, then the C<ino> field of that structure
4433 is set to C<-1>.
4434
4435 This call is intended for programs that want to efficiently
4436 list a directory contents without making many round-trips.
4437 See also C<guestfs_lxattrlist> for a similarly efficient call
4438 for getting extended attributes.  Very long directory listings
4439 might cause the protocol message size to be exceeded, causing
4440 this call to fail.  The caller must split up such requests
4441 into smaller groups of names.");
4442
4443   ("lxattrlist", (RStructList ("xattrs", "xattr"), [Pathname "path"; StringList "names"]), 205, [Optional "linuxxattrs"],
4444    [], (* XXX *)
4445    "lgetxattr on multiple files",
4446    "\
4447 This call allows you to get the extended attributes
4448 of multiple files, where all files are in the directory C<path>.
4449 C<names> is the list of files from this directory.
4450
4451 On return you get a flat list of xattr structs which must be
4452 interpreted sequentially.  The first xattr struct always has a zero-length
4453 C<attrname>.  C<attrval> in this struct is zero-length
4454 to indicate there was an error doing C<lgetxattr> for this
4455 file, I<or> is a C string which is a decimal number
4456 (the number of following attributes for this file, which could
4457 be C<\"0\">).  Then after the first xattr struct are the
4458 zero or more attributes for the first named file.
4459 This repeats for the second and subsequent files.
4460
4461 This call is intended for programs that want to efficiently
4462 list a directory contents without making many round-trips.
4463 See also C<guestfs_lstatlist> for a similarly efficient call
4464 for getting standard stats.  Very long directory listings
4465 might cause the protocol message size to be exceeded, causing
4466 this call to fail.  The caller must split up such requests
4467 into smaller groups of names.");
4468
4469   ("readlinklist", (RStringList "links", [Pathname "path"; StringList "names"]), 206, [],
4470    [], (* XXX *)
4471    "readlink on multiple files",
4472    "\
4473 This call allows you to do a C<readlink> operation
4474 on multiple files, where all files are in the directory C<path>.
4475 C<names> is the list of files from this directory.
4476
4477 On return you get a list of strings, with a one-to-one
4478 correspondence to the C<names> list.  Each string is the
4479 value of the symbolic link.
4480
4481 If the C<readlink(2)> operation fails on any name, then
4482 the corresponding result string is the empty string C<\"\">.
4483 However the whole operation is completed even if there
4484 were C<readlink(2)> errors, and so you can call this
4485 function with names where you don't know if they are
4486 symbolic links already (albeit slightly less efficient).
4487
4488 This call is intended for programs that want to efficiently
4489 list a directory contents without making many round-trips.
4490 Very long directory listings might cause the protocol
4491 message size to be exceeded, causing
4492 this call to fail.  The caller must split up such requests
4493 into smaller groups of names.");
4494
4495   ("pread", (RBufferOut "content", [Pathname "path"; Int "count"; Int64 "offset"]), 207, [ProtocolLimitWarning],
4496    [InitISOFS, Always, TestOutputBuffer (
4497       [["pread"; "/known-4"; "1"; "3"]], "\n");
4498     InitISOFS, Always, TestOutputBuffer (
4499       [["pread"; "/empty"; "0"; "100"]], "")],
4500    "read part of a file",
4501    "\
4502 This command lets you read part of a file.  It reads C<count>
4503 bytes of the file, starting at C<offset>, from file C<path>.
4504
4505 This may read fewer bytes than requested.  For further details
4506 see the L<pread(2)> system call.
4507
4508 See also C<guestfs_pwrite>.");
4509
4510   ("part_init", (RErr, [Device "device"; String "parttype"]), 208, [],
4511    [InitEmpty, Always, TestRun (
4512       [["part_init"; "/dev/sda"; "gpt"]])],
4513    "create an empty partition table",
4514    "\
4515 This creates an empty partition table on C<device> of one of the
4516 partition types listed below.  Usually C<parttype> should be
4517 either C<msdos> or C<gpt> (for large disks).
4518
4519 Initially there are no partitions.  Following this, you should
4520 call C<guestfs_part_add> for each partition required.
4521
4522 Possible values for C<parttype> are:
4523
4524 =over 4
4525
4526 =item B<efi> | B<gpt>
4527
4528 Intel EFI / GPT partition table.
4529
4530 This is recommended for >= 2 TB partitions that will be accessed
4531 from Linux and Intel-based Mac OS X.  It also has limited backwards
4532 compatibility with the C<mbr> format.
4533
4534 =item B<mbr> | B<msdos>
4535
4536 The standard PC \"Master Boot Record\" (MBR) format used
4537 by MS-DOS and Windows.  This partition type will B<only> work
4538 for device sizes up to 2 TB.  For large disks we recommend
4539 using C<gpt>.
4540
4541 =back
4542
4543 Other partition table types that may work but are not
4544 supported include:
4545
4546 =over 4
4547
4548 =item B<aix>
4549
4550 AIX disk labels.
4551
4552 =item B<amiga> | B<rdb>
4553
4554 Amiga \"Rigid Disk Block\" format.
4555
4556 =item B<bsd>
4557
4558 BSD disk labels.
4559
4560 =item B<dasd>
4561
4562 DASD, used on IBM mainframes.
4563
4564 =item B<dvh>
4565
4566 MIPS/SGI volumes.
4567
4568 =item B<mac>
4569
4570 Old Mac partition format.  Modern Macs use C<gpt>.
4571
4572 =item B<pc98>
4573
4574 NEC PC-98 format, common in Japan apparently.
4575
4576 =item B<sun>
4577
4578 Sun disk labels.
4579
4580 =back");
4581
4582   ("part_add", (RErr, [Device "device"; String "prlogex"; Int64 "startsect"; Int64 "endsect"]), 209, [],
4583    [InitEmpty, Always, TestRun (
4584       [["part_init"; "/dev/sda"; "mbr"];
4585        ["part_add"; "/dev/sda"; "primary"; "1"; "-1"]]);
4586     InitEmpty, Always, TestRun (
4587       [["part_init"; "/dev/sda"; "gpt"];
4588        ["part_add"; "/dev/sda"; "primary"; "34"; "127"];
4589        ["part_add"; "/dev/sda"; "primary"; "128"; "-34"]]);
4590     InitEmpty, Always, TestRun (
4591       [["part_init"; "/dev/sda"; "mbr"];
4592        ["part_add"; "/dev/sda"; "primary"; "32"; "127"];
4593        ["part_add"; "/dev/sda"; "primary"; "128"; "255"];
4594        ["part_add"; "/dev/sda"; "primary"; "256"; "511"];
4595        ["part_add"; "/dev/sda"; "primary"; "512"; "-1"]])],
4596    "add a partition to the device",
4597    "\
4598 This command adds a partition to C<device>.  If there is no partition
4599 table on the device, call C<guestfs_part_init> first.
4600
4601 The C<prlogex> parameter is the type of partition.  Normally you
4602 should pass C<p> or C<primary> here, but MBR partition tables also
4603 support C<l> (or C<logical>) and C<e> (or C<extended>) partition
4604 types.
4605
4606 C<startsect> and C<endsect> are the start and end of the partition
4607 in I<sectors>.  C<endsect> may be negative, which means it counts
4608 backwards from the end of the disk (C<-1> is the last sector).
4609
4610 Creating a partition which covers the whole disk is not so easy.
4611 Use C<guestfs_part_disk> to do that.");
4612
4613   ("part_disk", (RErr, [Device "device"; String "parttype"]), 210, [DangerWillRobinson],
4614    [InitEmpty, Always, TestRun (
4615       [["part_disk"; "/dev/sda"; "mbr"]]);
4616     InitEmpty, Always, TestRun (
4617       [["part_disk"; "/dev/sda"; "gpt"]])],
4618    "partition whole disk with a single primary partition",
4619    "\
4620 This command is simply a combination of C<guestfs_part_init>
4621 followed by C<guestfs_part_add> to create a single primary partition
4622 covering the whole disk.
4623
4624 C<parttype> is the partition table type, usually C<mbr> or C<gpt>,
4625 but other possible values are described in C<guestfs_part_init>.");
4626
4627   ("part_set_bootable", (RErr, [Device "device"; Int "partnum"; Bool "bootable"]), 211, [],
4628    [InitEmpty, Always, TestRun (
4629       [["part_disk"; "/dev/sda"; "mbr"];
4630        ["part_set_bootable"; "/dev/sda"; "1"; "true"]])],
4631    "make a partition bootable",
4632    "\
4633 This sets the bootable flag on partition numbered C<partnum> on
4634 device C<device>.  Note that partitions are numbered from 1.
4635
4636 The bootable flag is used by some operating systems (notably
4637 Windows) to determine which partition to boot from.  It is by
4638 no means universally recognized.");
4639
4640   ("part_set_name", (RErr, [Device "device"; Int "partnum"; String "name"]), 212, [],
4641    [InitEmpty, Always, TestRun (
4642       [["part_disk"; "/dev/sda"; "gpt"];
4643        ["part_set_name"; "/dev/sda"; "1"; "thepartname"]])],
4644    "set partition name",
4645    "\
4646 This sets the partition name on partition numbered C<partnum> on
4647 device C<device>.  Note that partitions are numbered from 1.
4648
4649 The partition name can only be set on certain types of partition
4650 table.  This works on C<gpt> but not on C<mbr> partitions.");
4651
4652   ("part_list", (RStructList ("partitions", "partition"), [Device "device"]), 213, [],
4653    [], (* XXX Add a regression test for this. *)
4654    "list partitions on a device",
4655    "\
4656 This command parses the partition table on C<device> and
4657 returns the list of partitions found.
4658
4659 The fields in the returned structure are:
4660
4661 =over 4
4662
4663 =item B<part_num>
4664
4665 Partition number, counting from 1.
4666
4667 =item B<part_start>
4668
4669 Start of the partition I<in bytes>.  To get sectors you have to
4670 divide by the device's sector size, see C<guestfs_blockdev_getss>.
4671
4672 =item B<part_end>
4673
4674 End of the partition in bytes.
4675
4676 =item B<part_size>
4677
4678 Size of the partition in bytes.
4679
4680 =back");
4681
4682   ("part_get_parttype", (RString "parttype", [Device "device"]), 214, [],
4683    [InitEmpty, Always, TestOutput (
4684       [["part_disk"; "/dev/sda"; "gpt"];
4685        ["part_get_parttype"; "/dev/sda"]], "gpt")],
4686    "get the partition table type",
4687    "\
4688 This command examines the partition table on C<device> and
4689 returns the partition table type (format) being used.
4690
4691 Common return values include: C<msdos> (a DOS/Windows style MBR
4692 partition table), C<gpt> (a GPT/EFI-style partition table).  Other
4693 values are possible, although unusual.  See C<guestfs_part_init>
4694 for a full list.");
4695
4696   ("fill", (RErr, [Int "c"; Int "len"; Pathname "path"]), 215, [Progress],
4697    [InitBasicFS, Always, TestOutputBuffer (
4698       [["fill"; "0x63"; "10"; "/test"];
4699        ["read_file"; "/test"]], "cccccccccc")],
4700    "fill a file with octets",
4701    "\
4702 This command creates a new file called C<path>.  The initial
4703 content of the file is C<len> octets of C<c>, where C<c>
4704 must be a number in the range C<[0..255]>.
4705
4706 To fill a file with zero bytes (sparsely), it is
4707 much more efficient to use C<guestfs_truncate_size>.
4708 To create a file with a pattern of repeating bytes
4709 use C<guestfs_fill_pattern>.");
4710
4711   ("available", (RErr, [StringList "groups"]), 216, [],
4712    [InitNone, Always, TestRun [["available"; ""]]],
4713    "test availability of some parts of the API",
4714    "\
4715 This command is used to check the availability of some
4716 groups of functionality in the appliance, which not all builds of
4717 the libguestfs appliance will be able to provide.
4718
4719 The libguestfs groups, and the functions that those
4720 groups correspond to, are listed in L<guestfs(3)/AVAILABILITY>.
4721 You can also fetch this list at runtime by calling
4722 C<guestfs_available_all_groups>.
4723
4724 The argument C<groups> is a list of group names, eg:
4725 C<[\"inotify\", \"augeas\"]> would check for the availability of
4726 the Linux inotify functions and Augeas (configuration file
4727 editing) functions.
4728
4729 The command returns no error if I<all> requested groups are available.
4730
4731 It fails with an error if one or more of the requested
4732 groups is unavailable in the appliance.
4733
4734 If an unknown group name is included in the
4735 list of groups then an error is always returned.
4736
4737 I<Notes:>
4738
4739 =over 4
4740
4741 =item *
4742
4743 You must call C<guestfs_launch> before calling this function.
4744
4745 The reason is because we don't know what groups are
4746 supported by the appliance/daemon until it is running and can
4747 be queried.
4748
4749 =item *
4750
4751 If a group of functions is available, this does not necessarily
4752 mean that they will work.  You still have to check for errors
4753 when calling individual API functions even if they are
4754 available.
4755
4756 =item *
4757
4758 It is usually the job of distro packagers to build
4759 complete functionality into the libguestfs appliance.
4760 Upstream libguestfs, if built from source with all
4761 requirements satisfied, will support everything.
4762
4763 =item *
4764
4765 This call was added in version C<1.0.80>.  In previous
4766 versions of libguestfs all you could do would be to speculatively
4767 execute a command to find out if the daemon implemented it.
4768 See also C<guestfs_version>.
4769
4770 =back");
4771
4772   ("dd", (RErr, [Dev_or_Path "src"; Dev_or_Path "dest"]), 217, [],
4773    [InitBasicFS, Always, TestOutputBuffer (
4774       [["write"; "/src"; "hello, world"];
4775        ["dd"; "/src"; "/dest"];
4776        ["read_file"; "/dest"]], "hello, world")],
4777    "copy from source to destination using dd",
4778    "\
4779 This command copies from one source device or file C<src>
4780 to another destination device or file C<dest>.  Normally you
4781 would use this to copy to or from a device or partition, for
4782 example to duplicate a filesystem.
4783
4784 If the destination is a device, it must be as large or larger
4785 than the source file or device, otherwise the copy will fail.
4786 This command cannot do partial copies (see C<guestfs_copy_size>).");
4787
4788   ("filesize", (RInt64 "size", [Pathname "file"]), 218, [],
4789    [InitBasicFS, Always, TestOutputInt (
4790       [["write"; "/file"; "hello, world"];
4791        ["filesize"; "/file"]], 12)],
4792    "return the size of the file in bytes",
4793    "\
4794 This command returns the size of C<file> in bytes.
4795
4796 To get other stats about a file, use C<guestfs_stat>, C<guestfs_lstat>,
4797 C<guestfs_is_dir>, C<guestfs_is_file> etc.
4798 To get the size of block devices, use C<guestfs_blockdev_getsize64>.");
4799
4800   ("lvrename", (RErr, [String "logvol"; String "newlogvol"]), 219, [],
4801    [InitBasicFSonLVM, Always, TestOutputList (
4802       [["lvrename"; "/dev/VG/LV"; "/dev/VG/LV2"];
4803        ["lvs"]], ["/dev/VG/LV2"])],
4804    "rename an LVM logical volume",
4805    "\
4806 Rename a logical volume C<logvol> with the new name C<newlogvol>.");
4807
4808   ("vgrename", (RErr, [String "volgroup"; String "newvolgroup"]), 220, [],
4809    [InitBasicFSonLVM, Always, TestOutputList (
4810       [["umount"; "/"];
4811        ["vg_activate"; "false"; "VG"];
4812        ["vgrename"; "VG"; "VG2"];
4813        ["vg_activate"; "true"; "VG2"];
4814        ["mount_options"; ""; "/dev/VG2/LV"; "/"];
4815        ["vgs"]], ["VG2"])],
4816    "rename an LVM volume group",
4817    "\
4818 Rename a volume group C<volgroup> with the new name C<newvolgroup>.");
4819
4820   ("initrd_cat", (RBufferOut "content", [Pathname "initrdpath"; String "filename"]), 221, [ProtocolLimitWarning],
4821    [InitISOFS, Always, TestOutputBuffer (
4822       [["initrd_cat"; "/initrd"; "known-4"]], "abc\ndef\nghi")],
4823    "list the contents of a single file in an initrd",
4824    "\
4825 This command unpacks the file C<filename> from the initrd file
4826 called C<initrdpath>.  The filename must be given I<without> the
4827 initial C</> character.
4828
4829 For example, in guestfish you could use the following command
4830 to examine the boot script (usually called C</init>)
4831 contained in a Linux initrd or initramfs image:
4832
4833  initrd-cat /boot/initrd-<version>.img init
4834
4835 See also C<guestfs_initrd_list>.");
4836
4837   ("pvuuid", (RString "uuid", [Device "device"]), 222, [],
4838    [],
4839    "get the UUID of a physical volume",
4840    "\
4841 This command returns the UUID of the LVM PV C<device>.");
4842
4843   ("vguuid", (RString "uuid", [String "vgname"]), 223, [],
4844    [],
4845    "get the UUID of a volume group",
4846    "\
4847 This command returns the UUID of the LVM VG named C<vgname>.");
4848
4849   ("lvuuid", (RString "uuid", [Device "device"]), 224, [],
4850    [],
4851    "get the UUID of a logical volume",
4852    "\
4853 This command returns the UUID of the LVM LV C<device>.");
4854
4855   ("vgpvuuids", (RStringList "uuids", [String "vgname"]), 225, [],
4856    [],
4857    "get the PV UUIDs containing the volume group",
4858    "\
4859 Given a VG called C<vgname>, this returns the UUIDs of all
4860 the physical volumes that this volume group resides on.
4861
4862 You can use this along with C<guestfs_pvs> and C<guestfs_pvuuid>
4863 calls to associate physical volumes and volume groups.
4864
4865 See also C<guestfs_vglvuuids>.");
4866
4867   ("vglvuuids", (RStringList "uuids", [String "vgname"]), 226, [],
4868    [],
4869    "get the LV UUIDs of all LVs in the volume group",
4870    "\
4871 Given a VG called C<vgname>, this returns the UUIDs of all
4872 the logical volumes created in this volume group.
4873
4874 You can use this along with C<guestfs_lvs> and C<guestfs_lvuuid>
4875 calls to associate logical volumes and volume groups.
4876
4877 See also C<guestfs_vgpvuuids>.");
4878
4879   ("copy_size", (RErr, [Dev_or_Path "src"; Dev_or_Path "dest"; Int64 "size"]), 227, [Progress],
4880    [InitBasicFS, Always, TestOutputBuffer (
4881       [["write"; "/src"; "hello, world"];
4882        ["copy_size"; "/src"; "/dest"; "5"];
4883        ["read_file"; "/dest"]], "hello")],
4884    "copy size bytes from source to destination using dd",
4885    "\
4886 This command copies exactly C<size> bytes from one source device
4887 or file C<src> to another destination device or file C<dest>.
4888
4889 Note this will fail if the source is too short or if the destination
4890 is not large enough.");
4891
4892   ("zero_device", (RErr, [Device "device"]), 228, [DangerWillRobinson; Progress],
4893    [InitBasicFSonLVM, Always, TestRun (
4894       [["zero_device"; "/dev/VG/LV"]])],
4895    "write zeroes to an entire device",
4896    "\
4897 This command writes zeroes over the entire C<device>.  Compare
4898 with C<guestfs_zero> which just zeroes the first few blocks of
4899 a device.");
4900
4901   ("txz_in", (RErr, [FileIn "tarball"; Pathname "directory"]), 229, [Optional "xz"],
4902    [InitBasicFS, Always, TestOutput (
4903       [["txz_in"; "../images/helloworld.tar.xz"; "/"];
4904        ["cat"; "/hello"]], "hello\n")],
4905    "unpack compressed tarball to directory",
4906    "\
4907 This command uploads and unpacks local file C<tarball> (an
4908 I<xz compressed> tar file) into C<directory>.");
4909
4910   ("txz_out", (RErr, [Pathname "directory"; FileOut "tarball"]), 230, [Optional "xz"],
4911    [],
4912    "pack directory into compressed tarball",
4913    "\
4914 This command packs the contents of C<directory> and downloads
4915 it to local file C<tarball> (as an xz compressed tar archive).");
4916
4917   ("ntfsresize", (RErr, [Device "device"]), 231, [Optional "ntfsprogs"],
4918    [],
4919    "resize an NTFS filesystem",
4920    "\
4921 This command resizes an NTFS filesystem, expanding or
4922 shrinking it to the size of the underlying device.
4923 See also L<ntfsresize(8)>.");
4924
4925   ("vgscan", (RErr, []), 232, [],
4926    [InitEmpty, Always, TestRun (
4927       [["vgscan"]])],
4928    "rescan for LVM physical volumes, volume groups and logical volumes",
4929    "\
4930 This rescans all block devices and rebuilds the list of LVM
4931 physical volumes, volume groups and logical volumes.");
4932
4933   ("part_del", (RErr, [Device "device"; Int "partnum"]), 233, [],
4934    [InitEmpty, Always, TestRun (
4935       [["part_init"; "/dev/sda"; "mbr"];
4936        ["part_add"; "/dev/sda"; "primary"; "1"; "-1"];
4937        ["part_del"; "/dev/sda"; "1"]])],
4938    "delete a partition",
4939    "\
4940 This command deletes the partition numbered C<partnum> on C<device>.
4941
4942 Note that in the case of MBR partitioning, deleting an
4943 extended partition also deletes any logical partitions
4944 it contains.");
4945
4946   ("part_get_bootable", (RBool "bootable", [Device "device"; Int "partnum"]), 234, [],
4947    [InitEmpty, Always, TestOutputTrue (
4948       [["part_init"; "/dev/sda"; "mbr"];
4949        ["part_add"; "/dev/sda"; "primary"; "1"; "-1"];
4950        ["part_set_bootable"; "/dev/sda"; "1"; "true"];
4951        ["part_get_bootable"; "/dev/sda"; "1"]])],
4952    "return true if a partition is bootable",
4953    "\
4954 This command returns true if the partition C<partnum> on
4955 C<device> has the bootable flag set.
4956
4957 See also C<guestfs_part_set_bootable>.");
4958
4959   ("part_get_mbr_id", (RInt "idbyte", [Device "device"; Int "partnum"]), 235, [FishOutput FishOutputHexadecimal],
4960    [InitEmpty, Always, TestOutputInt (
4961       [["part_init"; "/dev/sda"; "mbr"];
4962        ["part_add"; "/dev/sda"; "primary"; "1"; "-1"];
4963        ["part_set_mbr_id"; "/dev/sda"; "1"; "0x7f"];
4964        ["part_get_mbr_id"; "/dev/sda"; "1"]], 0x7f)],
4965    "get the MBR type byte (ID byte) from a partition",
4966    "\
4967 Returns the MBR type byte (also known as the ID byte) from
4968 the numbered partition C<partnum>.
4969
4970 Note that only MBR (old DOS-style) partitions have type bytes.
4971 You will get undefined results for other partition table
4972 types (see C<guestfs_part_get_parttype>).");
4973
4974   ("part_set_mbr_id", (RErr, [Device "device"; Int "partnum"; Int "idbyte"]), 236, [],
4975    [], (* tested by part_get_mbr_id *)
4976    "set the MBR type byte (ID byte) of a partition",
4977    "\
4978 Sets the MBR type byte (also known as the ID byte) of
4979 the numbered partition C<partnum> to C<idbyte>.  Note
4980 that the type bytes quoted in most documentation are
4981 in fact hexadecimal numbers, but usually documented
4982 without any leading \"0x\" which might be confusing.
4983
4984 Note that only MBR (old DOS-style) partitions have type bytes.
4985 You will get undefined results for other partition table
4986 types (see C<guestfs_part_get_parttype>).");
4987
4988   ("checksum_device", (RString "checksum", [String "csumtype"; Device "device"]), 237, [],
4989    [InitISOFS, Always, TestOutput (
4990       [["checksum_device"; "md5"; "/dev/sdd"]],
4991       (Digest.to_hex (Digest.file "images/test.iso")))],
4992    "compute MD5, SHAx or CRC checksum of the contents of a device",
4993    "\
4994 This call computes the MD5, SHAx or CRC checksum of the
4995 contents of the device named C<device>.  For the types of
4996 checksums supported see the C<guestfs_checksum> command.");
4997
4998   ("lvresize_free", (RErr, [Device "lv"; Int "percent"]), 238, [Optional "lvm2"],
4999    [InitNone, Always, TestRun (
5000       [["part_disk"; "/dev/sda"; "mbr"];
5001        ["pvcreate"; "/dev/sda1"];
5002        ["vgcreate"; "VG"; "/dev/sda1"];
5003        ["lvcreate"; "LV"; "VG"; "10"];
5004        ["lvresize_free"; "/dev/VG/LV"; "100"]])],
5005    "expand an LV to fill free space",
5006    "\
5007 This expands an existing logical volume C<lv> so that it fills
5008 C<pc>% of the remaining free space in the volume group.  Commonly
5009 you would call this with pc = 100 which expands the logical volume
5010 as much as possible, using all remaining free space in the volume
5011 group.");
5012
5013   ("aug_clear", (RErr, [String "augpath"]), 239, [Optional "augeas"],
5014    [], (* XXX Augeas code needs tests. *)
5015    "clear Augeas path",
5016    "\
5017 Set the value associated with C<path> to C<NULL>.  This
5018 is the same as the L<augtool(1)> C<clear> command.");
5019
5020   ("get_umask", (RInt "mask", []), 240, [FishOutput FishOutputOctal],
5021    [InitEmpty, Always, TestOutputInt (
5022       [["get_umask"]], 0o22)],
5023    "get the current umask",
5024    "\
5025 Return the current umask.  By default the umask is C<022>
5026 unless it has been set by calling C<guestfs_umask>.");
5027
5028   ("debug_upload", (RErr, [FileIn "filename"; String "tmpname"; Int "mode"]), 241, [],
5029    [],
5030    "upload a file to the appliance (internal use only)",
5031    "\
5032 The C<guestfs_debug_upload> command uploads a file to
5033 the libguestfs appliance.
5034
5035 There is no comprehensive help for this command.  You have
5036 to look at the file C<daemon/debug.c> in the libguestfs source
5037 to find out what it is for.");
5038
5039   ("base64_in", (RErr, [FileIn "base64file"; Pathname "filename"]), 242, [],
5040    [InitBasicFS, Always, TestOutput (
5041       [["base64_in"; "../images/hello.b64"; "/hello"];
5042        ["cat"; "/hello"]], "hello\n")],
5043    "upload base64-encoded data to file",
5044    "\
5045 This command uploads base64-encoded data from C<base64file>
5046 to C<filename>.");
5047
5048   ("base64_out", (RErr, [Pathname "filename"; FileOut "base64file"]), 243, [],
5049    [],
5050    "download file and encode as base64",
5051    "\
5052 This command downloads the contents of C<filename>, writing
5053 it out to local file C<base64file> encoded as base64.");
5054
5055   ("checksums_out", (RErr, [String "csumtype"; Pathname "directory"; FileOut "sumsfile"]), 244, [],
5056    [],
5057    "compute MD5, SHAx or CRC checksum of files in a directory",
5058    "\
5059 This command computes the checksums of all regular files in
5060 C<directory> and then emits a list of those checksums to
5061 the local output file C<sumsfile>.
5062
5063 This can be used for verifying the integrity of a virtual
5064 machine.  However to be properly secure you should pay
5065 attention to the output of the checksum command (it uses
5066 the ones from GNU coreutils).  In particular when the
5067 filename is not printable, coreutils uses a special
5068 backslash syntax.  For more information, see the GNU
5069 coreutils info file.");
5070
5071   ("fill_pattern", (RErr, [String "pattern"; Int "len"; Pathname "path"]), 245, [Progress],
5072    [InitBasicFS, Always, TestOutputBuffer (
5073       [["fill_pattern"; "abcdefghijklmnopqrstuvwxyz"; "28"; "/test"];
5074        ["read_file"; "/test"]], "abcdefghijklmnopqrstuvwxyzab")],
5075    "fill a file with a repeating pattern of bytes",
5076    "\
5077 This function is like C<guestfs_fill> except that it creates
5078 a new file of length C<len> containing the repeating pattern
5079 of bytes in C<pattern>.  The pattern is truncated if necessary
5080 to ensure the length of the file is exactly C<len> bytes.");
5081
5082   ("write", (RErr, [Pathname "path"; BufferIn "content"]), 246, [ProtocolLimitWarning],
5083    [InitBasicFS, Always, TestOutput (
5084       [["write"; "/new"; "new file contents"];
5085        ["cat"; "/new"]], "new file contents");
5086     InitBasicFS, Always, TestOutput (
5087       [["write"; "/new"; "\nnew file contents\n"];
5088        ["cat"; "/new"]], "\nnew file contents\n");
5089     InitBasicFS, Always, TestOutput (
5090       [["write"; "/new"; "\n\n"];
5091        ["cat"; "/new"]], "\n\n");
5092     InitBasicFS, Always, TestOutput (
5093       [["write"; "/new"; ""];
5094        ["cat"; "/new"]], "");
5095     InitBasicFS, Always, TestOutput (
5096       [["write"; "/new"; "\n\n\n"];
5097        ["cat"; "/new"]], "\n\n\n");
5098     InitBasicFS, Always, TestOutput (
5099       [["write"; "/new"; "\n"];
5100        ["cat"; "/new"]], "\n")],
5101    "create a new file",
5102    "\
5103 This call creates a file called C<path>.  The content of the
5104 file is the string C<content> (which can contain any 8 bit data).");
5105
5106   ("pwrite", (RInt "nbytes", [Pathname "path"; BufferIn "content"; Int64 "offset"]), 247, [ProtocolLimitWarning],
5107    [InitBasicFS, Always, TestOutput (
5108       [["write"; "/new"; "new file contents"];
5109        ["pwrite"; "/new"; "data"; "4"];
5110        ["cat"; "/new"]], "new data contents");
5111     InitBasicFS, Always, TestOutput (
5112       [["write"; "/new"; "new file contents"];
5113        ["pwrite"; "/new"; "is extended"; "9"];
5114        ["cat"; "/new"]], "new file is extended");
5115     InitBasicFS, Always, TestOutput (
5116       [["write"; "/new"; "new file contents"];
5117        ["pwrite"; "/new"; ""; "4"];
5118        ["cat"; "/new"]], "new file contents")],
5119    "write to part of a file",
5120    "\
5121 This command writes to part of a file.  It writes the data
5122 buffer C<content> to the file C<path> starting at offset C<offset>.
5123
5124 This command implements the L<pwrite(2)> system call, and like
5125 that system call it may not write the full data requested.  The
5126 return value is the number of bytes that were actually written
5127 to the file.  This could even be 0, although short writes are
5128 unlikely for regular files in ordinary circumstances.
5129
5130 See also C<guestfs_pread>.");
5131
5132   ("resize2fs_size", (RErr, [Device "device"; Int64 "size"]), 248, [],
5133    [],
5134    "resize an ext2, ext3 or ext4 filesystem (with size)",
5135    "\
5136 This command is the same as C<guestfs_resize2fs> except that it
5137 allows you to specify the new size (in bytes) explicitly.");
5138
5139   ("pvresize_size", (RErr, [Device "device"; Int64 "size"]), 249, [Optional "lvm2"],
5140    [],
5141    "resize an LVM physical volume (with size)",
5142    "\
5143 This command is the same as C<guestfs_pvresize> except that it
5144 allows you to specify the new size (in bytes) explicitly.");
5145
5146   ("ntfsresize_size", (RErr, [Device "device"; Int64 "size"]), 250, [Optional "ntfsprogs"],
5147    [],
5148    "resize an NTFS filesystem (with size)",
5149    "\
5150 This command is the same as C<guestfs_ntfsresize> except that it
5151 allows you to specify the new size (in bytes) explicitly.");
5152
5153   ("available_all_groups", (RStringList "groups", []), 251, [],
5154    [InitNone, Always, TestRun [["available_all_groups"]]],
5155    "return a list of all optional groups",
5156    "\
5157 This command returns a list of all optional groups that this
5158 daemon knows about.  Note this returns both supported and unsupported
5159 groups.  To find out which ones the daemon can actually support
5160 you have to call C<guestfs_available> on each member of the
5161 returned list.
5162
5163 See also C<guestfs_available> and L<guestfs(3)/AVAILABILITY>.");
5164
5165   ("fallocate64", (RErr, [Pathname "path"; Int64 "len"]), 252, [],
5166    [InitBasicFS, Always, TestOutputStruct (
5167       [["fallocate64"; "/a"; "1000000"];
5168        ["stat"; "/a"]], [CompareWithInt ("size", 1_000_000)])],
5169    "preallocate a file in the guest filesystem",
5170    "\
5171 This command preallocates a file (containing zero bytes) named
5172 C<path> of size C<len> bytes.  If the file exists already, it
5173 is overwritten.
5174
5175 Note that this call allocates disk blocks for the file.
5176 To create a sparse file use C<guestfs_truncate_size> instead.
5177
5178 The deprecated call C<guestfs_fallocate> does the same,
5179 but owing to an oversight it only allowed 30 bit lengths
5180 to be specified, effectively limiting the maximum size
5181 of files created through that call to 1GB.
5182
5183 Do not confuse this with the guestfish-specific
5184 C<alloc> and C<sparse> commands which create
5185 a file in the host and attach it as a device.");
5186
5187   ("vfs_label", (RString "label", [Device "device"]), 253, [],
5188    [InitBasicFS, Always, TestOutput (
5189        [["set_e2label"; "/dev/sda1"; "LTEST"];
5190         ["vfs_label"; "/dev/sda1"]], "LTEST")],
5191    "get the filesystem label",
5192    "\
5193 This returns the filesystem label of the filesystem on
5194 C<device>.
5195
5196 If the filesystem is unlabeled, this returns the empty string.
5197
5198 To find a filesystem from the label, use C<guestfs_findfs_label>.");
5199
5200   ("vfs_uuid", (RString "uuid", [Device "device"]), 254, [],
5201    (let uuid = uuidgen () in
5202     [InitBasicFS, Always, TestOutput (
5203        [["set_e2uuid"; "/dev/sda1"; uuid];
5204         ["vfs_uuid"; "/dev/sda1"]], uuid)]),
5205    "get the filesystem UUID",
5206    "\
5207 This returns the filesystem UUID of the filesystem on
5208 C<device>.
5209
5210 If the filesystem does not have a UUID, this returns the empty string.
5211
5212 To find a filesystem from the UUID, use C<guestfs_findfs_uuid>.");
5213
5214   ("lvm_set_filter", (RErr, [DeviceList "devices"]), 255, [Optional "lvm2"],
5215    (* Can't be tested with the current framework because
5216     * the VG is being used by the mounted filesystem, so
5217     * the vgchange -an command we do first will fail.
5218     *)
5219     [],
5220    "set LVM device filter",
5221    "\
5222 This sets the LVM device filter so that LVM will only be
5223 able to \"see\" the block devices in the list C<devices>,
5224 and will ignore all other attached block devices.
5225
5226 Where disk image(s) contain duplicate PVs or VGs, this
5227 command is useful to get LVM to ignore the duplicates, otherwise
5228 LVM can get confused.  Note also there are two types
5229 of duplication possible: either cloned PVs/VGs which have
5230 identical UUIDs; or VGs that are not cloned but just happen
5231 to have the same name.  In normal operation you cannot
5232 create this situation, but you can do it outside LVM, eg.
5233 by cloning disk images or by bit twiddling inside the LVM
5234 metadata.
5235
5236 This command also clears the LVM cache and performs a volume
5237 group scan.
5238
5239 You can filter whole block devices or individual partitions.
5240
5241 You cannot use this if any VG is currently in use (eg.
5242 contains a mounted filesystem), even if you are not
5243 filtering out that VG.");
5244
5245   ("lvm_clear_filter", (RErr, []), 256, [],
5246    [], (* see note on lvm_set_filter *)
5247    "clear LVM device filter",
5248    "\
5249 This undoes the effect of C<guestfs_lvm_set_filter>.  LVM
5250 will be able to see every block device.
5251
5252 This command also clears the LVM cache and performs a volume
5253 group scan.");
5254
5255   ("luks_open", (RErr, [Device "device"; Key "key"; String "mapname"]), 257, [Optional "luks"],
5256    [],
5257    "open a LUKS-encrypted block device",
5258    "\
5259 This command opens a block device which has been encrypted
5260 according to the Linux Unified Key Setup (LUKS) standard.
5261
5262 C<device> is the encrypted block device or partition.
5263
5264 The caller must supply one of the keys associated with the
5265 LUKS block device, in the C<key> parameter.
5266
5267 This creates a new block device called C</dev/mapper/mapname>.
5268 Reads and writes to this block device are decrypted from and
5269 encrypted to the underlying C<device> respectively.
5270
5271 If this block device contains LVM volume groups, then
5272 calling C<guestfs_vgscan> followed by C<guestfs_vg_activate_all>
5273 will make them visible.");
5274
5275   ("luks_open_ro", (RErr, [Device "device"; Key "key"; String "mapname"]), 258, [Optional "luks"],
5276    [],
5277    "open a LUKS-encrypted block device read-only",
5278    "\
5279 This is the same as C<guestfs_luks_open> except that a read-only
5280 mapping is created.");
5281
5282   ("luks_close", (RErr, [Device "device"]), 259, [Optional "luks"],
5283    [],
5284    "close a LUKS device",
5285    "\
5286 This closes a LUKS device that was created earlier by
5287 C<guestfs_luks_open> or C<guestfs_luks_open_ro>.  The
5288 C<device> parameter must be the name of the LUKS mapping
5289 device (ie. C</dev/mapper/mapname>) and I<not> the name
5290 of the underlying block device.");
5291
5292   ("luks_format", (RErr, [Device "device"; Key "key"; Int "keyslot"]), 260, [Optional "luks"; DangerWillRobinson],
5293    [],
5294    "format a block device as a LUKS encrypted device",
5295    "\
5296 This command erases existing data on C<device> and formats
5297 the device as a LUKS encrypted device.  C<key> is the
5298 initial key, which is added to key slot C<slot>.  (LUKS
5299 supports 8 key slots, numbered 0-7).");
5300
5301   ("luks_format_cipher", (RErr, [Device "device"; Key "key"; Int "keyslot"; String "cipher"]), 261, [Optional "luks"; DangerWillRobinson],
5302    [],
5303    "format a block device as a LUKS encrypted device",
5304    "\
5305 This command is the same as C<guestfs_luks_format> but
5306 it also allows you to set the C<cipher> used.");
5307
5308   ("luks_add_key", (RErr, [Device "device"; Key "key"; Key "newkey"; Int "keyslot"]), 262, [Optional "luks"],
5309    [],
5310    "add a key on a LUKS encrypted device",
5311    "\
5312 This command adds a new key on LUKS device C<device>.
5313 C<key> is any existing key, and is used to access the device.
5314 C<newkey> is the new key to add.  C<keyslot> is the key slot
5315 that will be replaced.
5316
5317 Note that if C<keyslot> already contains a key, then this
5318 command will fail.  You have to use C<guestfs_luks_kill_slot>
5319 first to remove that key.");
5320
5321   ("luks_kill_slot", (RErr, [Device "device"; Key "key"; Int "keyslot"]), 263, [Optional "luks"],
5322    [],
5323    "remove a key from a LUKS encrypted device",
5324    "\
5325 This command deletes the key in key slot C<keyslot> from the
5326 encrypted LUKS device C<device>.  C<key> must be one of the
5327 I<other> keys.");
5328
5329   ("is_lv", (RBool "lvflag", [Device "device"]), 264, [Optional "lvm2"],
5330    [InitBasicFSonLVM, IfAvailable "lvm2", TestOutputTrue (
5331       [["is_lv"; "/dev/VG/LV"]]);
5332     InitBasicFSonLVM, IfAvailable "lvm2", TestOutputFalse (
5333       [["is_lv"; "/dev/sda1"]])],
5334    "test if device is a logical volume",
5335    "\
5336 This command tests whether C<device> is a logical volume, and
5337 returns true iff this is the case.");
5338
5339   ("findfs_uuid", (RString "device", [String "uuid"]), 265, [],
5340    [],
5341    "find a filesystem by UUID",
5342    "\
5343 This command searches the filesystems and returns the one
5344 which has the given UUID.  An error is returned if no such
5345 filesystem can be found.
5346
5347 To find the UUID of a filesystem, use C<guestfs_vfs_uuid>.");
5348
5349   ("findfs_label", (RString "device", [String "label"]), 266, [],
5350    [],
5351    "find a filesystem by label",
5352    "\
5353 This command searches the filesystems and returns the one
5354 which has the given label.  An error is returned if no such
5355 filesystem can be found.
5356
5357 To find the label of a filesystem, use C<guestfs_vfs_label>.");
5358
5359   ("is_chardev", (RBool "flag", [Pathname "path"]), 267, [],
5360    [InitISOFS, Always, TestOutputFalse (
5361       [["is_chardev"; "/directory"]]);
5362     InitBasicFS, Always, TestOutputTrue (
5363       [["mknod_c"; "0o777"; "99"; "66"; "/test"];
5364        ["is_chardev"; "/test"]])],
5365    "test if character device",
5366    "\
5367 This returns C<true> if and only if there is a character device
5368 with the given C<path> name.
5369
5370 See also C<guestfs_stat>.");
5371
5372   ("is_blockdev", (RBool "flag", [Pathname "path"]), 268, [],
5373    [InitISOFS, Always, TestOutputFalse (
5374       [["is_blockdev"; "/directory"]]);
5375     InitBasicFS, Always, TestOutputTrue (
5376       [["mknod_b"; "0o777"; "99"; "66"; "/test"];
5377        ["is_blockdev"; "/test"]])],
5378    "test if block device",
5379    "\
5380 This returns C<true> if and only if there is a block device
5381 with the given C<path> name.
5382
5383 See also C<guestfs_stat>.");
5384
5385   ("is_fifo", (RBool "flag", [Pathname "path"]), 269, [],
5386    [InitISOFS, Always, TestOutputFalse (
5387       [["is_fifo"; "/directory"]]);
5388     InitBasicFS, Always, TestOutputTrue (
5389       [["mkfifo"; "0o777"; "/test"];
5390        ["is_fifo"; "/test"]])],
5391    "test if FIFO (named pipe)",
5392    "\
5393 This returns C<true> if and only if there is a FIFO (named pipe)
5394 with the given C<path> name.
5395
5396 See also C<guestfs_stat>.");
5397
5398   ("is_symlink", (RBool "flag", [Pathname "path"]), 270, [],
5399    [InitISOFS, Always, TestOutputFalse (
5400       [["is_symlink"; "/directory"]]);
5401     InitISOFS, Always, TestOutputTrue (
5402       [["is_symlink"; "/abssymlink"]])],
5403    "test if symbolic link",
5404    "\
5405 This returns C<true> if and only if there is a symbolic link
5406 with the given C<path> name.
5407
5408 See also C<guestfs_stat>.");
5409
5410   ("is_socket", (RBool "flag", [Pathname "path"]), 271, [],
5411    (* XXX Need a positive test for sockets. *)
5412    [InitISOFS, Always, TestOutputFalse (
5413       [["is_socket"; "/directory"]])],
5414    "test if socket",
5415    "\
5416 This returns C<true> if and only if there is a Unix domain socket
5417 with the given C<path> name.
5418
5419 See also C<guestfs_stat>.");
5420
5421 ]
5422
5423 let all_functions = non_daemon_functions @ daemon_functions
5424
5425 (* In some places we want the functions to be displayed sorted
5426  * alphabetically, so this is useful:
5427  *)
5428 let all_functions_sorted =
5429   List.sort (fun (n1,_,_,_,_,_,_) (n2,_,_,_,_,_,_) ->
5430                compare n1 n2) all_functions
5431
5432 (* This is used to generate the src/MAX_PROC_NR file which
5433  * contains the maximum procedure number, a surrogate for the
5434  * ABI version number.  See src/Makefile.am for the details.
5435  *)
5436 let max_proc_nr =
5437   let proc_nrs = List.map (
5438     fun (_, _, proc_nr, _, _, _, _) -> proc_nr
5439   ) daemon_functions in
5440   List.fold_left max 0 proc_nrs
5441
5442 (* Field types for structures. *)
5443 type field =
5444   | FChar                       (* C 'char' (really, a 7 bit byte). *)
5445   | FString                     (* nul-terminated ASCII string, NOT NULL. *)
5446   | FBuffer                     (* opaque buffer of bytes, (char *, int) pair *)
5447   | FUInt32
5448   | FInt32
5449   | FUInt64
5450   | FInt64
5451   | FBytes                      (* Any int measure that counts bytes. *)
5452   | FUUID                       (* 32 bytes long, NOT nul-terminated. *)
5453   | FOptPercent                 (* [0..100], or -1 meaning "not present". *)
5454
5455 (* Because we generate extra parsing code for LVM command line tools,
5456  * we have to pull out the LVM columns separately here.
5457  *)
5458 let lvm_pv_cols = [
5459   "pv_name", FString;
5460   "pv_uuid", FUUID;
5461   "pv_fmt", FString;
5462   "pv_size", FBytes;
5463   "dev_size", FBytes;
5464   "pv_free", FBytes;
5465   "pv_used", FBytes;
5466   "pv_attr", FString (* XXX *);
5467   "pv_pe_count", FInt64;
5468   "pv_pe_alloc_count", FInt64;
5469   "pv_tags", FString;
5470   "pe_start", FBytes;
5471   "pv_mda_count", FInt64;
5472   "pv_mda_free", FBytes;
5473   (* Not in Fedora 10:
5474      "pv_mda_size", FBytes;
5475   *)
5476 ]
5477 let lvm_vg_cols = [
5478   "vg_name", FString;
5479   "vg_uuid", FUUID;
5480   "vg_fmt", FString;
5481   "vg_attr", FString (* XXX *);
5482   "vg_size", FBytes;
5483   "vg_free", FBytes;
5484   "vg_sysid", FString;
5485   "vg_extent_size", FBytes;
5486   "vg_extent_count", FInt64;
5487   "vg_free_count", FInt64;
5488   "max_lv", FInt64;
5489   "max_pv", FInt64;
5490   "pv_count", FInt64;
5491   "lv_count", FInt64;
5492   "snap_count", FInt64;
5493   "vg_seqno", FInt64;
5494   "vg_tags", FString;
5495   "vg_mda_count", FInt64;
5496   "vg_mda_free", FBytes;
5497   (* Not in Fedora 10:
5498      "vg_mda_size", FBytes;
5499   *)
5500 ]
5501 let lvm_lv_cols = [
5502   "lv_name", FString;
5503   "lv_uuid", FUUID;
5504   "lv_attr", FString (* XXX *);
5505   "lv_major", FInt64;
5506   "lv_minor", FInt64;
5507   "lv_kernel_major", FInt64;
5508   "lv_kernel_minor", FInt64;
5509   "lv_size", FBytes;
5510   "seg_count", FInt64;
5511   "origin", FString;
5512   "snap_percent", FOptPercent;
5513   "copy_percent", FOptPercent;
5514   "move_pv", FString;
5515   "lv_tags", FString;
5516   "mirror_log", FString;
5517   "modules", FString;
5518 ]
5519
5520 (* Names and fields in all structures (in RStruct and RStructList)
5521  * that we support.
5522  *)
5523 let structs = [
5524   (* The old RIntBool return type, only ever used for aug_defnode.  Do
5525    * not use this struct in any new code.
5526    *)
5527   "int_bool", [
5528     "i", FInt32;                (* for historical compatibility *)
5529     "b", FInt32;                (* for historical compatibility *)
5530   ];
5531
5532   (* LVM PVs, VGs, LVs. *)
5533   "lvm_pv", lvm_pv_cols;
5534   "lvm_vg", lvm_vg_cols;
5535   "lvm_lv", lvm_lv_cols;
5536
5537   (* Column names and types from stat structures.
5538    * NB. Can't use things like 'st_atime' because glibc header files
5539    * define some of these as macros.  Ugh.
5540    *)
5541   "stat", [
5542     "dev", FInt64;
5543     "ino", FInt64;
5544     "mode", FInt64;
5545     "nlink", FInt64;
5546     "uid", FInt64;
5547     "gid", FInt64;
5548     "rdev", FInt64;
5549     "size", FInt64;
5550     "blksize", FInt64;
5551     "blocks", FInt64;
5552     "atime", FInt64;
5553     "mtime", FInt64;
5554     "ctime", FInt64;
5555   ];
5556   "statvfs", [
5557     "bsize", FInt64;
5558     "frsize", FInt64;
5559     "blocks", FInt64;
5560     "bfree", FInt64;
5561     "bavail", FInt64;
5562     "files", FInt64;
5563     "ffree", FInt64;
5564     "favail", FInt64;
5565     "fsid", FInt64;
5566     "flag", FInt64;
5567     "namemax", FInt64;
5568   ];
5569
5570   (* Column names in dirent structure. *)
5571   "dirent", [
5572     "ino", FInt64;
5573     (* 'b' 'c' 'd' 'f' (FIFO) 'l' 'r' (regular file) 's' 'u' '?' *)
5574     "ftyp", FChar;
5575     "name", FString;
5576   ];
5577
5578   (* Version numbers. *)
5579   "version", [
5580     "major", FInt64;
5581     "minor", FInt64;
5582     "release", FInt64;
5583     "extra", FString;
5584   ];
5585
5586   (* Extended attribute. *)
5587   "xattr", [
5588     "attrname", FString;
5589     "attrval", FBuffer;
5590   ];
5591
5592   (* Inotify events. *)
5593   "inotify_event", [
5594     "in_wd", FInt64;
5595     "in_mask", FUInt32;
5596     "in_cookie", FUInt32;
5597     "in_name", FString;
5598   ];
5599
5600   (* Partition table entry. *)
5601   "partition", [
5602     "part_num", FInt32;
5603     "part_start", FBytes;
5604     "part_end", FBytes;
5605     "part_size", FBytes;
5606   ];
5607 ] (* end of structs *)
5608
5609 (* Ugh, Java has to be different ..
5610  * These names are also used by the Haskell bindings.
5611  *)
5612 let java_structs = [
5613   "int_bool", "IntBool";
5614   "lvm_pv", "PV";
5615   "lvm_vg", "VG";
5616   "lvm_lv", "LV";
5617   "stat", "Stat";
5618   "statvfs", "StatVFS";
5619   "dirent", "Dirent";
5620   "version", "Version";
5621   "xattr", "XAttr";
5622   "inotify_event", "INotifyEvent";
5623   "partition", "Partition";
5624 ]
5625
5626 (* What structs are actually returned. *)
5627 type rstructs_used_t = RStructOnly | RStructListOnly | RStructAndList
5628
5629 (* Returns a list of RStruct/RStructList structs that are returned
5630  * by any function.  Each element of returned list is a pair:
5631  *
5632  * (structname, RStructOnly)
5633  *    == there exists function which returns RStruct (_, structname)
5634  * (structname, RStructListOnly)
5635  *    == there exists function which returns RStructList (_, structname)
5636  * (structname, RStructAndList)
5637  *    == there are functions returning both RStruct (_, structname)
5638  *                                      and RStructList (_, structname)
5639  *)
5640 let rstructs_used_by functions =
5641   (* ||| is a "logical OR" for rstructs_used_t *)
5642   let (|||) a b =
5643     match a, b with
5644     | RStructAndList, _
5645     | _, RStructAndList -> RStructAndList
5646     | RStructOnly, RStructListOnly
5647     | RStructListOnly, RStructOnly -> RStructAndList
5648     | RStructOnly, RStructOnly -> RStructOnly
5649     | RStructListOnly, RStructListOnly -> RStructListOnly
5650   in
5651
5652   let h = Hashtbl.create 13 in
5653
5654   (* if elem->oldv exists, update entry using ||| operator,
5655    * else just add elem->newv to the hash
5656    *)
5657   let update elem newv =
5658     try  let oldv = Hashtbl.find h elem in
5659          Hashtbl.replace h elem (newv ||| oldv)
5660     with Not_found -> Hashtbl.add h elem newv
5661   in
5662
5663   List.iter (
5664     fun (_, style, _, _, _, _, _) ->
5665       match fst style with
5666       | RStruct (_, structname) -> update structname RStructOnly
5667       | RStructList (_, structname) -> update structname RStructListOnly
5668       | _ -> ()
5669   ) functions;
5670
5671   (* return key->values as a list of (key,value) *)
5672   Hashtbl.fold (fun key value xs -> (key, value) :: xs) h []
5673
5674 (* Used for testing language bindings. *)
5675 type callt =
5676   | CallString of string
5677   | CallOptString of string option
5678   | CallStringList of string list
5679   | CallInt of int
5680   | CallInt64 of int64
5681   | CallBool of bool
5682   | CallBuffer of string
5683
5684 (* Used for the guestfish -N (prepared disk images) option.
5685  * Note that the longdescs are indented by 2 spaces.
5686  *)
5687 let prepopts = [
5688   ("disk",
5689    "create a blank disk",
5690    [ "size", "100M", "the size of the disk image" ],
5691    "  Create a blank disk, size 100MB (by default).
5692
5693   The default size can be changed by supplying an optional parameter.");
5694
5695   ("part",
5696    "create a partitioned disk",
5697    [ "size", "100M", "the size of the disk image";
5698      "partition", "mbr", "partition table type" ],
5699    "  Create a disk with a single partition.  By default the size of the disk
5700   is 100MB (the available space in the partition will be a tiny bit smaller)
5701   and the partition table will be MBR (old DOS-style).
5702
5703   These defaults can be changed by supplying optional parameters.");
5704
5705   ("fs",
5706    "create a filesystem",
5707    [ "filesystem", "ext2", "the type of filesystem to use";
5708      "size", "100M", "the size of the disk image";
5709      "partition", "mbr", "partition table type" ],
5710    "  Create a disk with a single partition, with the partition containing
5711   an empty filesystem.  This defaults to creating a 100MB disk (the available
5712   space in the filesystem will be a tiny bit smaller) with an MBR (old
5713   DOS-style) partition table and an ext2 filesystem.
5714
5715   These defaults can be changed by supplying optional parameters.");
5716
5717   ("lv",
5718    "create a disk with logical volume",
5719    [ "name", "/dev/VG/LV", "the name of the VG and LV to use";
5720      "size", "100M", "the size of the disk image";
5721      "partition", "mbr", "partition table type" ],
5722    "  Create a disk with a single partition, set up the partition as an
5723   LVM2 physical volume, and place a volume group and logical volume
5724   on there.  This defaults to creating a 100MB disk with the VG and
5725   LV called /dev/VG/LV.  You can change the name of the VG and LV
5726   by supplying an alternate name as the first optional parameter.
5727
5728   Note this does not create a filesystem.  Use 'lvfs' to do that.");
5729
5730   ("lvfs",
5731    "create a disk with logical volume and filesystem",
5732    [ "name", "/dev/VG/LV", "the name of the VG and LV to use";
5733      "filesystem", "ext2", "the type of filesystem to use";
5734      "size", "100M", "the size of the disk image";
5735      "partition", "mbr", "partition table type" ],
5736    "  Create a disk with a single partition, set up the partition as an
5737   LVM2 physical volume, and place a volume group and logical volume
5738   on there.  Then format the LV with a filesystem.  This defaults to
5739   creating a 100MB disk with the VG and LV called /dev/VG/LV, with an
5740   ext2 filesystem.");
5741
5742   ("bootroot",
5743    "create a boot and root filesystem",
5744    [ "bootfs", "ext2", "the type of filesystem to use for boot";
5745      "rootfs", "ext2", "the type of filesystem to use for root";
5746      "size", "100M", "the size of the disk image";
5747      "bootsize", "32M", "the size of the boot filesystem";
5748      "partition", "mbr", "partition table type" ],
5749    "  Create a disk with two partitions, for boot and root filesystem.
5750   Format the two filesystems independently.  There are several optional
5751   parameters which control the exact layout and filesystem types.");
5752
5753   ("bootrootlv",
5754    "create a boot and root filesystem using LVM",
5755    [ "name", "/dev/VG/LV", "the name of the VG and LV for root";
5756      "bootfs", "ext2", "the type of filesystem to use for boot";
5757      "rootfs", "ext2", "the type of filesystem to use for root";
5758      "size", "100M", "the size of the disk image";
5759      "bootsize", "32M", "the size of the boot filesystem";
5760      "partition", "mbr", "partition table type" ],
5761    "  This is the same as 'bootroot' but the root filesystem (only) is
5762   placed on a logical volume, named by default '/dev/VG/LV'.  There are
5763   several optional parameters which control the exact layout.");
5764
5765 ]
5766
5767 (* Used to memoize the result of pod2text. *)
5768 let pod2text_memo_filename = "src/.pod2text.data"
5769 let pod2text_memo : ((int * string * string), string list) Hashtbl.t =
5770   try
5771     let chan = open_in pod2text_memo_filename in
5772     let v = input_value chan in
5773     close_in chan;
5774     v
5775   with
5776     _ -> Hashtbl.create 13
5777 let pod2text_memo_updated () =
5778   let chan = open_out pod2text_memo_filename in
5779   output_value chan pod2text_memo;
5780   close_out chan
5781
5782 (* Useful functions.
5783  * Note we don't want to use any external OCaml libraries which
5784  * makes this a bit harder than it should be.
5785  *)
5786 module StringMap = Map.Make (String)
5787
5788 let failwithf fs = ksprintf failwith fs
5789
5790 let unique = let i = ref 0 in fun () -> incr i; !i
5791
5792 let replace_char s c1 c2 =
5793   let s2 = String.copy s in
5794   let r = ref false in
5795   for i = 0 to String.length s2 - 1 do
5796     if String.unsafe_get s2 i = c1 then (
5797       String.unsafe_set s2 i c2;
5798       r := true
5799     )
5800   done;
5801   if not !r then s else s2
5802
5803 let isspace c =
5804   c = ' '
5805   (* || c = '\f' *) || c = '\n' || c = '\r' || c = '\t' (* || c = '\v' *)
5806
5807 let triml ?(test = isspace) str =
5808   let i = ref 0 in
5809   let n = ref (String.length str) in
5810   while !n > 0 && test str.[!i]; do
5811     decr n;
5812     incr i
5813   done;
5814   if !i = 0 then str
5815   else String.sub str !i !n
5816
5817 let trimr ?(test = isspace) str =
5818   let n = ref (String.length str) in
5819   while !n > 0 && test str.[!n-1]; do
5820     decr n
5821   done;
5822   if !n = String.length str then str
5823   else String.sub str 0 !n
5824
5825 let trim ?(test = isspace) str =
5826   trimr ~test (triml ~test str)
5827
5828 let rec find s sub =
5829   let len = String.length s in
5830   let sublen = String.length sub in
5831   let rec loop i =
5832     if i <= len-sublen then (
5833       let rec loop2 j =
5834         if j < sublen then (
5835           if s.[i+j] = sub.[j] then loop2 (j+1)
5836           else -1
5837         ) else
5838           i (* found *)
5839       in
5840       let r = loop2 0 in
5841       if r = -1 then loop (i+1) else r
5842     ) else
5843       -1 (* not found *)
5844   in
5845   loop 0
5846
5847 let rec replace_str s s1 s2 =
5848   let len = String.length s in
5849   let sublen = String.length s1 in
5850   let i = find s s1 in
5851   if i = -1 then s
5852   else (
5853     let s' = String.sub s 0 i in
5854     let s'' = String.sub s (i+sublen) (len-i-sublen) in
5855     s' ^ s2 ^ replace_str s'' s1 s2
5856   )
5857
5858 let rec string_split sep str =
5859   let len = String.length str in
5860   let seplen = String.length sep in
5861   let i = find str sep in
5862   if i = -1 then [str]
5863   else (
5864     let s' = String.sub str 0 i in
5865     let s'' = String.sub str (i+seplen) (len-i-seplen) in
5866     s' :: string_split sep s''
5867   )
5868
5869 let files_equal n1 n2 =
5870   let cmd = sprintf "cmp -s %s %s" (Filename.quote n1) (Filename.quote n2) in
5871   match Sys.command cmd with
5872   | 0 -> true
5873   | 1 -> false
5874   | i -> failwithf "%s: failed with error code %d" cmd i
5875
5876 let rec filter_map f = function
5877   | [] -> []
5878   | x :: xs ->
5879       match f x with
5880       | Some y -> y :: filter_map f xs
5881       | None -> filter_map f xs
5882
5883 let rec find_map f = function
5884   | [] -> raise Not_found
5885   | x :: xs ->
5886       match f x with
5887       | Some y -> y
5888       | None -> find_map f xs
5889
5890 let iteri f xs =
5891   let rec loop i = function
5892     | [] -> ()
5893     | x :: xs -> f i x; loop (i+1) xs
5894   in
5895   loop 0 xs
5896
5897 let mapi f xs =
5898   let rec loop i = function
5899     | [] -> []
5900     | x :: xs -> let r = f i x in r :: loop (i+1) xs
5901   in
5902   loop 0 xs
5903
5904 let count_chars c str =
5905   let count = ref 0 in
5906   for i = 0 to String.length str - 1 do
5907     if c = String.unsafe_get str i then incr count
5908   done;
5909   !count
5910
5911 let explode str =
5912   let r = ref [] in
5913   for i = 0 to String.length str - 1 do
5914     let c = String.unsafe_get str i in
5915     r := c :: !r;
5916   done;
5917   List.rev !r
5918
5919 let map_chars f str =
5920   List.map f (explode str)
5921
5922 let name_of_argt = function
5923   | Pathname n | Device n | Dev_or_Path n | String n | OptString n
5924   | StringList n | DeviceList n | Bool n | Int n | Int64 n
5925   | FileIn n | FileOut n | BufferIn n | Key n -> n
5926
5927 let java_name_of_struct typ =
5928   try List.assoc typ java_structs
5929   with Not_found ->
5930     failwithf
5931       "java_name_of_struct: no java_structs entry corresponding to %s" typ
5932
5933 let cols_of_struct typ =
5934   try List.assoc typ structs
5935   with Not_found ->
5936     failwithf "cols_of_struct: unknown struct %s" typ
5937
5938 let seq_of_test = function
5939   | TestRun s | TestOutput (s, _) | TestOutputList (s, _)
5940   | TestOutputListOfDevices (s, _)
5941   | TestOutputInt (s, _) | TestOutputIntOp (s, _, _)
5942   | TestOutputTrue s | TestOutputFalse s
5943   | TestOutputLength (s, _) | TestOutputBuffer (s, _)
5944   | TestOutputStruct (s, _)
5945   | TestLastFail s -> s
5946
5947 (* Handling for function flags. *)
5948 let progress_message =
5949   "This long-running command can generate progress notification messages
5950 so that the caller can display a progress bar or indicator.
5951 To receive these messages, the caller must register a progress
5952 callback.  See L<guestfs(3)/guestfs_set_progress_callback>."
5953
5954 let protocol_limit_warning =
5955   "Because of the message protocol, there is a transfer limit
5956 of somewhere between 2MB and 4MB.  See L<guestfs(3)/PROTOCOL LIMITS>."
5957
5958 let danger_will_robinson =
5959   "B<This command is dangerous.  Without careful use you
5960 can easily destroy all your data>."
5961
5962 let deprecation_notice flags =
5963   try
5964     let alt =
5965       find_map (function DeprecatedBy str -> Some str | _ -> None) flags in
5966     let txt =
5967       sprintf "This function is deprecated.
5968 In new code, use the C<%s> call instead.
5969
5970 Deprecated functions will not be removed from the API, but the
5971 fact that they are deprecated indicates that there are problems
5972 with correct use of these functions." alt in
5973     Some txt
5974   with
5975     Not_found -> None
5976
5977 (* Create list of optional groups. *)
5978 let optgroups =
5979   let h = Hashtbl.create 13 in
5980   List.iter (
5981     fun (name, _, _, flags, _, _, _) ->
5982       List.iter (
5983         function
5984         | Optional group ->
5985             let names = try Hashtbl.find h group with Not_found -> [] in
5986             Hashtbl.replace h group (name :: names)
5987         | _ -> ()
5988       ) flags
5989   ) daemon_functions;
5990   let groups = Hashtbl.fold (fun k _ ks -> k :: ks) h [] in
5991   let groups =
5992     List.map (
5993       fun group -> group, List.sort compare (Hashtbl.find h group)
5994     ) groups in
5995   List.sort (fun x y -> compare (fst x) (fst y)) groups
5996
5997 (* Check function names etc. for consistency. *)
5998 let check_functions () =
5999   let contains_uppercase str =
6000     let len = String.length str in
6001     let rec loop i =
6002       if i >= len then false
6003       else (
6004         let c = str.[i] in
6005         if c >= 'A' && c <= 'Z' then true
6006         else loop (i+1)
6007       )
6008     in
6009     loop 0
6010   in
6011
6012   (* Check function names. *)
6013   List.iter (
6014     fun (name, _, _, _, _, _, _) ->
6015       if String.length name >= 7 && String.sub name 0 7 = "guestfs" then
6016         failwithf "function name %s does not need 'guestfs' prefix" name;
6017       if name = "" then
6018         failwithf "function name is empty";
6019       if name.[0] < 'a' || name.[0] > 'z' then
6020         failwithf "function name %s must start with lowercase a-z" name;
6021       if String.contains name '-' then
6022         failwithf "function name %s should not contain '-', use '_' instead."
6023           name
6024   ) all_functions;
6025
6026   (* Check function parameter/return names. *)
6027   List.iter (
6028     fun (name, style, _, _, _, _, _) ->
6029       let check_arg_ret_name n =
6030         if contains_uppercase n then
6031           failwithf "%s param/ret %s should not contain uppercase chars"
6032             name n;
6033         if String.contains n '-' || String.contains n '_' then
6034           failwithf "%s param/ret %s should not contain '-' or '_'"
6035             name n;
6036         if n = "value" then
6037           failwithf "%s has a param/ret called 'value', which causes conflicts in the OCaml bindings, use something like 'val' or a more descriptive name" name;
6038         if n = "int" || n = "char" || n = "short" || n = "long" then
6039           failwithf "%s has a param/ret which conflicts with a C type (eg. 'int', 'char' etc.)" name;
6040         if n = "i" || n = "n" then
6041           failwithf "%s has a param/ret called 'i' or 'n', which will cause some conflicts in the generated code" name;
6042         if n = "argv" || n = "args" then
6043           failwithf "%s has a param/ret called 'argv' or 'args', which will cause some conflicts in the generated code" name;
6044
6045         (* List Haskell, OCaml and C keywords here.
6046          * http://www.haskell.org/haskellwiki/Keywords
6047          * http://caml.inria.fr/pub/docs/manual-ocaml/lex.html#operator-char
6048          * http://en.wikipedia.org/wiki/C_syntax#Reserved_keywords
6049          * Formatted via: cat c haskell ocaml|sort -u|grep -vE '_|^val$' \
6050          *   |perl -pe 's/(.+)/"$1";/'|fmt -70
6051          * Omitting _-containing words, since they're handled above.
6052          * Omitting the OCaml reserved word, "val", is ok,
6053          * and saves us from renaming several parameters.
6054          *)
6055         let reserved = [
6056           "and"; "as"; "asr"; "assert"; "auto"; "begin"; "break"; "case";
6057           "char"; "class"; "const"; "constraint"; "continue"; "data";
6058           "default"; "deriving"; "do"; "done"; "double"; "downto"; "else";
6059           "end"; "enum"; "exception"; "extern"; "external"; "false"; "float";
6060           "for"; "forall"; "foreign"; "fun"; "function"; "functor"; "goto";
6061           "hiding"; "if"; "import"; "in"; "include"; "infix"; "infixl";
6062           "infixr"; "inherit"; "initializer"; "inline"; "instance"; "int";
6063           "interface";
6064           "land"; "lazy"; "let"; "long"; "lor"; "lsl"; "lsr"; "lxor";
6065           "match"; "mdo"; "method"; "mod"; "module"; "mutable"; "new";
6066           "newtype"; "object"; "of"; "open"; "or"; "private"; "qualified";
6067           "rec"; "register"; "restrict"; "return"; "short"; "sig"; "signed";
6068           "sizeof"; "static"; "struct"; "switch"; "then"; "to"; "true"; "try";
6069           "type"; "typedef"; "union"; "unsigned"; "virtual"; "void";
6070           "volatile"; "when"; "where"; "while";
6071           ] in
6072         if List.mem n reserved then
6073           failwithf "%s has param/ret using reserved word %s" name n;
6074       in
6075
6076       (match fst style with
6077        | RErr -> ()
6078        | RInt n | RInt64 n | RBool n
6079        | RConstString n | RConstOptString n | RString n
6080        | RStringList n | RStruct (n, _) | RStructList (n, _)
6081        | RHashtable n | RBufferOut n ->
6082            check_arg_ret_name n
6083       );
6084       List.iter (fun arg -> check_arg_ret_name (name_of_argt arg)) (snd style)
6085   ) all_functions;
6086
6087   (* Check short descriptions. *)
6088   List.iter (
6089     fun (name, _, _, _, _, shortdesc, _) ->
6090       if shortdesc.[0] <> Char.lowercase shortdesc.[0] then
6091         failwithf "short description of %s should begin with lowercase." name;
6092       let c = shortdesc.[String.length shortdesc-1] in
6093       if c = '\n' || c = '.' then
6094         failwithf "short description of %s should not end with . or \\n." name
6095   ) all_functions;
6096
6097   (* Check long descriptions. *)
6098   List.iter (
6099     fun (name, _, _, _, _, _, longdesc) ->
6100       if longdesc.[String.length longdesc-1] = '\n' then
6101         failwithf "long description of %s should not end with \\n." name
6102   ) all_functions;
6103
6104   (* Check proc_nrs. *)
6105   List.iter (
6106     fun (name, _, proc_nr, _, _, _, _) ->
6107       if proc_nr <= 0 then
6108         failwithf "daemon function %s should have proc_nr > 0" name
6109   ) daemon_functions;
6110
6111   List.iter (
6112     fun (name, _, proc_nr, _, _, _, _) ->
6113       if proc_nr <> -1 then
6114         failwithf "non-daemon function %s should have proc_nr -1" name
6115   ) non_daemon_functions;
6116
6117   let proc_nrs =
6118     List.map (fun (name, _, proc_nr, _, _, _, _) -> name, proc_nr)
6119       daemon_functions in
6120   let proc_nrs =
6121     List.sort (fun (_,nr1) (_,nr2) -> compare nr1 nr2) proc_nrs in
6122   let rec loop = function
6123     | [] -> ()
6124     | [_] -> ()
6125     | (name1,nr1) :: ((name2,nr2) :: _ as rest) when nr1 < nr2 ->
6126         loop rest
6127     | (name1,nr1) :: (name2,nr2) :: _ ->
6128         failwithf "%s and %s have conflicting procedure numbers (%d, %d)"
6129           name1 name2 nr1 nr2
6130   in
6131   loop proc_nrs;
6132
6133   (* Check tests. *)
6134   List.iter (
6135     function
6136       (* Ignore functions that have no tests.  We generate a
6137        * warning when the user does 'make check' instead.
6138        *)
6139     | name, _, _, _, [], _, _ -> ()
6140     | name, _, _, _, tests, _, _ ->
6141         let funcs =
6142           List.map (
6143             fun (_, _, test) ->
6144               match seq_of_test test with
6145               | [] ->
6146                   failwithf "%s has a test containing an empty sequence" name
6147               | cmds -> List.map List.hd cmds
6148           ) tests in
6149         let funcs = List.flatten funcs in
6150
6151         let tested = List.mem name funcs in
6152
6153         if not tested then
6154           failwithf "function %s has tests but does not test itself" name
6155   ) all_functions
6156
6157 (* 'pr' prints to the current output file. *)
6158 let chan = ref Pervasives.stdout
6159 let lines = ref 0
6160 let pr fs =
6161   ksprintf
6162     (fun str ->
6163        let i = count_chars '\n' str in
6164        lines := !lines + i;
6165        output_string !chan str
6166     ) fs
6167
6168 let copyright_years =
6169   let this_year = 1900 + (localtime (time ())).tm_year in
6170   if this_year > 2009 then sprintf "2009-%04d" this_year else "2009"
6171
6172 (* Generate a header block in a number of standard styles. *)
6173 type comment_style =
6174     CStyle | CPlusPlusStyle | HashStyle | OCamlStyle | HaskellStyle
6175 type license = GPLv2plus | LGPLv2plus
6176
6177 let generate_header ?(extra_inputs = []) comment license =
6178   let inputs = "src/generator.ml" :: extra_inputs in
6179   let c = match comment with
6180     | CStyle ->         pr "/* "; " *"
6181     | CPlusPlusStyle -> pr "// "; "//"
6182     | HashStyle ->      pr "# ";  "#"
6183     | OCamlStyle ->     pr "(* "; " *"
6184     | HaskellStyle ->   pr "{- "; "  " in
6185   pr "libguestfs generated file\n";
6186   pr "%s WARNING: THIS FILE IS GENERATED FROM:\n" c;
6187   List.iter (pr "%s   %s\n" c) inputs;
6188   pr "%s ANY CHANGES YOU MAKE TO THIS FILE WILL BE LOST.\n" c;
6189   pr "%s\n" c;
6190   pr "%s Copyright (C) %s Red Hat Inc.\n" c copyright_years;
6191   pr "%s\n" c;
6192   (match license with
6193    | GPLv2plus ->
6194        pr "%s This program is free software; you can redistribute it and/or modify\n" c;
6195        pr "%s it under the terms of the GNU General Public License as published by\n" c;
6196        pr "%s the Free Software Foundation; either version 2 of the License, or\n" c;
6197        pr "%s (at your option) any later version.\n" c;
6198        pr "%s\n" c;
6199        pr "%s This program is distributed in the hope that it will be useful,\n" c;
6200        pr "%s but WITHOUT ANY WARRANTY; without even the implied warranty of\n" c;
6201        pr "%s MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the\n" c;
6202        pr "%s GNU General Public License for more details.\n" c;
6203        pr "%s\n" c;
6204        pr "%s You should have received a copy of the GNU General Public License along\n" c;
6205        pr "%s with this program; if not, write to the Free Software Foundation, Inc.,\n" c;
6206        pr "%s 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA.\n" c;
6207
6208    | LGPLv2plus ->
6209        pr "%s This library is free software; you can redistribute it and/or\n" c;
6210        pr "%s modify it under the terms of the GNU Lesser General Public\n" c;
6211        pr "%s License as published by the Free Software Foundation; either\n" c;
6212        pr "%s version 2 of the License, or (at your option) any later version.\n" c;
6213        pr "%s\n" c;
6214        pr "%s This library is distributed in the hope that it will be useful,\n" c;
6215        pr "%s but WITHOUT ANY WARRANTY; without even the implied warranty of\n" c;
6216        pr "%s MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU\n" c;
6217        pr "%s Lesser General Public License for more details.\n" c;
6218        pr "%s\n" c;
6219        pr "%s You should have received a copy of the GNU Lesser General Public\n" c;
6220        pr "%s License along with this library; if not, write to the Free Software\n" c;
6221        pr "%s Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA\n" c;
6222   );
6223   (match comment with
6224    | CStyle -> pr " */\n"
6225    | CPlusPlusStyle
6226    | HashStyle -> ()
6227    | OCamlStyle -> pr " *)\n"
6228    | HaskellStyle -> pr "-}\n"
6229   );
6230   pr "\n"
6231
6232 (* Start of main code generation functions below this line. *)
6233
6234 (* Generate the pod documentation for the C API. *)
6235 let rec generate_actions_pod () =
6236   List.iter (
6237     fun (shortname, style, _, flags, _, _, longdesc) ->
6238       if not (List.mem NotInDocs flags) then (
6239         let name = "guestfs_" ^ shortname in
6240         pr "=head2 %s\n\n" name;
6241         pr " ";
6242         generate_prototype ~extern:false ~handle:"g" name style;
6243         pr "\n\n";
6244         pr "%s\n\n" longdesc;
6245         (match fst style with
6246          | RErr ->
6247              pr "This function returns 0 on success or -1 on error.\n\n"
6248          | RInt _ ->
6249              pr "On error this function returns -1.\n\n"
6250          | RInt64 _ ->
6251              pr "On error this function returns -1.\n\n"
6252          | RBool _ ->
6253              pr "This function returns a C truth value on success or -1 on error.\n\n"
6254          | RConstString _ ->
6255              pr "This function returns a string, or NULL on error.
6256 The string is owned by the guest handle and must I<not> be freed.\n\n"
6257          | RConstOptString _ ->
6258              pr "This function returns a string which may be NULL.
6259 There is no way to return an error from this function.
6260 The string is owned by the guest handle and must I<not> be freed.\n\n"
6261          | RString _ ->
6262              pr "This function returns a string, or NULL on error.
6263 I<The caller must free the returned string after use>.\n\n"
6264          | RStringList _ ->
6265              pr "This function returns a NULL-terminated array of strings
6266 (like L<environ(3)>), or NULL if there was an error.
6267 I<The caller must free the strings and the array after use>.\n\n"
6268          | RStruct (_, typ) ->
6269              pr "This function returns a C<struct guestfs_%s *>,
6270 or NULL if there was an error.
6271 I<The caller must call C<guestfs_free_%s> after use>.\n\n" typ typ
6272          | RStructList (_, typ) ->
6273              pr "This function returns a C<struct guestfs_%s_list *>
6274 (see E<lt>guestfs-structs.hE<gt>),
6275 or NULL if there was an error.
6276 I<The caller must call C<guestfs_free_%s_list> after use>.\n\n" typ typ
6277          | RHashtable _ ->
6278              pr "This function returns a NULL-terminated array of
6279 strings, or NULL if there was an error.
6280 The array of strings will always have length C<2n+1>, where
6281 C<n> keys and values alternate, followed by the trailing NULL entry.
6282 I<The caller must free the strings and the array after use>.\n\n"
6283          | RBufferOut _ ->
6284              pr "This function returns a buffer, or NULL on error.
6285 The size of the returned buffer is written to C<*size_r>.
6286 I<The caller must free the returned buffer after use>.\n\n"
6287         );
6288         if List.mem Progress flags then
6289           pr "%s\n\n" progress_message;
6290         if List.mem ProtocolLimitWarning flags then
6291           pr "%s\n\n" protocol_limit_warning;
6292         if List.mem DangerWillRobinson flags then
6293           pr "%s\n\n" danger_will_robinson;
6294         if List.exists (function Key _ -> true | _ -> false) (snd style) then
6295           pr "This function takes a key or passphrase parameter which
6296 could contain sensitive material.  Read the section
6297 L</KEYS AND PASSPHRASES> for more information.\n\n";
6298         match deprecation_notice flags with
6299         | None -> ()
6300         | Some txt -> pr "%s\n\n" txt
6301       )
6302   ) all_functions_sorted
6303
6304 and generate_structs_pod () =
6305   (* Structs documentation. *)
6306   List.iter (
6307     fun (typ, cols) ->
6308       pr "=head2 guestfs_%s\n" typ;
6309       pr "\n";
6310       pr " struct guestfs_%s {\n" typ;
6311       List.iter (
6312         function
6313         | name, FChar -> pr "   char %s;\n" name
6314         | name, FUInt32 -> pr "   uint32_t %s;\n" name
6315         | name, FInt32 -> pr "   int32_t %s;\n" name
6316         | name, (FUInt64|FBytes) -> pr "   uint64_t %s;\n" name
6317         | name, FInt64 -> pr "   int64_t %s;\n" name
6318         | name, FString -> pr "   char *%s;\n" name
6319         | name, FBuffer ->
6320             pr "   /* The next two fields describe a byte array. */\n";
6321             pr "   uint32_t %s_len;\n" name;
6322             pr "   char *%s;\n" name
6323         | name, FUUID ->
6324             pr "   /* The next field is NOT nul-terminated, be careful when printing it: */\n";
6325             pr "   char %s[32];\n" name
6326         | name, FOptPercent ->
6327             pr "   /* The next field is [0..100] or -1 meaning 'not present': */\n";
6328             pr "   float %s;\n" name
6329       ) cols;
6330       pr " };\n";
6331       pr " \n";
6332       pr " struct guestfs_%s_list {\n" typ;
6333       pr "   uint32_t len; /* Number of elements in list. */\n";
6334       pr "   struct guestfs_%s *val; /* Elements. */\n" typ;
6335       pr " };\n";
6336       pr " \n";
6337       pr " void guestfs_free_%s (struct guestfs_free_%s *);\n" typ typ;
6338       pr " void guestfs_free_%s_list (struct guestfs_free_%s_list *);\n"
6339         typ typ;
6340       pr "\n"
6341   ) structs
6342
6343 and generate_availability_pod () =
6344   (* Availability documentation. *)
6345   pr "=over 4\n";
6346   pr "\n";
6347   List.iter (
6348     fun (group, functions) ->
6349       pr "=item B<%s>\n" group;
6350       pr "\n";
6351       pr "The following functions:\n";
6352       List.iter (pr "L</guestfs_%s>\n") functions;
6353       pr "\n"
6354   ) optgroups;
6355   pr "=back\n";
6356   pr "\n"
6357
6358 (* Generate the protocol (XDR) file, 'guestfs_protocol.x' and
6359  * indirectly 'guestfs_protocol.h' and 'guestfs_protocol.c'.
6360  *
6361  * We have to use an underscore instead of a dash because otherwise
6362  * rpcgen generates incorrect code.
6363  *
6364  * This header is NOT exported to clients, but see also generate_structs_h.
6365  *)
6366 and generate_xdr () =
6367   generate_header CStyle LGPLv2plus;
6368
6369   (* This has to be defined to get around a limitation in Sun's rpcgen. *)
6370   pr "typedef string guestfs_str<>;\n";
6371   pr "\n";
6372
6373   (* Internal structures. *)
6374   List.iter (
6375     function
6376     | typ, cols ->
6377         pr "struct guestfs_int_%s {\n" typ;
6378         List.iter (function
6379                    | name, FChar -> pr "  char %s;\n" name
6380                    | name, FString -> pr "  string %s<>;\n" name
6381                    | name, FBuffer -> pr "  opaque %s<>;\n" name
6382                    | name, FUUID -> pr "  opaque %s[32];\n" name
6383                    | name, (FInt32|FUInt32) -> pr "  int %s;\n" name
6384                    | name, (FInt64|FUInt64|FBytes) -> pr "  hyper %s;\n" name
6385                    | name, FOptPercent -> pr "  float %s;\n" name
6386                   ) cols;
6387         pr "};\n";
6388         pr "\n";
6389         pr "typedef struct guestfs_int_%s guestfs_int_%s_list<>;\n" typ typ;
6390         pr "\n";
6391   ) structs;
6392
6393   List.iter (
6394     fun (shortname, style, _, _, _, _, _) ->
6395       let name = "guestfs_" ^ shortname in
6396
6397       (match snd style with
6398        | [] -> ()
6399        | args ->
6400            pr "struct %s_args {\n" name;
6401            List.iter (
6402              function
6403              | Pathname n | Device n | Dev_or_Path n | String n | Key n ->
6404                  pr "  string %s<>;\n" n
6405              | OptString n -> pr "  guestfs_str *%s;\n" n
6406              | StringList n | DeviceList n -> pr "  guestfs_str %s<>;\n" n
6407              | Bool n -> pr "  bool %s;\n" n
6408              | Int n -> pr "  int %s;\n" n
6409              | Int64 n -> pr "  hyper %s;\n" n
6410              | BufferIn n ->
6411                  pr "  opaque %s<>;\n" n
6412              | FileIn _ | FileOut _ -> ()
6413            ) args;
6414            pr "};\n\n"
6415       );
6416       (match fst style with
6417        | RErr -> ()
6418        | RInt n ->
6419            pr "struct %s_ret {\n" name;
6420            pr "  int %s;\n" n;
6421            pr "};\n\n"
6422        | RInt64 n ->
6423            pr "struct %s_ret {\n" name;
6424            pr "  hyper %s;\n" n;
6425            pr "};\n\n"
6426        | RBool n ->
6427            pr "struct %s_ret {\n" name;
6428            pr "  bool %s;\n" n;
6429            pr "};\n\n"
6430        | RConstString _ | RConstOptString _ ->
6431            failwithf "RConstString|RConstOptString cannot be used by daemon functions"
6432        | RString n ->
6433            pr "struct %s_ret {\n" name;
6434            pr "  string %s<>;\n" n;
6435            pr "};\n\n"
6436        | RStringList n ->
6437            pr "struct %s_ret {\n" name;
6438            pr "  guestfs_str %s<>;\n" n;
6439            pr "};\n\n"
6440        | RStruct (n, typ) ->
6441            pr "struct %s_ret {\n" name;
6442            pr "  guestfs_int_%s %s;\n" typ n;
6443            pr "};\n\n"
6444        | RStructList (n, typ) ->
6445            pr "struct %s_ret {\n" name;
6446            pr "  guestfs_int_%s_list %s;\n" typ n;
6447            pr "};\n\n"
6448        | RHashtable n ->
6449            pr "struct %s_ret {\n" name;
6450            pr "  guestfs_str %s<>;\n" n;
6451            pr "};\n\n"
6452        | RBufferOut n ->
6453            pr "struct %s_ret {\n" name;
6454            pr "  opaque %s<>;\n" n;
6455            pr "};\n\n"
6456       );
6457   ) daemon_functions;
6458
6459   (* Table of procedure numbers. *)
6460   pr "enum guestfs_procedure {\n";
6461   List.iter (
6462     fun (shortname, _, proc_nr, _, _, _, _) ->
6463       pr "  GUESTFS_PROC_%s = %d,\n" (String.uppercase shortname) proc_nr
6464   ) daemon_functions;
6465   pr "  GUESTFS_PROC_NR_PROCS\n";
6466   pr "};\n";
6467   pr "\n";
6468
6469   (* Having to choose a maximum message size is annoying for several
6470    * reasons (it limits what we can do in the API), but it (a) makes
6471    * the protocol a lot simpler, and (b) provides a bound on the size
6472    * of the daemon which operates in limited memory space.
6473    *)
6474   pr "const GUESTFS_MESSAGE_MAX = %d;\n" (4 * 1024 * 1024);
6475   pr "\n";
6476
6477   (* Message header, etc. *)
6478   pr "\
6479 /* The communication protocol is now documented in the guestfs(3)
6480  * manpage.
6481  */
6482
6483 const GUESTFS_PROGRAM = 0x2000F5F5;
6484 const GUESTFS_PROTOCOL_VERSION = 2;
6485
6486 /* These constants must be larger than any possible message length. */
6487 const GUESTFS_LAUNCH_FLAG = 0xf5f55ff5;
6488 const GUESTFS_CANCEL_FLAG = 0xffffeeee;
6489 const GUESTFS_PROGRESS_FLAG = 0xffff5555;
6490
6491 enum guestfs_message_direction {
6492   GUESTFS_DIRECTION_CALL = 0,        /* client -> daemon */
6493   GUESTFS_DIRECTION_REPLY = 1        /* daemon -> client */
6494 };
6495
6496 enum guestfs_message_status {
6497   GUESTFS_STATUS_OK = 0,
6498   GUESTFS_STATUS_ERROR = 1
6499 };
6500
6501 ";
6502
6503   pr "const GUESTFS_ERROR_LEN = %d;\n" (64 * 1024);
6504   pr "\n";
6505
6506   pr "\
6507 struct guestfs_message_error {
6508   int linux_errno;                   /* Linux errno if available. */
6509   string error_message<GUESTFS_ERROR_LEN>;
6510 };
6511
6512 struct guestfs_message_header {
6513   unsigned prog;                     /* GUESTFS_PROGRAM */
6514   unsigned vers;                     /* GUESTFS_PROTOCOL_VERSION */
6515   guestfs_procedure proc;            /* GUESTFS_PROC_x */
6516   guestfs_message_direction direction;
6517   unsigned serial;                   /* message serial number */
6518   guestfs_message_status status;
6519 };
6520
6521 const GUESTFS_MAX_CHUNK_SIZE = 8192;
6522
6523 struct guestfs_chunk {
6524   int cancel;                        /* if non-zero, transfer is cancelled */
6525   /* data size is 0 bytes if the transfer has finished successfully */
6526   opaque data<GUESTFS_MAX_CHUNK_SIZE>;
6527 };
6528
6529 /* Progress notifications.  Daemon self-limits these messages to
6530  * at most one per second.  The daemon can send these messages
6531  * at any time, and the caller should discard unexpected messages.
6532  * 'position' and 'total' have undefined units; however they may
6533  * have meaning for some calls.
6534  *
6535  * NB. guestfs___recv_from_daemon assumes the XDR-encoded
6536  * structure is 24 bytes long.
6537  */
6538 struct guestfs_progress {
6539   guestfs_procedure proc;            /* @0:  GUESTFS_PROC_x */
6540   unsigned serial;                   /* @4:  message serial number */
6541   unsigned hyper position;           /* @8:  0 <= position <= total */
6542   unsigned hyper total;              /* @16: total size of operation */
6543                                      /* @24: size of structure */
6544 };
6545 "
6546
6547 (* Generate the guestfs-structs.h file. *)
6548 and generate_structs_h () =
6549   generate_header CStyle LGPLv2plus;
6550
6551   (* This is a public exported header file containing various
6552    * structures.  The structures are carefully written to have
6553    * exactly the same in-memory format as the XDR structures that
6554    * we use on the wire to the daemon.  The reason for creating
6555    * copies of these structures here is just so we don't have to
6556    * export the whole of guestfs_protocol.h (which includes much
6557    * unrelated and XDR-dependent stuff that we don't want to be
6558    * public, or required by clients).
6559    *
6560    * To reiterate, we will pass these structures to and from the
6561    * client with a simple assignment or memcpy, so the format
6562    * must be identical to what rpcgen / the RFC defines.
6563    *)
6564
6565   (* Public structures. *)
6566   List.iter (
6567     fun (typ, cols) ->
6568       pr "struct guestfs_%s {\n" typ;
6569       List.iter (
6570         function
6571         | name, FChar -> pr "  char %s;\n" name
6572         | name, FString -> pr "  char *%s;\n" name
6573         | name, FBuffer ->
6574             pr "  uint32_t %s_len;\n" name;
6575             pr "  char *%s;\n" name
6576         | name, FUUID -> pr "  char %s[32]; /* this is NOT nul-terminated, be careful when printing */\n" name
6577         | name, FUInt32 -> pr "  uint32_t %s;\n" name
6578         | name, FInt32 -> pr "  int32_t %s;\n" name
6579         | name, (FUInt64|FBytes) -> pr "  uint64_t %s;\n" name
6580         | name, FInt64 -> pr "  int64_t %s;\n" name
6581         | name, FOptPercent -> pr "  float %s; /* [0..100] or -1 */\n" name
6582       ) cols;
6583       pr "};\n";
6584       pr "\n";
6585       pr "struct guestfs_%s_list {\n" typ;
6586       pr "  uint32_t len;\n";
6587       pr "  struct guestfs_%s *val;\n" typ;
6588       pr "};\n";
6589       pr "\n";
6590       pr "extern void guestfs_free_%s (struct guestfs_%s *);\n" typ typ;
6591       pr "extern void guestfs_free_%s_list (struct guestfs_%s_list *);\n" typ typ;
6592       pr "\n"
6593   ) structs
6594
6595 (* Generate the guestfs-actions.h file. *)
6596 and generate_actions_h () =
6597   generate_header CStyle LGPLv2plus;
6598   List.iter (
6599     fun (shortname, style, _, flags, _, _, _) ->
6600       let name = "guestfs_" ^ shortname in
6601
6602       let deprecated =
6603         List.exists (function DeprecatedBy _ -> true | _ -> false) flags in
6604       let test0 =
6605         String.length shortname >= 5 && String.sub shortname 0 5 = "test0" in
6606       let debug =
6607         String.length shortname >= 5 && String.sub shortname 0 5 = "debug" in
6608       if not deprecated && not test0 && not debug then
6609         pr "#define LIBGUESTFS_HAVE_%s 1\n" (String.uppercase shortname);
6610
6611       generate_prototype ~single_line:true ~newline:true ~handle:"g"
6612         name style
6613   ) all_functions_sorted
6614
6615 (* Generate the guestfs-internal-actions.h file. *)
6616 and generate_internal_actions_h () =
6617   generate_header CStyle LGPLv2plus;
6618   List.iter (
6619     fun (shortname, style, _, _, _, _, _) ->
6620       let name = "guestfs__" ^ shortname in
6621       generate_prototype ~single_line:true ~newline:true ~handle:"g"
6622         name style
6623   ) non_daemon_functions
6624
6625 (* Generate the client-side dispatch stubs. *)
6626 and generate_client_actions () =
6627   generate_header CStyle LGPLv2plus;
6628
6629   pr "\
6630 #include <stdio.h>
6631 #include <stdlib.h>
6632 #include <stdint.h>
6633 #include <string.h>
6634 #include <inttypes.h>
6635
6636 #include \"guestfs.h\"
6637 #include \"guestfs-internal.h\"
6638 #include \"guestfs-internal-actions.h\"
6639 #include \"guestfs_protocol.h\"
6640
6641 /* Check the return message from a call for validity. */
6642 static int
6643 check_reply_header (guestfs_h *g,
6644                     const struct guestfs_message_header *hdr,
6645                     unsigned int proc_nr, unsigned int serial)
6646 {
6647   if (hdr->prog != GUESTFS_PROGRAM) {
6648     error (g, \"wrong program (%%d/%%d)\", hdr->prog, GUESTFS_PROGRAM);
6649     return -1;
6650   }
6651   if (hdr->vers != GUESTFS_PROTOCOL_VERSION) {
6652     error (g, \"wrong protocol version (%%d/%%d)\",
6653            hdr->vers, GUESTFS_PROTOCOL_VERSION);
6654     return -1;
6655   }
6656   if (hdr->direction != GUESTFS_DIRECTION_REPLY) {
6657     error (g, \"unexpected message direction (%%d/%%d)\",
6658            hdr->direction, GUESTFS_DIRECTION_REPLY);
6659     return -1;
6660   }
6661   if (hdr->proc != proc_nr) {
6662     error (g, \"unexpected procedure number (%%d/%%d)\", hdr->proc, proc_nr);
6663     return -1;
6664   }
6665   if (hdr->serial != serial) {
6666     error (g, \"unexpected serial (%%d/%%d)\", hdr->serial, serial);
6667     return -1;
6668   }
6669
6670   return 0;
6671 }
6672
6673 /* Check we are in the right state to run a high-level action. */
6674 static int
6675 check_state (guestfs_h *g, const char *caller)
6676 {
6677   if (!guestfs__is_ready (g)) {
6678     if (guestfs__is_config (g) || guestfs__is_launching (g))
6679       error (g, \"%%s: call launch before using this function\\n(in guestfish, don't forget to use the 'run' command)\",
6680         caller);
6681     else
6682       error (g, \"%%s called from the wrong state, %%d != READY\",
6683         caller, guestfs__get_state (g));
6684     return -1;
6685   }
6686   return 0;
6687 }
6688
6689 ";
6690
6691   let error_code_of = function
6692     | RErr | RInt _ | RInt64 _ | RBool _ -> "-1"
6693     | RConstString _ | RConstOptString _
6694     | RString _ | RStringList _
6695     | RStruct _ | RStructList _
6696     | RHashtable _ | RBufferOut _ -> "NULL"
6697   in
6698
6699   (* Generate code to check String-like parameters are not passed in
6700    * as NULL (returning an error if they are).
6701    *)
6702   let check_null_strings shortname style =
6703     let pr_newline = ref false in
6704     List.iter (
6705       function
6706       (* parameters which should not be NULL *)
6707       | String n
6708       | Device n
6709       | Pathname n
6710       | Dev_or_Path n
6711       | FileIn n
6712       | FileOut n
6713       | BufferIn n
6714       | StringList n
6715       | DeviceList n
6716       | Key n ->
6717           pr "  if (%s == NULL) {\n" n;
6718           pr "    error (g, \"%%s: %%s: parameter cannot be NULL\",\n";
6719           pr "           \"%s\", \"%s\");\n" shortname n;
6720           pr "    return %s;\n" (error_code_of (fst style));
6721           pr "  }\n";
6722           pr_newline := true
6723
6724       (* can be NULL *)
6725       | OptString _
6726
6727       (* not applicable *)
6728       | Bool _
6729       | Int _
6730       | Int64 _ -> ()
6731     ) (snd style);
6732
6733     if !pr_newline then pr "\n";
6734   in
6735
6736   (* Generate code to generate guestfish call traces. *)
6737   let trace_call shortname style =
6738     pr "  if (guestfs__get_trace (g)) {\n";
6739
6740     let needs_i =
6741       List.exists (function
6742                    | StringList _ | DeviceList _ -> true
6743                    | _ -> false) (snd style) in
6744     if needs_i then (
6745       pr "    size_t i;\n";
6746       pr "\n"
6747     );
6748
6749     pr "    fprintf (stderr, \"%s\");\n" shortname;
6750     List.iter (
6751       function
6752       | String n                        (* strings *)
6753       | Device n
6754       | Pathname n
6755       | Dev_or_Path n
6756       | FileIn n
6757       | FileOut n
6758       | BufferIn n
6759       | Key n ->
6760           (* guestfish doesn't support string escaping, so neither do we *)
6761           pr "    fprintf (stderr, \" \\\"%%s\\\"\", %s);\n" n
6762       | OptString n ->                  (* string option *)
6763           pr "    if (%s) fprintf (stderr, \" \\\"%%s\\\"\", %s);\n" n n;
6764           pr "    else fprintf (stderr, \" null\");\n"
6765       | StringList n
6766       | DeviceList n ->                 (* string list *)
6767           pr "    fputc (' ', stderr);\n";
6768           pr "    fputc ('\"', stderr);\n";
6769           pr "    for (i = 0; %s[i]; ++i) {\n" n;
6770           pr "      if (i > 0) fputc (' ', stderr);\n";
6771           pr "      fputs (%s[i], stderr);\n" n;
6772           pr "    }\n";
6773           pr "    fputc ('\"', stderr);\n";
6774       | Bool n ->                       (* boolean *)
6775           pr "    fputs (%s ? \" true\" : \" false\", stderr);\n" n
6776       | Int n ->                        (* int *)
6777           pr "    fprintf (stderr, \" %%d\", %s);\n" n
6778       | Int64 n ->
6779           pr "    fprintf (stderr, \" %%\" PRIi64, %s);\n" n
6780     ) (snd style);
6781     pr "    fputc ('\\n', stderr);\n";
6782     pr "  }\n";
6783     pr "\n";
6784   in
6785
6786   (* For non-daemon functions, generate a wrapper around each function. *)
6787   List.iter (
6788     fun (shortname, style, _, _, _, _, _) ->
6789       let name = "guestfs_" ^ shortname in
6790
6791       generate_prototype ~extern:false ~semicolon:false ~newline:true
6792         ~handle:"g" name style;
6793       pr "{\n";
6794       check_null_strings shortname style;
6795       trace_call shortname style;
6796       pr "  return guestfs__%s " shortname;
6797       generate_c_call_args ~handle:"g" style;
6798       pr ";\n";
6799       pr "}\n";
6800       pr "\n"
6801   ) non_daemon_functions;
6802
6803   (* Client-side stubs for each function. *)
6804   List.iter (
6805     fun (shortname, style, _, _, _, _, _) ->
6806       let name = "guestfs_" ^ shortname in
6807       let error_code = error_code_of (fst style) in
6808
6809       (* Generate the action stub. *)
6810       generate_prototype ~extern:false ~semicolon:false ~newline:true
6811         ~handle:"g" name style;
6812
6813       pr "{\n";
6814
6815       (match snd style with
6816        | [] -> ()
6817        | _ -> pr "  struct %s_args args;\n" name
6818       );
6819
6820       pr "  guestfs_message_header hdr;\n";
6821       pr "  guestfs_message_error err;\n";
6822       let has_ret =
6823         match fst style with
6824         | RErr -> false
6825         | RConstString _ | RConstOptString _ ->
6826             failwithf "RConstString|RConstOptString cannot be used by daemon functions"
6827         | RInt _ | RInt64 _
6828         | RBool _ | RString _ | RStringList _
6829         | RStruct _ | RStructList _
6830         | RHashtable _ | RBufferOut _ ->
6831             pr "  struct %s_ret ret;\n" name;
6832             true in
6833
6834       pr "  int serial;\n";
6835       pr "  int r;\n";
6836       pr "\n";
6837       check_null_strings shortname style;
6838       trace_call shortname style;
6839       pr "  if (check_state (g, \"%s\") == -1) return %s;\n"
6840         shortname error_code;
6841       pr "  guestfs___set_busy (g);\n";
6842       pr "\n";
6843
6844       (* Send the main header and arguments. *)
6845       (match snd style with
6846        | [] ->
6847            pr "  serial = guestfs___send (g, GUESTFS_PROC_%s, NULL, NULL);\n"
6848              (String.uppercase shortname)
6849        | args ->
6850            List.iter (
6851              function
6852              | Pathname n | Device n | Dev_or_Path n | String n | Key n ->
6853                  pr "  args.%s = (char *) %s;\n" n n
6854              | OptString n ->
6855                  pr "  args.%s = %s ? (char **) &%s : NULL;\n" n n n
6856              | StringList n | DeviceList n ->
6857                  pr "  args.%s.%s_val = (char **) %s;\n" n n n;
6858                  pr "  for (args.%s.%s_len = 0; %s[args.%s.%s_len]; args.%s.%s_len++) ;\n" n n n n n n n;
6859              | Bool n ->
6860                  pr "  args.%s = %s;\n" n n
6861              | Int n ->
6862                  pr "  args.%s = %s;\n" n n
6863              | Int64 n ->
6864                  pr "  args.%s = %s;\n" n n
6865              | FileIn _ | FileOut _ -> ()
6866              | BufferIn n ->
6867                  pr "  /* Just catch grossly large sizes. XDR encoding will make this precise. */\n";
6868                  pr "  if (%s_size >= GUESTFS_MESSAGE_MAX) {\n" n;
6869                  pr "    error (g, \"%%s: size of input buffer too large\", \"%s\");\n"
6870                    shortname;
6871                  pr "    guestfs___end_busy (g);\n";
6872                  pr "    return %s;\n" error_code;
6873                  pr "  }\n";
6874                  pr "  args.%s.%s_val = (char *) %s;\n" n n n;
6875                  pr "  args.%s.%s_len = %s_size;\n" n n n
6876            ) args;
6877            pr "  serial = guestfs___send (g, GUESTFS_PROC_%s,\n"
6878              (String.uppercase shortname);
6879            pr "        (xdrproc_t) xdr_%s_args, (char *) &args);\n"
6880              name;
6881       );
6882       pr "  if (serial == -1) {\n";
6883       pr "    guestfs___end_busy (g);\n";
6884       pr "    return %s;\n" error_code;
6885       pr "  }\n";
6886       pr "\n";
6887
6888       (* Send any additional files (FileIn) requested. *)
6889       let need_read_reply_label = ref false in
6890       List.iter (
6891         function
6892         | FileIn n ->
6893             pr "  r = guestfs___send_file (g, %s);\n" n;
6894             pr "  if (r == -1) {\n";
6895             pr "    guestfs___end_busy (g);\n";
6896             pr "    return %s;\n" error_code;
6897             pr "  }\n";
6898             pr "  if (r == -2) /* daemon cancelled */\n";
6899             pr "    goto read_reply;\n";
6900             need_read_reply_label := true;
6901             pr "\n";
6902         | _ -> ()
6903       ) (snd style);
6904
6905       (* Wait for the reply from the remote end. *)
6906       if !need_read_reply_label then pr " read_reply:\n";
6907       pr "  memset (&hdr, 0, sizeof hdr);\n";
6908       pr "  memset (&err, 0, sizeof err);\n";
6909       if has_ret then pr "  memset (&ret, 0, sizeof ret);\n";
6910       pr "\n";
6911       pr "  r = guestfs___recv (g, \"%s\", &hdr, &err,\n        " shortname;
6912       if not has_ret then
6913         pr "NULL, NULL"
6914       else
6915         pr "(xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret" shortname;
6916       pr ");\n";
6917
6918       pr "  if (r == -1) {\n";
6919       pr "    guestfs___end_busy (g);\n";
6920       pr "    return %s;\n" error_code;
6921       pr "  }\n";
6922       pr "\n";
6923
6924       pr "  if (check_reply_header (g, &hdr, GUESTFS_PROC_%s, serial) == -1) {\n"
6925         (String.uppercase shortname);
6926       pr "    guestfs___end_busy (g);\n";
6927       pr "    return %s;\n" error_code;
6928       pr "  }\n";
6929       pr "\n";
6930
6931       pr "  if (hdr.status == GUESTFS_STATUS_ERROR) {\n";
6932       pr "    error (g, \"%%s: %%s\", \"%s\", err.error_message);\n" shortname;
6933       pr "    free (err.error_message);\n";
6934       pr "    guestfs___end_busy (g);\n";
6935       pr "    return %s;\n" error_code;
6936       pr "  }\n";
6937       pr "\n";
6938
6939       (* Expecting to receive further files (FileOut)? *)
6940       List.iter (
6941         function
6942         | FileOut n ->
6943             pr "  if (guestfs___recv_file (g, %s) == -1) {\n" n;
6944             pr "    guestfs___end_busy (g);\n";
6945             pr "    return %s;\n" error_code;
6946             pr "  }\n";
6947             pr "\n";
6948         | _ -> ()
6949       ) (snd style);
6950
6951       pr "  guestfs___end_busy (g);\n";
6952
6953       (match fst style with
6954        | RErr -> pr "  return 0;\n"
6955        | RInt n | RInt64 n | RBool n ->
6956            pr "  return ret.%s;\n" n
6957        | RConstString _ | RConstOptString _ ->
6958            failwithf "RConstString|RConstOptString cannot be used by daemon functions"
6959        | RString n ->
6960            pr "  return ret.%s; /* caller will free */\n" n
6961        | RStringList n | RHashtable n ->
6962            pr "  /* caller will free this, but we need to add a NULL entry */\n";
6963            pr "  ret.%s.%s_val =\n" n n;
6964            pr "    safe_realloc (g, ret.%s.%s_val,\n" n n;
6965            pr "                  sizeof (char *) * (ret.%s.%s_len + 1));\n"
6966              n n;
6967            pr "  ret.%s.%s_val[ret.%s.%s_len] = NULL;\n" n n n n;
6968            pr "  return ret.%s.%s_val;\n" n n
6969        | RStruct (n, _) ->
6970            pr "  /* caller will free this */\n";
6971            pr "  return safe_memdup (g, &ret.%s, sizeof (ret.%s));\n" n n
6972        | RStructList (n, _) ->
6973            pr "  /* caller will free this */\n";
6974            pr "  return safe_memdup (g, &ret.%s, sizeof (ret.%s));\n" n n
6975        | RBufferOut n ->
6976            pr "  /* RBufferOut is tricky: If the buffer is zero-length, then\n";
6977            pr "   * _val might be NULL here.  To make the API saner for\n";
6978            pr "   * callers, we turn this case into a unique pointer (using\n";
6979            pr "   * malloc(1)).\n";
6980            pr "   */\n";
6981            pr "  if (ret.%s.%s_len > 0) {\n" n n;
6982            pr "    *size_r = ret.%s.%s_len;\n" n n;
6983            pr "    return ret.%s.%s_val; /* caller will free */\n" n n;
6984            pr "  } else {\n";
6985            pr "    free (ret.%s.%s_val);\n" n n;
6986            pr "    char *p = safe_malloc (g, 1);\n";
6987            pr "    *size_r = ret.%s.%s_len;\n" n n;
6988            pr "    return p;\n";
6989            pr "  }\n";
6990       );
6991
6992       pr "}\n\n"
6993   ) daemon_functions;
6994
6995   (* Functions to free structures. *)
6996   pr "/* Structure-freeing functions.  These rely on the fact that the\n";
6997   pr " * structure format is identical to the XDR format.  See note in\n";
6998   pr " * generator.ml.\n";
6999   pr " */\n";
7000   pr "\n";
7001
7002   List.iter (
7003     fun (typ, _) ->
7004       pr "void\n";
7005       pr "guestfs_free_%s (struct guestfs_%s *x)\n" typ typ;
7006       pr "{\n";
7007       pr "  xdr_free ((xdrproc_t) xdr_guestfs_int_%s, (char *) x);\n" typ;
7008       pr "  free (x);\n";
7009       pr "}\n";
7010       pr "\n";
7011
7012       pr "void\n";
7013       pr "guestfs_free_%s_list (struct guestfs_%s_list *x)\n" typ typ;
7014       pr "{\n";
7015       pr "  xdr_free ((xdrproc_t) xdr_guestfs_int_%s_list, (char *) x);\n" typ;
7016       pr "  free (x);\n";
7017       pr "}\n";
7018       pr "\n";
7019
7020   ) structs;
7021
7022 (* Generate daemon/actions.h. *)
7023 and generate_daemon_actions_h () =
7024   generate_header CStyle GPLv2plus;
7025
7026   pr "#include \"../src/guestfs_protocol.h\"\n";
7027   pr "\n";
7028
7029   List.iter (
7030     fun (name, style, _, _, _, _, _) ->
7031       generate_prototype
7032         ~single_line:true ~newline:true ~in_daemon:true ~prefix:"do_"
7033         name style;
7034   ) daemon_functions
7035
7036 (* Generate the linker script which controls the visibility of
7037  * symbols in the public ABI and ensures no other symbols get
7038  * exported accidentally.
7039  *)
7040 and generate_linker_script () =
7041   generate_header HashStyle GPLv2plus;
7042
7043   let globals = [
7044     "guestfs_create";
7045     "guestfs_close";
7046     "guestfs_get_error_handler";
7047     "guestfs_get_out_of_memory_handler";
7048     "guestfs_get_private";
7049     "guestfs_last_error";
7050     "guestfs_set_close_callback";
7051     "guestfs_set_error_handler";
7052     "guestfs_set_launch_done_callback";
7053     "guestfs_set_log_message_callback";
7054     "guestfs_set_out_of_memory_handler";
7055     "guestfs_set_private";
7056     "guestfs_set_progress_callback";
7057     "guestfs_set_subprocess_quit_callback";
7058
7059     (* Unofficial parts of the API: the bindings code use these
7060      * functions, so it is useful to export them.
7061      *)
7062     "guestfs_safe_calloc";
7063     "guestfs_safe_malloc";
7064     "guestfs_safe_strdup";
7065     "guestfs_safe_memdup";
7066   ] in
7067   let functions =
7068     List.map (fun (name, _, _, _, _, _, _) -> "guestfs_" ^ name)
7069       all_functions in
7070   let structs =
7071     List.concat (
7072       List.map (fun (typ, _) ->
7073                   ["guestfs_free_" ^ typ; "guestfs_free_" ^ typ ^ "_list"])
7074         structs
7075     ) in
7076   let globals = List.sort compare (globals @ functions @ structs) in
7077
7078   pr "{\n";
7079   pr "    global:\n";
7080   List.iter (pr "        %s;\n") globals;
7081   pr "\n";
7082
7083   pr "    local:\n";
7084   pr "        *;\n";
7085   pr "};\n"
7086
7087 (* Generate the server-side stubs. *)
7088 and generate_daemon_actions () =
7089   generate_header CStyle GPLv2plus;
7090
7091   pr "#include <config.h>\n";
7092   pr "\n";
7093   pr "#include <stdio.h>\n";
7094   pr "#include <stdlib.h>\n";
7095   pr "#include <string.h>\n";
7096   pr "#include <inttypes.h>\n";
7097   pr "#include <rpc/types.h>\n";
7098   pr "#include <rpc/xdr.h>\n";
7099   pr "\n";
7100   pr "#include \"daemon.h\"\n";
7101   pr "#include \"c-ctype.h\"\n";
7102   pr "#include \"../src/guestfs_protocol.h\"\n";
7103   pr "#include \"actions.h\"\n";
7104   pr "\n";
7105
7106   List.iter (
7107     fun (name, style, _, _, _, _, _) ->
7108       (* Generate server-side stubs. *)
7109       pr "static void %s_stub (XDR *xdr_in)\n" name;
7110       pr "{\n";
7111       let error_code =
7112         match fst style with
7113         | RErr | RInt _ -> pr "  int r;\n"; "-1"
7114         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
7115         | RBool _ -> pr "  int r;\n"; "-1"
7116         | RConstString _ | RConstOptString _ ->
7117             failwithf "RConstString|RConstOptString cannot be used by daemon functions"
7118         | RString _ -> pr "  char *r;\n"; "NULL"
7119         | RStringList _ | RHashtable _ -> pr "  char **r;\n"; "NULL"
7120         | RStruct (_, typ) -> pr "  guestfs_int_%s *r;\n" typ; "NULL"
7121         | RStructList (_, typ) -> pr "  guestfs_int_%s_list *r;\n" typ; "NULL"
7122         | RBufferOut _ ->
7123             pr "  size_t size = 1;\n";
7124             pr "  char *r;\n";
7125             "NULL" in
7126
7127       (match snd style with
7128        | [] -> ()
7129        | args ->
7130            pr "  struct guestfs_%s_args args;\n" name;
7131            List.iter (
7132              function
7133              | Device n | Dev_or_Path n
7134              | Pathname n
7135              | String n
7136              | Key n -> ()
7137              | OptString n -> pr "  char *%s;\n" n
7138              | StringList n | DeviceList n -> pr "  char **%s;\n" n
7139              | Bool n -> pr "  int %s;\n" n
7140              | Int n -> pr "  int %s;\n" n
7141              | Int64 n -> pr "  int64_t %s;\n" n
7142              | FileIn _ | FileOut _ -> ()
7143              | BufferIn n ->
7144                  pr "  const char *%s;\n" n;
7145                  pr "  size_t %s_size;\n" n
7146            ) args
7147       );
7148       pr "\n";
7149
7150       let is_filein =
7151         List.exists (function FileIn _ -> true | _ -> false) (snd style) in
7152
7153       (match snd style with
7154        | [] -> ()
7155        | args ->
7156            pr "  memset (&args, 0, sizeof args);\n";
7157            pr "\n";
7158            pr "  if (!xdr_guestfs_%s_args (xdr_in, &args)) {\n" name;
7159            if is_filein then
7160              pr "    if (cancel_receive () != -2)\n";
7161            pr "      reply_with_error (\"daemon failed to decode procedure arguments\");\n";
7162            pr "    goto done;\n";
7163            pr "  }\n";
7164            let pr_args n =
7165              pr "  char *%s = args.%s;\n" n n
7166            in
7167            let pr_list_handling_code n =
7168              pr "  %s = realloc (args.%s.%s_val,\n" n n n;
7169              pr "                sizeof (char *) * (args.%s.%s_len+1));\n" n n;
7170              pr "  if (%s == NULL) {\n" n;
7171              if is_filein then
7172                pr "    if (cancel_receive () != -2)\n";
7173              pr "      reply_with_perror (\"realloc\");\n";
7174              pr "    goto done;\n";
7175              pr "  }\n";
7176              pr "  %s[args.%s.%s_len] = NULL;\n" n n n;
7177              pr "  args.%s.%s_val = %s;\n" n n n;
7178            in
7179            List.iter (
7180              function
7181              | Pathname n ->
7182                  pr_args n;
7183                  pr "  ABS_PATH (%s, %s, goto done);\n"
7184                    n (if is_filein then "cancel_receive ()" else "0");
7185              | Device n ->
7186                  pr_args n;
7187                  pr "  RESOLVE_DEVICE (%s, %s, goto done);\n"
7188                    n (if is_filein then "cancel_receive ()" else "0");
7189              | Dev_or_Path n ->
7190                  pr_args n;
7191                  pr "  REQUIRE_ROOT_OR_RESOLVE_DEVICE (%s, %s, goto done);\n"
7192                    n (if is_filein then "cancel_receive ()" else "0");
7193              | String n | Key n -> pr_args n
7194              | OptString n -> pr "  %s = args.%s ? *args.%s : NULL;\n" n n n
7195              | StringList n ->
7196                  pr_list_handling_code n;
7197              | DeviceList n ->
7198                  pr_list_handling_code n;
7199                  pr "  /* Ensure that each is a device,\n";
7200                  pr "   * and perform device name translation.\n";
7201                  pr "   */\n";
7202                  pr "  {\n";
7203                  pr "    size_t i;\n";
7204                  pr "    for (i = 0; %s[i] != NULL; ++i)\n" n;
7205                  pr "      RESOLVE_DEVICE (%s[i], %s, goto done);\n" n
7206                    (if is_filein then "cancel_receive ()" else "0");
7207                  pr "  }\n";
7208              | Bool n -> pr "  %s = args.%s;\n" n n
7209              | Int n -> pr "  %s = args.%s;\n" n n
7210              | Int64 n -> pr "  %s = args.%s;\n" n n
7211              | FileIn _ | FileOut _ -> ()
7212              | BufferIn n ->
7213                  pr "  %s = args.%s.%s_val;\n" n n n;
7214                  pr "  %s_size = args.%s.%s_len;\n" n n n
7215            ) args;
7216            pr "\n"
7217       );
7218
7219       (* this is used at least for do_equal *)
7220       if List.exists (function Pathname _ -> true | _ -> false) (snd style) then (
7221         (* Emit NEED_ROOT just once, even when there are two or
7222            more Pathname args *)
7223         pr "  NEED_ROOT (%s, goto done);\n"
7224           (if is_filein then "cancel_receive ()" else "0");
7225       );
7226
7227       (* Don't want to call the impl with any FileIn or FileOut
7228        * parameters, since these go "outside" the RPC protocol.
7229        *)
7230       let args' =
7231         List.filter (function FileIn _ | FileOut _ -> false | _ -> true)
7232           (snd style) in
7233       pr "  r = do_%s " name;
7234       generate_c_call_args (fst style, args');
7235       pr ";\n";
7236
7237       (match fst style with
7238        | RErr | RInt _ | RInt64 _ | RBool _
7239        | RConstString _ | RConstOptString _
7240        | RString _ | RStringList _ | RHashtable _
7241        | RStruct (_, _) | RStructList (_, _) ->
7242            pr "  if (r == %s)\n" error_code;
7243            pr "    /* do_%s has already called reply_with_error */\n" name;
7244            pr "    goto done;\n";
7245            pr "\n"
7246        | RBufferOut _ ->
7247            pr "  /* size == 0 && r == NULL could be a non-error case (just\n";
7248            pr "   * an ordinary zero-length buffer), so be careful ...\n";
7249            pr "   */\n";
7250            pr "  if (size == 1 && r == %s)\n" error_code;
7251            pr "    /* do_%s has already called reply_with_error */\n" name;
7252            pr "    goto done;\n";
7253            pr "\n"
7254       );
7255
7256       (* If there are any FileOut parameters, then the impl must
7257        * send its own reply.
7258        *)
7259       let no_reply =
7260         List.exists (function FileOut _ -> true | _ -> false) (snd style) in
7261       if no_reply then
7262         pr "  /* do_%s has already sent a reply */\n" name
7263       else (
7264         match fst style with
7265         | RErr -> pr "  reply (NULL, NULL);\n"
7266         | RInt n | RInt64 n | RBool n ->
7267             pr "  struct guestfs_%s_ret ret;\n" name;
7268             pr "  ret.%s = r;\n" n;
7269             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
7270               name
7271         | RConstString _ | RConstOptString _ ->
7272             failwithf "RConstString|RConstOptString cannot be used by daemon functions"
7273         | RString n ->
7274             pr "  struct guestfs_%s_ret ret;\n" name;
7275             pr "  ret.%s = r;\n" n;
7276             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
7277               name;
7278             pr "  free (r);\n"
7279         | RStringList n | RHashtable n ->
7280             pr "  struct guestfs_%s_ret ret;\n" name;
7281             pr "  ret.%s.%s_len = count_strings (r);\n" n n;
7282             pr "  ret.%s.%s_val = r;\n" n n;
7283             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
7284               name;
7285             pr "  free_strings (r);\n"
7286         | RStruct (n, _) ->
7287             pr "  struct guestfs_%s_ret ret;\n" name;
7288             pr "  ret.%s = *r;\n" n;
7289             pr "  reply ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
7290               name;
7291             pr "  xdr_free ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
7292               name
7293         | RStructList (n, _) ->
7294             pr "  struct guestfs_%s_ret ret;\n" name;
7295             pr "  ret.%s = *r;\n" n;
7296             pr "  reply ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
7297               name;
7298             pr "  xdr_free ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
7299               name
7300         | RBufferOut n ->
7301             pr "  struct guestfs_%s_ret ret;\n" name;
7302             pr "  ret.%s.%s_val = r;\n" n n;
7303             pr "  ret.%s.%s_len = size;\n" n n;
7304             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
7305               name;
7306             pr "  free (r);\n"
7307       );
7308
7309       (* Free the args. *)
7310       pr "done:\n";
7311       (match snd style with
7312        | [] -> ()
7313        | _ ->
7314            pr "  xdr_free ((xdrproc_t) xdr_guestfs_%s_args, (char *) &args);\n"
7315              name
7316       );
7317       pr "  return;\n";
7318       pr "}\n\n";
7319   ) daemon_functions;
7320
7321   (* Dispatch function. *)
7322   pr "void dispatch_incoming_message (XDR *xdr_in)\n";
7323   pr "{\n";
7324   pr "  switch (proc_nr) {\n";
7325
7326   List.iter (
7327     fun (name, style, _, _, _, _, _) ->
7328       pr "    case GUESTFS_PROC_%s:\n" (String.uppercase name);
7329       pr "      %s_stub (xdr_in);\n" name;
7330       pr "      break;\n"
7331   ) daemon_functions;
7332
7333   pr "    default:\n";
7334   pr "      reply_with_error (\"dispatch_incoming_message: unknown procedure number %%d, set LIBGUESTFS_PATH to point to the matching libguestfs appliance directory\", proc_nr);\n";
7335   pr "  }\n";
7336   pr "}\n";
7337   pr "\n";
7338
7339   (* LVM columns and tokenization functions. *)
7340   (* XXX This generates crap code.  We should rethink how we
7341    * do this parsing.
7342    *)
7343   List.iter (
7344     function
7345     | typ, cols ->
7346         pr "static const char *lvm_%s_cols = \"%s\";\n"
7347           typ (String.concat "," (List.map fst cols));
7348         pr "\n";
7349
7350         pr "static int lvm_tokenize_%s (char *str, guestfs_int_lvm_%s *r)\n" typ typ;
7351         pr "{\n";
7352         pr "  char *tok, *p, *next;\n";
7353         pr "  size_t i, j;\n";
7354         pr "\n";
7355         (*
7356           pr "  fprintf (stderr, \"%%s: <<%%s>>\\n\", __func__, str);\n";
7357           pr "\n";
7358         *)
7359         pr "  if (!str) {\n";
7360         pr "    fprintf (stderr, \"%%s: failed: passed a NULL string\\n\", __func__);\n";
7361         pr "    return -1;\n";
7362         pr "  }\n";
7363         pr "  if (!*str || c_isspace (*str)) {\n";
7364         pr "    fprintf (stderr, \"%%s: failed: passed a empty string or one beginning with whitespace\\n\", __func__);\n";
7365         pr "    return -1;\n";
7366         pr "  }\n";
7367         pr "  tok = str;\n";
7368         List.iter (
7369           fun (name, coltype) ->
7370             pr "  if (!tok) {\n";
7371             pr "    fprintf (stderr, \"%%s: failed: string finished early, around token %%s\\n\", __func__, \"%s\");\n" name;
7372             pr "    return -1;\n";
7373             pr "  }\n";
7374             pr "  p = strchrnul (tok, ',');\n";
7375             pr "  if (*p) next = p+1; else next = NULL;\n";
7376             pr "  *p = '\\0';\n";
7377             (match coltype with
7378              | FString ->
7379                  pr "  r->%s = strdup (tok);\n" name;
7380                  pr "  if (r->%s == NULL) {\n" name;
7381                  pr "    perror (\"strdup\");\n";
7382                  pr "    return -1;\n";
7383                  pr "  }\n"
7384              | FUUID ->
7385                  pr "  for (i = j = 0; i < 32; ++j) {\n";
7386                  pr "    if (tok[j] == '\\0') {\n";
7387                  pr "      fprintf (stderr, \"%%s: failed to parse UUID from '%%s'\\n\", __func__, tok);\n";
7388                  pr "      return -1;\n";
7389                  pr "    } else if (tok[j] != '-')\n";
7390                  pr "      r->%s[i++] = tok[j];\n" name;
7391                  pr "  }\n";
7392              | FBytes ->
7393                  pr "  if (sscanf (tok, \"%%\"SCNu64, &r->%s) != 1) {\n" name;
7394                  pr "    fprintf (stderr, \"%%s: failed to parse size '%%s' from token %%s\\n\", __func__, tok, \"%s\");\n" name;
7395                  pr "    return -1;\n";
7396                  pr "  }\n";
7397              | FInt64 ->
7398                  pr "  if (sscanf (tok, \"%%\"SCNi64, &r->%s) != 1) {\n" name;
7399                  pr "    fprintf (stderr, \"%%s: failed to parse int '%%s' from token %%s\\n\", __func__, tok, \"%s\");\n" name;
7400                  pr "    return -1;\n";
7401                  pr "  }\n";
7402              | FOptPercent ->
7403                  pr "  if (tok[0] == '\\0')\n";
7404                  pr "    r->%s = -1;\n" name;
7405                  pr "  else if (sscanf (tok, \"%%f\", &r->%s) != 1) {\n" name;
7406                  pr "    fprintf (stderr, \"%%s: failed to parse float '%%s' from token %%s\\n\", __func__, tok, \"%s\");\n" name;
7407                  pr "    return -1;\n";
7408                  pr "  }\n";
7409              | FBuffer | FInt32 | FUInt32 | FUInt64 | FChar ->
7410                  assert false (* can never be an LVM column *)
7411             );
7412             pr "  tok = next;\n";
7413         ) cols;
7414
7415         pr "  if (tok != NULL) {\n";
7416         pr "    fprintf (stderr, \"%%s: failed: extra tokens at end of string\\n\", __func__);\n";
7417         pr "    return -1;\n";
7418         pr "  }\n";
7419         pr "  return 0;\n";
7420         pr "}\n";
7421         pr "\n";
7422
7423         pr "guestfs_int_lvm_%s_list *\n" typ;
7424         pr "parse_command_line_%ss (void)\n" typ;
7425         pr "{\n";
7426         pr "  char *out, *err;\n";
7427         pr "  char *p, *pend;\n";
7428         pr "  int r, i;\n";
7429         pr "  guestfs_int_lvm_%s_list *ret;\n" typ;
7430         pr "  void *newp;\n";
7431         pr "\n";
7432         pr "  ret = malloc (sizeof *ret);\n";
7433         pr "  if (!ret) {\n";
7434         pr "    reply_with_perror (\"malloc\");\n";
7435         pr "    return NULL;\n";
7436         pr "  }\n";
7437         pr "\n";
7438         pr "  ret->guestfs_int_lvm_%s_list_len = 0;\n" typ;
7439         pr "  ret->guestfs_int_lvm_%s_list_val = NULL;\n" typ;
7440         pr "\n";
7441         pr "  r = command (&out, &err,\n";
7442         pr "           \"lvm\", \"%ss\",\n" typ;
7443         pr "           \"-o\", lvm_%s_cols, \"--unbuffered\", \"--noheadings\",\n" typ;
7444         pr "           \"--nosuffix\", \"--separator\", \",\", \"--units\", \"b\", NULL);\n";
7445         pr "  if (r == -1) {\n";
7446         pr "    reply_with_error (\"%%s\", err);\n";
7447         pr "    free (out);\n";
7448         pr "    free (err);\n";
7449         pr "    free (ret);\n";
7450         pr "    return NULL;\n";
7451         pr "  }\n";
7452         pr "\n";
7453         pr "  free (err);\n";
7454         pr "\n";
7455         pr "  /* Tokenize each line of the output. */\n";
7456         pr "  p = out;\n";
7457         pr "  i = 0;\n";
7458         pr "  while (p) {\n";
7459         pr "    pend = strchr (p, '\\n');       /* Get the next line of output. */\n";
7460         pr "    if (pend) {\n";
7461         pr "      *pend = '\\0';\n";
7462         pr "      pend++;\n";
7463         pr "    }\n";
7464         pr "\n";
7465         pr "    while (*p && c_isspace (*p))    /* Skip any leading whitespace. */\n";
7466         pr "      p++;\n";
7467         pr "\n";
7468         pr "    if (!*p) {                      /* Empty line?  Skip it. */\n";
7469         pr "      p = pend;\n";
7470         pr "      continue;\n";
7471         pr "    }\n";
7472         pr "\n";
7473         pr "    /* Allocate some space to store this next entry. */\n";
7474         pr "    newp = realloc (ret->guestfs_int_lvm_%s_list_val,\n" typ;
7475         pr "                sizeof (guestfs_int_lvm_%s) * (i+1));\n" typ;
7476         pr "    if (newp == NULL) {\n";
7477         pr "      reply_with_perror (\"realloc\");\n";
7478         pr "      free (ret->guestfs_int_lvm_%s_list_val);\n" typ;
7479         pr "      free (ret);\n";
7480         pr "      free (out);\n";
7481         pr "      return NULL;\n";
7482         pr "    }\n";
7483         pr "    ret->guestfs_int_lvm_%s_list_val = newp;\n" typ;
7484         pr "\n";
7485         pr "    /* Tokenize the next entry. */\n";
7486         pr "    r = lvm_tokenize_%s (p, &ret->guestfs_int_lvm_%s_list_val[i]);\n" typ typ;
7487         pr "    if (r == -1) {\n";
7488         pr "      reply_with_error (\"failed to parse output of '%ss' command\");\n" typ;
7489         pr "      free (ret->guestfs_int_lvm_%s_list_val);\n" typ;
7490         pr "      free (ret);\n";
7491         pr "      free (out);\n";
7492         pr "      return NULL;\n";
7493         pr "    }\n";
7494         pr "\n";
7495         pr "    ++i;\n";
7496         pr "    p = pend;\n";
7497         pr "  }\n";
7498         pr "\n";
7499         pr "  ret->guestfs_int_lvm_%s_list_len = i;\n" typ;
7500         pr "\n";
7501         pr "  free (out);\n";
7502         pr "  return ret;\n";
7503         pr "}\n"
7504
7505   ) ["pv", lvm_pv_cols; "vg", lvm_vg_cols; "lv", lvm_lv_cols]
7506
7507 (* Generate a list of function names, for debugging in the daemon.. *)
7508 and generate_daemon_names () =
7509   generate_header CStyle GPLv2plus;
7510
7511   pr "#include <config.h>\n";
7512   pr "\n";
7513   pr "#include \"daemon.h\"\n";
7514   pr "\n";
7515
7516   pr "/* This array is indexed by proc_nr.  See guestfs_protocol.x. */\n";
7517   pr "const char *function_names[] = {\n";
7518   List.iter (
7519     fun (name, _, proc_nr, _, _, _, _) -> pr "  [%d] = \"%s\",\n" proc_nr name
7520   ) daemon_functions;
7521   pr "};\n";
7522
7523 (* Generate the optional groups for the daemon to implement
7524  * guestfs_available.
7525  *)
7526 and generate_daemon_optgroups_c () =
7527   generate_header CStyle GPLv2plus;
7528
7529   pr "#include <config.h>\n";
7530   pr "\n";
7531   pr "#include \"daemon.h\"\n";
7532   pr "#include \"optgroups.h\"\n";
7533   pr "\n";
7534
7535   pr "struct optgroup optgroups[] = {\n";
7536   List.iter (
7537     fun (group, _) ->
7538       pr "  { \"%s\", optgroup_%s_available },\n" group group
7539   ) optgroups;
7540   pr "  { NULL, NULL }\n";
7541   pr "};\n"
7542
7543 and generate_daemon_optgroups_h () =
7544   generate_header CStyle GPLv2plus;
7545
7546   List.iter (
7547     fun (group, _) ->
7548       pr "extern int optgroup_%s_available (void);\n" group
7549   ) optgroups
7550
7551 (* Generate the tests. *)
7552 and generate_tests () =
7553   generate_header CStyle GPLv2plus;
7554
7555   pr "\
7556 #include <stdio.h>
7557 #include <stdlib.h>
7558 #include <string.h>
7559 #include <unistd.h>
7560 #include <sys/types.h>
7561 #include <fcntl.h>
7562
7563 #include \"guestfs.h\"
7564 #include \"guestfs-internal.h\"
7565
7566 static guestfs_h *g;
7567 static int suppress_error = 0;
7568
7569 static void print_error (guestfs_h *g, void *data, const char *msg)
7570 {
7571   if (!suppress_error)
7572     fprintf (stderr, \"%%s\\n\", msg);
7573 }
7574
7575 /* FIXME: nearly identical code appears in fish.c */
7576 static void print_strings (char *const *argv)
7577 {
7578   size_t argc;
7579
7580   for (argc = 0; argv[argc] != NULL; ++argc)
7581     printf (\"\\t%%s\\n\", argv[argc]);
7582 }
7583
7584 /*
7585 static void print_table (char const *const *argv)
7586 {
7587   size_t i;
7588
7589   for (i = 0; argv[i] != NULL; i += 2)
7590     printf (\"%%s: %%s\\n\", argv[i], argv[i+1]);
7591 }
7592 */
7593
7594 static int
7595 is_available (const char *group)
7596 {
7597   const char *groups[] = { group, NULL };
7598   int r;
7599
7600   suppress_error = 1;
7601   r = guestfs_available (g, (char **) groups);
7602   suppress_error = 0;
7603
7604   return r == 0;
7605 }
7606
7607 static void
7608 incr (guestfs_h *g, void *iv)
7609 {
7610   int *i = (int *) iv;
7611   (*i)++;
7612 }
7613
7614 ";
7615
7616   (* Generate a list of commands which are not tested anywhere. *)
7617   pr "static void no_test_warnings (void)\n";
7618   pr "{\n";
7619
7620   let hash : (string, bool) Hashtbl.t = Hashtbl.create 13 in
7621   List.iter (
7622     fun (_, _, _, _, tests, _, _) ->
7623       let tests = filter_map (
7624         function
7625         | (_, (Always|If _|Unless _|IfAvailable _), test) -> Some test
7626         | (_, Disabled, _) -> None
7627       ) tests in
7628       let seq = List.concat (List.map seq_of_test tests) in
7629       let cmds_tested = List.map List.hd seq in
7630       List.iter (fun cmd -> Hashtbl.replace hash cmd true) cmds_tested
7631   ) all_functions;
7632
7633   List.iter (
7634     fun (name, _, _, _, _, _, _) ->
7635       if not (Hashtbl.mem hash name) then
7636         pr "  fprintf (stderr, \"warning: \\\"guestfs_%s\\\" has no tests\\n\");\n" name
7637   ) all_functions;
7638
7639   pr "}\n";
7640   pr "\n";
7641
7642   (* Generate the actual tests.  Note that we generate the tests
7643    * in reverse order, deliberately, so that (in general) the
7644    * newest tests run first.  This makes it quicker and easier to
7645    * debug them.
7646    *)
7647   let test_names =
7648     List.map (
7649       fun (name, _, _, flags, tests, _, _) ->
7650         mapi (generate_one_test name flags) tests
7651     ) (List.rev all_functions) in
7652   let test_names = List.concat test_names in
7653   let nr_tests = List.length test_names in
7654
7655   pr "\
7656 int main (int argc, char *argv[])
7657 {
7658   char c = 0;
7659   unsigned long int n_failed = 0;
7660   const char *filename;
7661   int fd;
7662   int nr_tests, test_num = 0;
7663
7664   setbuf (stdout, NULL);
7665
7666   no_test_warnings ();
7667
7668   g = guestfs_create ();
7669   if (g == NULL) {
7670     printf (\"guestfs_create FAILED\\n\");
7671     exit (EXIT_FAILURE);
7672   }
7673
7674   guestfs_set_error_handler (g, print_error, NULL);
7675
7676   guestfs_set_path (g, \"../appliance\");
7677
7678   filename = \"test1.img\";
7679   fd = open (filename, O_WRONLY|O_CREAT|O_NOCTTY|O_NONBLOCK|O_TRUNC, 0666);
7680   if (fd == -1) {
7681     perror (filename);
7682     exit (EXIT_FAILURE);
7683   }
7684   if (lseek (fd, %d, SEEK_SET) == -1) {
7685     perror (\"lseek\");
7686     close (fd);
7687     unlink (filename);
7688     exit (EXIT_FAILURE);
7689   }
7690   if (write (fd, &c, 1) == -1) {
7691     perror (\"write\");
7692     close (fd);
7693     unlink (filename);
7694     exit (EXIT_FAILURE);
7695   }
7696   if (close (fd) == -1) {
7697     perror (filename);
7698     unlink (filename);
7699     exit (EXIT_FAILURE);
7700   }
7701   if (guestfs_add_drive (g, filename) == -1) {
7702     printf (\"guestfs_add_drive %%s FAILED\\n\", filename);
7703     exit (EXIT_FAILURE);
7704   }
7705
7706   filename = \"test2.img\";
7707   fd = open (filename, O_WRONLY|O_CREAT|O_NOCTTY|O_NONBLOCK|O_TRUNC, 0666);
7708   if (fd == -1) {
7709     perror (filename);
7710     exit (EXIT_FAILURE);
7711   }
7712   if (lseek (fd, %d, SEEK_SET) == -1) {
7713     perror (\"lseek\");
7714     close (fd);
7715     unlink (filename);
7716     exit (EXIT_FAILURE);
7717   }
7718   if (write (fd, &c, 1) == -1) {
7719     perror (\"write\");
7720     close (fd);
7721     unlink (filename);
7722     exit (EXIT_FAILURE);
7723   }
7724   if (close (fd) == -1) {
7725     perror (filename);
7726     unlink (filename);
7727     exit (EXIT_FAILURE);
7728   }
7729   if (guestfs_add_drive (g, filename) == -1) {
7730     printf (\"guestfs_add_drive %%s FAILED\\n\", filename);
7731     exit (EXIT_FAILURE);
7732   }
7733
7734   filename = \"test3.img\";
7735   fd = open (filename, O_WRONLY|O_CREAT|O_NOCTTY|O_NONBLOCK|O_TRUNC, 0666);
7736   if (fd == -1) {
7737     perror (filename);
7738     exit (EXIT_FAILURE);
7739   }
7740   if (lseek (fd, %d, SEEK_SET) == -1) {
7741     perror (\"lseek\");
7742     close (fd);
7743     unlink (filename);
7744     exit (EXIT_FAILURE);
7745   }
7746   if (write (fd, &c, 1) == -1) {
7747     perror (\"write\");
7748     close (fd);
7749     unlink (filename);
7750     exit (EXIT_FAILURE);
7751   }
7752   if (close (fd) == -1) {
7753     perror (filename);
7754     unlink (filename);
7755     exit (EXIT_FAILURE);
7756   }
7757   if (guestfs_add_drive (g, filename) == -1) {
7758     printf (\"guestfs_add_drive %%s FAILED\\n\", filename);
7759     exit (EXIT_FAILURE);
7760   }
7761
7762   if (guestfs_add_drive_ro (g, \"../images/test.iso\") == -1) {
7763     printf (\"guestfs_add_drive_ro ../images/test.iso FAILED\\n\");
7764     exit (EXIT_FAILURE);
7765   }
7766
7767   /* Set a timeout in case qemu hangs during launch (RHBZ#505329). */
7768   alarm (600);
7769
7770   if (guestfs_launch (g) == -1) {
7771     printf (\"guestfs_launch FAILED\\n\");
7772     exit (EXIT_FAILURE);
7773   }
7774
7775   /* Cancel previous alarm. */
7776   alarm (0);
7777
7778   nr_tests = %d;
7779
7780 " (500 * 1024 * 1024) (50 * 1024 * 1024) (10 * 1024 * 1024) nr_tests;
7781
7782   iteri (
7783     fun i test_name ->
7784       pr "  test_num++;\n";
7785       pr "  if (guestfs_get_verbose (g))\n";
7786       pr "    printf (\"-------------------------------------------------------------------------------\\n\");\n";
7787       pr "  printf (\"%%3d/%%3d %s\\n\", test_num, nr_tests);\n" test_name;
7788       pr "  if (%s () == -1) {\n" test_name;
7789       pr "    printf (\"%s FAILED\\n\");\n" test_name;
7790       pr "    n_failed++;\n";
7791       pr "  }\n";
7792   ) test_names;
7793   pr "\n";
7794
7795   pr "  /* Check close callback is called. */
7796   int close_sentinel = 1;
7797   guestfs_set_close_callback (g, incr, &close_sentinel);
7798
7799   guestfs_close (g);
7800
7801   if (close_sentinel != 2) {
7802     fprintf (stderr, \"close callback was not called\\n\");
7803     exit (EXIT_FAILURE);
7804   }
7805
7806   unlink (\"test1.img\");
7807   unlink (\"test2.img\");
7808   unlink (\"test3.img\");
7809
7810 ";
7811
7812   pr "  if (n_failed > 0) {\n";
7813   pr "    printf (\"***** %%lu / %%d tests FAILED *****\\n\", n_failed, nr_tests);\n";
7814   pr "    exit (EXIT_FAILURE);\n";
7815   pr "  }\n";
7816   pr "\n";
7817
7818   pr "  exit (EXIT_SUCCESS);\n";
7819   pr "}\n"
7820
7821 and generate_one_test name flags i (init, prereq, test) =
7822   let test_name = sprintf "test_%s_%d" name i in
7823
7824   pr "\
7825 static int %s_skip (void)
7826 {
7827   const char *str;
7828
7829   str = getenv (\"TEST_ONLY\");
7830   if (str)
7831     return strstr (str, \"%s\") == NULL;
7832   str = getenv (\"SKIP_%s\");
7833   if (str && STREQ (str, \"1\")) return 1;
7834   str = getenv (\"SKIP_TEST_%s\");
7835   if (str && STREQ (str, \"1\")) return 1;
7836   return 0;
7837 }
7838
7839 " test_name name (String.uppercase test_name) (String.uppercase name);
7840
7841   (match prereq with
7842    | Disabled | Always | IfAvailable _ -> ()
7843    | If code | Unless code ->
7844        pr "static int %s_prereq (void)\n" test_name;
7845        pr "{\n";
7846        pr "  %s\n" code;
7847        pr "}\n";
7848        pr "\n";
7849   );
7850
7851   pr "\
7852 static int %s (void)
7853 {
7854   if (%s_skip ()) {
7855     printf (\"        %%s skipped (reason: environment variable set)\\n\", \"%s\");
7856     return 0;
7857   }
7858
7859 " test_name test_name test_name;
7860
7861   (* Optional functions should only be tested if the relevant
7862    * support is available in the daemon.
7863    *)
7864   List.iter (
7865     function
7866     | Optional group ->
7867         pr "  if (!is_available (\"%s\")) {\n" group;
7868         pr "    printf (\"        %%s skipped (reason: group %%s not available in daemon)\\n\", \"%s\", \"%s\");\n" test_name group;
7869         pr "    return 0;\n";
7870         pr "  }\n";
7871     | _ -> ()
7872   ) flags;
7873
7874   (match prereq with
7875    | Disabled ->
7876        pr "  printf (\"        %%s skipped (reason: test disabled in generator)\\n\", \"%s\");\n" test_name
7877    | If _ ->
7878        pr "  if (! %s_prereq ()) {\n" test_name;
7879        pr "    printf (\"        %%s skipped (reason: test prerequisite)\\n\", \"%s\");\n" test_name;
7880        pr "    return 0;\n";
7881        pr "  }\n";
7882        pr "\n";
7883        generate_one_test_body name i test_name init test;
7884    | Unless _ ->
7885        pr "  if (%s_prereq ()) {\n" test_name;
7886        pr "    printf (\"        %%s skipped (reason: test prerequisite)\\n\", \"%s\");\n" test_name;
7887        pr "    return 0;\n";
7888        pr "  }\n";
7889        pr "\n";
7890        generate_one_test_body name i test_name init test;
7891    | IfAvailable group ->
7892        pr "  if (!is_available (\"%s\")) {\n" group;
7893        pr "    printf (\"        %%s skipped (reason: %%s not available)\\n\", \"%s\", \"%s\");\n" test_name group;
7894        pr "    return 0;\n";
7895        pr "  }\n";
7896        pr "\n";
7897        generate_one_test_body name i test_name init test;
7898    | Always ->
7899        generate_one_test_body name i test_name init test
7900   );
7901
7902   pr "  return 0;\n";
7903   pr "}\n";
7904   pr "\n";
7905   test_name
7906
7907 and generate_one_test_body name i test_name init test =
7908   (match init with
7909    | InitNone (* XXX at some point, InitNone and InitEmpty became
7910                * folded together as the same thing.  Really we should
7911                * make InitNone do nothing at all, but the tests may
7912                * need to be checked to make sure this is OK.
7913                *)
7914    | InitEmpty ->
7915        pr "  /* InitNone|InitEmpty for %s */\n" test_name;
7916        List.iter (generate_test_command_call test_name)
7917          [["blockdev_setrw"; "/dev/sda"];
7918           ["umount_all"];
7919           ["lvm_remove_all"]]
7920    | InitPartition ->
7921        pr "  /* InitPartition for %s: create /dev/sda1 */\n" test_name;
7922        List.iter (generate_test_command_call test_name)
7923          [["blockdev_setrw"; "/dev/sda"];
7924           ["umount_all"];
7925           ["lvm_remove_all"];
7926           ["part_disk"; "/dev/sda"; "mbr"]]
7927    | InitBasicFS ->
7928        pr "  /* InitBasicFS for %s: create ext2 on /dev/sda1 */\n" test_name;
7929        List.iter (generate_test_command_call test_name)
7930          [["blockdev_setrw"; "/dev/sda"];
7931           ["umount_all"];
7932           ["lvm_remove_all"];
7933           ["part_disk"; "/dev/sda"; "mbr"];
7934           ["mkfs"; "ext2"; "/dev/sda1"];
7935           ["mount_options"; ""; "/dev/sda1"; "/"]]
7936    | InitBasicFSonLVM ->
7937        pr "  /* InitBasicFSonLVM for %s: create ext2 on /dev/VG/LV */\n"
7938          test_name;
7939        List.iter (generate_test_command_call test_name)
7940          [["blockdev_setrw"; "/dev/sda"];
7941           ["umount_all"];
7942           ["lvm_remove_all"];
7943           ["part_disk"; "/dev/sda"; "mbr"];
7944           ["pvcreate"; "/dev/sda1"];
7945           ["vgcreate"; "VG"; "/dev/sda1"];
7946           ["lvcreate"; "LV"; "VG"; "8"];
7947           ["mkfs"; "ext2"; "/dev/VG/LV"];
7948           ["mount_options"; ""; "/dev/VG/LV"; "/"]]
7949    | InitISOFS ->
7950        pr "  /* InitISOFS for %s */\n" test_name;
7951        List.iter (generate_test_command_call test_name)
7952          [["blockdev_setrw"; "/dev/sda"];
7953           ["umount_all"];
7954           ["lvm_remove_all"];
7955           ["mount_ro"; "/dev/sdd"; "/"]]
7956   );
7957
7958   let get_seq_last = function
7959     | [] ->
7960         failwithf "%s: you cannot use [] (empty list) when expecting a command"
7961           test_name
7962     | seq ->
7963         let seq = List.rev seq in
7964         List.rev (List.tl seq), List.hd seq
7965   in
7966
7967   match test with
7968   | TestRun seq ->
7969       pr "  /* TestRun for %s (%d) */\n" name i;
7970       List.iter (generate_test_command_call test_name) seq
7971   | TestOutput (seq, expected) ->
7972       pr "  /* TestOutput for %s (%d) */\n" name i;
7973       pr "  const char *expected = \"%s\";\n" (c_quote expected);
7974       let seq, last = get_seq_last seq in
7975       let test () =
7976         pr "    if (STRNEQ (r, expected)) {\n";
7977         pr "      fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r);\n" test_name;
7978         pr "      return -1;\n";
7979         pr "    }\n"
7980       in
7981       List.iter (generate_test_command_call test_name) seq;
7982       generate_test_command_call ~test test_name last
7983   | TestOutputList (seq, expected) ->
7984       pr "  /* TestOutputList for %s (%d) */\n" name i;
7985       let seq, last = get_seq_last seq in
7986       let test () =
7987         iteri (
7988           fun i str ->
7989             pr "    if (!r[%d]) {\n" i;
7990             pr "      fprintf (stderr, \"%s: short list returned from command\\n\");\n" test_name;
7991             pr "      print_strings (r);\n";
7992             pr "      return -1;\n";
7993             pr "    }\n";
7994             pr "    {\n";
7995             pr "      const char *expected = \"%s\";\n" (c_quote str);
7996             pr "      if (STRNEQ (r[%d], expected)) {\n" i;
7997             pr "        fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r[%d]);\n" test_name i;
7998             pr "        return -1;\n";
7999             pr "      }\n";
8000             pr "    }\n"
8001         ) expected;
8002         pr "    if (r[%d] != NULL) {\n" (List.length expected);
8003         pr "      fprintf (stderr, \"%s: extra elements returned from command\\n\");\n"
8004           test_name;
8005         pr "      print_strings (r);\n";
8006         pr "      return -1;\n";
8007         pr "    }\n"
8008       in
8009       List.iter (generate_test_command_call test_name) seq;
8010       generate_test_command_call ~test test_name last
8011   | TestOutputListOfDevices (seq, expected) ->
8012       pr "  /* TestOutputListOfDevices for %s (%d) */\n" name i;
8013       let seq, last = get_seq_last seq in
8014       let test () =
8015         iteri (
8016           fun i str ->
8017             pr "    if (!r[%d]) {\n" i;
8018             pr "      fprintf (stderr, \"%s: short list returned from command\\n\");\n" test_name;
8019             pr "      print_strings (r);\n";
8020             pr "      return -1;\n";
8021             pr "    }\n";
8022             pr "    {\n";
8023             pr "      const char *expected = \"%s\";\n" (c_quote str);
8024             pr "      r[%d][5] = 's';\n" i;
8025             pr "      if (STRNEQ (r[%d], expected)) {\n" i;
8026             pr "        fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r[%d]);\n" test_name i;
8027             pr "        return -1;\n";
8028             pr "      }\n";
8029             pr "    }\n"
8030         ) expected;
8031         pr "    if (r[%d] != NULL) {\n" (List.length expected);
8032         pr "      fprintf (stderr, \"%s: extra elements returned from command\\n\");\n"
8033           test_name;
8034         pr "      print_strings (r);\n";
8035         pr "      return -1;\n";
8036         pr "    }\n"
8037       in
8038       List.iter (generate_test_command_call test_name) seq;
8039       generate_test_command_call ~test test_name last
8040   | TestOutputInt (seq, expected) ->
8041       pr "  /* TestOutputInt for %s (%d) */\n" name i;
8042       let seq, last = get_seq_last seq in
8043       let test () =
8044         pr "    if (r != %d) {\n" expected;
8045         pr "      fprintf (stderr, \"%s: expected %d but got %%d\\n\","
8046           test_name expected;
8047         pr "               (int) r);\n";
8048         pr "      return -1;\n";
8049         pr "    }\n"
8050       in
8051       List.iter (generate_test_command_call test_name) seq;
8052       generate_test_command_call ~test test_name last
8053   | TestOutputIntOp (seq, op, expected) ->
8054       pr "  /* TestOutputIntOp for %s (%d) */\n" name i;
8055       let seq, last = get_seq_last seq in
8056       let test () =
8057         pr "    if (! (r %s %d)) {\n" op expected;
8058         pr "      fprintf (stderr, \"%s: expected %s %d but got %%d\\n\","
8059           test_name op expected;
8060         pr "               (int) r);\n";
8061         pr "      return -1;\n";
8062         pr "    }\n"
8063       in
8064       List.iter (generate_test_command_call test_name) seq;
8065       generate_test_command_call ~test test_name last
8066   | TestOutputTrue seq ->
8067       pr "  /* TestOutputTrue for %s (%d) */\n" name i;
8068       let seq, last = get_seq_last seq in
8069       let test () =
8070         pr "    if (!r) {\n";
8071         pr "      fprintf (stderr, \"%s: expected true, got false\\n\");\n"
8072           test_name;
8073         pr "      return -1;\n";
8074         pr "    }\n"
8075       in
8076       List.iter (generate_test_command_call test_name) seq;
8077       generate_test_command_call ~test test_name last
8078   | TestOutputFalse seq ->
8079       pr "  /* TestOutputFalse for %s (%d) */\n" name i;
8080       let seq, last = get_seq_last seq in
8081       let test () =
8082         pr "    if (r) {\n";
8083         pr "      fprintf (stderr, \"%s: expected false, got true\\n\");\n"
8084           test_name;
8085         pr "      return -1;\n";
8086         pr "    }\n"
8087       in
8088       List.iter (generate_test_command_call test_name) seq;
8089       generate_test_command_call ~test test_name last
8090   | TestOutputLength (seq, expected) ->
8091       pr "  /* TestOutputLength for %s (%d) */\n" name i;
8092       let seq, last = get_seq_last seq in
8093       let test () =
8094         pr "    int j;\n";
8095         pr "    for (j = 0; j < %d; ++j)\n" expected;
8096         pr "      if (r[j] == NULL) {\n";
8097         pr "        fprintf (stderr, \"%s: short list returned\\n\");\n"
8098           test_name;
8099         pr "        print_strings (r);\n";
8100         pr "        return -1;\n";
8101         pr "      }\n";
8102         pr "    if (r[j] != NULL) {\n";
8103         pr "      fprintf (stderr, \"%s: long list returned\\n\");\n"
8104           test_name;
8105         pr "      print_strings (r);\n";
8106         pr "      return -1;\n";
8107         pr "    }\n"
8108       in
8109       List.iter (generate_test_command_call test_name) seq;
8110       generate_test_command_call ~test test_name last
8111   | TestOutputBuffer (seq, expected) ->
8112       pr "  /* TestOutputBuffer for %s (%d) */\n" name i;
8113       pr "  const char *expected = \"%s\";\n" (c_quote expected);
8114       let seq, last = get_seq_last seq in
8115       let len = String.length expected in
8116       let test () =
8117         pr "    if (size != %d) {\n" len;
8118         pr "      fprintf (stderr, \"%s: returned size of buffer wrong, expected %d but got %%zu\\n\", size);\n" test_name len;
8119         pr "      return -1;\n";
8120         pr "    }\n";
8121         pr "    if (STRNEQLEN (r, expected, size)) {\n";
8122         pr "      fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r);\n" test_name;
8123         pr "      return -1;\n";
8124         pr "    }\n"
8125       in
8126       List.iter (generate_test_command_call test_name) seq;
8127       generate_test_command_call ~test test_name last
8128   | TestOutputStruct (seq, checks) ->
8129       pr "  /* TestOutputStruct for %s (%d) */\n" name i;
8130       let seq, last = get_seq_last seq in
8131       let test () =
8132         List.iter (
8133           function
8134           | CompareWithInt (field, expected) ->
8135               pr "    if (r->%s != %d) {\n" field expected;
8136               pr "      fprintf (stderr, \"%s: %s was %%d, expected %d\\n\",\n"
8137                 test_name field expected;
8138               pr "               (int) r->%s);\n" field;
8139               pr "      return -1;\n";
8140               pr "    }\n"
8141           | CompareWithIntOp (field, op, expected) ->
8142               pr "    if (!(r->%s %s %d)) {\n" field op expected;
8143               pr "      fprintf (stderr, \"%s: %s was %%d, expected %s %d\\n\",\n"
8144                 test_name field op expected;
8145               pr "               (int) r->%s);\n" field;
8146               pr "      return -1;\n";
8147               pr "    }\n"
8148           | CompareWithString (field, expected) ->
8149               pr "    if (STRNEQ (r->%s, \"%s\")) {\n" field expected;
8150               pr "      fprintf (stderr, \"%s: %s was \"%%s\", expected \"%s\"\\n\",\n"
8151                 test_name field expected;
8152               pr "               r->%s);\n" field;
8153               pr "      return -1;\n";
8154               pr "    }\n"
8155           | CompareFieldsIntEq (field1, field2) ->
8156               pr "    if (r->%s != r->%s) {\n" field1 field2;
8157               pr "      fprintf (stderr, \"%s: %s (%%d) <> %s (%%d)\\n\",\n"
8158                 test_name field1 field2;
8159               pr "               (int) r->%s, (int) r->%s);\n" field1 field2;
8160               pr "      return -1;\n";
8161               pr "    }\n"
8162           | CompareFieldsStrEq (field1, field2) ->
8163               pr "    if (STRNEQ (r->%s, r->%s)) {\n" field1 field2;
8164               pr "      fprintf (stderr, \"%s: %s (\"%%s\") <> %s (\"%%s\")\\n\",\n"
8165                 test_name field1 field2;
8166               pr "               r->%s, r->%s);\n" field1 field2;
8167               pr "      return -1;\n";
8168               pr "    }\n"
8169         ) checks
8170       in
8171       List.iter (generate_test_command_call test_name) seq;
8172       generate_test_command_call ~test test_name last
8173   | TestLastFail seq ->
8174       pr "  /* TestLastFail for %s (%d) */\n" name i;
8175       let seq, last = get_seq_last seq in
8176       List.iter (generate_test_command_call test_name) seq;
8177       generate_test_command_call test_name ~expect_error:true last
8178
8179 (* Generate the code to run a command, leaving the result in 'r'.
8180  * If you expect to get an error then you should set expect_error:true.
8181  *)
8182 and generate_test_command_call ?(expect_error = false) ?test test_name cmd =
8183   match cmd with
8184   | [] -> assert false
8185   | name :: args ->
8186       (* Look up the command to find out what args/ret it has. *)
8187       let style =
8188         try
8189           let _, style, _, _, _, _, _ =
8190             List.find (fun (n, _, _, _, _, _, _) -> n = name) all_functions in
8191           style
8192         with Not_found ->
8193           failwithf "%s: in test, command %s was not found" test_name name in
8194
8195       if List.length (snd style) <> List.length args then
8196         failwithf "%s: in test, wrong number of args given to %s"
8197           test_name name;
8198
8199       pr "  {\n";
8200
8201       List.iter (
8202         function
8203         | OptString n, "NULL" -> ()
8204         | Pathname n, arg
8205         | Device n, arg
8206         | Dev_or_Path n, arg
8207         | String n, arg
8208         | OptString n, arg
8209         | Key n, arg ->
8210             pr "    const char *%s = \"%s\";\n" n (c_quote arg);
8211         | BufferIn n, arg ->
8212             pr "    const char *%s = \"%s\";\n" n (c_quote arg);
8213             pr "    size_t %s_size = %d;\n" n (String.length arg)
8214         | Int _, _
8215         | Int64 _, _
8216         | Bool _, _
8217         | FileIn _, _ | FileOut _, _ -> ()
8218         | StringList n, "" | DeviceList n, "" ->
8219             pr "    const char *const %s[1] = { NULL };\n" n
8220         | StringList n, arg | DeviceList n, arg ->
8221             let strs = string_split " " arg in
8222             iteri (
8223               fun i str ->
8224                 pr "    const char *%s_%d = \"%s\";\n" n i (c_quote str);
8225             ) strs;
8226             pr "    const char *const %s[] = {\n" n;
8227             iteri (
8228               fun i _ -> pr "      %s_%d,\n" n i
8229             ) strs;
8230             pr "      NULL\n";
8231             pr "    };\n";
8232       ) (List.combine (snd style) args);
8233
8234       let error_code =
8235         match fst style with
8236         | RErr | RInt _ | RBool _ -> pr "    int r;\n"; "-1"
8237         | RInt64 _ -> pr "    int64_t r;\n"; "-1"
8238         | RConstString _ | RConstOptString _ ->
8239             pr "    const char *r;\n"; "NULL"
8240         | RString _ -> pr "    char *r;\n"; "NULL"
8241         | RStringList _ | RHashtable _ ->
8242             pr "    char **r;\n";
8243             pr "    size_t i;\n";
8244             "NULL"
8245         | RStruct (_, typ) ->
8246             pr "    struct guestfs_%s *r;\n" typ; "NULL"
8247         | RStructList (_, typ) ->
8248             pr "    struct guestfs_%s_list *r;\n" typ; "NULL"
8249         | RBufferOut _ ->
8250             pr "    char *r;\n";
8251             pr "    size_t size;\n";
8252             "NULL" in
8253
8254       pr "    suppress_error = %d;\n" (if expect_error then 1 else 0);
8255       pr "    r = guestfs_%s (g" name;
8256
8257       (* Generate the parameters. *)
8258       List.iter (
8259         function
8260         | OptString _, "NULL" -> pr ", NULL"
8261         | Pathname n, _
8262         | Device n, _ | Dev_or_Path n, _
8263         | String n, _
8264         | OptString n, _
8265         | Key n, _ ->
8266             pr ", %s" n
8267         | BufferIn n, _ ->
8268             pr ", %s, %s_size" n n
8269         | FileIn _, arg | FileOut _, arg ->
8270             pr ", \"%s\"" (c_quote arg)
8271         | StringList n, _ | DeviceList n, _ ->
8272             pr ", (char **) %s" n
8273         | Int _, arg ->
8274             let i =
8275               try int_of_string arg
8276               with Failure "int_of_string" ->
8277                 failwithf "%s: expecting an int, but got '%s'" test_name arg in
8278             pr ", %d" i
8279         | Int64 _, arg ->
8280             let i =
8281               try Int64.of_string arg
8282               with Failure "int_of_string" ->
8283                 failwithf "%s: expecting an int64, but got '%s'" test_name arg in
8284             pr ", %Ld" i
8285         | Bool _, arg ->
8286             let b = bool_of_string arg in pr ", %d" (if b then 1 else 0)
8287       ) (List.combine (snd style) args);
8288
8289       (match fst style with
8290        | RBufferOut _ -> pr ", &size"
8291        | _ -> ()
8292       );
8293
8294       pr ");\n";
8295
8296       if not expect_error then
8297         pr "    if (r == %s)\n" error_code
8298       else
8299         pr "    if (r != %s)\n" error_code;
8300       pr "      return -1;\n";
8301
8302       (* Insert the test code. *)
8303       (match test with
8304        | None -> ()
8305        | Some f -> f ()
8306       );
8307
8308       (match fst style with
8309        | RErr | RInt _ | RInt64 _ | RBool _
8310        | RConstString _ | RConstOptString _ -> ()
8311        | RString _ | RBufferOut _ -> pr "    free (r);\n"
8312        | RStringList _ | RHashtable _ ->
8313            pr "    for (i = 0; r[i] != NULL; ++i)\n";
8314            pr "      free (r[i]);\n";
8315            pr "    free (r);\n"
8316        | RStruct (_, typ) ->
8317            pr "    guestfs_free_%s (r);\n" typ
8318        | RStructList (_, typ) ->
8319            pr "    guestfs_free_%s_list (r);\n" typ
8320       );
8321
8322       pr "  }\n"
8323
8324 and c_quote str =
8325   let str = replace_str str "\r" "\\r" in
8326   let str = replace_str str "\n" "\\n" in
8327   let str = replace_str str "\t" "\\t" in
8328   let str = replace_str str "\000" "\\0" in
8329   str
8330
8331 (* Generate a lot of different functions for guestfish. *)
8332 and generate_fish_cmds () =
8333   generate_header CStyle GPLv2plus;
8334
8335   let all_functions =
8336     List.filter (
8337       fun (_, _, _, flags, _, _, _) -> not (List.mem NotInFish flags)
8338     ) all_functions in
8339   let all_functions_sorted =
8340     List.filter (
8341       fun (_, _, _, flags, _, _, _) -> not (List.mem NotInFish flags)
8342     ) all_functions_sorted in
8343
8344   pr "#include <config.h>\n";
8345   pr "\n";
8346   pr "#include <stdio.h>\n";
8347   pr "#include <stdlib.h>\n";
8348   pr "#include <string.h>\n";
8349   pr "#include <inttypes.h>\n";
8350   pr "\n";
8351   pr "#include <guestfs.h>\n";
8352   pr "#include \"c-ctype.h\"\n";
8353   pr "#include \"full-write.h\"\n";
8354   pr "#include \"xstrtol.h\"\n";
8355   pr "#include \"fish.h\"\n";
8356   pr "\n";
8357   pr "/* Valid suffixes allowed for numbers.  See Gnulib xstrtol function. */\n";
8358   pr "static const char *xstrtol_suffixes = \"0kKMGTPEZY\";\n";
8359   pr "\n";
8360
8361   (* list_commands function, which implements guestfish -h *)
8362   pr "void list_commands (void)\n";
8363   pr "{\n";
8364   pr "  printf (\"    %%-16s     %%s\\n\", _(\"Command\"), _(\"Description\"));\n";
8365   pr "  list_builtin_commands ();\n";
8366   List.iter (
8367     fun (name, _, _, flags, _, shortdesc, _) ->
8368       let name = replace_char name '_' '-' in
8369       pr "  printf (\"%%-20s %%s\\n\", \"%s\", _(\"%s\"));\n"
8370         name shortdesc
8371   ) all_functions_sorted;
8372   pr "  printf (\"    %%s\\n\",";
8373   pr "          _(\"Use -h <cmd> / help <cmd> to show detailed help for a command.\"));\n";
8374   pr "}\n";
8375   pr "\n";
8376
8377   (* display_command function, which implements guestfish -h cmd *)
8378   pr "int display_command (const char *cmd)\n";
8379   pr "{\n";
8380   List.iter (
8381     fun (name, style, _, flags, _, shortdesc, longdesc) ->
8382       let name2 = replace_char name '_' '-' in
8383       let alias =
8384         try find_map (function FishAlias n -> Some n | _ -> None) flags
8385         with Not_found -> name in
8386       let longdesc = replace_str longdesc "C<guestfs_" "C<" in
8387       let synopsis =
8388         match snd style with
8389         | [] -> name2
8390         | args ->
8391             let args = List.filter (function Key _ -> false | _ -> true) args in
8392             sprintf "%s %s"
8393               name2 (String.concat " " (List.map name_of_argt args)) in
8394
8395       let warnings =
8396         if List.exists (function Key _ -> true | _ -> false) (snd style) then
8397           "\n\nThis command has one or more key or passphrase parameters.
8398 Guestfish will prompt for these separately."
8399         else "" in
8400
8401       let warnings =
8402         warnings ^
8403           if List.mem ProtocolLimitWarning flags then
8404             ("\n\n" ^ protocol_limit_warning)
8405           else "" in
8406
8407       (* For DangerWillRobinson commands, we should probably have
8408        * guestfish prompt before allowing you to use them (especially
8409        * in interactive mode). XXX
8410        *)
8411       let warnings =
8412         warnings ^
8413           if List.mem DangerWillRobinson flags then
8414             ("\n\n" ^ danger_will_robinson)
8415           else "" in
8416
8417       let warnings =
8418         warnings ^
8419           match deprecation_notice flags with
8420           | None -> ""
8421           | Some txt -> "\n\n" ^ txt in
8422
8423       let describe_alias =
8424         if name <> alias then
8425           sprintf "\n\nYou can use '%s' as an alias for this command." alias
8426         else "" in
8427
8428       pr "  if (";
8429       pr "STRCASEEQ (cmd, \"%s\")" name;
8430       if name <> name2 then
8431         pr " || STRCASEEQ (cmd, \"%s\")" name2;
8432       if name <> alias then
8433         pr " || STRCASEEQ (cmd, \"%s\")" alias;
8434       pr ") {\n";
8435       pr "    pod2text (\"%s\", _(\"%s\"), %S);\n"
8436         name2 shortdesc
8437         ("=head1 SYNOPSIS\n\n " ^ synopsis ^ "\n\n" ^
8438          "=head1 DESCRIPTION\n\n" ^
8439          longdesc ^ warnings ^ describe_alias);
8440       pr "    return 0;\n";
8441       pr "  }\n";
8442       pr "  else\n"
8443   ) all_functions;
8444   pr "    return display_builtin_command (cmd);\n";
8445   pr "}\n";
8446   pr "\n";
8447
8448   let emit_print_list_function typ =
8449     pr "static void print_%s_list (struct guestfs_%s_list *%ss)\n"
8450       typ typ typ;
8451     pr "{\n";
8452     pr "  unsigned int i;\n";
8453     pr "\n";
8454     pr "  for (i = 0; i < %ss->len; ++i) {\n" typ;
8455     pr "    printf (\"[%%d] = {\\n\", i);\n";
8456     pr "    print_%s_indent (&%ss->val[i], \"  \");\n" typ typ;
8457     pr "    printf (\"}\\n\");\n";
8458     pr "  }\n";
8459     pr "}\n";
8460     pr "\n";
8461   in
8462
8463   (* print_* functions *)
8464   List.iter (
8465     fun (typ, cols) ->
8466       let needs_i =
8467         List.exists (function (_, (FUUID|FBuffer)) -> true | _ -> false) cols in
8468
8469       pr "static void print_%s_indent (struct guestfs_%s *%s, const char *indent)\n" typ typ typ;
8470       pr "{\n";
8471       if needs_i then (
8472         pr "  unsigned int i;\n";
8473         pr "\n"
8474       );
8475       List.iter (
8476         function
8477         | name, FString ->
8478             pr "  printf (\"%%s%s: %%s\\n\", indent, %s->%s);\n" name typ name
8479         | name, FUUID ->
8480             pr "  printf (\"%%s%s: \", indent);\n" name;
8481             pr "  for (i = 0; i < 32; ++i)\n";
8482             pr "    printf (\"%%c\", %s->%s[i]);\n" typ name;
8483             pr "  printf (\"\\n\");\n"
8484         | name, FBuffer ->
8485             pr "  printf (\"%%s%s: \", indent);\n" name;
8486             pr "  for (i = 0; i < %s->%s_len; ++i)\n" typ name;
8487             pr "    if (c_isprint (%s->%s[i]))\n" typ name;
8488             pr "      printf (\"%%c\", %s->%s[i]);\n" typ name;
8489             pr "    else\n";
8490             pr "      printf (\"\\\\x%%02x\", %s->%s[i]);\n" typ name;
8491             pr "  printf (\"\\n\");\n"
8492         | name, (FUInt64|FBytes) ->
8493             pr "  printf (\"%%s%s: %%\" PRIu64 \"\\n\", indent, %s->%s);\n"
8494               name typ name
8495         | name, FInt64 ->
8496             pr "  printf (\"%%s%s: %%\" PRIi64 \"\\n\", indent, %s->%s);\n"
8497               name typ name
8498         | name, FUInt32 ->
8499             pr "  printf (\"%%s%s: %%\" PRIu32 \"\\n\", indent, %s->%s);\n"
8500               name typ name
8501         | name, FInt32 ->
8502             pr "  printf (\"%%s%s: %%\" PRIi32 \"\\n\", indent, %s->%s);\n"
8503               name typ name
8504         | name, FChar ->
8505             pr "  printf (\"%%s%s: %%c\\n\", indent, %s->%s);\n"
8506               name typ name
8507         | name, FOptPercent ->
8508             pr "  if (%s->%s >= 0) printf (\"%%s%s: %%g %%%%\\n\", indent, %s->%s);\n"
8509               typ name name typ name;
8510             pr "  else printf (\"%%s%s: \\n\", indent);\n" name
8511       ) cols;
8512       pr "}\n";
8513       pr "\n";
8514   ) structs;
8515
8516   (* Emit a print_TYPE_list function definition only if that function is used. *)
8517   List.iter (
8518     function
8519     | typ, (RStructListOnly | RStructAndList) ->
8520         (* generate the function for typ *)
8521         emit_print_list_function typ
8522     | typ, _ -> () (* empty *)
8523   ) (rstructs_used_by all_functions);
8524
8525   (* Emit a print_TYPE function definition only if that function is used. *)
8526   List.iter (
8527     function
8528     | typ, (RStructOnly | RStructAndList) ->
8529         pr "static void print_%s (struct guestfs_%s *%s)\n" typ typ typ;
8530         pr "{\n";
8531         pr "  print_%s_indent (%s, \"\");\n" typ typ;
8532         pr "}\n";
8533         pr "\n";
8534     | typ, _ -> () (* empty *)
8535   ) (rstructs_used_by all_functions);
8536
8537   (* run_<action> actions *)
8538   List.iter (
8539     fun (name, style, _, flags, _, _, _) ->
8540       pr "static int run_%s (const char *cmd, int argc, char *argv[])\n" name;
8541       pr "{\n";
8542       (match fst style with
8543        | RErr
8544        | RInt _
8545        | RBool _ -> pr "  int r;\n"
8546        | RInt64 _ -> pr "  int64_t r;\n"
8547        | RConstString _ | RConstOptString _ -> pr "  const char *r;\n"
8548        | RString _ -> pr "  char *r;\n"
8549        | RStringList _ | RHashtable _ -> pr "  char **r;\n"
8550        | RStruct (_, typ) -> pr "  struct guestfs_%s *r;\n" typ
8551        | RStructList (_, typ) -> pr "  struct guestfs_%s_list *r;\n" typ
8552        | RBufferOut _ ->
8553            pr "  char *r;\n";
8554            pr "  size_t size;\n";
8555       );
8556       List.iter (
8557         function
8558         | Device n
8559         | String n
8560         | OptString n -> pr "  const char *%s;\n" n
8561         | Pathname n
8562         | Dev_or_Path n
8563         | FileIn n
8564         | FileOut n
8565         | Key n -> pr "  char *%s;\n" n
8566         | BufferIn n ->
8567             pr "  const char *%s;\n" n;
8568             pr "  size_t %s_size;\n" n
8569         | StringList n | DeviceList n -> pr "  char **%s;\n" n
8570         | Bool n -> pr "  int %s;\n" n
8571         | Int n -> pr "  int %s;\n" n
8572         | Int64 n -> pr "  int64_t %s;\n" n
8573       ) (snd style);
8574
8575       (* Check and convert parameters. *)
8576       let argc_expected =
8577         let args_no_keys =
8578           List.filter (function Key _ -> false | _ -> true) (snd style) in
8579         List.length args_no_keys in
8580       pr "  if (argc != %d) {\n" argc_expected;
8581       pr "    fprintf (stderr, _(\"%%s should have %%d parameter(s)\\n\"), cmd, %d);\n"
8582         argc_expected;
8583       pr "    fprintf (stderr, _(\"type 'help %%s' for help on %%s\\n\"), cmd, cmd);\n";
8584       pr "    return -1;\n";
8585       pr "  }\n";
8586
8587       let parse_integer fn fntyp rtyp range name =
8588         pr "  {\n";
8589         pr "    strtol_error xerr;\n";
8590         pr "    %s r;\n" fntyp;
8591         pr "\n";
8592         pr "    xerr = %s (argv[i++], NULL, 0, &r, xstrtol_suffixes);\n" fn;
8593         pr "    if (xerr != LONGINT_OK) {\n";
8594         pr "      fprintf (stderr,\n";
8595         pr "               _(\"%%s: %%s: invalid integer parameter (%%s returned %%d)\\n\"),\n";
8596         pr "               cmd, \"%s\", \"%s\", xerr);\n" name fn;
8597         pr "      return -1;\n";
8598         pr "    }\n";
8599         (match range with
8600          | None -> ()
8601          | Some (min, max, comment) ->
8602              pr "    /* %s */\n" comment;
8603              pr "    if (r < %s || r > %s) {\n" min max;
8604              pr "      fprintf (stderr, _(\"%%s: %%s: integer out of range\\n\"), cmd, \"%s\");\n"
8605                name;
8606              pr "      return -1;\n";
8607              pr "    }\n";
8608              pr "    /* The check above should ensure this assignment does not overflow. */\n";
8609         );
8610         pr "    %s = r;\n" name;
8611         pr "  }\n";
8612       in
8613
8614       if snd style <> [] then
8615         pr "  size_t i = 0;\n";
8616
8617       List.iter (
8618         function
8619         | Device name
8620         | String name ->
8621             pr "  %s = argv[i++];\n" name
8622         | Pathname name
8623         | Dev_or_Path name ->
8624             pr "  %s = resolve_win_path (argv[i++]);\n" name;
8625             pr "  if (%s == NULL) return -1;\n" name
8626         | OptString name ->
8627             pr "  %s = STRNEQ (argv[i], \"\") ? argv[i] : NULL;\n" name;
8628             pr "  i++;\n"
8629         | BufferIn name ->
8630             pr "  %s = argv[i];\n" name;
8631             pr "  %s_size = strlen (argv[i]);\n" name;
8632             pr "  i++;\n"
8633         | FileIn name ->
8634             pr "  %s = file_in (argv[i++]);\n" name;
8635             pr "  if (%s == NULL) return -1;\n" name
8636         | FileOut name ->
8637             pr "  %s = file_out (argv[i++]);\n" name;
8638             pr "  if (%s == NULL) return -1;\n" name
8639         | StringList name | DeviceList name ->
8640             pr "  %s = parse_string_list (argv[i++]);\n" name;
8641             pr "  if (%s == NULL) return -1;\n" name
8642         | Key name ->
8643             pr "  %s = read_key (\"%s\");\n" name name;
8644             pr "  if (%s == NULL) return -1;\n" name
8645         | Bool name ->
8646             pr "  %s = is_true (argv[i++]) ? 1 : 0;\n" name
8647         | Int name ->
8648             let range =
8649               let min = "(-(2LL<<30))"
8650               and max = "((2LL<<30)-1)"
8651               and comment =
8652                 "The Int type in the generator is a signed 31 bit int." in
8653               Some (min, max, comment) in
8654             parse_integer "xstrtoll" "long long" "int" range name
8655         | Int64 name ->
8656             parse_integer "xstrtoll" "long long" "int64_t" None name
8657       ) (snd style);
8658
8659       (* Call C API function. *)
8660       pr "  r = guestfs_%s " name;
8661       generate_c_call_args ~handle:"g" style;
8662       pr ";\n";
8663
8664       List.iter (
8665         function
8666         | Device _ | String _
8667         | OptString _ | Bool _
8668         | Int _ | Int64 _
8669         | BufferIn _ -> ()
8670         | Pathname name | Dev_or_Path name | FileOut name
8671         | Key name ->
8672             pr "  free (%s);\n" name
8673         | FileIn name ->
8674             pr "  free_file_in (%s);\n" name
8675         | StringList name | DeviceList name ->
8676             pr "  free_strings (%s);\n" name
8677       ) (snd style);
8678
8679       (* Any output flags? *)
8680       let fish_output =
8681         let flags = filter_map (
8682           function FishOutput flag -> Some flag | _ -> None
8683         ) flags in
8684         match flags with
8685         | [] -> None
8686         | [f] -> Some f
8687         | _ ->
8688             failwithf "%s: more than one FishOutput flag is not allowed" name in
8689
8690       (* Check return value for errors and display command results. *)
8691       (match fst style with
8692        | RErr -> pr "  return r;\n"
8693        | RInt _ ->
8694            pr "  if (r == -1) return -1;\n";
8695            (match fish_output with
8696             | None ->
8697                 pr "  printf (\"%%d\\n\", r);\n";
8698             | Some FishOutputOctal ->
8699                 pr "  printf (\"%%s%%o\\n\", r != 0 ? \"0\" : \"\", r);\n";
8700             | Some FishOutputHexadecimal ->
8701                 pr "  printf (\"%%s%%x\\n\", r != 0 ? \"0x\" : \"\", r);\n");
8702            pr "  return 0;\n"
8703        | RInt64 _ ->
8704            pr "  if (r == -1) return -1;\n";
8705            (match fish_output with
8706             | None ->
8707                 pr "  printf (\"%%\" PRIi64 \"\\n\", r);\n";
8708             | Some FishOutputOctal ->
8709                 pr "  printf (\"%%s%%\" PRIo64 \"\\n\", r != 0 ? \"0\" : \"\", r);\n";
8710             | Some FishOutputHexadecimal ->
8711                 pr "  printf (\"%%s%%\" PRIx64 \"\\n\", r != 0 ? \"0x\" : \"\", r);\n");
8712            pr "  return 0;\n"
8713        | RBool _ ->
8714            pr "  if (r == -1) return -1;\n";
8715            pr "  if (r) printf (\"true\\n\"); else printf (\"false\\n\");\n";
8716            pr "  return 0;\n"
8717        | RConstString _ ->
8718            pr "  if (r == NULL) return -1;\n";
8719            pr "  printf (\"%%s\\n\", r);\n";
8720            pr "  return 0;\n"
8721        | RConstOptString _ ->
8722            pr "  printf (\"%%s\\n\", r ? : \"(null)\");\n";
8723            pr "  return 0;\n"
8724        | RString _ ->
8725            pr "  if (r == NULL) return -1;\n";
8726            pr "  printf (\"%%s\\n\", r);\n";
8727            pr "  free (r);\n";
8728            pr "  return 0;\n"
8729        | RStringList _ ->
8730            pr "  if (r == NULL) return -1;\n";
8731            pr "  print_strings (r);\n";
8732            pr "  free_strings (r);\n";
8733            pr "  return 0;\n"
8734        | RStruct (_, typ) ->
8735            pr "  if (r == NULL) return -1;\n";
8736            pr "  print_%s (r);\n" typ;
8737            pr "  guestfs_free_%s (r);\n" typ;
8738            pr "  return 0;\n"
8739        | RStructList (_, typ) ->
8740            pr "  if (r == NULL) return -1;\n";
8741            pr "  print_%s_list (r);\n" typ;
8742            pr "  guestfs_free_%s_list (r);\n" typ;
8743            pr "  return 0;\n"
8744        | RHashtable _ ->
8745            pr "  if (r == NULL) return -1;\n";
8746            pr "  print_table (r);\n";
8747            pr "  free_strings (r);\n";
8748            pr "  return 0;\n"
8749        | RBufferOut _ ->
8750            pr "  if (r == NULL) return -1;\n";
8751            pr "  if (full_write (1, r, size) != size) {\n";
8752            pr "    perror (\"write\");\n";
8753            pr "    free (r);\n";
8754            pr "    return -1;\n";
8755            pr "  }\n";
8756            pr "  free (r);\n";
8757            pr "  return 0;\n"
8758       );
8759       pr "}\n";
8760       pr "\n"
8761   ) all_functions;
8762
8763   (* run_action function *)
8764   pr "int run_action (const char *cmd, int argc, char *argv[])\n";
8765   pr "{\n";
8766   List.iter (
8767     fun (name, _, _, flags, _, _, _) ->
8768       let name2 = replace_char name '_' '-' in
8769       let alias =
8770         try find_map (function FishAlias n -> Some n | _ -> None) flags
8771         with Not_found -> name in
8772       pr "  if (";
8773       pr "STRCASEEQ (cmd, \"%s\")" name;
8774       if name <> name2 then
8775         pr " || STRCASEEQ (cmd, \"%s\")" name2;
8776       if name <> alias then
8777         pr " || STRCASEEQ (cmd, \"%s\")" alias;
8778       pr ")\n";
8779       pr "    return run_%s (cmd, argc, argv);\n" name;
8780       pr "  else\n";
8781   ) all_functions;
8782   pr "    {\n";
8783   pr "      fprintf (stderr, _(\"%%s: unknown command\\n\"), cmd);\n";
8784   pr "      if (command_num == 1)\n";
8785   pr "        extended_help_message ();\n";
8786   pr "      return -1;\n";
8787   pr "    }\n";
8788   pr "  return 0;\n";
8789   pr "}\n";
8790   pr "\n"
8791
8792 (* Readline completion for guestfish. *)
8793 and generate_fish_completion () =
8794   generate_header CStyle GPLv2plus;
8795
8796   let all_functions =
8797     List.filter (
8798       fun (_, _, _, flags, _, _, _) -> not (List.mem NotInFish flags)
8799     ) all_functions in
8800
8801   pr "\
8802 #include <config.h>
8803
8804 #include <stdio.h>
8805 #include <stdlib.h>
8806 #include <string.h>
8807
8808 #ifdef HAVE_LIBREADLINE
8809 #include <readline/readline.h>
8810 #endif
8811
8812 #include \"fish.h\"
8813
8814 #ifdef HAVE_LIBREADLINE
8815
8816 static const char *const commands[] = {
8817   BUILTIN_COMMANDS_FOR_COMPLETION,
8818 ";
8819
8820   (* Get the commands, including the aliases.  They don't need to be
8821    * sorted - the generator() function just does a dumb linear search.
8822    *)
8823   let commands =
8824     List.map (
8825       fun (name, _, _, flags, _, _, _) ->
8826         let name2 = replace_char name '_' '-' in
8827         let alias =
8828           try find_map (function FishAlias n -> Some n | _ -> None) flags
8829           with Not_found -> name in
8830
8831         if name <> alias then [name2; alias] else [name2]
8832     ) all_functions in
8833   let commands = List.flatten commands in
8834
8835   List.iter (pr "  \"%s\",\n") commands;
8836
8837   pr "  NULL
8838 };
8839
8840 static char *
8841 generator (const char *text, int state)
8842 {
8843   static size_t index, len;
8844   const char *name;
8845
8846   if (!state) {
8847     index = 0;
8848     len = strlen (text);
8849   }
8850
8851   rl_attempted_completion_over = 1;
8852
8853   while ((name = commands[index]) != NULL) {
8854     index++;
8855     if (STRCASEEQLEN (name, text, len))
8856       return strdup (name);
8857   }
8858
8859   return NULL;
8860 }
8861
8862 #endif /* HAVE_LIBREADLINE */
8863
8864 #ifdef HAVE_RL_COMPLETION_MATCHES
8865 #define RL_COMPLETION_MATCHES rl_completion_matches
8866 #else
8867 #ifdef HAVE_COMPLETION_MATCHES
8868 #define RL_COMPLETION_MATCHES completion_matches
8869 #endif
8870 #endif /* else just fail if we don't have either symbol */
8871
8872 char **
8873 do_completion (const char *text, int start, int end)
8874 {
8875   char **matches = NULL;
8876
8877 #ifdef HAVE_LIBREADLINE
8878   rl_completion_append_character = ' ';
8879
8880   if (start == 0)
8881     matches = RL_COMPLETION_MATCHES (text, generator);
8882   else if (complete_dest_paths)
8883     matches = RL_COMPLETION_MATCHES (text, complete_dest_paths_generator);
8884 #endif
8885
8886   return matches;
8887 }
8888 ";
8889
8890 (* Generate the POD documentation for guestfish. *)
8891 and generate_fish_actions_pod () =
8892   let all_functions_sorted =
8893     List.filter (
8894       fun (_, _, _, flags, _, _, _) ->
8895         not (List.mem NotInFish flags || List.mem NotInDocs flags)
8896     ) all_functions_sorted in
8897
8898   let rex = Str.regexp "C<guestfs_\\([^>]+\\)>" in
8899
8900   List.iter (
8901     fun (name, style, _, flags, _, _, longdesc) ->
8902       let longdesc =
8903         Str.global_substitute rex (
8904           fun s ->
8905             let sub =
8906               try Str.matched_group 1 s
8907               with Not_found ->
8908                 failwithf "error substituting C<guestfs_...> in longdesc of function %s" name in
8909             "C<" ^ replace_char sub '_' '-' ^ ">"
8910         ) longdesc in
8911       let name = replace_char name '_' '-' in
8912       let alias =
8913         try find_map (function FishAlias n -> Some n | _ -> None) flags
8914         with Not_found -> name in
8915
8916       pr "=head2 %s" name;
8917       if name <> alias then
8918         pr " | %s" alias;
8919       pr "\n";
8920       pr "\n";
8921       pr " %s" name;
8922       List.iter (
8923         function
8924         | Pathname n | Device n | Dev_or_Path n | String n ->
8925             pr " %s" n
8926         | OptString n -> pr " %s" n
8927         | StringList n | DeviceList n -> pr " '%s ...'" n
8928         | Bool _ -> pr " true|false"
8929         | Int n -> pr " %s" n
8930         | Int64 n -> pr " %s" n
8931         | FileIn n | FileOut n -> pr " (%s|-)" n
8932         | BufferIn n -> pr " %s" n
8933         | Key _ -> () (* keys are entered at a prompt *)
8934       ) (snd style);
8935       pr "\n";
8936       pr "\n";
8937       pr "%s\n\n" longdesc;
8938
8939       if List.exists (function FileIn _ | FileOut _ -> true
8940                       | _ -> false) (snd style) then
8941         pr "Use C<-> instead of a filename to read/write from stdin/stdout.\n\n";
8942
8943       if List.exists (function Key _ -> true | _ -> false) (snd style) then
8944         pr "This command has one or more key or passphrase parameters.
8945 Guestfish will prompt for these separately.\n\n";
8946
8947       if List.mem ProtocolLimitWarning flags then
8948         pr "%s\n\n" protocol_limit_warning;
8949
8950       if List.mem DangerWillRobinson flags then
8951         pr "%s\n\n" danger_will_robinson;
8952
8953       match deprecation_notice flags with
8954       | None -> ()
8955       | Some txt -> pr "%s\n\n" txt
8956   ) all_functions_sorted
8957
8958 and generate_fish_prep_options_h () =
8959   generate_header CStyle GPLv2plus;
8960
8961   pr "#ifndef PREPOPTS_H\n";
8962   pr "\n";
8963
8964   pr "\
8965 struct prep {
8966   const char *name;             /* eg. \"fs\" */
8967
8968   size_t nr_params;             /* optional parameters */
8969   struct prep_param *params;
8970
8971   const char *shortdesc;        /* short description */
8972   const char *longdesc;         /* long description */
8973
8974                                 /* functions to implement it */
8975   void (*prelaunch) (const char *filename, prep_data *);
8976   void (*postlaunch) (const char *filename, prep_data *, const char *device);
8977 };
8978
8979 struct prep_param {
8980   const char *pname;            /* parameter name */
8981   const char *pdefault;         /* parameter default */
8982   const char *pdesc;            /* parameter description */
8983 };
8984
8985 extern const struct prep preps[];
8986 #define NR_PREPS %d
8987
8988 " (List.length prepopts);
8989
8990   List.iter (
8991     fun (name, shortdesc, args, longdesc) ->
8992       pr "\
8993 extern void prep_prelaunch_%s (const char *filename, prep_data *data);
8994 extern void prep_postlaunch_%s (const char *filename, prep_data *data, const char *device);
8995
8996 " name name;
8997   ) prepopts;
8998
8999   pr "\n";
9000   pr "#endif /* PREPOPTS_H */\n"
9001
9002 and generate_fish_prep_options_c () =
9003   generate_header CStyle GPLv2plus;
9004
9005   pr "\
9006 #include \"fish.h\"
9007 #include \"prepopts.h\"
9008
9009 ";
9010
9011   List.iter (
9012     fun (name, shortdesc, args, longdesc) ->
9013       pr "static struct prep_param %s_args[] = {\n" name;
9014       List.iter (
9015         fun (n, default, desc) ->
9016           pr "  { \"%s\", \"%s\", \"%s\" },\n" n default desc
9017       ) args;
9018       pr "};\n";
9019       pr "\n";
9020   ) prepopts;
9021
9022   pr "const struct prep preps[] = {\n";
9023   List.iter (
9024     fun (name, shortdesc, args, longdesc) ->
9025       pr "  { \"%s\", %d, %s_args,
9026     \"%s\",
9027     \"%s\",
9028     prep_prelaunch_%s, prep_postlaunch_%s },
9029 "
9030         name (List.length args) name
9031         (c_quote shortdesc) (c_quote longdesc)
9032         name name;
9033   ) prepopts;
9034   pr "};\n"
9035
9036 (* Generate a C function prototype. *)
9037 and generate_prototype ?(extern = true) ?(static = false) ?(semicolon = true)
9038     ?(single_line = false) ?(newline = false) ?(in_daemon = false)
9039     ?(prefix = "")
9040     ?handle name style =
9041   if extern then pr "extern ";
9042   if static then pr "static ";
9043   (match fst style with
9044    | RErr -> pr "int "
9045    | RInt _ -> pr "int "
9046    | RInt64 _ -> pr "int64_t "
9047    | RBool _ -> pr "int "
9048    | RConstString _ | RConstOptString _ -> pr "const char *"
9049    | RString _ | RBufferOut _ -> pr "char *"
9050    | RStringList _ | RHashtable _ -> pr "char **"
9051    | RStruct (_, typ) ->
9052        if not in_daemon then pr "struct guestfs_%s *" typ
9053        else pr "guestfs_int_%s *" typ
9054    | RStructList (_, typ) ->
9055        if not in_daemon then pr "struct guestfs_%s_list *" typ
9056        else pr "guestfs_int_%s_list *" typ
9057   );
9058   let is_RBufferOut = match fst style with RBufferOut _ -> true | _ -> false in
9059   pr "%s%s (" prefix name;
9060   if handle = None && List.length (snd style) = 0 && not is_RBufferOut then
9061     pr "void"
9062   else (
9063     let comma = ref false in
9064     (match handle with
9065      | None -> ()
9066      | Some handle -> pr "guestfs_h *%s" handle; comma := true
9067     );
9068     let next () =
9069       if !comma then (
9070         if single_line then pr ", " else pr ",\n\t\t"
9071       );
9072       comma := true
9073     in
9074     List.iter (
9075       function
9076       | Pathname n
9077       | Device n | Dev_or_Path n
9078       | String n
9079       | OptString n
9080       | Key n ->
9081           next ();
9082           pr "const char *%s" n
9083       | StringList n | DeviceList n ->
9084           next ();
9085           pr "char *const *%s" n
9086       | Bool n -> next (); pr "int %s" n
9087       | Int n -> next (); pr "int %s" n
9088       | Int64 n -> next (); pr "int64_t %s" n
9089       | FileIn n
9090       | FileOut n ->
9091           if not in_daemon then (next (); pr "const char *%s" n)
9092       | BufferIn n ->
9093           next ();
9094           pr "const char *%s" n;
9095           next ();
9096           pr "size_t %s_size" n
9097     ) (snd style);
9098     if is_RBufferOut then (next (); pr "size_t *size_r");
9099   );
9100   pr ")";
9101   if semicolon then pr ";";
9102   if newline then pr "\n"
9103
9104 (* Generate C call arguments, eg "(handle, foo, bar)" *)
9105 and generate_c_call_args ?handle ?(decl = false) style =
9106   pr "(";
9107   let comma = ref false in
9108   let next () =
9109     if !comma then pr ", ";
9110     comma := true
9111   in
9112   (match handle with
9113    | None -> ()
9114    | Some handle -> pr "%s" handle; comma := true
9115   );
9116   List.iter (
9117     function
9118     | BufferIn n ->
9119         next ();
9120         pr "%s, %s_size" n n
9121     | arg ->
9122         next ();
9123         pr "%s" (name_of_argt arg)
9124   ) (snd style);
9125   (* For RBufferOut calls, add implicit &size parameter. *)
9126   if not decl then (
9127     match fst style with
9128     | RBufferOut _ ->
9129         next ();
9130         pr "&size"
9131     | _ -> ()
9132   );
9133   pr ")"
9134
9135 (* Generate the OCaml bindings interface. *)
9136 and generate_ocaml_mli () =
9137   generate_header OCamlStyle LGPLv2plus;
9138
9139   pr "\
9140 (** For API documentation you should refer to the C API
9141     in the guestfs(3) manual page.  The OCaml API uses almost
9142     exactly the same calls. *)
9143
9144 type t
9145 (** A [guestfs_h] handle. *)
9146
9147 exception Error of string
9148 (** This exception is raised when there is an error. *)
9149
9150 exception Handle_closed of string
9151 (** This exception is raised if you use a {!Guestfs.t} handle
9152     after calling {!close} on it.  The string is the name of
9153     the function. *)
9154
9155 val create : unit -> t
9156 (** Create a {!Guestfs.t} handle. *)
9157
9158 val close : t -> unit
9159 (** Close the {!Guestfs.t} handle and free up all resources used
9160     by it immediately.
9161
9162     Handles are closed by the garbage collector when they become
9163     unreferenced, but callers can call this in order to provide
9164     predictable cleanup. *)
9165
9166 type progress_cb = int -> int -> int64 -> int64 -> unit
9167
9168 val set_progress_callback : t -> progress_cb -> unit
9169 (** [set_progress_callback g f] sets [f] as the progress callback function.
9170     For some long-running functions, [f] will be called repeatedly
9171     during the function with progress updates.
9172
9173     The callback is [f proc_nr serial position total].  See
9174     the description of [guestfs_set_progress_callback] in guestfs(3)
9175     for the meaning of these four numbers.
9176
9177     Note that if the closure captures a reference to the handle,
9178     this reference will prevent the handle from being
9179     automatically closed by the garbage collector.  There are
9180     three ways to avoid this: be careful not to capture the handle
9181     in the closure, or use a weak reference, or call
9182     {!Guestfs.clear_progress_callback} to remove the reference. *)
9183
9184 val clear_progress_callback : t -> unit
9185 (** [clear_progress_callback g] removes any progress callback function
9186     associated with the handle.  See {!Guestfs.set_progress_callback}. *)
9187
9188 ";
9189   generate_ocaml_structure_decls ();
9190
9191   (* The actions. *)
9192   List.iter (
9193     fun (name, style, _, _, _, shortdesc, _) ->
9194       generate_ocaml_prototype name style;
9195       pr "(** %s *)\n" shortdesc;
9196       pr "\n"
9197   ) all_functions_sorted
9198
9199 (* Generate the OCaml bindings implementation. *)
9200 and generate_ocaml_ml () =
9201   generate_header OCamlStyle LGPLv2plus;
9202
9203   pr "\
9204 type t
9205
9206 exception Error of string
9207 exception Handle_closed of string
9208
9209 external create : unit -> t = \"ocaml_guestfs_create\"
9210 external close : t -> unit = \"ocaml_guestfs_close\"
9211
9212 type progress_cb = int -> int -> int64 -> int64 -> unit
9213
9214 external set_progress_callback : t -> progress_cb -> unit
9215   = \"ocaml_guestfs_set_progress_callback\"
9216 external clear_progress_callback : t -> unit
9217   = \"ocaml_guestfs_clear_progress_callback\"
9218
9219 (* Give the exceptions names, so they can be raised from the C code. *)
9220 let () =
9221   Callback.register_exception \"ocaml_guestfs_error\" (Error \"\");
9222   Callback.register_exception \"ocaml_guestfs_closed\" (Handle_closed \"\")
9223
9224 ";
9225
9226   generate_ocaml_structure_decls ();
9227
9228   (* The actions. *)
9229   List.iter (
9230     fun (name, style, _, _, _, shortdesc, _) ->
9231       generate_ocaml_prototype ~is_external:true name style;
9232   ) all_functions_sorted
9233
9234 (* Generate the OCaml bindings C implementation. *)
9235 and generate_ocaml_c () =
9236   generate_header CStyle LGPLv2plus;
9237
9238   pr "\
9239 #include <stdio.h>
9240 #include <stdlib.h>
9241 #include <string.h>
9242
9243 #include <caml/config.h>
9244 #include <caml/alloc.h>
9245 #include <caml/callback.h>
9246 #include <caml/fail.h>
9247 #include <caml/memory.h>
9248 #include <caml/mlvalues.h>
9249 #include <caml/signals.h>
9250
9251 #include \"guestfs.h\"
9252
9253 #include \"guestfs_c.h\"
9254
9255 /* Copy a hashtable of string pairs into an assoc-list.  We return
9256  * the list in reverse order, but hashtables aren't supposed to be
9257  * ordered anyway.
9258  */
9259 static CAMLprim value
9260 copy_table (char * const * argv)
9261 {
9262   CAMLparam0 ();
9263   CAMLlocal5 (rv, pairv, kv, vv, cons);
9264   size_t i;
9265
9266   rv = Val_int (0);
9267   for (i = 0; argv[i] != NULL; i += 2) {
9268     kv = caml_copy_string (argv[i]);
9269     vv = caml_copy_string (argv[i+1]);
9270     pairv = caml_alloc (2, 0);
9271     Store_field (pairv, 0, kv);
9272     Store_field (pairv, 1, vv);
9273     cons = caml_alloc (2, 0);
9274     Store_field (cons, 1, rv);
9275     rv = cons;
9276     Store_field (cons, 0, pairv);
9277   }
9278
9279   CAMLreturn (rv);
9280 }
9281
9282 ";
9283
9284   (* Struct copy functions. *)
9285
9286   let emit_ocaml_copy_list_function typ =
9287     pr "static CAMLprim value\n";
9288     pr "copy_%s_list (const struct guestfs_%s_list *%ss)\n" typ typ typ;
9289     pr "{\n";
9290     pr "  CAMLparam0 ();\n";
9291     pr "  CAMLlocal2 (rv, v);\n";
9292     pr "  unsigned int i;\n";
9293     pr "\n";
9294     pr "  if (%ss->len == 0)\n" typ;
9295     pr "    CAMLreturn (Atom (0));\n";
9296     pr "  else {\n";
9297     pr "    rv = caml_alloc (%ss->len, 0);\n" typ;
9298     pr "    for (i = 0; i < %ss->len; ++i) {\n" typ;
9299     pr "      v = copy_%s (&%ss->val[i]);\n" typ typ;
9300     pr "      caml_modify (&Field (rv, i), v);\n";
9301     pr "    }\n";
9302     pr "    CAMLreturn (rv);\n";
9303     pr "  }\n";
9304     pr "}\n";
9305     pr "\n";
9306   in
9307
9308   List.iter (
9309     fun (typ, cols) ->
9310       let has_optpercent_col =
9311         List.exists (function (_, FOptPercent) -> true | _ -> false) cols in
9312
9313       pr "static CAMLprim value\n";
9314       pr "copy_%s (const struct guestfs_%s *%s)\n" typ typ typ;
9315       pr "{\n";
9316       pr "  CAMLparam0 ();\n";
9317       if has_optpercent_col then
9318         pr "  CAMLlocal3 (rv, v, v2);\n"
9319       else
9320         pr "  CAMLlocal2 (rv, v);\n";
9321       pr "\n";
9322       pr "  rv = caml_alloc (%d, 0);\n" (List.length cols);
9323       iteri (
9324         fun i col ->
9325           (match col with
9326            | name, FString ->
9327                pr "  v = caml_copy_string (%s->%s);\n" typ name
9328            | name, FBuffer ->
9329                pr "  v = caml_alloc_string (%s->%s_len);\n" typ name;
9330                pr "  memcpy (String_val (v), %s->%s, %s->%s_len);\n"
9331                  typ name typ name
9332            | name, FUUID ->
9333                pr "  v = caml_alloc_string (32);\n";
9334                pr "  memcpy (String_val (v), %s->%s, 32);\n" typ name
9335            | name, (FBytes|FInt64|FUInt64) ->
9336                pr "  v = caml_copy_int64 (%s->%s);\n" typ name
9337            | name, (FInt32|FUInt32) ->
9338                pr "  v = caml_copy_int32 (%s->%s);\n" typ name
9339            | name, FOptPercent ->
9340                pr "  if (%s->%s >= 0) { /* Some %s */\n" typ name name;
9341                pr "    v2 = caml_copy_double (%s->%s);\n" typ name;
9342                pr "    v = caml_alloc (1, 0);\n";
9343                pr "    Store_field (v, 0, v2);\n";
9344                pr "  } else /* None */\n";
9345                pr "    v = Val_int (0);\n";
9346            | name, FChar ->
9347                pr "  v = Val_int (%s->%s);\n" typ name
9348           );
9349           pr "  Store_field (rv, %d, v);\n" i
9350       ) cols;
9351       pr "  CAMLreturn (rv);\n";
9352       pr "}\n";
9353       pr "\n";
9354   ) structs;
9355
9356   (* Emit a copy_TYPE_list function definition only if that function is used. *)
9357   List.iter (
9358     function
9359     | typ, (RStructListOnly | RStructAndList) ->
9360         (* generate the function for typ *)
9361         emit_ocaml_copy_list_function typ
9362     | typ, _ -> () (* empty *)
9363   ) (rstructs_used_by all_functions);
9364
9365   (* The wrappers. *)
9366   List.iter (
9367     fun (name, style, _, _, _, _, _) ->
9368       pr "/* Automatically generated wrapper for function\n";
9369       pr " * ";
9370       generate_ocaml_prototype name style;
9371       pr " */\n";
9372       pr "\n";
9373
9374       let params =
9375         "gv" :: List.map (fun arg -> name_of_argt arg ^ "v") (snd style) in
9376
9377       let needs_extra_vs =
9378         match fst style with RConstOptString _ -> true | _ -> false in
9379
9380       pr "/* Emit prototype to appease gcc's -Wmissing-prototypes. */\n";
9381       pr "CAMLprim value ocaml_guestfs_%s (value %s" name (List.hd params);
9382       List.iter (pr ", value %s") (List.tl params); pr ");\n";
9383       pr "\n";
9384
9385       pr "CAMLprim value\n";
9386       pr "ocaml_guestfs_%s (value %s" name (List.hd params);
9387       List.iter (pr ", value %s") (List.tl params);
9388       pr ")\n";
9389       pr "{\n";
9390
9391       (match params with
9392        | [p1; p2; p3; p4; p5] ->
9393            pr "  CAMLparam5 (%s);\n" (String.concat ", " params)
9394        | p1 :: p2 :: p3 :: p4 :: p5 :: rest ->
9395            pr "  CAMLparam5 (%s);\n" (String.concat ", " [p1; p2; p3; p4; p5]);
9396            pr "  CAMLxparam%d (%s);\n"
9397              (List.length rest) (String.concat ", " rest)
9398        | ps ->
9399            pr "  CAMLparam%d (%s);\n" (List.length ps) (String.concat ", " ps)
9400       );
9401       if not needs_extra_vs then
9402         pr "  CAMLlocal1 (rv);\n"
9403       else
9404         pr "  CAMLlocal3 (rv, v, v2);\n";
9405       pr "\n";
9406
9407       pr "  guestfs_h *g = Guestfs_val (gv);\n";
9408       pr "  if (g == NULL)\n";
9409       pr "    ocaml_guestfs_raise_closed (\"%s\");\n" name;
9410       pr "\n";
9411
9412       List.iter (
9413         function
9414         | Pathname n
9415         | Device n | Dev_or_Path n
9416         | String n
9417         | FileIn n
9418         | FileOut n
9419         | Key n ->
9420             (* Copy strings in case the GC moves them: RHBZ#604691 *)
9421             pr "  char *%s = guestfs_safe_strdup (g, String_val (%sv));\n" n n
9422         | OptString n ->
9423             pr "  char *%s =\n" n;
9424             pr "    %sv != Val_int (0) ?" n;
9425             pr "      guestfs_safe_strdup (g, String_val (Field (%sv, 0))) : NULL;\n" n
9426         | BufferIn n ->
9427             pr "  size_t %s_size = caml_string_length (%sv);\n" n n;
9428             pr "  char *%s = guestfs_safe_memdup (g, String_val (%sv), %s_size);\n" n n n
9429         | StringList n | DeviceList n ->
9430             pr "  char **%s = ocaml_guestfs_strings_val (g, %sv);\n" n n
9431         | Bool n ->
9432             pr "  int %s = Bool_val (%sv);\n" n n
9433         | Int n ->
9434             pr "  int %s = Int_val (%sv);\n" n n
9435         | Int64 n ->
9436             pr "  int64_t %s = Int64_val (%sv);\n" n n
9437       ) (snd style);
9438       let error_code =
9439         match fst style with
9440         | RErr -> pr "  int r;\n"; "-1"
9441         | RInt _ -> pr "  int r;\n"; "-1"
9442         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
9443         | RBool _ -> pr "  int r;\n"; "-1"
9444         | RConstString _ | RConstOptString _ ->
9445             pr "  const char *r;\n"; "NULL"
9446         | RString _ -> pr "  char *r;\n"; "NULL"
9447         | RStringList _ ->
9448             pr "  size_t i;\n";
9449             pr "  char **r;\n";
9450             "NULL"
9451         | RStruct (_, typ) ->
9452             pr "  struct guestfs_%s *r;\n" typ; "NULL"
9453         | RStructList (_, typ) ->
9454             pr "  struct guestfs_%s_list *r;\n" typ; "NULL"
9455         | RHashtable _ ->
9456             pr "  size_t i;\n";
9457             pr "  char **r;\n";
9458             "NULL"
9459         | RBufferOut _ ->
9460             pr "  char *r;\n";
9461             pr "  size_t size;\n";
9462             "NULL" in
9463       pr "\n";
9464
9465       pr "  caml_enter_blocking_section ();\n";
9466       pr "  r = guestfs_%s " name;
9467       generate_c_call_args ~handle:"g" style;
9468       pr ";\n";
9469       pr "  caml_leave_blocking_section ();\n";
9470
9471       (* Free strings if we copied them above. *)
9472       List.iter (
9473         function
9474         | Pathname n | Device n | Dev_or_Path n | String n | OptString n
9475         | FileIn n | FileOut n | BufferIn n | Key n ->
9476             pr "  free (%s);\n" n
9477         | StringList n | DeviceList n ->
9478             pr "  ocaml_guestfs_free_strings (%s);\n" n;
9479         | Bool _ | Int _ | Int64 _ -> ()
9480       ) (snd style);
9481
9482       pr "  if (r == %s)\n" error_code;
9483       pr "    ocaml_guestfs_raise_error (g, \"%s\");\n" name;
9484       pr "\n";
9485
9486       (match fst style with
9487        | RErr -> pr "  rv = Val_unit;\n"
9488        | RInt _ -> pr "  rv = Val_int (r);\n"
9489        | RInt64 _ ->
9490            pr "  rv = caml_copy_int64 (r);\n"
9491        | RBool _ -> pr "  rv = Val_bool (r);\n"
9492        | RConstString _ ->
9493            pr "  rv = caml_copy_string (r);\n"
9494        | RConstOptString _ ->
9495            pr "  if (r) { /* Some string */\n";
9496            pr "    v = caml_alloc (1, 0);\n";
9497            pr "    v2 = caml_copy_string (r);\n";
9498            pr "    Store_field (v, 0, v2);\n";
9499            pr "  } else /* None */\n";
9500            pr "    v = Val_int (0);\n";
9501        | RString _ ->
9502            pr "  rv = caml_copy_string (r);\n";
9503            pr "  free (r);\n"
9504        | RStringList _ ->
9505            pr "  rv = caml_copy_string_array ((const char **) r);\n";
9506            pr "  for (i = 0; r[i] != NULL; ++i) free (r[i]);\n";
9507            pr "  free (r);\n"
9508        | RStruct (_, typ) ->
9509            pr "  rv = copy_%s (r);\n" typ;
9510            pr "  guestfs_free_%s (r);\n" typ;
9511        | RStructList (_, typ) ->
9512            pr "  rv = copy_%s_list (r);\n" typ;
9513            pr "  guestfs_free_%s_list (r);\n" typ;
9514        | RHashtable _ ->
9515            pr "  rv = copy_table (r);\n";
9516            pr "  for (i = 0; r[i] != NULL; ++i) free (r[i]);\n";
9517            pr "  free (r);\n";
9518        | RBufferOut _ ->
9519            pr "  rv = caml_alloc_string (size);\n";
9520            pr "  memcpy (String_val (rv), r, size);\n";
9521       );
9522
9523       pr "  CAMLreturn (rv);\n";
9524       pr "}\n";
9525       pr "\n";
9526
9527       if List.length params > 5 then (
9528         pr "/* Emit prototype to appease gcc's -Wmissing-prototypes. */\n";
9529         pr "CAMLprim value ";
9530         pr "ocaml_guestfs_%s_byte (value *argv, int argn);\n" name;
9531         pr "CAMLprim value\n";
9532         pr "ocaml_guestfs_%s_byte (value *argv, int argn)\n" name;
9533         pr "{\n";
9534         pr "  return ocaml_guestfs_%s (argv[0]" name;
9535         iteri (fun i _ -> pr ", argv[%d]" i) (List.tl params);
9536         pr ");\n";
9537         pr "}\n";
9538         pr "\n"
9539       )
9540   ) all_functions_sorted
9541
9542 and generate_ocaml_structure_decls () =
9543   List.iter (
9544     fun (typ, cols) ->
9545       pr "type %s = {\n" typ;
9546       List.iter (
9547         function
9548         | name, FString -> pr "  %s : string;\n" name
9549         | name, FBuffer -> pr "  %s : string;\n" name
9550         | name, FUUID -> pr "  %s : string;\n" name
9551         | name, (FBytes|FInt64|FUInt64) -> pr "  %s : int64;\n" name
9552         | name, (FInt32|FUInt32) -> pr "  %s : int32;\n" name
9553         | name, FChar -> pr "  %s : char;\n" name
9554         | name, FOptPercent -> pr "  %s : float option;\n" name
9555       ) cols;
9556       pr "}\n";
9557       pr "\n"
9558   ) structs
9559
9560 and generate_ocaml_prototype ?(is_external = false) name style =
9561   if is_external then pr "external " else pr "val ";
9562   pr "%s : t -> " name;
9563   List.iter (
9564     function
9565     | Pathname _ | Device _ | Dev_or_Path _ | String _ | FileIn _ | FileOut _
9566     | BufferIn _ | Key _ -> pr "string -> "
9567     | OptString _ -> pr "string option -> "
9568     | StringList _ | DeviceList _ -> pr "string array -> "
9569     | Bool _ -> pr "bool -> "
9570     | Int _ -> pr "int -> "
9571     | Int64 _ -> pr "int64 -> "
9572   ) (snd style);
9573   (match fst style with
9574    | RErr -> pr "unit" (* all errors are turned into exceptions *)
9575    | RInt _ -> pr "int"
9576    | RInt64 _ -> pr "int64"
9577    | RBool _ -> pr "bool"
9578    | RConstString _ -> pr "string"
9579    | RConstOptString _ -> pr "string option"
9580    | RString _ | RBufferOut _ -> pr "string"
9581    | RStringList _ -> pr "string array"
9582    | RStruct (_, typ) -> pr "%s" typ
9583    | RStructList (_, typ) -> pr "%s array" typ
9584    | RHashtable _ -> pr "(string * string) list"
9585   );
9586   if is_external then (
9587     pr " = ";
9588     if List.length (snd style) + 1 > 5 then
9589       pr "\"ocaml_guestfs_%s_byte\" " name;
9590     pr "\"ocaml_guestfs_%s\"" name
9591   );
9592   pr "\n"
9593
9594 (* Generate Perl xs code, a sort of crazy variation of C with macros. *)
9595 and generate_perl_xs () =
9596   generate_header CStyle LGPLv2plus;
9597
9598   pr "\
9599 #include \"EXTERN.h\"
9600 #include \"perl.h\"
9601 #include \"XSUB.h\"
9602
9603 #include <guestfs.h>
9604
9605 #ifndef PRId64
9606 #define PRId64 \"lld\"
9607 #endif
9608
9609 static SV *
9610 my_newSVll(long long val) {
9611 #ifdef USE_64_BIT_ALL
9612   return newSViv(val);
9613 #else
9614   char buf[100];
9615   int len;
9616   len = snprintf(buf, 100, \"%%\" PRId64, val);
9617   return newSVpv(buf, len);
9618 #endif
9619 }
9620
9621 #ifndef PRIu64
9622 #define PRIu64 \"llu\"
9623 #endif
9624
9625 static SV *
9626 my_newSVull(unsigned long long val) {
9627 #ifdef USE_64_BIT_ALL
9628   return newSVuv(val);
9629 #else
9630   char buf[100];
9631   int len;
9632   len = snprintf(buf, 100, \"%%\" PRIu64, val);
9633   return newSVpv(buf, len);
9634 #endif
9635 }
9636
9637 /* http://www.perlmonks.org/?node_id=680842 */
9638 static char **
9639 XS_unpack_charPtrPtr (SV *arg) {
9640   char **ret;
9641   AV *av;
9642   I32 i;
9643
9644   if (!arg || !SvOK (arg) || !SvROK (arg) || SvTYPE (SvRV (arg)) != SVt_PVAV)
9645     croak (\"array reference expected\");
9646
9647   av = (AV *)SvRV (arg);
9648   ret = malloc ((av_len (av) + 1 + 1) * sizeof (char *));
9649   if (!ret)
9650     croak (\"malloc failed\");
9651
9652   for (i = 0; i <= av_len (av); i++) {
9653     SV **elem = av_fetch (av, i, 0);
9654
9655     if (!elem || !*elem)
9656       croak (\"missing element in list\");
9657
9658     ret[i] = SvPV_nolen (*elem);
9659   }
9660
9661   ret[i] = NULL;
9662
9663   return ret;
9664 }
9665
9666 #define PROGRESS_KEY \"_perl_progress_cb\"
9667
9668 static void
9669 _clear_progress_callback (guestfs_h *g)
9670 {
9671   guestfs_set_progress_callback (g, NULL, NULL);
9672   SV *cb = guestfs_get_private (g, PROGRESS_KEY);
9673   if (cb) {
9674     guestfs_set_private (g, PROGRESS_KEY, NULL);
9675     SvREFCNT_dec (cb);
9676   }
9677 }
9678
9679 /* http://www.perlmonks.org/?node=338857 */
9680 static void
9681 _progress_callback (guestfs_h *g, void *cb,
9682                     int proc_nr, int serial, uint64_t position, uint64_t total)
9683 {
9684   dSP;
9685   ENTER;
9686   SAVETMPS;
9687   PUSHMARK (SP);
9688   XPUSHs (sv_2mortal (newSViv (proc_nr)));
9689   XPUSHs (sv_2mortal (newSViv (serial)));
9690   XPUSHs (sv_2mortal (my_newSVull (position)));
9691   XPUSHs (sv_2mortal (my_newSVull (total)));
9692   PUTBACK;
9693   call_sv ((SV *) cb, G_VOID | G_DISCARD | G_EVAL);
9694   FREETMPS;
9695   LEAVE;
9696 }
9697
9698 static void
9699 _close_handle (guestfs_h *g)
9700 {
9701   assert (g != NULL);
9702   _clear_progress_callback (g);
9703   guestfs_close (g);
9704 }
9705
9706 MODULE = Sys::Guestfs  PACKAGE = Sys::Guestfs
9707
9708 PROTOTYPES: ENABLE
9709
9710 guestfs_h *
9711 _create ()
9712    CODE:
9713       RETVAL = guestfs_create ();
9714       if (!RETVAL)
9715         croak (\"could not create guestfs handle\");
9716       guestfs_set_error_handler (RETVAL, NULL, NULL);
9717  OUTPUT:
9718       RETVAL
9719
9720 void
9721 DESTROY (sv)
9722       SV *sv;
9723  PPCODE:
9724       /* For the 'g' argument above we do the conversion explicitly and
9725        * don't rely on the typemap, because if the handle has been
9726        * explicitly closed we don't want the typemap conversion to
9727        * display an error.
9728        */
9729       HV *hv = (HV *) SvRV (sv);
9730       SV **svp = hv_fetch (hv, \"_g\", 2, 0);
9731       if (svp != NULL) {
9732         guestfs_h *g = (guestfs_h *) SvIV (*svp);
9733         _close_handle (g);
9734       }
9735
9736 void
9737 close (g)
9738       guestfs_h *g;
9739  PPCODE:
9740       _close_handle (g);
9741       /* Avoid double-free in DESTROY method. */
9742       HV *hv = (HV *) SvRV (ST(0));
9743       (void) hv_delete (hv, \"_g\", 2, G_DISCARD);
9744
9745 void
9746 set_progress_callback (g, cb)
9747       guestfs_h *g;
9748       SV *cb;
9749  PPCODE:
9750       _clear_progress_callback (g);
9751       SvREFCNT_inc (cb);
9752       guestfs_set_private (g, PROGRESS_KEY, cb);
9753       guestfs_set_progress_callback (g, _progress_callback, cb);
9754
9755 void
9756 clear_progress_callback (g)
9757       guestfs_h *g;
9758  PPCODE:
9759       _clear_progress_callback (g);
9760
9761 ";
9762
9763   List.iter (
9764     fun (name, style, _, _, _, _, _) ->
9765       (match fst style with
9766        | RErr -> pr "void\n"
9767        | RInt _ -> pr "SV *\n"
9768        | RInt64 _ -> pr "SV *\n"
9769        | RBool _ -> pr "SV *\n"
9770        | RConstString _ -> pr "SV *\n"
9771        | RConstOptString _ -> pr "SV *\n"
9772        | RString _ -> pr "SV *\n"
9773        | RBufferOut _ -> pr "SV *\n"
9774        | RStringList _
9775        | RStruct _ | RStructList _
9776        | RHashtable _ ->
9777            pr "void\n" (* all lists returned implictly on the stack *)
9778       );
9779       (* Call and arguments. *)
9780       pr "%s (g" name;
9781       List.iter (
9782         fun arg -> pr ", %s" (name_of_argt arg)
9783       ) (snd style);
9784       pr ")\n";
9785       pr "      guestfs_h *g;\n";
9786       iteri (
9787         fun i ->
9788           function
9789           | Pathname n | Device n | Dev_or_Path n | String n
9790           | FileIn n | FileOut n | Key n ->
9791               pr "      char *%s;\n" n
9792           | BufferIn n ->
9793               pr "      char *%s;\n" n;
9794               pr "      size_t %s_size = SvCUR (ST(%d));\n" n (i+1)
9795           | OptString n ->
9796               (* http://www.perlmonks.org/?node_id=554277
9797                * Note that the implicit handle argument means we have
9798                * to add 1 to the ST(x) operator.
9799                *)
9800               pr "      char *%s = SvOK(ST(%d)) ? SvPV_nolen(ST(%d)) : NULL;\n" n (i+1) (i+1)
9801           | StringList n | DeviceList n -> pr "      char **%s;\n" n
9802           | Bool n -> pr "      int %s;\n" n
9803           | Int n -> pr "      int %s;\n" n
9804           | Int64 n -> pr "      int64_t %s;\n" n
9805       ) (snd style);
9806
9807       let do_cleanups () =
9808         List.iter (
9809           function
9810           | Pathname _ | Device _ | Dev_or_Path _ | String _ | OptString _
9811           | Bool _ | Int _ | Int64 _
9812           | FileIn _ | FileOut _
9813           | BufferIn _ | Key _ -> ()
9814           | StringList n | DeviceList n -> pr "      free (%s);\n" n
9815         ) (snd style)
9816       in
9817
9818       (* Code. *)
9819       (match fst style with
9820        | RErr ->
9821            pr "PREINIT:\n";
9822            pr "      int r;\n";
9823            pr " PPCODE:\n";
9824            pr "      r = guestfs_%s " name;
9825            generate_c_call_args ~handle:"g" style;
9826            pr ";\n";
9827            do_cleanups ();
9828            pr "      if (r == -1)\n";
9829            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9830        | RInt n
9831        | RBool n ->
9832            pr "PREINIT:\n";
9833            pr "      int %s;\n" n;
9834            pr "   CODE:\n";
9835            pr "      %s = guestfs_%s " n name;
9836            generate_c_call_args ~handle:"g" style;
9837            pr ";\n";
9838            do_cleanups ();
9839            pr "      if (%s == -1)\n" n;
9840            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9841            pr "      RETVAL = newSViv (%s);\n" n;
9842            pr " OUTPUT:\n";
9843            pr "      RETVAL\n"
9844        | RInt64 n ->
9845            pr "PREINIT:\n";
9846            pr "      int64_t %s;\n" n;
9847            pr "   CODE:\n";
9848            pr "      %s = guestfs_%s " n name;
9849            generate_c_call_args ~handle:"g" style;
9850            pr ";\n";
9851            do_cleanups ();
9852            pr "      if (%s == -1)\n" n;
9853            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9854            pr "      RETVAL = my_newSVll (%s);\n" n;
9855            pr " OUTPUT:\n";
9856            pr "      RETVAL\n"
9857        | RConstString n ->
9858            pr "PREINIT:\n";
9859            pr "      const char *%s;\n" n;
9860            pr "   CODE:\n";
9861            pr "      %s = guestfs_%s " n name;
9862            generate_c_call_args ~handle:"g" style;
9863            pr ";\n";
9864            do_cleanups ();
9865            pr "      if (%s == NULL)\n" n;
9866            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9867            pr "      RETVAL = newSVpv (%s, 0);\n" n;
9868            pr " OUTPUT:\n";
9869            pr "      RETVAL\n"
9870        | RConstOptString n ->
9871            pr "PREINIT:\n";
9872            pr "      const char *%s;\n" n;
9873            pr "   CODE:\n";
9874            pr "      %s = guestfs_%s " n name;
9875            generate_c_call_args ~handle:"g" style;
9876            pr ";\n";
9877            do_cleanups ();
9878            pr "      if (%s == NULL)\n" n;
9879            pr "        RETVAL = &PL_sv_undef;\n";
9880            pr "      else\n";
9881            pr "        RETVAL = newSVpv (%s, 0);\n" n;
9882            pr " OUTPUT:\n";
9883            pr "      RETVAL\n"
9884        | RString n ->
9885            pr "PREINIT:\n";
9886            pr "      char *%s;\n" n;
9887            pr "   CODE:\n";
9888            pr "      %s = guestfs_%s " n name;
9889            generate_c_call_args ~handle:"g" style;
9890            pr ";\n";
9891            do_cleanups ();
9892            pr "      if (%s == NULL)\n" n;
9893            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9894            pr "      RETVAL = newSVpv (%s, 0);\n" n;
9895            pr "      free (%s);\n" n;
9896            pr " OUTPUT:\n";
9897            pr "      RETVAL\n"
9898        | RStringList n | RHashtable n ->
9899            pr "PREINIT:\n";
9900            pr "      char **%s;\n" n;
9901            pr "      size_t i, n;\n";
9902            pr " PPCODE:\n";
9903            pr "      %s = guestfs_%s " n name;
9904            generate_c_call_args ~handle:"g" style;
9905            pr ";\n";
9906            do_cleanups ();
9907            pr "      if (%s == NULL)\n" n;
9908            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9909            pr "      for (n = 0; %s[n] != NULL; ++n) /**/;\n" n;
9910            pr "      EXTEND (SP, n);\n";
9911            pr "      for (i = 0; i < n; ++i) {\n";
9912            pr "        PUSHs (sv_2mortal (newSVpv (%s[i], 0)));\n" n;
9913            pr "        free (%s[i]);\n" n;
9914            pr "      }\n";
9915            pr "      free (%s);\n" n;
9916        | RStruct (n, typ) ->
9917            let cols = cols_of_struct typ in
9918            generate_perl_struct_code typ cols name style n do_cleanups
9919        | RStructList (n, typ) ->
9920            let cols = cols_of_struct typ in
9921            generate_perl_struct_list_code typ cols name style n do_cleanups
9922        | RBufferOut n ->
9923            pr "PREINIT:\n";
9924            pr "      char *%s;\n" n;
9925            pr "      size_t size;\n";
9926            pr "   CODE:\n";
9927            pr "      %s = guestfs_%s " n name;
9928            generate_c_call_args ~handle:"g" style;
9929            pr ";\n";
9930            do_cleanups ();
9931            pr "      if (%s == NULL)\n" n;
9932            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9933            pr "      RETVAL = newSVpvn (%s, size);\n" n;
9934            pr "      free (%s);\n" n;
9935            pr " OUTPUT:\n";
9936            pr "      RETVAL\n"
9937       );
9938
9939       pr "\n"
9940   ) all_functions
9941
9942 and generate_perl_struct_list_code typ cols name style n do_cleanups =
9943   pr "PREINIT:\n";
9944   pr "      struct guestfs_%s_list *%s;\n" typ n;
9945   pr "      size_t i;\n";
9946   pr "      HV *hv;\n";
9947   pr " PPCODE:\n";
9948   pr "      %s = guestfs_%s " n name;
9949   generate_c_call_args ~handle:"g" style;
9950   pr ";\n";
9951   do_cleanups ();
9952   pr "      if (%s == NULL)\n" n;
9953   pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9954   pr "      EXTEND (SP, %s->len);\n" n;
9955   pr "      for (i = 0; i < %s->len; ++i) {\n" n;
9956   pr "        hv = newHV ();\n";
9957   List.iter (
9958     function
9959     | name, FString ->
9960         pr "        (void) hv_store (hv, \"%s\", %d, newSVpv (%s->val[i].%s, 0), 0);\n"
9961           name (String.length name) n name
9962     | name, FUUID ->
9963         pr "        (void) hv_store (hv, \"%s\", %d, newSVpv (%s->val[i].%s, 32), 0);\n"
9964           name (String.length name) n name
9965     | name, FBuffer ->
9966         pr "        (void) hv_store (hv, \"%s\", %d, newSVpvn (%s->val[i].%s, %s->val[i].%s_len), 0);\n"
9967           name (String.length name) n name n name
9968     | name, (FBytes|FUInt64) ->
9969         pr "        (void) hv_store (hv, \"%s\", %d, my_newSVull (%s->val[i].%s), 0);\n"
9970           name (String.length name) n name
9971     | name, FInt64 ->
9972         pr "        (void) hv_store (hv, \"%s\", %d, my_newSVll (%s->val[i].%s), 0);\n"
9973           name (String.length name) n name
9974     | name, (FInt32|FUInt32) ->
9975         pr "        (void) hv_store (hv, \"%s\", %d, newSVnv (%s->val[i].%s), 0);\n"
9976           name (String.length name) n name
9977     | name, FChar ->
9978         pr "        (void) hv_store (hv, \"%s\", %d, newSVpv (&%s->val[i].%s, 1), 0);\n"
9979           name (String.length name) n name
9980     | name, FOptPercent ->
9981         pr "        (void) hv_store (hv, \"%s\", %d, newSVnv (%s->val[i].%s), 0);\n"
9982           name (String.length name) n name
9983   ) cols;
9984   pr "        PUSHs (sv_2mortal (newRV ((SV *) hv)));\n";
9985   pr "      }\n";
9986   pr "      guestfs_free_%s_list (%s);\n" typ n
9987
9988 and generate_perl_struct_code typ cols name style n do_cleanups =
9989   pr "PREINIT:\n";
9990   pr "      struct guestfs_%s *%s;\n" typ n;
9991   pr " PPCODE:\n";
9992   pr "      %s = guestfs_%s " n name;
9993   generate_c_call_args ~handle:"g" style;
9994   pr ";\n";
9995   do_cleanups ();
9996   pr "      if (%s == NULL)\n" n;
9997   pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9998   pr "      EXTEND (SP, 2 * %d);\n" (List.length cols);
9999   List.iter (
10000     fun ((name, _) as col) ->
10001       pr "      PUSHs (sv_2mortal (newSVpv (\"%s\", 0)));\n" name;
10002
10003       match col with
10004       | name, FString ->
10005           pr "      PUSHs (sv_2mortal (newSVpv (%s->%s, 0)));\n"
10006             n name
10007       | name, FBuffer ->
10008           pr "      PUSHs (sv_2mortal (newSVpvn (%s->%s, %s->%s_len)));\n"
10009             n name n name
10010       | name, FUUID ->
10011           pr "      PUSHs (sv_2mortal (newSVpv (%s->%s, 32)));\n"
10012             n name
10013       | name, (FBytes|FUInt64) ->
10014           pr "      PUSHs (sv_2mortal (my_newSVull (%s->%s)));\n"
10015             n name
10016       | name, FInt64 ->
10017           pr "      PUSHs (sv_2mortal (my_newSVll (%s->%s)));\n"
10018             n name
10019       | name, (FInt32|FUInt32) ->
10020           pr "      PUSHs (sv_2mortal (newSVnv (%s->%s)));\n"
10021             n name
10022       | name, FChar ->
10023           pr "      PUSHs (sv_2mortal (newSVpv (&%s->%s, 1)));\n"
10024             n name
10025       | name, FOptPercent ->
10026           pr "      PUSHs (sv_2mortal (newSVnv (%s->%s)));\n"
10027             n name
10028   ) cols;
10029   pr "      free (%s);\n" n
10030
10031 (* Generate Sys/Guestfs.pm. *)
10032 and generate_perl_pm () =
10033   generate_header HashStyle LGPLv2plus;
10034
10035   pr "\
10036 =pod
10037
10038 =head1 NAME
10039
10040 Sys::Guestfs - Perl bindings for libguestfs
10041
10042 =head1 SYNOPSIS
10043
10044  use Sys::Guestfs;
10045
10046  my $h = Sys::Guestfs->new ();
10047  $h->add_drive ('guest.img');
10048  $h->launch ();
10049  $h->mount ('/dev/sda1', '/');
10050  $h->touch ('/hello');
10051  $h->sync ();
10052
10053 =head1 DESCRIPTION
10054
10055 The C<Sys::Guestfs> module provides a Perl XS binding to the
10056 libguestfs API for examining and modifying virtual machine
10057 disk images.
10058
10059 Amongst the things this is good for: making batch configuration
10060 changes to guests, getting disk used/free statistics (see also:
10061 virt-df), migrating between virtualization systems (see also:
10062 virt-p2v), performing partial backups, performing partial guest
10063 clones, cloning guests and changing registry/UUID/hostname info, and
10064 much else besides.
10065
10066 Libguestfs uses Linux kernel and qemu code, and can access any type of
10067 guest filesystem that Linux and qemu can, including but not limited
10068 to: ext2/3/4, btrfs, FAT and NTFS, LVM, many different disk partition
10069 schemes, qcow, qcow2, vmdk.
10070
10071 Libguestfs provides ways to enumerate guest storage (eg. partitions,
10072 LVs, what filesystem is in each LV, etc.).  It can also run commands
10073 in the context of the guest.  Also you can access filesystems over
10074 FUSE.
10075
10076 See also L<Sys::Guestfs::Lib(3)> for a set of useful library
10077 functions for using libguestfs from Perl, including integration
10078 with libvirt.
10079
10080 =head1 ERRORS
10081
10082 All errors turn into calls to C<croak> (see L<Carp(3)>).
10083
10084 =head1 METHODS
10085
10086 =over 4
10087
10088 =cut
10089
10090 package Sys::Guestfs;
10091
10092 use strict;
10093 use warnings;
10094
10095 # This version number changes whenever a new function
10096 # is added to the libguestfs API.  It is not directly
10097 # related to the libguestfs version number.
10098 use vars qw($VERSION);
10099 $VERSION = '0.%d';
10100
10101 require XSLoader;
10102 XSLoader::load ('Sys::Guestfs');
10103
10104 =item $h = Sys::Guestfs->new ();
10105
10106 Create a new guestfs handle.
10107
10108 =cut
10109
10110 sub new {
10111   my $proto = shift;
10112   my $class = ref ($proto) || $proto;
10113
10114   my $g = Sys::Guestfs::_create ();
10115   my $self = { _g => $g };
10116   bless $self, $class;
10117   return $self;
10118 }
10119
10120 =item $h->close ();
10121
10122 Explicitly close the guestfs handle.
10123
10124 B<Note:> You should not usually call this function.  The handle will
10125 be closed implicitly when its reference count goes to zero (eg.
10126 when it goes out of scope or the program ends).  This call is
10127 only required in some exceptional cases, such as where the program
10128 may contain cached references to the handle 'somewhere' and you
10129 really have to have the close happen right away.  After calling
10130 C<close> the program must not call any method (including C<close>)
10131 on the handle (but the implicit call to C<DESTROY> that happens
10132 when the final reference is cleaned up is OK).
10133
10134 =item $h->set_progress_callback (\\&cb);
10135
10136 Set the progress notification callback for this handle
10137 to the Perl closure C<cb>.
10138
10139 C<cb> will be called whenever a long-running operation
10140 generates a progress notification message.  The 4 parameters
10141 to the function are: C<proc_nr>, C<serial>, C<position>
10142 and C<total>.
10143
10144 You should carefully read the documentation for
10145 L<guestfs(3)/guestfs_set_progress_callback> before using
10146 this function.
10147
10148 =item $h->clear_progress_callback ();
10149
10150 This removes any progress callback function associated with
10151 the handle.
10152
10153 =cut
10154
10155 " max_proc_nr;
10156
10157   (* Actions.  We only need to print documentation for these as
10158    * they are pulled in from the XS code automatically.
10159    *)
10160   List.iter (
10161     fun (name, style, _, flags, _, _, longdesc) ->
10162       if not (List.mem NotInDocs flags) then (
10163         let longdesc = replace_str longdesc "C<guestfs_" "C<$h-E<gt>" in
10164         pr "=item ";
10165         generate_perl_prototype name style;
10166         pr "\n\n";
10167         pr "%s\n\n" longdesc;
10168         if List.mem ProtocolLimitWarning flags then
10169           pr "%s\n\n" protocol_limit_warning;
10170         if List.mem DangerWillRobinson flags then
10171           pr "%s\n\n" danger_will_robinson;
10172         match deprecation_notice flags with
10173         | None -> ()
10174         | Some txt -> pr "%s\n\n" txt
10175       )
10176   ) all_functions_sorted;
10177
10178   (* End of file. *)
10179   pr "\
10180 =cut
10181
10182 1;
10183
10184 =back
10185
10186 =head1 AVAILABILITY
10187
10188 From time to time we add new libguestfs APIs.  Also some libguestfs
10189 APIs won't be available in all builds of libguestfs (the Fedora
10190 build is full-featured, but other builds may disable features).
10191 How do you test whether the APIs that your Perl program needs are
10192 available in the version of C<Sys::Guestfs> that you are using?
10193
10194 To test if a particular function is available in the C<Sys::Guestfs>
10195 class, use the ordinary Perl UNIVERSAL method C<can(METHOD)>
10196 (see L<perlobj(1)>).  For example:
10197
10198  use Sys::Guestfs;
10199  if (defined (Sys::Guestfs->can (\"set_verbose\"))) {
10200    print \"\\$h->set_verbose is available\\n\";
10201  }
10202
10203 To test if particular features are supported by the current
10204 build, use the L</available> method like the example below.  Note
10205 that the appliance must be launched first.
10206
10207  $h->available ( [\"augeas\"] );
10208
10209 Since the L</available> method croaks if the feature is not supported,
10210 you might also want to wrap this in an eval and return a boolean.
10211 In fact this has already been done for you: use
10212 L<Sys::Guestfs::Lib(3)/feature_available>.
10213
10214 For further discussion on this topic, refer to
10215 L<guestfs(3)/AVAILABILITY>.
10216
10217 =head1 STORING DATA IN THE HANDLE
10218
10219 The handle returned from L</new> is a hash reference.  The hash
10220 normally contains a single element:
10221
10222  {
10223    _g => [private data used by libguestfs]
10224  }
10225
10226 Callers can add other elements to this hash to store data for their own
10227 purposes.  The data lasts for the lifetime of the handle.
10228
10229 Any fields whose names begin with an underscore are reserved
10230 for private use by libguestfs.  We may add more in future.
10231
10232 It is recommended that callers prefix the name of their field(s)
10233 with some unique string, to avoid conflicts with other users.
10234
10235 =head1 COPYRIGHT
10236
10237 Copyright (C) %s Red Hat Inc.
10238
10239 =head1 LICENSE
10240
10241 Please see the file COPYING.LIB for the full license.
10242
10243 =head1 SEE ALSO
10244
10245 L<guestfs(3)>,
10246 L<guestfish(1)>,
10247 L<http://libguestfs.org>,
10248 L<Sys::Guestfs::Lib(3)>.
10249
10250 =cut
10251 " copyright_years
10252
10253 and generate_perl_prototype name style =
10254   (match fst style with
10255    | RErr -> ()
10256    | RBool n
10257    | RInt n
10258    | RInt64 n
10259    | RConstString n
10260    | RConstOptString n
10261    | RString n
10262    | RBufferOut n -> pr "$%s = " n
10263    | RStruct (n,_)
10264    | RHashtable n -> pr "%%%s = " n
10265    | RStringList n
10266    | RStructList (n,_) -> pr "@%s = " n
10267   );
10268   pr "$h->%s (" name;
10269   let comma = ref false in
10270   List.iter (
10271     fun arg ->
10272       if !comma then pr ", ";
10273       comma := true;
10274       match arg with
10275       | Pathname n | Device n | Dev_or_Path n | String n
10276       | OptString n | Bool n | Int n | Int64 n | FileIn n | FileOut n
10277       | BufferIn n | Key n ->
10278           pr "$%s" n
10279       | StringList n | DeviceList n ->
10280           pr "\\@%s" n
10281   ) (snd style);
10282   pr ");"
10283
10284 (* Generate Python C module. *)
10285 and generate_python_c () =
10286   generate_header CStyle LGPLv2plus;
10287
10288   pr "\
10289 #define PY_SSIZE_T_CLEAN 1
10290 #include <Python.h>
10291
10292 #if PY_VERSION_HEX < 0x02050000
10293 typedef int Py_ssize_t;
10294 #define PY_SSIZE_T_MAX INT_MAX
10295 #define PY_SSIZE_T_MIN INT_MIN
10296 #endif
10297
10298 #include <stdio.h>
10299 #include <stdlib.h>
10300 #include <assert.h>
10301
10302 #include \"guestfs.h\"
10303
10304 #ifndef HAVE_PYCAPSULE_NEW
10305 typedef struct {
10306   PyObject_HEAD
10307   guestfs_h *g;
10308 } Pyguestfs_Object;
10309 #endif
10310
10311 static guestfs_h *
10312 get_handle (PyObject *obj)
10313 {
10314   assert (obj);
10315   assert (obj != Py_None);
10316 #ifndef HAVE_PYCAPSULE_NEW
10317   return ((Pyguestfs_Object *) obj)->g;
10318 #else
10319   return (guestfs_h*) PyCapsule_GetPointer(obj, \"guestfs_h\");
10320 #endif
10321 }
10322
10323 static PyObject *
10324 put_handle (guestfs_h *g)
10325 {
10326   assert (g);
10327 #ifndef HAVE_PYCAPSULE_NEW
10328   return
10329     PyCObject_FromVoidPtrAndDesc ((void *) g, (char *) \"guestfs_h\", NULL);
10330 #else
10331   return PyCapsule_New ((void *) g, \"guestfs_h\", NULL);
10332 #endif
10333 }
10334
10335 /* This list should be freed (but not the strings) after use. */
10336 static char **
10337 get_string_list (PyObject *obj)
10338 {
10339   size_t i, len;
10340   char **r;
10341
10342   assert (obj);
10343
10344   if (!PyList_Check (obj)) {
10345     PyErr_SetString (PyExc_RuntimeError, \"expecting a list parameter\");
10346     return NULL;
10347   }
10348
10349   Py_ssize_t slen = PyList_Size (obj);
10350   if (slen == -1) {
10351     PyErr_SetString (PyExc_RuntimeError, \"get_string_list: PyList_Size failure\");
10352     return NULL;
10353   }
10354   len = (size_t) slen;
10355   r = malloc (sizeof (char *) * (len+1));
10356   if (r == NULL) {
10357     PyErr_SetString (PyExc_RuntimeError, \"get_string_list: out of memory\");
10358     return NULL;
10359   }
10360
10361   for (i = 0; i < len; ++i)
10362     r[i] = PyString_AsString (PyList_GetItem (obj, i));
10363   r[len] = NULL;
10364
10365   return r;
10366 }
10367
10368 static PyObject *
10369 put_string_list (char * const * const argv)
10370 {
10371   PyObject *list;
10372   int argc, i;
10373
10374   for (argc = 0; argv[argc] != NULL; ++argc)
10375     ;
10376
10377   list = PyList_New (argc);
10378   for (i = 0; i < argc; ++i)
10379     PyList_SetItem (list, i, PyString_FromString (argv[i]));
10380
10381   return list;
10382 }
10383
10384 static PyObject *
10385 put_table (char * const * const argv)
10386 {
10387   PyObject *list, *item;
10388   int argc, i;
10389
10390   for (argc = 0; argv[argc] != NULL; ++argc)
10391     ;
10392
10393   list = PyList_New (argc >> 1);
10394   for (i = 0; i < argc; i += 2) {
10395     item = PyTuple_New (2);
10396     PyTuple_SetItem (item, 0, PyString_FromString (argv[i]));
10397     PyTuple_SetItem (item, 1, PyString_FromString (argv[i+1]));
10398     PyList_SetItem (list, i >> 1, item);
10399   }
10400
10401   return list;
10402 }
10403
10404 static void
10405 free_strings (char **argv)
10406 {
10407   int argc;
10408
10409   for (argc = 0; argv[argc] != NULL; ++argc)
10410     free (argv[argc]);
10411   free (argv);
10412 }
10413
10414 static PyObject *
10415 py_guestfs_create (PyObject *self, PyObject *args)
10416 {
10417   guestfs_h *g;
10418
10419   g = guestfs_create ();
10420   if (g == NULL) {
10421     PyErr_SetString (PyExc_RuntimeError,
10422                      \"guestfs.create: failed to allocate handle\");
10423     return NULL;
10424   }
10425   guestfs_set_error_handler (g, NULL, NULL);
10426   /* This can return NULL, but in that case put_handle will have
10427    * set the Python error string.
10428    */
10429   return put_handle (g);
10430 }
10431
10432 static PyObject *
10433 py_guestfs_close (PyObject *self, PyObject *args)
10434 {
10435   PyObject *py_g;
10436   guestfs_h *g;
10437
10438   if (!PyArg_ParseTuple (args, (char *) \"O:guestfs_close\", &py_g))
10439     return NULL;
10440   g = get_handle (py_g);
10441
10442   guestfs_close (g);
10443
10444   Py_INCREF (Py_None);
10445   return Py_None;
10446 }
10447
10448 ";
10449
10450   let emit_put_list_function typ =
10451     pr "static PyObject *\n";
10452     pr "put_%s_list (struct guestfs_%s_list *%ss)\n" typ typ typ;
10453     pr "{\n";
10454     pr "  PyObject *list;\n";
10455     pr "  size_t i;\n";
10456     pr "\n";
10457     pr "  list = PyList_New (%ss->len);\n" typ;
10458     pr "  for (i = 0; i < %ss->len; ++i)\n" typ;
10459     pr "    PyList_SetItem (list, i, put_%s (&%ss->val[i]));\n" typ typ;
10460     pr "  return list;\n";
10461     pr "};\n";
10462     pr "\n"
10463   in
10464
10465   (* Structures, turned into Python dictionaries. *)
10466   List.iter (
10467     fun (typ, cols) ->
10468       pr "static PyObject *\n";
10469       pr "put_%s (struct guestfs_%s *%s)\n" typ typ typ;
10470       pr "{\n";
10471       pr "  PyObject *dict;\n";
10472       pr "\n";
10473       pr "  dict = PyDict_New ();\n";
10474       List.iter (
10475         function
10476         | name, FString ->
10477             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
10478             pr "                        PyString_FromString (%s->%s));\n"
10479               typ name
10480         | name, FBuffer ->
10481             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
10482             pr "                        PyString_FromStringAndSize (%s->%s, %s->%s_len));\n"
10483               typ name typ name
10484         | name, FUUID ->
10485             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
10486             pr "                        PyString_FromStringAndSize (%s->%s, 32));\n"
10487               typ name
10488         | name, (FBytes|FUInt64) ->
10489             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
10490             pr "                        PyLong_FromUnsignedLongLong (%s->%s));\n"
10491               typ name
10492         | name, FInt64 ->
10493             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
10494             pr "                        PyLong_FromLongLong (%s->%s));\n"
10495               typ name
10496         | name, FUInt32 ->
10497             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
10498             pr "                        PyLong_FromUnsignedLong (%s->%s));\n"
10499               typ name
10500         | name, FInt32 ->
10501             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
10502             pr "                        PyLong_FromLong (%s->%s));\n"
10503               typ name
10504         | name, FOptPercent ->
10505             pr "  if (%s->%s >= 0)\n" typ name;
10506             pr "    PyDict_SetItemString (dict, \"%s\",\n" name;
10507             pr "                          PyFloat_FromDouble ((double) %s->%s));\n"
10508               typ name;
10509             pr "  else {\n";
10510             pr "    Py_INCREF (Py_None);\n";
10511             pr "    PyDict_SetItemString (dict, \"%s\", Py_None);\n" name;
10512             pr "  }\n"
10513         | name, FChar ->
10514             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
10515             pr "                        PyString_FromStringAndSize (&dirent->%s, 1));\n" name
10516       ) cols;
10517       pr "  return dict;\n";
10518       pr "};\n";
10519       pr "\n";
10520
10521   ) structs;
10522
10523   (* Emit a put_TYPE_list function definition only if that function is used. *)
10524   List.iter (
10525     function
10526     | typ, (RStructListOnly | RStructAndList) ->
10527         (* generate the function for typ *)
10528         emit_put_list_function typ
10529     | typ, _ -> () (* empty *)
10530   ) (rstructs_used_by all_functions);
10531
10532   (* Python wrapper functions. *)
10533   List.iter (
10534     fun (name, style, _, _, _, _, _) ->
10535       pr "static PyObject *\n";
10536       pr "py_guestfs_%s (PyObject *self, PyObject *args)\n" name;
10537       pr "{\n";
10538
10539       pr "  PyObject *py_g;\n";
10540       pr "  guestfs_h *g;\n";
10541       pr "  PyObject *py_r;\n";
10542
10543       let error_code =
10544         match fst style with
10545         | RErr | RInt _ | RBool _ -> pr "  int r;\n"; "-1"
10546         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
10547         | RConstString _ | RConstOptString _ ->
10548             pr "  const char *r;\n"; "NULL"
10549         | RString _ -> pr "  char *r;\n"; "NULL"
10550         | RStringList _ | RHashtable _ -> pr "  char **r;\n"; "NULL"
10551         | RStruct (_, typ) -> pr "  struct guestfs_%s *r;\n" typ; "NULL"
10552         | RStructList (_, typ) ->
10553             pr "  struct guestfs_%s_list *r;\n" typ; "NULL"
10554         | RBufferOut _ ->
10555             pr "  char *r;\n";
10556             pr "  size_t size;\n";
10557             "NULL" in
10558
10559       List.iter (
10560         function
10561         | Pathname n | Device n | Dev_or_Path n | String n | Key n
10562         | FileIn n | FileOut n ->
10563             pr "  const char *%s;\n" n
10564         | OptString n -> pr "  const char *%s;\n" n
10565         | BufferIn n ->
10566             pr "  const char *%s;\n" n;
10567             pr "  Py_ssize_t %s_size;\n" n
10568         | StringList n | DeviceList n ->
10569             pr "  PyObject *py_%s;\n" n;
10570             pr "  char **%s;\n" n
10571         | Bool n -> pr "  int %s;\n" n
10572         | Int n -> pr "  int %s;\n" n
10573         | Int64 n -> pr "  long long %s;\n" n
10574       ) (snd style);
10575
10576       pr "\n";
10577
10578       (* Convert the parameters. *)
10579       pr "  if (!PyArg_ParseTuple (args, (char *) \"O";
10580       List.iter (
10581         function
10582         | Pathname _ | Device _ | Dev_or_Path _ | String _ | Key _
10583         | FileIn _ | FileOut _ -> pr "s"
10584         | OptString _ -> pr "z"
10585         | StringList _ | DeviceList _ -> pr "O"
10586         | Bool _ -> pr "i" (* XXX Python has booleans? *)
10587         | Int _ -> pr "i"
10588         | Int64 _ -> pr "L" (* XXX Whoever thought it was a good idea to
10589                              * emulate C's int/long/long long in Python?
10590                              *)
10591         | BufferIn _ -> pr "s#"
10592       ) (snd style);
10593       pr ":guestfs_%s\",\n" name;
10594       pr "                         &py_g";
10595       List.iter (
10596         function
10597         | Pathname n | Device n | Dev_or_Path n | String n | Key n
10598         | FileIn n | FileOut n -> pr ", &%s" n
10599         | OptString n -> pr ", &%s" n
10600         | StringList n | DeviceList n -> pr ", &py_%s" n
10601         | Bool n -> pr ", &%s" n
10602         | Int n -> pr ", &%s" n
10603         | Int64 n -> pr ", &%s" n
10604         | BufferIn n -> pr ", &%s, &%s_size" n n
10605       ) (snd style);
10606
10607       pr "))\n";
10608       pr "    return NULL;\n";
10609
10610       pr "  g = get_handle (py_g);\n";
10611       List.iter (
10612         function
10613         | Pathname _ | Device _ | Dev_or_Path _ | String _ | Key _
10614         | FileIn _ | FileOut _ | OptString _ | Bool _ | Int _ | Int64 _
10615         | BufferIn _ -> ()
10616         | StringList n | DeviceList n ->
10617             pr "  %s = get_string_list (py_%s);\n" n n;
10618             pr "  if (!%s) return NULL;\n" n
10619       ) (snd style);
10620
10621       pr "\n";
10622
10623       pr "  r = guestfs_%s " name;
10624       generate_c_call_args ~handle:"g" style;
10625       pr ";\n";
10626
10627       List.iter (
10628         function
10629         | Pathname _ | Device _ | Dev_or_Path _ | String _ | Key _
10630         | FileIn _ | FileOut _ | OptString _ | Bool _ | Int _ | Int64 _
10631         | BufferIn _ -> ()
10632         | StringList n | DeviceList n ->
10633             pr "  free (%s);\n" n
10634       ) (snd style);
10635
10636       pr "  if (r == %s) {\n" error_code;
10637       pr "    PyErr_SetString (PyExc_RuntimeError, guestfs_last_error (g));\n";
10638       pr "    return NULL;\n";
10639       pr "  }\n";
10640       pr "\n";
10641
10642       (match fst style with
10643        | RErr ->
10644            pr "  Py_INCREF (Py_None);\n";
10645            pr "  py_r = Py_None;\n"
10646        | RInt _
10647        | RBool _ -> pr "  py_r = PyInt_FromLong ((long) r);\n"
10648        | RInt64 _ -> pr "  py_r = PyLong_FromLongLong (r);\n"
10649        | RConstString _ -> pr "  py_r = PyString_FromString (r);\n"
10650        | RConstOptString _ ->
10651            pr "  if (r)\n";
10652            pr "    py_r = PyString_FromString (r);\n";
10653            pr "  else {\n";
10654            pr "    Py_INCREF (Py_None);\n";
10655            pr "    py_r = Py_None;\n";
10656            pr "  }\n"
10657        | RString _ ->
10658            pr "  py_r = PyString_FromString (r);\n";
10659            pr "  free (r);\n"
10660        | RStringList _ ->
10661            pr "  py_r = put_string_list (r);\n";
10662            pr "  free_strings (r);\n"
10663        | RStruct (_, typ) ->
10664            pr "  py_r = put_%s (r);\n" typ;
10665            pr "  guestfs_free_%s (r);\n" typ
10666        | RStructList (_, typ) ->
10667            pr "  py_r = put_%s_list (r);\n" typ;
10668            pr "  guestfs_free_%s_list (r);\n" typ
10669        | RHashtable n ->
10670            pr "  py_r = put_table (r);\n";
10671            pr "  free_strings (r);\n"
10672        | RBufferOut _ ->
10673            pr "  py_r = PyString_FromStringAndSize (r, size);\n";
10674            pr "  free (r);\n"
10675       );
10676
10677       pr "  return py_r;\n";
10678       pr "}\n";
10679       pr "\n"
10680   ) all_functions;
10681
10682   (* Table of functions. *)
10683   pr "static PyMethodDef methods[] = {\n";
10684   pr "  { (char *) \"create\", py_guestfs_create, METH_VARARGS, NULL },\n";
10685   pr "  { (char *) \"close\", py_guestfs_close, METH_VARARGS, NULL },\n";
10686   List.iter (
10687     fun (name, _, _, _, _, _, _) ->
10688       pr "  { (char *) \"%s\", py_guestfs_%s, METH_VARARGS, NULL },\n"
10689         name name
10690   ) all_functions;
10691   pr "  { NULL, NULL, 0, NULL }\n";
10692   pr "};\n";
10693   pr "\n";
10694
10695   (* Init function. *)
10696   pr "\
10697 void
10698 initlibguestfsmod (void)
10699 {
10700   static int initialized = 0;
10701
10702   if (initialized) return;
10703   Py_InitModule ((char *) \"libguestfsmod\", methods);
10704   initialized = 1;
10705 }
10706 "
10707
10708 (* Generate Python module. *)
10709 and generate_python_py () =
10710   generate_header HashStyle LGPLv2plus;
10711
10712   pr "\
10713 u\"\"\"Python bindings for libguestfs
10714
10715 import guestfs
10716 g = guestfs.GuestFS ()
10717 g.add_drive (\"guest.img\")
10718 g.launch ()
10719 parts = g.list_partitions ()
10720
10721 The guestfs module provides a Python binding to the libguestfs API
10722 for examining and modifying virtual machine disk images.
10723
10724 Amongst the things this is good for: making batch configuration
10725 changes to guests, getting disk used/free statistics (see also:
10726 virt-df), migrating between virtualization systems (see also:
10727 virt-p2v), performing partial backups, performing partial guest
10728 clones, cloning guests and changing registry/UUID/hostname info, and
10729 much else besides.
10730
10731 Libguestfs uses Linux kernel and qemu code, and can access any type of
10732 guest filesystem that Linux and qemu can, including but not limited
10733 to: ext2/3/4, btrfs, FAT and NTFS, LVM, many different disk partition
10734 schemes, qcow, qcow2, vmdk.
10735
10736 Libguestfs provides ways to enumerate guest storage (eg. partitions,
10737 LVs, what filesystem is in each LV, etc.).  It can also run commands
10738 in the context of the guest.  Also you can access filesystems over
10739 FUSE.
10740
10741 Errors which happen while using the API are turned into Python
10742 RuntimeError exceptions.
10743
10744 To create a guestfs handle you usually have to perform the following
10745 sequence of calls:
10746
10747 # Create the handle, call add_drive at least once, and possibly
10748 # several times if the guest has multiple block devices:
10749 g = guestfs.GuestFS ()
10750 g.add_drive (\"guest.img\")
10751
10752 # Launch the qemu subprocess and wait for it to become ready:
10753 g.launch ()
10754
10755 # Now you can issue commands, for example:
10756 logvols = g.lvs ()
10757
10758 \"\"\"
10759
10760 import libguestfsmod
10761
10762 class GuestFS:
10763     \"\"\"Instances of this class are libguestfs API handles.\"\"\"
10764
10765     def __init__ (self):
10766         \"\"\"Create a new libguestfs handle.\"\"\"
10767         self._o = libguestfsmod.create ()
10768
10769     def __del__ (self):
10770         libguestfsmod.close (self._o)
10771
10772 ";
10773
10774   List.iter (
10775     fun (name, style, _, flags, _, _, longdesc) ->
10776       pr "    def %s " name;
10777       generate_py_call_args ~handle:"self" (snd style);
10778       pr ":\n";
10779
10780       if not (List.mem NotInDocs flags) then (
10781         let doc = replace_str longdesc "C<guestfs_" "C<g." in
10782         let doc =
10783           match fst style with
10784           | RErr | RInt _ | RInt64 _ | RBool _
10785           | RConstOptString _ | RConstString _
10786           | RString _ | RBufferOut _ -> doc
10787           | RStringList _ ->
10788               doc ^ "\n\nThis function returns a list of strings."
10789           | RStruct (_, typ) ->
10790               doc ^ sprintf "\n\nThis function returns a dictionary, with keys matching the various fields in the guestfs_%s structure." typ
10791           | RStructList (_, typ) ->
10792               doc ^ sprintf "\n\nThis function returns a list of %ss.  Each %s is represented as a dictionary." typ typ
10793           | RHashtable _ ->
10794               doc ^ "\n\nThis function returns a dictionary." in
10795         let doc =
10796           if List.mem ProtocolLimitWarning flags then
10797             doc ^ "\n\n" ^ protocol_limit_warning
10798           else doc in
10799         let doc =
10800           if List.mem DangerWillRobinson flags then
10801             doc ^ "\n\n" ^ danger_will_robinson
10802           else doc in
10803         let doc =
10804           match deprecation_notice flags with
10805           | None -> doc
10806           | Some txt -> doc ^ "\n\n" ^ txt in
10807         let doc = pod2text ~width:60 name doc in
10808         let doc = List.map (fun line -> replace_str line "\\" "\\\\") doc in
10809         let doc = String.concat "\n        " doc in
10810         pr "        u\"\"\"%s\"\"\"\n" doc;
10811       );
10812       pr "        return libguestfsmod.%s " name;
10813       generate_py_call_args ~handle:"self._o" (snd style);
10814       pr "\n";
10815       pr "\n";
10816   ) all_functions
10817
10818 (* Generate Python call arguments, eg "(handle, foo, bar)" *)
10819 and generate_py_call_args ~handle args =
10820   pr "(%s" handle;
10821   List.iter (fun arg -> pr ", %s" (name_of_argt arg)) args;
10822   pr ")"
10823
10824 (* Useful if you need the longdesc POD text as plain text.  Returns a
10825  * list of lines.
10826  *
10827  * Because this is very slow (the slowest part of autogeneration),
10828  * we memoize the results.
10829  *)
10830 and pod2text ~width name longdesc =
10831   let key = width, name, longdesc in
10832   try Hashtbl.find pod2text_memo key
10833   with Not_found ->
10834     let filename, chan = Filename.open_temp_file "gen" ".tmp" in
10835     fprintf chan "=head1 %s\n\n%s\n" name longdesc;
10836     close_out chan;
10837     let cmd = sprintf "pod2text -w %d %s" width (Filename.quote filename) in
10838     let chan = open_process_in cmd in
10839     let lines = ref [] in
10840     let rec loop i =
10841       let line = input_line chan in
10842       if i = 1 then             (* discard the first line of output *)
10843         loop (i+1)
10844       else (
10845         let line = triml line in
10846         lines := line :: !lines;
10847         loop (i+1)
10848       ) in
10849     let lines = try loop 1 with End_of_file -> List.rev !lines in
10850     unlink filename;
10851     (match close_process_in chan with
10852      | WEXITED 0 -> ()
10853      | WEXITED i ->
10854          failwithf "pod2text: process exited with non-zero status (%d)" i
10855      | WSIGNALED i | WSTOPPED i ->
10856          failwithf "pod2text: process signalled or stopped by signal %d" i
10857     );
10858     Hashtbl.add pod2text_memo key lines;
10859     pod2text_memo_updated ();
10860     lines
10861
10862 (* Generate ruby bindings. *)
10863 and generate_ruby_c () =
10864   generate_header CStyle LGPLv2plus;
10865
10866   pr "\
10867 #include <stdio.h>
10868 #include <stdlib.h>
10869
10870 #include <ruby.h>
10871
10872 #include \"guestfs.h\"
10873
10874 #include \"extconf.h\"
10875
10876 /* For Ruby < 1.9 */
10877 #ifndef RARRAY_LEN
10878 #define RARRAY_LEN(r) (RARRAY((r))->len)
10879 #endif
10880
10881 static VALUE m_guestfs;                 /* guestfs module */
10882 static VALUE c_guestfs;                 /* guestfs_h handle */
10883 static VALUE e_Error;                   /* used for all errors */
10884
10885 static void ruby_guestfs_free (void *p)
10886 {
10887   if (!p) return;
10888   guestfs_close ((guestfs_h *) p);
10889 }
10890
10891 static VALUE ruby_guestfs_create (VALUE m)
10892 {
10893   guestfs_h *g;
10894
10895   g = guestfs_create ();
10896   if (!g)
10897     rb_raise (e_Error, \"failed to create guestfs handle\");
10898
10899   /* Don't print error messages to stderr by default. */
10900   guestfs_set_error_handler (g, NULL, NULL);
10901
10902   /* Wrap it, and make sure the close function is called when the
10903    * handle goes away.
10904    */
10905   return Data_Wrap_Struct (c_guestfs, NULL, ruby_guestfs_free, g);
10906 }
10907
10908 static VALUE ruby_guestfs_close (VALUE gv)
10909 {
10910   guestfs_h *g;
10911   Data_Get_Struct (gv, guestfs_h, g);
10912
10913   ruby_guestfs_free (g);
10914   DATA_PTR (gv) = NULL;
10915
10916   return Qnil;
10917 }
10918
10919 ";
10920
10921   List.iter (
10922     fun (name, style, _, _, _, _, _) ->
10923       pr "static VALUE ruby_guestfs_%s (VALUE gv" name;
10924       List.iter (fun arg -> pr ", VALUE %sv" (name_of_argt arg)) (snd style);
10925       pr ")\n";
10926       pr "{\n";
10927       pr "  guestfs_h *g;\n";
10928       pr "  Data_Get_Struct (gv, guestfs_h, g);\n";
10929       pr "  if (!g)\n";
10930       pr "    rb_raise (rb_eArgError, \"%%s: used handle after closing it\", \"%s\");\n"
10931         name;
10932       pr "\n";
10933
10934       List.iter (
10935         function
10936         | Pathname n | Device n | Dev_or_Path n | String n | Key n
10937         | FileIn n | FileOut n ->
10938             pr "  Check_Type (%sv, T_STRING);\n" n;
10939             pr "  const char *%s = StringValueCStr (%sv);\n" n n;
10940             pr "  if (!%s)\n" n;
10941             pr "    rb_raise (rb_eTypeError, \"expected string for parameter %%s of %%s\",\n";
10942             pr "              \"%s\", \"%s\");\n" n name
10943         | BufferIn n ->
10944             pr "  Check_Type (%sv, T_STRING);\n" n;
10945             pr "  const char *%s = RSTRING (%sv)->ptr;\n" n n;
10946             pr "  if (!%s)\n" n;
10947             pr "    rb_raise (rb_eTypeError, \"expected string for parameter %%s of %%s\",\n";
10948             pr "              \"%s\", \"%s\");\n" n name;
10949             pr "  size_t %s_size = RSTRING (%sv)->len;\n" n n
10950         | OptString n ->
10951             pr "  const char *%s = !NIL_P (%sv) ? StringValueCStr (%sv) : NULL;\n" n n n
10952         | StringList n | DeviceList n ->
10953             pr "  char **%s;\n" n;
10954             pr "  Check_Type (%sv, T_ARRAY);\n" n;
10955             pr "  {\n";
10956             pr "    size_t i, len;\n";
10957             pr "    len = RARRAY_LEN (%sv);\n" n;
10958             pr "    %s = guestfs_safe_malloc (g, sizeof (char *) * (len+1));\n"
10959               n;
10960             pr "    for (i = 0; i < len; ++i) {\n";
10961             pr "      VALUE v = rb_ary_entry (%sv, i);\n" n;
10962             pr "      %s[i] = StringValueCStr (v);\n" n;
10963             pr "    }\n";
10964             pr "    %s[len] = NULL;\n" n;
10965             pr "  }\n";
10966         | Bool n ->
10967             pr "  int %s = RTEST (%sv);\n" n n
10968         | Int n ->
10969             pr "  int %s = NUM2INT (%sv);\n" n n
10970         | Int64 n ->
10971             pr "  long long %s = NUM2LL (%sv);\n" n n
10972       ) (snd style);
10973       pr "\n";
10974
10975       let error_code =
10976         match fst style with
10977         | RErr | RInt _ | RBool _ -> pr "  int r;\n"; "-1"
10978         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
10979         | RConstString _ | RConstOptString _ ->
10980             pr "  const char *r;\n"; "NULL"
10981         | RString _ -> pr "  char *r;\n"; "NULL"
10982         | RStringList _ | RHashtable _ -> pr "  char **r;\n"; "NULL"
10983         | RStruct (_, typ) -> pr "  struct guestfs_%s *r;\n" typ; "NULL"
10984         | RStructList (_, typ) ->
10985             pr "  struct guestfs_%s_list *r;\n" typ; "NULL"
10986         | RBufferOut _ ->
10987             pr "  char *r;\n";
10988             pr "  size_t size;\n";
10989             "NULL" in
10990       pr "\n";
10991
10992       pr "  r = guestfs_%s " name;
10993       generate_c_call_args ~handle:"g" style;
10994       pr ";\n";
10995
10996       List.iter (
10997         function
10998         | Pathname _ | Device _ | Dev_or_Path _ | String _ | Key _
10999         | FileIn _ | FileOut _ | OptString _ | Bool _ | Int _ | Int64 _
11000         | BufferIn _ -> ()
11001         | StringList n | DeviceList n ->
11002             pr "  free (%s);\n" n
11003       ) (snd style);
11004
11005       pr "  if (r == %s)\n" error_code;
11006       pr "    rb_raise (e_Error, \"%%s\", guestfs_last_error (g));\n";
11007       pr "\n";
11008
11009       (match fst style with
11010        | RErr ->
11011            pr "  return Qnil;\n"
11012        | RInt _ | RBool _ ->
11013            pr "  return INT2NUM (r);\n"
11014        | RInt64 _ ->
11015            pr "  return ULL2NUM (r);\n"
11016        | RConstString _ ->
11017            pr "  return rb_str_new2 (r);\n";
11018        | RConstOptString _ ->
11019            pr "  if (r)\n";
11020            pr "    return rb_str_new2 (r);\n";
11021            pr "  else\n";
11022            pr "    return Qnil;\n";
11023        | RString _ ->
11024            pr "  VALUE rv = rb_str_new2 (r);\n";
11025            pr "  free (r);\n";
11026            pr "  return rv;\n";
11027        | RStringList _ ->
11028            pr "  size_t i, len = 0;\n";
11029            pr "  for (i = 0; r[i] != NULL; ++i) len++;\n";
11030            pr "  VALUE rv = rb_ary_new2 (len);\n";
11031            pr "  for (i = 0; r[i] != NULL; ++i) {\n";
11032            pr "    rb_ary_push (rv, rb_str_new2 (r[i]));\n";
11033            pr "    free (r[i]);\n";
11034            pr "  }\n";
11035            pr "  free (r);\n";
11036            pr "  return rv;\n"
11037        | RStruct (_, typ) ->
11038            let cols = cols_of_struct typ in
11039            generate_ruby_struct_code typ cols
11040        | RStructList (_, typ) ->
11041            let cols = cols_of_struct typ in
11042            generate_ruby_struct_list_code typ cols
11043        | RHashtable _ ->
11044            pr "  VALUE rv = rb_hash_new ();\n";
11045            pr "  size_t i;\n";
11046            pr "  for (i = 0; r[i] != NULL; i+=2) {\n";
11047            pr "    rb_hash_aset (rv, rb_str_new2 (r[i]), rb_str_new2 (r[i+1]));\n";
11048            pr "    free (r[i]);\n";
11049            pr "    free (r[i+1]);\n";
11050            pr "  }\n";
11051            pr "  free (r);\n";
11052            pr "  return rv;\n"
11053        | RBufferOut _ ->
11054            pr "  VALUE rv = rb_str_new (r, size);\n";
11055            pr "  free (r);\n";
11056            pr "  return rv;\n";
11057       );
11058
11059       pr "}\n";
11060       pr "\n"
11061   ) all_functions;
11062
11063   pr "\
11064 /* Initialize the module. */
11065 void Init__guestfs ()
11066 {
11067   m_guestfs = rb_define_module (\"Guestfs\");
11068   c_guestfs = rb_define_class_under (m_guestfs, \"Guestfs\", rb_cObject);
11069   e_Error = rb_define_class_under (m_guestfs, \"Error\", rb_eStandardError);
11070
11071 #ifdef HAVE_RB_DEFINE_ALLOC_FUNC
11072   rb_define_alloc_func (c_guestfs, ruby_guestfs_create);
11073 #endif
11074
11075   rb_define_module_function (m_guestfs, \"create\", ruby_guestfs_create, 0);
11076   rb_define_method (c_guestfs, \"close\", ruby_guestfs_close, 0);
11077
11078 ";
11079   (* Define the rest of the methods. *)
11080   List.iter (
11081     fun (name, style, _, _, _, _, _) ->
11082       pr "  rb_define_method (c_guestfs, \"%s\",\n" name;
11083       pr "        ruby_guestfs_%s, %d);\n" name (List.length (snd style))
11084   ) all_functions;
11085
11086   pr "}\n"
11087
11088 (* Ruby code to return a struct. *)
11089 and generate_ruby_struct_code typ cols =
11090   pr "  VALUE rv = rb_hash_new ();\n";
11091   List.iter (
11092     function
11093     | name, FString ->
11094         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_str_new2 (r->%s));\n" name name
11095     | name, FBuffer ->
11096         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_str_new (r->%s, r->%s_len));\n" name name name
11097     | name, FUUID ->
11098         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_str_new (r->%s, 32));\n" name name
11099     | name, (FBytes|FUInt64) ->
11100         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), ULL2NUM (r->%s));\n" name name
11101     | name, FInt64 ->
11102         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), LL2NUM (r->%s));\n" name name
11103     | name, FUInt32 ->
11104         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), UINT2NUM (r->%s));\n" name name
11105     | name, FInt32 ->
11106         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), INT2NUM (r->%s));\n" name name
11107     | name, FOptPercent ->
11108         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_dbl2big (r->%s));\n" name name
11109     | name, FChar -> (* XXX wrong? *)
11110         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), ULL2NUM (r->%s));\n" name name
11111   ) cols;
11112   pr "  guestfs_free_%s (r);\n" typ;
11113   pr "  return rv;\n"
11114
11115 (* Ruby code to return a struct list. *)
11116 and generate_ruby_struct_list_code typ cols =
11117   pr "  VALUE rv = rb_ary_new2 (r->len);\n";
11118   pr "  size_t i;\n";
11119   pr "  for (i = 0; i < r->len; ++i) {\n";
11120   pr "    VALUE hv = rb_hash_new ();\n";
11121   List.iter (
11122     function
11123     | name, FString ->
11124         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_str_new2 (r->val[i].%s));\n" name name
11125     | name, FBuffer ->
11126         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_str_new (r->val[i].%s, r->val[i].%s_len));\n" name name name
11127     | name, FUUID ->
11128         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_str_new (r->val[i].%s, 32));\n" name name
11129     | name, (FBytes|FUInt64) ->
11130         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), ULL2NUM (r->val[i].%s));\n" name name
11131     | name, FInt64 ->
11132         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), LL2NUM (r->val[i].%s));\n" name name
11133     | name, FUInt32 ->
11134         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), UINT2NUM (r->val[i].%s));\n" name name
11135     | name, FInt32 ->
11136         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), INT2NUM (r->val[i].%s));\n" name name
11137     | name, FOptPercent ->
11138         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_dbl2big (r->val[i].%s));\n" name name
11139     | name, FChar -> (* XXX wrong? *)
11140         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), ULL2NUM (r->val[i].%s));\n" name name
11141   ) cols;
11142   pr "    rb_ary_push (rv, hv);\n";
11143   pr "  }\n";
11144   pr "  guestfs_free_%s_list (r);\n" typ;
11145   pr "  return rv;\n"
11146
11147 (* Generate Java bindings GuestFS.java file. *)
11148 and generate_java_java () =
11149   generate_header CStyle LGPLv2plus;
11150
11151   pr "\
11152 package com.redhat.et.libguestfs;
11153
11154 import java.util.HashMap;
11155 import com.redhat.et.libguestfs.LibGuestFSException;
11156 import com.redhat.et.libguestfs.PV;
11157 import com.redhat.et.libguestfs.VG;
11158 import com.redhat.et.libguestfs.LV;
11159 import com.redhat.et.libguestfs.Stat;
11160 import com.redhat.et.libguestfs.StatVFS;
11161 import com.redhat.et.libguestfs.IntBool;
11162 import com.redhat.et.libguestfs.Dirent;
11163
11164 /**
11165  * The GuestFS object is a libguestfs handle.
11166  *
11167  * @author rjones
11168  */
11169 public class GuestFS {
11170   // Load the native code.
11171   static {
11172     System.loadLibrary (\"guestfs_jni\");
11173   }
11174
11175   /**
11176    * The native guestfs_h pointer.
11177    */
11178   long g;
11179
11180   /**
11181    * Create a libguestfs handle.
11182    *
11183    * @throws LibGuestFSException
11184    */
11185   public GuestFS () throws LibGuestFSException
11186   {
11187     g = _create ();
11188   }
11189   private native long _create () throws LibGuestFSException;
11190
11191   /**
11192    * Close a libguestfs handle.
11193    *
11194    * You can also leave handles to be collected by the garbage
11195    * collector, but this method ensures that the resources used
11196    * by the handle are freed up immediately.  If you call any
11197    * other methods after closing the handle, you will get an
11198    * exception.
11199    *
11200    * @throws LibGuestFSException
11201    */
11202   public void close () throws LibGuestFSException
11203   {
11204     if (g != 0)
11205       _close (g);
11206     g = 0;
11207   }
11208   private native void _close (long g) throws LibGuestFSException;
11209
11210   public void finalize () throws LibGuestFSException
11211   {
11212     close ();
11213   }
11214
11215 ";
11216
11217   List.iter (
11218     fun (name, style, _, flags, _, shortdesc, longdesc) ->
11219       if not (List.mem NotInDocs flags); then (
11220         let doc = replace_str longdesc "C<guestfs_" "C<g." in
11221         let doc =
11222           if List.mem ProtocolLimitWarning flags then
11223             doc ^ "\n\n" ^ protocol_limit_warning
11224           else doc in
11225         let doc =
11226           if List.mem DangerWillRobinson flags then
11227             doc ^ "\n\n" ^ danger_will_robinson
11228           else doc in
11229         let doc =
11230           match deprecation_notice flags with
11231           | None -> doc
11232           | Some txt -> doc ^ "\n\n" ^ txt in
11233         let doc = pod2text ~width:60 name doc in
11234         let doc = List.map (            (* RHBZ#501883 *)
11235           function
11236           | "" -> "<p>"
11237           | nonempty -> nonempty
11238         ) doc in
11239         let doc = String.concat "\n   * " doc in
11240
11241         pr "  /**\n";
11242         pr "   * %s\n" shortdesc;
11243         pr "   * <p>\n";
11244         pr "   * %s\n" doc;
11245         pr "   * @throws LibGuestFSException\n";
11246         pr "   */\n";
11247         pr "  ";
11248       );
11249       generate_java_prototype ~public:true ~semicolon:false name style;
11250       pr "\n";
11251       pr "  {\n";
11252       pr "    if (g == 0)\n";
11253       pr "      throw new LibGuestFSException (\"%s: handle is closed\");\n"
11254         name;
11255       pr "    ";
11256       if fst style <> RErr then pr "return ";
11257       pr "_%s " name;
11258       generate_java_call_args ~handle:"g" (snd style);
11259       pr ";\n";
11260       pr "  }\n";
11261       pr "  ";
11262       generate_java_prototype ~privat:true ~native:true name style;
11263       pr "\n";
11264       pr "\n";
11265   ) all_functions;
11266
11267   pr "}\n"
11268
11269 (* Generate Java call arguments, eg "(handle, foo, bar)" *)
11270 and generate_java_call_args ~handle args =
11271   pr "(%s" handle;
11272   List.iter (fun arg -> pr ", %s" (name_of_argt arg)) args;
11273   pr ")"
11274
11275 and generate_java_prototype ?(public=false) ?(privat=false) ?(native=false)
11276     ?(semicolon=true) name style =
11277   if privat then pr "private ";
11278   if public then pr "public ";
11279   if native then pr "native ";
11280
11281   (* return type *)
11282   (match fst style with
11283    | RErr -> pr "void ";
11284    | RInt _ -> pr "int ";
11285    | RInt64 _ -> pr "long ";
11286    | RBool _ -> pr "boolean ";
11287    | RConstString _ | RConstOptString _ | RString _
11288    | RBufferOut _ -> pr "String ";
11289    | RStringList _ -> pr "String[] ";
11290    | RStruct (_, typ) ->
11291        let name = java_name_of_struct typ in
11292        pr "%s " name;
11293    | RStructList (_, typ) ->
11294        let name = java_name_of_struct typ in
11295        pr "%s[] " name;
11296    | RHashtable _ -> pr "HashMap<String,String> ";
11297   );
11298
11299   if native then pr "_%s " name else pr "%s " name;
11300   pr "(";
11301   let needs_comma = ref false in
11302   if native then (
11303     pr "long g";
11304     needs_comma := true
11305   );
11306
11307   (* args *)
11308   List.iter (
11309     fun arg ->
11310       if !needs_comma then pr ", ";
11311       needs_comma := true;
11312
11313       match arg with
11314       | Pathname n
11315       | Device n | Dev_or_Path n
11316       | String n
11317       | OptString n
11318       | FileIn n
11319       | FileOut n
11320       | Key n ->
11321           pr "String %s" n
11322       | BufferIn n ->
11323           pr "byte[] %s" n
11324       | StringList n | DeviceList n ->
11325           pr "String[] %s" n
11326       | Bool n ->
11327           pr "boolean %s" n
11328       | Int n ->
11329           pr "int %s" n
11330       | Int64 n ->
11331           pr "long %s" n
11332   ) (snd style);
11333
11334   pr ")\n";
11335   pr "    throws LibGuestFSException";
11336   if semicolon then pr ";"
11337
11338 and generate_java_struct jtyp cols () =
11339   generate_header CStyle LGPLv2plus;
11340
11341   pr "\
11342 package com.redhat.et.libguestfs;
11343
11344 /**
11345  * Libguestfs %s structure.
11346  *
11347  * @author rjones
11348  * @see GuestFS
11349  */
11350 public class %s {
11351 " jtyp jtyp;
11352
11353   List.iter (
11354     function
11355     | name, FString
11356     | name, FUUID
11357     | name, FBuffer -> pr "  public String %s;\n" name
11358     | name, (FBytes|FUInt64|FInt64) -> pr "  public long %s;\n" name
11359     | name, (FUInt32|FInt32) -> pr "  public int %s;\n" name
11360     | name, FChar -> pr "  public char %s;\n" name
11361     | name, FOptPercent ->
11362         pr "  /* The next field is [0..100] or -1 meaning 'not present': */\n";
11363         pr "  public float %s;\n" name
11364   ) cols;
11365
11366   pr "}\n"
11367
11368 and generate_java_c () =
11369   generate_header CStyle LGPLv2plus;
11370
11371   pr "\
11372 #include <stdio.h>
11373 #include <stdlib.h>
11374 #include <string.h>
11375
11376 #include \"com_redhat_et_libguestfs_GuestFS.h\"
11377 #include \"guestfs.h\"
11378
11379 /* Note that this function returns.  The exception is not thrown
11380  * until after the wrapper function returns.
11381  */
11382 static void
11383 throw_exception (JNIEnv *env, const char *msg)
11384 {
11385   jclass cl;
11386   cl = (*env)->FindClass (env,
11387                           \"com/redhat/et/libguestfs/LibGuestFSException\");
11388   (*env)->ThrowNew (env, cl, msg);
11389 }
11390
11391 JNIEXPORT jlong JNICALL
11392 Java_com_redhat_et_libguestfs_GuestFS__1create
11393   (JNIEnv *env, jobject obj)
11394 {
11395   guestfs_h *g;
11396
11397   g = guestfs_create ();
11398   if (g == NULL) {
11399     throw_exception (env, \"GuestFS.create: failed to allocate handle\");
11400     return 0;
11401   }
11402   guestfs_set_error_handler (g, NULL, NULL);
11403   return (jlong) (long) g;
11404 }
11405
11406 JNIEXPORT void JNICALL
11407 Java_com_redhat_et_libguestfs_GuestFS__1close
11408   (JNIEnv *env, jobject obj, jlong jg)
11409 {
11410   guestfs_h *g = (guestfs_h *) (long) jg;
11411   guestfs_close (g);
11412 }
11413
11414 ";
11415
11416   List.iter (
11417     fun (name, style, _, _, _, _, _) ->
11418       pr "JNIEXPORT ";
11419       (match fst style with
11420        | RErr -> pr "void ";
11421        | RInt _ -> pr "jint ";
11422        | RInt64 _ -> pr "jlong ";
11423        | RBool _ -> pr "jboolean ";
11424        | RConstString _ | RConstOptString _ | RString _
11425        | RBufferOut _ -> pr "jstring ";
11426        | RStruct _ | RHashtable _ ->
11427            pr "jobject ";
11428        | RStringList _ | RStructList _ ->
11429            pr "jobjectArray ";
11430       );
11431       pr "JNICALL\n";
11432       pr "Java_com_redhat_et_libguestfs_GuestFS_";
11433       pr "%s" (replace_str ("_" ^ name) "_" "_1");
11434       pr "\n";
11435       pr "  (JNIEnv *env, jobject obj, jlong jg";
11436       List.iter (
11437         function
11438         | Pathname n
11439         | Device n | Dev_or_Path n
11440         | String n
11441         | OptString n
11442         | FileIn n
11443         | FileOut n
11444         | Key n ->
11445             pr ", jstring j%s" n
11446         | BufferIn n ->
11447             pr ", jbyteArray j%s" n
11448         | StringList n | DeviceList n ->
11449             pr ", jobjectArray j%s" n
11450         | Bool n ->
11451             pr ", jboolean j%s" n
11452         | Int n ->
11453             pr ", jint j%s" n
11454         | Int64 n ->
11455             pr ", jlong j%s" n
11456       ) (snd style);
11457       pr ")\n";
11458       pr "{\n";
11459       pr "  guestfs_h *g = (guestfs_h *) (long) jg;\n";
11460       let error_code, no_ret =
11461         match fst style with
11462         | RErr -> pr "  int r;\n"; "-1", ""
11463         | RBool _
11464         | RInt _ -> pr "  int r;\n"; "-1", "0"
11465         | RInt64 _ -> pr "  int64_t r;\n"; "-1", "0"
11466         | RConstString _ -> pr "  const char *r;\n"; "NULL", "NULL"
11467         | RConstOptString _ -> pr "  const char *r;\n"; "NULL", "NULL"
11468         | RString _ ->
11469             pr "  jstring jr;\n";
11470             pr "  char *r;\n"; "NULL", "NULL"
11471         | RStringList _ ->
11472             pr "  jobjectArray jr;\n";
11473             pr "  int r_len;\n";
11474             pr "  jclass cl;\n";
11475             pr "  jstring jstr;\n";
11476             pr "  char **r;\n"; "NULL", "NULL"
11477         | RStruct (_, typ) ->
11478             pr "  jobject jr;\n";
11479             pr "  jclass cl;\n";
11480             pr "  jfieldID fl;\n";
11481             pr "  struct guestfs_%s *r;\n" typ; "NULL", "NULL"
11482         | RStructList (_, typ) ->
11483             pr "  jobjectArray jr;\n";
11484             pr "  jclass cl;\n";
11485             pr "  jfieldID fl;\n";
11486             pr "  jobject jfl;\n";
11487             pr "  struct guestfs_%s_list *r;\n" typ; "NULL", "NULL"
11488         | RHashtable _ -> pr "  char **r;\n"; "NULL", "NULL"
11489         | RBufferOut _ ->
11490             pr "  jstring jr;\n";
11491             pr "  char *r;\n";
11492             pr "  size_t size;\n";
11493             "NULL", "NULL" in
11494       List.iter (
11495         function
11496         | Pathname n
11497         | Device n | Dev_or_Path n
11498         | String n
11499         | OptString n
11500         | FileIn n
11501         | FileOut n
11502         | Key n ->
11503             pr "  const char *%s;\n" n
11504         | BufferIn n ->
11505             pr "  jbyte *%s;\n" n;
11506             pr "  size_t %s_size;\n" n
11507         | StringList n | DeviceList n ->
11508             pr "  int %s_len;\n" n;
11509             pr "  const char **%s;\n" n
11510         | Bool n
11511         | Int n ->
11512             pr "  int %s;\n" n
11513         | Int64 n ->
11514             pr "  int64_t %s;\n" n
11515       ) (snd style);
11516
11517       let needs_i =
11518         (match fst style with
11519          | RStringList _ | RStructList _ -> true
11520          | RErr | RBool _ | RInt _ | RInt64 _ | RConstString _
11521          | RConstOptString _
11522          | RString _ | RBufferOut _ | RStruct _ | RHashtable _ -> false) ||
11523           List.exists (function
11524                        | StringList _ -> true
11525                        | DeviceList _ -> true
11526                        | _ -> false) (snd style) in
11527       if needs_i then
11528         pr "  size_t i;\n";
11529
11530       pr "\n";
11531
11532       (* Get the parameters. *)
11533       List.iter (
11534         function
11535         | Pathname n
11536         | Device n | Dev_or_Path n
11537         | String n
11538         | FileIn n
11539         | FileOut n
11540         | Key n ->
11541             pr "  %s = (*env)->GetStringUTFChars (env, j%s, NULL);\n" n n
11542         | OptString n ->
11543             (* This is completely undocumented, but Java null becomes
11544              * a NULL parameter.
11545              *)
11546             pr "  %s = j%s ? (*env)->GetStringUTFChars (env, j%s, NULL) : NULL;\n" n n n
11547         | BufferIn n ->
11548             pr "  %s = (*env)->GetByteArrayElements (env, j%s, NULL);\n" n n;
11549             pr "  %s_size = (*env)->GetArrayLength (env, j%s);\n" n n
11550         | StringList n | DeviceList n ->
11551             pr "  %s_len = (*env)->GetArrayLength (env, j%s);\n" n n;
11552             pr "  %s = guestfs_safe_malloc (g, sizeof (char *) * (%s_len+1));\n" n n;
11553             pr "  for (i = 0; i < %s_len; ++i) {\n" n;
11554             pr "    jobject o = (*env)->GetObjectArrayElement (env, j%s, i);\n"
11555               n;
11556             pr "    %s[i] = (*env)->GetStringUTFChars (env, o, NULL);\n" n;
11557             pr "  }\n";
11558             pr "  %s[%s_len] = NULL;\n" n n;
11559         | Bool n
11560         | Int n
11561         | Int64 n ->
11562             pr "  %s = j%s;\n" n n
11563       ) (snd style);
11564
11565       (* Make the call. *)
11566       pr "  r = guestfs_%s " name;
11567       generate_c_call_args ~handle:"g" style;
11568       pr ";\n";
11569
11570       (* Release the parameters. *)
11571       List.iter (
11572         function
11573         | Pathname n
11574         | Device n | Dev_or_Path n
11575         | String n
11576         | FileIn n
11577         | FileOut n
11578         | Key n ->
11579             pr "  (*env)->ReleaseStringUTFChars (env, j%s, %s);\n" n n
11580         | OptString n ->
11581             pr "  if (j%s)\n" n;
11582             pr "    (*env)->ReleaseStringUTFChars (env, j%s, %s);\n" n n
11583         | BufferIn n ->
11584             pr "  (*env)->ReleaseByteArrayElements (env, j%s, %s, 0);\n" n n
11585         | StringList n | DeviceList n ->
11586             pr "  for (i = 0; i < %s_len; ++i) {\n" n;
11587             pr "    jobject o = (*env)->GetObjectArrayElement (env, j%s, i);\n"
11588               n;
11589             pr "    (*env)->ReleaseStringUTFChars (env, o, %s[i]);\n" n;
11590             pr "  }\n";
11591             pr "  free (%s);\n" n
11592         | Bool n
11593         | Int n
11594         | Int64 n -> ()
11595       ) (snd style);
11596
11597       (* Check for errors. *)
11598       pr "  if (r == %s) {\n" error_code;
11599       pr "    throw_exception (env, guestfs_last_error (g));\n";
11600       pr "    return %s;\n" no_ret;
11601       pr "  }\n";
11602
11603       (* Return value. *)
11604       (match fst style with
11605        | RErr -> ()
11606        | RInt _ -> pr "  return (jint) r;\n"
11607        | RBool _ -> pr "  return (jboolean) r;\n"
11608        | RInt64 _ -> pr "  return (jlong) r;\n"
11609        | RConstString _ -> pr "  return (*env)->NewStringUTF (env, r);\n"
11610        | RConstOptString _ ->
11611            pr "  return (*env)->NewStringUTF (env, r); /* XXX r NULL? */\n"
11612        | RString _ ->
11613            pr "  jr = (*env)->NewStringUTF (env, r);\n";
11614            pr "  free (r);\n";
11615            pr "  return jr;\n"
11616        | RStringList _ ->
11617            pr "  for (r_len = 0; r[r_len] != NULL; ++r_len) ;\n";
11618            pr "  cl = (*env)->FindClass (env, \"java/lang/String\");\n";
11619            pr "  jstr = (*env)->NewStringUTF (env, \"\");\n";
11620            pr "  jr = (*env)->NewObjectArray (env, r_len, cl, jstr);\n";
11621            pr "  for (i = 0; i < r_len; ++i) {\n";
11622            pr "    jstr = (*env)->NewStringUTF (env, r[i]);\n";
11623            pr "    (*env)->SetObjectArrayElement (env, jr, i, jstr);\n";
11624            pr "    free (r[i]);\n";
11625            pr "  }\n";
11626            pr "  free (r);\n";
11627            pr "  return jr;\n"
11628        | RStruct (_, typ) ->
11629            let jtyp = java_name_of_struct typ in
11630            let cols = cols_of_struct typ in
11631            generate_java_struct_return typ jtyp cols
11632        | RStructList (_, typ) ->
11633            let jtyp = java_name_of_struct typ in
11634            let cols = cols_of_struct typ in
11635            generate_java_struct_list_return typ jtyp cols
11636        | RHashtable _ ->
11637            (* XXX *)
11638            pr "  throw_exception (env, \"%s: internal error: please let us know how to make a Java HashMap from JNI bindings!\");\n" name;
11639            pr "  return NULL;\n"
11640        | RBufferOut _ ->
11641            pr "  jr = (*env)->NewStringUTF (env, r); /* XXX size */\n";
11642            pr "  free (r);\n";
11643            pr "  return jr;\n"
11644       );
11645
11646       pr "}\n";
11647       pr "\n"
11648   ) all_functions
11649
11650 and generate_java_struct_return typ jtyp cols =
11651   pr "  cl = (*env)->FindClass (env, \"com/redhat/et/libguestfs/%s\");\n" jtyp;
11652   pr "  jr = (*env)->AllocObject (env, cl);\n";
11653   List.iter (
11654     function
11655     | name, FString ->
11656         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
11657         pr "  (*env)->SetObjectField (env, jr, fl, (*env)->NewStringUTF (env, r->%s));\n" name;
11658     | name, FUUID ->
11659         pr "  {\n";
11660         pr "    char s[33];\n";
11661         pr "    memcpy (s, r->%s, 32);\n" name;
11662         pr "    s[32] = 0;\n";
11663         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
11664         pr "    (*env)->SetObjectField (env, jr, fl, (*env)->NewStringUTF (env, s));\n";
11665         pr "  }\n";
11666     | name, FBuffer ->
11667         pr "  {\n";
11668         pr "    int len = r->%s_len;\n" name;
11669         pr "    char s[len+1];\n";
11670         pr "    memcpy (s, r->%s, len);\n" name;
11671         pr "    s[len] = 0;\n";
11672         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
11673         pr "    (*env)->SetObjectField (env, jr, fl, (*env)->NewStringUTF (env, s));\n";
11674         pr "  }\n";
11675     | name, (FBytes|FUInt64|FInt64) ->
11676         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"J\");\n" name;
11677         pr "  (*env)->SetLongField (env, jr, fl, r->%s);\n" name;
11678     | name, (FUInt32|FInt32) ->
11679         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"I\");\n" name;
11680         pr "  (*env)->SetLongField (env, jr, fl, r->%s);\n" name;
11681     | name, FOptPercent ->
11682         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"F\");\n" name;
11683         pr "  (*env)->SetFloatField (env, jr, fl, r->%s);\n" name;
11684     | name, FChar ->
11685         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"C\");\n" name;
11686         pr "  (*env)->SetLongField (env, jr, fl, r->%s);\n" name;
11687   ) cols;
11688   pr "  free (r);\n";
11689   pr "  return jr;\n"
11690
11691 and generate_java_struct_list_return typ jtyp cols =
11692   pr "  cl = (*env)->FindClass (env, \"com/redhat/et/libguestfs/%s\");\n" jtyp;
11693   pr "  jr = (*env)->NewObjectArray (env, r->len, cl, NULL);\n";
11694   pr "  for (i = 0; i < r->len; ++i) {\n";
11695   pr "    jfl = (*env)->AllocObject (env, cl);\n";
11696   List.iter (
11697     function
11698     | name, FString ->
11699         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
11700         pr "    (*env)->SetObjectField (env, jfl, fl, (*env)->NewStringUTF (env, r->val[i].%s));\n" name;
11701     | name, FUUID ->
11702         pr "    {\n";
11703         pr "      char s[33];\n";
11704         pr "      memcpy (s, r->val[i].%s, 32);\n" name;
11705         pr "      s[32] = 0;\n";
11706         pr "      fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
11707         pr "      (*env)->SetObjectField (env, jfl, fl, (*env)->NewStringUTF (env, s));\n";
11708         pr "    }\n";
11709     | name, FBuffer ->
11710         pr "    {\n";
11711         pr "      int len = r->val[i].%s_len;\n" name;
11712         pr "      char s[len+1];\n";
11713         pr "      memcpy (s, r->val[i].%s, len);\n" name;
11714         pr "      s[len] = 0;\n";
11715         pr "      fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
11716         pr "      (*env)->SetObjectField (env, jfl, fl, (*env)->NewStringUTF (env, s));\n";
11717         pr "    }\n";
11718     | name, (FBytes|FUInt64|FInt64) ->
11719         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"J\");\n" name;
11720         pr "    (*env)->SetLongField (env, jfl, fl, r->val[i].%s);\n" name;
11721     | name, (FUInt32|FInt32) ->
11722         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"I\");\n" name;
11723         pr "    (*env)->SetLongField (env, jfl, fl, r->val[i].%s);\n" name;
11724     | name, FOptPercent ->
11725         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"F\");\n" name;
11726         pr "    (*env)->SetFloatField (env, jfl, fl, r->val[i].%s);\n" name;
11727     | name, FChar ->
11728         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"C\");\n" name;
11729         pr "    (*env)->SetLongField (env, jfl, fl, r->val[i].%s);\n" name;
11730   ) cols;
11731   pr "    (*env)->SetObjectArrayElement (env, jfl, i, jfl);\n";
11732   pr "  }\n";
11733   pr "  guestfs_free_%s_list (r);\n" typ;
11734   pr "  return jr;\n"
11735
11736 and generate_java_makefile_inc () =
11737   generate_header HashStyle GPLv2plus;
11738
11739   pr "java_built_sources = \\\n";
11740   List.iter (
11741     fun (typ, jtyp) ->
11742         pr "\tcom/redhat/et/libguestfs/%s.java \\\n" jtyp;
11743   ) java_structs;
11744   pr "\tcom/redhat/et/libguestfs/GuestFS.java\n"
11745
11746 and generate_haskell_hs () =
11747   generate_header HaskellStyle LGPLv2plus;
11748
11749   (* XXX We only know how to generate partial FFI for Haskell
11750    * at the moment.  Please help out!
11751    *)
11752   let can_generate style =
11753     match style with
11754     | RErr, _
11755     | RInt _, _
11756     | RInt64 _, _ -> true
11757     | RBool _, _
11758     | RConstString _, _
11759     | RConstOptString _, _
11760     | RString _, _
11761     | RStringList _, _
11762     | RStruct _, _
11763     | RStructList _, _
11764     | RHashtable _, _
11765     | RBufferOut _, _ -> false in
11766
11767   pr "\
11768 {-# INCLUDE <guestfs.h> #-}
11769 {-# LANGUAGE ForeignFunctionInterface #-}
11770
11771 module Guestfs (
11772   create";
11773
11774   (* List out the names of the actions we want to export. *)
11775   List.iter (
11776     fun (name, style, _, _, _, _, _) ->
11777       if can_generate style then pr ",\n  %s" name
11778   ) all_functions;
11779
11780   pr "
11781   ) where
11782
11783 -- Unfortunately some symbols duplicate ones already present
11784 -- in Prelude.  We don't know which, so we hard-code a list
11785 -- here.
11786 import Prelude hiding (truncate)
11787
11788 import Foreign
11789 import Foreign.C
11790 import Foreign.C.Types
11791 import IO
11792 import Control.Exception
11793 import Data.Typeable
11794
11795 data GuestfsS = GuestfsS            -- represents the opaque C struct
11796 type GuestfsP = Ptr GuestfsS        -- guestfs_h *
11797 type GuestfsH = ForeignPtr GuestfsS -- guestfs_h * with attached finalizer
11798
11799 -- XXX define properly later XXX
11800 data PV = PV
11801 data VG = VG
11802 data LV = LV
11803 data IntBool = IntBool
11804 data Stat = Stat
11805 data StatVFS = StatVFS
11806 data Hashtable = Hashtable
11807
11808 foreign import ccall unsafe \"guestfs_create\" c_create
11809   :: IO GuestfsP
11810 foreign import ccall unsafe \"&guestfs_close\" c_close
11811   :: FunPtr (GuestfsP -> IO ())
11812 foreign import ccall unsafe \"guestfs_set_error_handler\" c_set_error_handler
11813   :: GuestfsP -> Ptr CInt -> Ptr CInt -> IO ()
11814
11815 create :: IO GuestfsH
11816 create = do
11817   p <- c_create
11818   c_set_error_handler p nullPtr nullPtr
11819   h <- newForeignPtr c_close p
11820   return h
11821
11822 foreign import ccall unsafe \"guestfs_last_error\" c_last_error
11823   :: GuestfsP -> IO CString
11824
11825 -- last_error :: GuestfsH -> IO (Maybe String)
11826 -- last_error h = do
11827 --   str <- withForeignPtr h (\\p -> c_last_error p)
11828 --   maybePeek peekCString str
11829
11830 last_error :: GuestfsH -> IO (String)
11831 last_error h = do
11832   str <- withForeignPtr h (\\p -> c_last_error p)
11833   if (str == nullPtr)
11834     then return \"no error\"
11835     else peekCString str
11836
11837 ";
11838
11839   (* Generate wrappers for each foreign function. *)
11840   List.iter (
11841     fun (name, style, _, _, _, _, _) ->
11842       if can_generate style then (
11843         pr "foreign import ccall unsafe \"guestfs_%s\" c_%s\n" name name;
11844         pr "  :: ";
11845         generate_haskell_prototype ~handle:"GuestfsP" style;
11846         pr "\n";
11847         pr "\n";
11848         pr "%s :: " name;
11849         generate_haskell_prototype ~handle:"GuestfsH" ~hs:true style;
11850         pr "\n";
11851         pr "%s %s = do\n" name
11852           (String.concat " " ("h" :: List.map name_of_argt (snd style)));
11853         pr "  r <- ";
11854         (* Convert pointer arguments using with* functions. *)
11855         List.iter (
11856           function
11857           | FileIn n
11858           | FileOut n
11859           | Pathname n | Device n | Dev_or_Path n | String n | Key n ->
11860               pr "withCString %s $ \\%s -> " n n
11861           | BufferIn n ->
11862               pr "withCStringLen %s $ \\(%s, %s_size) -> " n n n
11863           | OptString n -> pr "maybeWith withCString %s $ \\%s -> " n n
11864           | StringList n | DeviceList n -> pr "withMany withCString %s $ \\%s -> withArray0 nullPtr %s $ \\%s -> " n n n n
11865           | Bool _ | Int _ | Int64 _ -> ()
11866         ) (snd style);
11867         (* Convert integer arguments. *)
11868         let args =
11869           List.map (
11870             function
11871             | Bool n -> sprintf "(fromBool %s)" n
11872             | Int n -> sprintf "(fromIntegral %s)" n
11873             | Int64 n -> sprintf "(fromIntegral %s)" n
11874             | FileIn n | FileOut n
11875             | Pathname n | Device n | Dev_or_Path n
11876             | String n | OptString n
11877             | StringList n | DeviceList n
11878             | Key n -> n
11879             | BufferIn n -> sprintf "%s (fromIntegral %s_size)" n n
11880           ) (snd style) in
11881         pr "withForeignPtr h (\\p -> c_%s %s)\n" name
11882           (String.concat " " ("p" :: args));
11883         (match fst style with
11884          | RErr | RInt _ | RInt64 _ | RBool _ ->
11885              pr "  if (r == -1)\n";
11886              pr "    then do\n";
11887              pr "      err <- last_error h\n";
11888              pr "      fail err\n";
11889          | RConstString _ | RConstOptString _ | RString _
11890          | RStringList _ | RStruct _
11891          | RStructList _ | RHashtable _ | RBufferOut _ ->
11892              pr "  if (r == nullPtr)\n";
11893              pr "    then do\n";
11894              pr "      err <- last_error h\n";
11895              pr "      fail err\n";
11896         );
11897         (match fst style with
11898          | RErr ->
11899              pr "    else return ()\n"
11900          | RInt _ ->
11901              pr "    else return (fromIntegral r)\n"
11902          | RInt64 _ ->
11903              pr "    else return (fromIntegral r)\n"
11904          | RBool _ ->
11905              pr "    else return (toBool r)\n"
11906          | RConstString _
11907          | RConstOptString _
11908          | RString _
11909          | RStringList _
11910          | RStruct _
11911          | RStructList _
11912          | RHashtable _
11913          | RBufferOut _ ->
11914              pr "    else return ()\n" (* XXXXXXXXXXXXXXXXXXXX *)
11915         );
11916         pr "\n";
11917       )
11918   ) all_functions
11919
11920 and generate_haskell_prototype ~handle ?(hs = false) style =
11921   pr "%s -> " handle;
11922   let string = if hs then "String" else "CString" in
11923   let int = if hs then "Int" else "CInt" in
11924   let bool = if hs then "Bool" else "CInt" in
11925   let int64 = if hs then "Integer" else "Int64" in
11926   List.iter (
11927     fun arg ->
11928       (match arg with
11929        | Pathname _ | Device _ | Dev_or_Path _ | String _ | Key _ ->
11930            pr "%s" string
11931        | BufferIn _ ->
11932            if hs then pr "String"
11933            else pr "CString -> CInt"
11934        | OptString _ -> if hs then pr "Maybe String" else pr "CString"
11935        | StringList _ | DeviceList _ -> if hs then pr "[String]" else pr "Ptr CString"
11936        | Bool _ -> pr "%s" bool
11937        | Int _ -> pr "%s" int
11938        | Int64 _ -> pr "%s" int
11939        | FileIn _ -> pr "%s" string
11940        | FileOut _ -> pr "%s" string
11941       );
11942       pr " -> ";
11943   ) (snd style);
11944   pr "IO (";
11945   (match fst style with
11946    | RErr -> if not hs then pr "CInt"
11947    | RInt _ -> pr "%s" int
11948    | RInt64 _ -> pr "%s" int64
11949    | RBool _ -> pr "%s" bool
11950    | RConstString _ -> pr "%s" string
11951    | RConstOptString _ -> pr "Maybe %s" string
11952    | RString _ -> pr "%s" string
11953    | RStringList _ -> pr "[%s]" string
11954    | RStruct (_, typ) ->
11955        let name = java_name_of_struct typ in
11956        pr "%s" name
11957    | RStructList (_, typ) ->
11958        let name = java_name_of_struct typ in
11959        pr "[%s]" name
11960    | RHashtable _ -> pr "Hashtable"
11961    | RBufferOut _ -> pr "%s" string
11962   );
11963   pr ")"
11964
11965 and generate_csharp () =
11966   generate_header CPlusPlusStyle LGPLv2plus;
11967
11968   (* XXX Make this configurable by the C# assembly users. *)
11969   let library = "libguestfs.so.0" in
11970
11971   pr "\
11972 // These C# bindings are highly experimental at present.
11973 //
11974 // Firstly they only work on Linux (ie. Mono).  In order to get them
11975 // to work on Windows (ie. .Net) you would need to port the library
11976 // itself to Windows first.
11977 //
11978 // The second issue is that some calls are known to be incorrect and
11979 // can cause Mono to segfault.  Particularly: calls which pass or
11980 // return string[], or return any structure value.  This is because
11981 // we haven't worked out the correct way to do this from C#.
11982 //
11983 // The third issue is that when compiling you get a lot of warnings.
11984 // We are not sure whether the warnings are important or not.
11985 //
11986 // Fourthly we do not routinely build or test these bindings as part
11987 // of the make && make check cycle, which means that regressions might
11988 // go unnoticed.
11989 //
11990 // Suggestions and patches are welcome.
11991
11992 // To compile:
11993 //
11994 // gmcs Libguestfs.cs
11995 // mono Libguestfs.exe
11996 //
11997 // (You'll probably want to add a Test class / static main function
11998 // otherwise this won't do anything useful).
11999
12000 using System;
12001 using System.IO;
12002 using System.Runtime.InteropServices;
12003 using System.Runtime.Serialization;
12004 using System.Collections;
12005
12006 namespace Guestfs
12007 {
12008   class Error : System.ApplicationException
12009   {
12010     public Error (string message) : base (message) {}
12011     protected Error (SerializationInfo info, StreamingContext context) {}
12012   }
12013
12014   class Guestfs
12015   {
12016     IntPtr _handle;
12017
12018     [DllImport (\"%s\")]
12019     static extern IntPtr guestfs_create ();
12020
12021     public Guestfs ()
12022     {
12023       _handle = guestfs_create ();
12024       if (_handle == IntPtr.Zero)
12025         throw new Error (\"could not create guestfs handle\");
12026     }
12027
12028     [DllImport (\"%s\")]
12029     static extern void guestfs_close (IntPtr h);
12030
12031     ~Guestfs ()
12032     {
12033       guestfs_close (_handle);
12034     }
12035
12036     [DllImport (\"%s\")]
12037     static extern string guestfs_last_error (IntPtr h);
12038
12039 " library library library;
12040
12041   (* Generate C# structure bindings.  We prefix struct names with
12042    * underscore because C# cannot have conflicting struct names and
12043    * method names (eg. "class stat" and "stat").
12044    *)
12045   List.iter (
12046     fun (typ, cols) ->
12047       pr "    [StructLayout (LayoutKind.Sequential)]\n";
12048       pr "    public class _%s {\n" typ;
12049       List.iter (
12050         function
12051         | name, FChar -> pr "      char %s;\n" name
12052         | name, FString -> pr "      string %s;\n" name
12053         | name, FBuffer ->
12054             pr "      uint %s_len;\n" name;
12055             pr "      string %s;\n" name
12056         | name, FUUID ->
12057             pr "      [MarshalAs (UnmanagedType.ByValTStr, SizeConst=16)]\n";
12058             pr "      string %s;\n" name
12059         | name, FUInt32 -> pr "      uint %s;\n" name
12060         | name, FInt32 -> pr "      int %s;\n" name
12061         | name, (FUInt64|FBytes) -> pr "      ulong %s;\n" name
12062         | name, FInt64 -> pr "      long %s;\n" name
12063         | name, FOptPercent -> pr "      float %s; /* [0..100] or -1 */\n" name
12064       ) cols;
12065       pr "    }\n";
12066       pr "\n"
12067   ) structs;
12068
12069   (* Generate C# function bindings. *)
12070   List.iter (
12071     fun (name, style, _, _, _, shortdesc, _) ->
12072       let rec csharp_return_type () =
12073         match fst style with
12074         | RErr -> "void"
12075         | RBool n -> "bool"
12076         | RInt n -> "int"
12077         | RInt64 n -> "long"
12078         | RConstString n
12079         | RConstOptString n
12080         | RString n
12081         | RBufferOut n -> "string"
12082         | RStruct (_,n) -> "_" ^ n
12083         | RHashtable n -> "Hashtable"
12084         | RStringList n -> "string[]"
12085         | RStructList (_,n) -> sprintf "_%s[]" n
12086
12087       and c_return_type () =
12088         match fst style with
12089         | RErr
12090         | RBool _
12091         | RInt _ -> "int"
12092         | RInt64 _ -> "long"
12093         | RConstString _
12094         | RConstOptString _
12095         | RString _
12096         | RBufferOut _ -> "string"
12097         | RStruct (_,n) -> "_" ^ n
12098         | RHashtable _
12099         | RStringList _ -> "string[]"
12100         | RStructList (_,n) -> sprintf "_%s[]" n
12101
12102       and c_error_comparison () =
12103         match fst style with
12104         | RErr
12105         | RBool _
12106         | RInt _
12107         | RInt64 _ -> "== -1"
12108         | RConstString _
12109         | RConstOptString _
12110         | RString _
12111         | RBufferOut _
12112         | RStruct (_,_)
12113         | RHashtable _
12114         | RStringList _
12115         | RStructList (_,_) -> "== null"
12116
12117       and generate_extern_prototype () =
12118         pr "    static extern %s guestfs_%s (IntPtr h"
12119           (c_return_type ()) name;
12120         List.iter (
12121           function
12122           | Pathname n | Device n | Dev_or_Path n | String n | OptString n
12123           | FileIn n | FileOut n
12124           | Key n
12125           | BufferIn n ->
12126               pr ", [In] string %s" n
12127           | StringList n | DeviceList n ->
12128               pr ", [In] string[] %s" n
12129           | Bool n ->
12130               pr ", bool %s" n
12131           | Int n ->
12132               pr ", int %s" n
12133           | Int64 n ->
12134               pr ", long %s" n
12135         ) (snd style);
12136         pr ");\n"
12137
12138       and generate_public_prototype () =
12139         pr "    public %s %s (" (csharp_return_type ()) name;
12140         let comma = ref false in
12141         let next () =
12142           if !comma then pr ", ";
12143           comma := true
12144         in
12145         List.iter (
12146           function
12147           | Pathname n | Device n | Dev_or_Path n | String n | OptString n
12148           | FileIn n | FileOut n
12149           | Key n
12150           | BufferIn n ->
12151               next (); pr "string %s" n
12152           | StringList n | DeviceList n ->
12153               next (); pr "string[] %s" n
12154           | Bool n ->
12155               next (); pr "bool %s" n
12156           | Int n ->
12157               next (); pr "int %s" n
12158           | Int64 n ->
12159               next (); pr "long %s" n
12160         ) (snd style);
12161         pr ")\n"
12162
12163       and generate_call () =
12164         pr "guestfs_%s (_handle" name;
12165         List.iter (fun arg -> pr ", %s" (name_of_argt arg)) (snd style);
12166         pr ");\n";
12167       in
12168
12169       pr "    [DllImport (\"%s\")]\n" library;
12170       generate_extern_prototype ();
12171       pr "\n";
12172       pr "    /// <summary>\n";
12173       pr "    /// %s\n" shortdesc;
12174       pr "    /// </summary>\n";
12175       generate_public_prototype ();
12176       pr "    {\n";
12177       pr "      %s r;\n" (c_return_type ());
12178       pr "      r = ";
12179       generate_call ();
12180       pr "      if (r %s)\n" (c_error_comparison ());
12181       pr "        throw new Error (guestfs_last_error (_handle));\n";
12182       (match fst style with
12183        | RErr -> ()
12184        | RBool _ ->
12185            pr "      return r != 0 ? true : false;\n"
12186        | RHashtable _ ->
12187            pr "      Hashtable rr = new Hashtable ();\n";
12188            pr "      for (size_t i = 0; i < r.Length; i += 2)\n";
12189            pr "        rr.Add (r[i], r[i+1]);\n";
12190            pr "      return rr;\n"
12191        | RInt _ | RInt64 _ | RConstString _ | RConstOptString _
12192        | RString _ | RBufferOut _ | RStruct _ | RStringList _
12193        | RStructList _ ->
12194            pr "      return r;\n"
12195       );
12196       pr "    }\n";
12197       pr "\n";
12198   ) all_functions_sorted;
12199
12200   pr "  }
12201 }
12202 "
12203
12204 and generate_php_h () =
12205   generate_header CStyle LGPLv2plus;
12206
12207   pr "\
12208 #ifndef PHP_GUESTFS_PHP_H
12209 #define PHP_GUESTFS_PHP_H 1
12210
12211 #ifdef ZTS
12212 #include \"TSRM.h\"
12213 #endif
12214
12215 #define PHP_GUESTFS_PHP_EXTNAME \"guestfs_php\"
12216 #define PHP_GUESTFS_PHP_VERSION \"1.0\"
12217
12218 PHP_MINIT_FUNCTION (guestfs_php);
12219
12220 #define PHP_GUESTFS_HANDLE_RES_NAME \"guestfs_h\"
12221
12222 PHP_FUNCTION (guestfs_create);
12223 PHP_FUNCTION (guestfs_last_error);
12224 ";
12225
12226   List.iter (
12227     fun (shortname, style, _, _, _, _, _) ->
12228       pr "PHP_FUNCTION (guestfs_%s);\n" shortname
12229   ) all_functions_sorted;
12230
12231   pr "\
12232
12233 extern zend_module_entry guestfs_php_module_entry;
12234 #define phpext_guestfs_php_ptr &guestfs_php_module_entry
12235
12236 #endif /* PHP_GUESTFS_PHP_H */
12237 "
12238
12239 and generate_php_c () =
12240   generate_header CStyle LGPLv2plus;
12241
12242   pr "\
12243 /* NOTE: Be very careful with all macros in PHP header files.  The
12244  * morons who wrote them aren't good at making them safe for inclusion
12245  * in arbitrary places in C code, eg. not using 'do ... while(0)'
12246  * or parenthesizing any of the arguments.
12247  */
12248
12249 /* NOTE (2): Some parts of the API can't be used on 32 bit platforms.
12250  * Any 64 bit numbers will be truncated.  There's no easy way around
12251  * this in PHP.
12252  */
12253
12254 #include <config.h>
12255
12256 #include <stdio.h>
12257 #include <stdlib.h>
12258
12259 #include <php.h>
12260 #include <php_guestfs_php.h>
12261
12262 #include \"guestfs.h\"
12263
12264 static int res_guestfs_h;
12265
12266 static void
12267 guestfs_php_handle_dtor (zend_rsrc_list_entry *rsrc TSRMLS_DC)
12268 {
12269   guestfs_h *g = (guestfs_h *) rsrc->ptr;
12270   if (g != NULL)
12271     guestfs_close (g);
12272 }
12273
12274 PHP_MINIT_FUNCTION (guestfs_php)
12275 {
12276   res_guestfs_h =
12277     zend_register_list_destructors_ex (guestfs_php_handle_dtor,
12278     NULL, PHP_GUESTFS_HANDLE_RES_NAME, module_number);
12279 }
12280
12281 static function_entry guestfs_php_functions[] = {
12282   PHP_FE (guestfs_create, NULL)
12283   PHP_FE (guestfs_last_error, NULL)
12284 ";
12285
12286   List.iter (
12287     fun (shortname, style, _, _, _, _, _) ->
12288       pr "  PHP_FE (guestfs_%s, NULL)\n" shortname
12289   ) all_functions_sorted;
12290
12291   pr "  { NULL, NULL, NULL }
12292 };
12293
12294 zend_module_entry guestfs_php_module_entry = {
12295 #if ZEND_MODULE_API_NO >= 20010901
12296   STANDARD_MODULE_HEADER,
12297 #endif
12298   PHP_GUESTFS_PHP_EXTNAME,
12299   guestfs_php_functions,
12300   PHP_MINIT (guestfs_php),
12301   NULL,
12302   NULL,
12303   NULL,
12304   NULL,
12305 #if ZEND_MODULE_API_NO >= 20010901
12306   PHP_GUESTFS_PHP_VERSION,
12307 #endif
12308   STANDARD_MODULE_PROPERTIES
12309 };
12310
12311 #ifdef COMPILE_DL_GUESTFS_PHP
12312 ZEND_GET_MODULE (guestfs_php)
12313 #endif
12314
12315 PHP_FUNCTION (guestfs_create)
12316 {
12317   guestfs_h *g = guestfs_create ();
12318   if (g == NULL) {
12319     RETURN_FALSE;
12320   }
12321
12322   guestfs_set_error_handler (g, NULL, NULL);
12323
12324   ZEND_REGISTER_RESOURCE (return_value, g, res_guestfs_h);
12325 }
12326
12327 PHP_FUNCTION (guestfs_last_error)
12328 {
12329   zval *z_g;
12330   guestfs_h *g;
12331
12332   if (zend_parse_parameters (ZEND_NUM_ARGS() TSRMLS_CC, \"r\",
12333                              &z_g) == FAILURE) {
12334     RETURN_FALSE;
12335   }
12336
12337   ZEND_FETCH_RESOURCE (g, guestfs_h *, &z_g, -1, PHP_GUESTFS_HANDLE_RES_NAME,
12338                        res_guestfs_h);
12339   if (g == NULL) {
12340     RETURN_FALSE;
12341   }
12342
12343   const char *err = guestfs_last_error (g);
12344   if (err) {
12345     RETURN_STRING (err, 1);
12346   } else {
12347     RETURN_NULL ();
12348   }
12349 }
12350
12351 ";
12352
12353   (* Now generate the PHP bindings for each action. *)
12354   List.iter (
12355     fun (shortname, style, _, _, _, _, _) ->
12356       pr "PHP_FUNCTION (guestfs_%s)\n" shortname;
12357       pr "{\n";
12358       pr "  zval *z_g;\n";
12359       pr "  guestfs_h *g;\n";
12360
12361       List.iter (
12362         function
12363         | String n | Device n | Pathname n | Dev_or_Path n
12364         | FileIn n | FileOut n | Key n
12365         | OptString n
12366         | BufferIn n ->
12367             pr "  char *%s;\n" n;
12368             pr "  int %s_size;\n" n
12369         | StringList n
12370         | DeviceList n ->
12371             pr "  zval *z_%s;\n" n;
12372             pr "  char **%s;\n" n;
12373         | Bool n ->
12374             pr "  zend_bool %s;\n" n
12375         | Int n | Int64 n ->
12376             pr "  long %s;\n" n
12377         ) (snd style);
12378
12379       pr "\n";
12380
12381       (* Parse the parameters. *)
12382       let param_string = String.concat "" (
12383         List.map (
12384           function
12385           | String n | Device n | Pathname n | Dev_or_Path n
12386           | FileIn n | FileOut n | BufferIn n | Key n -> "s"
12387           | OptString n -> "s!"
12388           | StringList n | DeviceList n -> "a"
12389           | Bool n -> "b"
12390           | Int n | Int64 n -> "l"
12391         ) (snd style)
12392       ) in
12393
12394       pr "  if (zend_parse_parameters (ZEND_NUM_ARGS() TSRMLS_CC, \"r%s\",\n"
12395         param_string;
12396       pr "        &z_g";
12397       List.iter (
12398         function
12399         | String n | Device n | Pathname n | Dev_or_Path n
12400         | FileIn n | FileOut n | BufferIn n | Key n
12401         | OptString n ->
12402             pr ", &%s, &%s_size" n n
12403         | StringList n | DeviceList n ->
12404             pr ", &z_%s" n
12405         | Bool n ->
12406             pr ", &%s" n
12407         | Int n | Int64 n ->
12408             pr ", &%s" n
12409       ) (snd style);
12410       pr ") == FAILURE) {\n";
12411       pr "    RETURN_FALSE;\n";
12412       pr "  }\n";
12413       pr "\n";
12414       pr "  ZEND_FETCH_RESOURCE (g, guestfs_h *, &z_g, -1, PHP_GUESTFS_HANDLE_RES_NAME,\n";
12415       pr "                       res_guestfs_h);\n";
12416       pr "  if (g == NULL) {\n";
12417       pr "    RETURN_FALSE;\n";
12418       pr "  }\n";
12419       pr "\n";
12420
12421       List.iter (
12422         function
12423         | String n | Device n | Pathname n | Dev_or_Path n
12424         | FileIn n | FileOut n | Key n
12425         | OptString n ->
12426             (* Just need to check the string doesn't contain any ASCII
12427              * NUL characters, which won't be supported by the C API.
12428              *)
12429             pr "  if (strlen (%s) != %s_size) {\n" n n;
12430             pr "    fprintf (stderr, \"libguestfs: %s: parameter '%s' contains embedded ASCII NUL.\\n\");\n" shortname n;
12431             pr "    RETURN_FALSE;\n";
12432             pr "  }\n";
12433             pr "\n"
12434         | BufferIn n -> ()
12435         | StringList n
12436         | DeviceList n ->
12437             (* Convert array to list of strings.
12438              * http://marc.info/?l=pecl-dev&m=112205192100631&w=2
12439              *)
12440             pr "  {\n";
12441             pr "    HashTable *a;\n";
12442             pr "    int n;\n";
12443             pr "    HashPosition p;\n";
12444             pr "    zval **d;\n";
12445             pr "    size_t c = 0;\n";
12446             pr "\n";
12447             pr "    a = Z_ARRVAL_P (z_%s);\n" n;
12448             pr "    n = zend_hash_num_elements (a);\n";
12449             pr "    %s = safe_emalloc (n + 1, sizeof (char *), 0);\n" n;
12450             pr "    for (zend_hash_internal_pointer_reset_ex (a, &p);\n";
12451             pr "         zend_hash_get_current_data_ex (a, (void **) &d, &p) == SUCCESS;\n";
12452             pr "         zend_hash_move_forward_ex (a, &p)) {\n";
12453             pr "      zval t = **d;\n";
12454             pr "      zval_copy_ctor (&t);\n";
12455             pr "      convert_to_string (&t);\n";
12456             pr "      %s[c] = Z_STRVAL (t);\n" n;
12457             pr "      c++;\n";
12458             pr "    }\n";
12459             pr "    %s[c] = NULL;\n" n;
12460             pr "  }\n";
12461             pr "\n"
12462         | Bool n | Int n | Int64 n -> ()
12463         ) (snd style);
12464
12465       (* Return value. *)
12466       let error_code =
12467         match fst style with
12468         | RErr -> pr "  int r;\n"; "-1"
12469         | RBool _
12470         | RInt _ -> pr "  int r;\n"; "-1"
12471         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
12472         | RConstString _ -> pr "  const char *r;\n"; "NULL"
12473         | RConstOptString _ -> pr "  const char *r;\n"; "NULL"
12474         | RString _ ->
12475             pr "  char *r;\n"; "NULL"
12476         | RStringList _ ->
12477             pr "  char **r;\n"; "NULL"
12478         | RStruct (_, typ) ->
12479             pr "  struct guestfs_%s *r;\n" typ; "NULL"
12480         | RStructList (_, typ) ->
12481             pr "  struct guestfs_%s_list *r;\n" typ; "NULL"
12482         | RHashtable _ ->
12483             pr "  char **r;\n"; "NULL"
12484         | RBufferOut _ ->
12485             pr "  char *r;\n";
12486             pr "  size_t size;\n";
12487             "NULL" in
12488
12489       (* Call the function. *)
12490       pr "  r = guestfs_%s " shortname;
12491       generate_c_call_args ~handle:"g" style;
12492       pr ";\n";
12493       pr "\n";
12494
12495       (* Free up parameters. *)
12496       List.iter (
12497         function
12498         | String n | Device n | Pathname n | Dev_or_Path n
12499         | FileIn n | FileOut n | Key n
12500         | OptString n -> ()
12501         | BufferIn n -> ()
12502         | StringList n
12503         | DeviceList n ->
12504             pr "  {\n";
12505             pr "    size_t c = 0;\n";
12506             pr "\n";
12507             pr "    for (c = 0; %s[c] != NULL; ++c)\n" n;
12508             pr "      efree (%s[c]);\n" n;
12509             pr "    efree (%s);\n" n;
12510             pr "  }\n";
12511             pr "\n"
12512         | Bool n | Int n | Int64 n -> ()
12513         ) (snd style);
12514
12515       (* Check for errors. *)
12516       pr "  if (r == %s) {\n" error_code;
12517       pr "    RETURN_FALSE;\n";
12518       pr "  }\n";
12519       pr "\n";
12520
12521       (* Convert the return value. *)
12522       (match fst style with
12523        | RErr ->
12524            pr "  RETURN_TRUE;\n"
12525        | RBool _ ->
12526            pr "  RETURN_BOOL (r);\n"
12527        | RInt _ ->
12528            pr "  RETURN_LONG (r);\n"
12529        | RInt64 _ ->
12530            pr "  RETURN_LONG (r);\n"
12531        | RConstString _ ->
12532            pr "  RETURN_STRING (r, 1);\n"
12533        | RConstOptString _ ->
12534            pr "  if (r) { RETURN_STRING (r, 1); }\n";
12535            pr "  else { RETURN_NULL (); }\n"
12536        | RString _ ->
12537            pr "  char *r_copy = estrdup (r);\n";
12538            pr "  free (r);\n";
12539            pr "  RETURN_STRING (r_copy, 0);\n"
12540        | RBufferOut _ ->
12541            pr "  char *r_copy = estrndup (r, size);\n";
12542            pr "  free (r);\n";
12543            pr "  RETURN_STRING (r_copy, 0);\n"
12544        | RStringList _ ->
12545            pr "  size_t c = 0;\n";
12546            pr "  array_init (return_value);\n";
12547            pr "  for (c = 0; r[c] != NULL; ++c) {\n";
12548            pr "    add_next_index_string (return_value, r[c], 1);\n";
12549            pr "    free (r[c]);\n";
12550            pr "  }\n";
12551            pr "  free (r);\n";
12552        | RHashtable _ ->
12553            pr "  size_t c = 0;\n";
12554            pr "  array_init (return_value);\n";
12555            pr "  for (c = 0; r[c] != NULL; c += 2) {\n";
12556            pr "    add_assoc_string (return_value, r[c], r[c+1], 1);\n";
12557            pr "    free (r[c]);\n";
12558            pr "    free (r[c+1]);\n";
12559            pr "  }\n";
12560            pr "  free (r);\n";
12561        | RStruct (_, typ) ->
12562            let cols = cols_of_struct typ in
12563            generate_php_struct_code typ cols
12564        | RStructList (_, typ) ->
12565            let cols = cols_of_struct typ in
12566            generate_php_struct_list_code typ cols
12567       );
12568
12569       pr "}\n";
12570       pr "\n"
12571   ) all_functions_sorted
12572
12573 and generate_php_struct_code typ cols =
12574   pr "  array_init (return_value);\n";
12575   List.iter (
12576     function
12577     | name, FString ->
12578         pr "  add_assoc_string (return_value, \"%s\", r->%s, 1);\n" name name
12579     | name, FBuffer ->
12580         pr "  add_assoc_stringl (return_value, \"%s\", r->%s, r->%s_len, 1);\n"
12581           name name name
12582     | name, FUUID ->
12583         pr "  add_assoc_stringl (return_value, \"%s\", r->%s, 32, 1);\n"
12584           name name
12585     | name, (FBytes|FUInt64|FInt64|FInt32|FUInt32) ->
12586         pr "  add_assoc_long (return_value, \"%s\", r->%s);\n"
12587           name name
12588     | name, FChar ->
12589         pr "  add_assoc_stringl (return_value, \"%s\", &r->%s, 1, 1);\n"
12590           name name
12591     | name, FOptPercent ->
12592         pr "  add_assoc_double (return_value, \"%s\", r->%s);\n"
12593           name name
12594   ) cols;
12595   pr "  guestfs_free_%s (r);\n" typ
12596
12597 and generate_php_struct_list_code typ cols =
12598   pr "  array_init (return_value);\n";
12599   pr "  size_t c = 0;\n";
12600   pr "  for (c = 0; c < r->len; ++c) {\n";
12601   pr "    zval *z_elem;\n";
12602   pr "    ALLOC_INIT_ZVAL (z_elem);\n";
12603   pr "    array_init (z_elem);\n";
12604   List.iter (
12605     function
12606     | name, FString ->
12607         pr "    add_assoc_string (z_elem, \"%s\", r->val[c].%s, 1);\n"
12608           name name
12609     | name, FBuffer ->
12610         pr "    add_assoc_stringl (z_elem, \"%s\", r->val[c].%s, r->val[c].%s_len, 1);\n"
12611           name name name
12612     | name, FUUID ->
12613         pr "    add_assoc_stringl (z_elem, \"%s\", r->val[c].%s, 32, 1);\n"
12614           name name
12615     | name, (FBytes|FUInt64|FInt64|FInt32|FUInt32) ->
12616         pr "    add_assoc_long (z_elem, \"%s\", r->val[c].%s);\n"
12617           name name
12618     | name, FChar ->
12619         pr "    add_assoc_stringl (z_elem, \"%s\", &r->val[c].%s, 1, 1);\n"
12620           name name
12621     | name, FOptPercent ->
12622         pr "    add_assoc_double (z_elem, \"%s\", r->val[c].%s);\n"
12623           name name
12624   ) cols;
12625   pr "    add_next_index_zval (return_value, z_elem);\n";
12626   pr "  }\n";
12627   pr "  guestfs_free_%s_list (r);\n" typ
12628
12629 and generate_bindtests () =
12630   generate_header CStyle LGPLv2plus;
12631
12632   pr "\
12633 #include <stdio.h>
12634 #include <stdlib.h>
12635 #include <inttypes.h>
12636 #include <string.h>
12637
12638 #include \"guestfs.h\"
12639 #include \"guestfs-internal.h\"
12640 #include \"guestfs-internal-actions.h\"
12641 #include \"guestfs_protocol.h\"
12642
12643 #define error guestfs_error
12644 #define safe_calloc guestfs_safe_calloc
12645 #define safe_malloc guestfs_safe_malloc
12646
12647 static void
12648 print_strings (char *const *argv)
12649 {
12650   size_t argc;
12651
12652   printf (\"[\");
12653   for (argc = 0; argv[argc] != NULL; ++argc) {
12654     if (argc > 0) printf (\", \");
12655     printf (\"\\\"%%s\\\"\", argv[argc]);
12656   }
12657   printf (\"]\\n\");
12658 }
12659
12660 /* The test0 function prints its parameters to stdout. */
12661 ";
12662
12663   let test0, tests =
12664     match test_functions with
12665     | [] -> assert false
12666     | test0 :: tests -> test0, tests in
12667
12668   let () =
12669     let (name, style, _, _, _, _, _) = test0 in
12670     generate_prototype ~extern:false ~semicolon:false ~newline:true
12671       ~handle:"g" ~prefix:"guestfs__" name style;
12672     pr "{\n";
12673     List.iter (
12674       function
12675       | Pathname n
12676       | Device n | Dev_or_Path n
12677       | String n
12678       | FileIn n
12679       | FileOut n
12680       | Key n -> pr "  printf (\"%%s\\n\", %s);\n" n
12681       | BufferIn n ->
12682           pr "  {\n";
12683           pr "    size_t i;\n";
12684           pr "    for (i = 0; i < %s_size; ++i)\n" n;
12685           pr "      printf (\"<%%02x>\", %s[i]);\n" n;
12686           pr "    printf (\"\\n\");\n";
12687           pr "  }\n";
12688       | OptString n -> pr "  printf (\"%%s\\n\", %s ? %s : \"null\");\n" n n
12689       | StringList n | DeviceList n -> pr "  print_strings (%s);\n" n
12690       | Bool n -> pr "  printf (\"%%s\\n\", %s ? \"true\" : \"false\");\n" n
12691       | Int n -> pr "  printf (\"%%d\\n\", %s);\n" n
12692       | Int64 n -> pr "  printf (\"%%\" PRIi64 \"\\n\", %s);\n" n
12693     ) (snd style);
12694     pr "  /* Java changes stdout line buffering so we need this: */\n";
12695     pr "  fflush (stdout);\n";
12696     pr "  return 0;\n";
12697     pr "}\n";
12698     pr "\n" in
12699
12700   List.iter (
12701     fun (name, style, _, _, _, _, _) ->
12702       if String.sub name (String.length name - 3) 3 <> "err" then (
12703         pr "/* Test normal return. */\n";
12704         generate_prototype ~extern:false ~semicolon:false ~newline:true
12705           ~handle:"g" ~prefix:"guestfs__" name style;
12706         pr "{\n";
12707         (match fst style with
12708          | RErr ->
12709              pr "  return 0;\n"
12710          | RInt _ ->
12711              pr "  int r;\n";
12712              pr "  sscanf (val, \"%%d\", &r);\n";
12713              pr "  return r;\n"
12714          | RInt64 _ ->
12715              pr "  int64_t r;\n";
12716              pr "  sscanf (val, \"%%\" SCNi64, &r);\n";
12717              pr "  return r;\n"
12718          | RBool _ ->
12719              pr "  return STREQ (val, \"true\");\n"
12720          | RConstString _
12721          | RConstOptString _ ->
12722              (* Can't return the input string here.  Return a static
12723               * string so we ensure we get a segfault if the caller
12724               * tries to free it.
12725               *)
12726              pr "  return \"static string\";\n"
12727          | RString _ ->
12728              pr "  return strdup (val);\n"
12729          | RStringList _ ->
12730              pr "  char **strs;\n";
12731              pr "  int n, i;\n";
12732              pr "  sscanf (val, \"%%d\", &n);\n";
12733              pr "  strs = safe_malloc (g, (n+1) * sizeof (char *));\n";
12734              pr "  for (i = 0; i < n; ++i) {\n";
12735              pr "    strs[i] = safe_malloc (g, 16);\n";
12736              pr "    snprintf (strs[i], 16, \"%%d\", i);\n";
12737              pr "  }\n";
12738              pr "  strs[n] = NULL;\n";
12739              pr "  return strs;\n"
12740          | RStruct (_, typ) ->
12741              pr "  struct guestfs_%s *r;\n" typ;
12742              pr "  r = safe_calloc (g, sizeof *r, 1);\n";
12743              pr "  return r;\n"
12744          | RStructList (_, typ) ->
12745              pr "  struct guestfs_%s_list *r;\n" typ;
12746              pr "  r = safe_calloc (g, sizeof *r, 1);\n";
12747              pr "  sscanf (val, \"%%d\", &r->len);\n";
12748              pr "  r->val = safe_calloc (g, r->len, sizeof *r->val);\n";
12749              pr "  return r;\n"
12750          | RHashtable _ ->
12751              pr "  char **strs;\n";
12752              pr "  int n, i;\n";
12753              pr "  sscanf (val, \"%%d\", &n);\n";
12754              pr "  strs = safe_malloc (g, (n*2+1) * sizeof (*strs));\n";
12755              pr "  for (i = 0; i < n; ++i) {\n";
12756              pr "    strs[i*2] = safe_malloc (g, 16);\n";
12757              pr "    strs[i*2+1] = safe_malloc (g, 16);\n";
12758              pr "    snprintf (strs[i*2], 16, \"%%d\", i);\n";
12759              pr "    snprintf (strs[i*2+1], 16, \"%%d\", i);\n";
12760              pr "  }\n";
12761              pr "  strs[n*2] = NULL;\n";
12762              pr "  return strs;\n"
12763          | RBufferOut _ ->
12764              pr "  return strdup (val);\n"
12765         );
12766         pr "}\n";
12767         pr "\n"
12768       ) else (
12769         pr "/* Test error return. */\n";
12770         generate_prototype ~extern:false ~semicolon:false ~newline:true
12771           ~handle:"g" ~prefix:"guestfs__" name style;
12772         pr "{\n";
12773         pr "  error (g, \"error\");\n";
12774         (match fst style with
12775          | RErr | RInt _ | RInt64 _ | RBool _ ->
12776              pr "  return -1;\n"
12777          | RConstString _ | RConstOptString _
12778          | RString _ | RStringList _ | RStruct _
12779          | RStructList _
12780          | RHashtable _
12781          | RBufferOut _ ->
12782              pr "  return NULL;\n"
12783         );
12784         pr "}\n";
12785         pr "\n"
12786       )
12787   ) tests
12788
12789 and generate_ocaml_bindtests () =
12790   generate_header OCamlStyle GPLv2plus;
12791
12792   pr "\
12793 let () =
12794   let g = Guestfs.create () in
12795 ";
12796
12797   let mkargs args =
12798     String.concat " " (
12799       List.map (
12800         function
12801         | CallString s -> "\"" ^ s ^ "\""
12802         | CallOptString None -> "None"
12803         | CallOptString (Some s) -> sprintf "(Some \"%s\")" s
12804         | CallStringList xs ->
12805             "[|" ^ String.concat ";" (List.map (sprintf "\"%s\"") xs) ^ "|]"
12806         | CallInt i when i >= 0 -> string_of_int i
12807         | CallInt i (* when i < 0 *) -> "(" ^ string_of_int i ^ ")"
12808         | CallInt64 i when i >= 0L -> Int64.to_string i ^ "L"
12809         | CallInt64 i (* when i < 0L *) -> "(" ^ Int64.to_string i ^ "L)"
12810         | CallBool b -> string_of_bool b
12811         | CallBuffer s -> sprintf "%S" s
12812       ) args
12813     )
12814   in
12815
12816   generate_lang_bindtests (
12817     fun f args -> pr "  Guestfs.%s g %s;\n" f (mkargs args)
12818   );
12819
12820   pr "print_endline \"EOF\"\n"
12821
12822 and generate_perl_bindtests () =
12823   pr "#!/usr/bin/perl -w\n";
12824   generate_header HashStyle GPLv2plus;
12825
12826   pr "\
12827 use strict;
12828
12829 use Sys::Guestfs;
12830
12831 my $g = Sys::Guestfs->new ();
12832 ";
12833
12834   let mkargs args =
12835     String.concat ", " (
12836       List.map (
12837         function
12838         | CallString s -> "\"" ^ s ^ "\""
12839         | CallOptString None -> "undef"
12840         | CallOptString (Some s) -> sprintf "\"%s\"" s
12841         | CallStringList xs ->
12842             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
12843         | CallInt i -> string_of_int i
12844         | CallInt64 i -> Int64.to_string i
12845         | CallBool b -> if b then "1" else "0"
12846         | CallBuffer s -> "\"" ^ c_quote s ^ "\""
12847       ) args
12848     )
12849   in
12850
12851   generate_lang_bindtests (
12852     fun f args -> pr "$g->%s (%s);\n" f (mkargs args)
12853   );
12854
12855   pr "print \"EOF\\n\"\n"
12856
12857 and generate_python_bindtests () =
12858   generate_header HashStyle GPLv2plus;
12859
12860   pr "\
12861 import guestfs
12862
12863 g = guestfs.GuestFS ()
12864 ";
12865
12866   let mkargs args =
12867     String.concat ", " (
12868       List.map (
12869         function
12870         | CallString s -> "\"" ^ s ^ "\""
12871         | CallOptString None -> "None"
12872         | CallOptString (Some s) -> sprintf "\"%s\"" s
12873         | CallStringList xs ->
12874             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
12875         | CallInt i -> string_of_int i
12876         | CallInt64 i -> Int64.to_string i
12877         | CallBool b -> if b then "1" else "0"
12878         | CallBuffer s -> "\"" ^ c_quote s ^ "\""
12879       ) args
12880     )
12881   in
12882
12883   generate_lang_bindtests (
12884     fun f args -> pr "g.%s (%s)\n" f (mkargs args)
12885   );
12886
12887   pr "print \"EOF\"\n"
12888
12889 and generate_ruby_bindtests () =
12890   generate_header HashStyle GPLv2plus;
12891
12892   pr "\
12893 require 'guestfs'
12894
12895 g = Guestfs::create()
12896 ";
12897
12898   let mkargs args =
12899     String.concat ", " (
12900       List.map (
12901         function
12902         | CallString s -> "\"" ^ s ^ "\""
12903         | CallOptString None -> "nil"
12904         | CallOptString (Some s) -> sprintf "\"%s\"" s
12905         | CallStringList xs ->
12906             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
12907         | CallInt i -> string_of_int i
12908         | CallInt64 i -> Int64.to_string i
12909         | CallBool b -> string_of_bool b
12910         | CallBuffer s -> "\"" ^ c_quote s ^ "\""
12911       ) args
12912     )
12913   in
12914
12915   generate_lang_bindtests (
12916     fun f args -> pr "g.%s(%s)\n" f (mkargs args)
12917   );
12918
12919   pr "print \"EOF\\n\"\n"
12920
12921 and generate_java_bindtests () =
12922   generate_header CStyle GPLv2plus;
12923
12924   pr "\
12925 import com.redhat.et.libguestfs.*;
12926
12927 public class Bindtests {
12928     public static void main (String[] argv)
12929     {
12930         try {
12931             GuestFS g = new GuestFS ();
12932 ";
12933
12934   let mkargs args =
12935     String.concat ", " (
12936       List.map (
12937         function
12938         | CallString s -> "\"" ^ s ^ "\""
12939         | CallOptString None -> "null"
12940         | CallOptString (Some s) -> sprintf "\"%s\"" s
12941         | CallStringList xs ->
12942             "new String[]{" ^
12943               String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "}"
12944         | CallInt i -> string_of_int i
12945         | CallInt64 i -> Int64.to_string i
12946         | CallBool b -> string_of_bool b
12947         | CallBuffer s ->
12948             "new byte[] { " ^ String.concat "," (
12949               map_chars (fun c -> string_of_int (Char.code c)) s
12950             ) ^ " }"
12951       ) args
12952     )
12953   in
12954
12955   generate_lang_bindtests (
12956     fun f args -> pr "            g.%s (%s);\n" f (mkargs args)
12957   );
12958
12959   pr "
12960             System.out.println (\"EOF\");
12961         }
12962         catch (Exception exn) {
12963             System.err.println (exn);
12964             System.exit (1);
12965         }
12966     }
12967 }
12968 "
12969
12970 and generate_haskell_bindtests () =
12971   generate_header HaskellStyle GPLv2plus;
12972
12973   pr "\
12974 module Bindtests where
12975 import qualified Guestfs
12976
12977 main = do
12978   g <- Guestfs.create
12979 ";
12980
12981   let mkargs args =
12982     String.concat " " (
12983       List.map (
12984         function
12985         | CallString s -> "\"" ^ s ^ "\""
12986         | CallOptString None -> "Nothing"
12987         | CallOptString (Some s) -> sprintf "(Just \"%s\")" s
12988         | CallStringList xs ->
12989             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
12990         | CallInt i when i < 0 -> "(" ^ string_of_int i ^ ")"
12991         | CallInt i -> string_of_int i
12992         | CallInt64 i when i < 0L -> "(" ^ Int64.to_string i ^ ")"
12993         | CallInt64 i -> Int64.to_string i
12994         | CallBool true -> "True"
12995         | CallBool false -> "False"
12996         | CallBuffer s -> "\"" ^ c_quote s ^ "\""
12997       ) args
12998     )
12999   in
13000
13001   generate_lang_bindtests (
13002     fun f args -> pr "  Guestfs.%s g %s\n" f (mkargs args)
13003   );
13004
13005   pr "  putStrLn \"EOF\"\n"
13006
13007 (* Language-independent bindings tests - we do it this way to
13008  * ensure there is parity in testing bindings across all languages.
13009  *)
13010 and generate_lang_bindtests call =
13011   call "test0" [CallString "abc"; CallOptString (Some "def");
13012                 CallStringList []; CallBool false;
13013                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
13014                 CallBuffer "abc\000abc"];
13015   call "test0" [CallString "abc"; CallOptString None;
13016                 CallStringList []; CallBool false;
13017                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
13018                 CallBuffer "abc\000abc"];
13019   call "test0" [CallString ""; CallOptString (Some "def");
13020                 CallStringList []; CallBool false;
13021                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
13022                 CallBuffer "abc\000abc"];
13023   call "test0" [CallString ""; CallOptString (Some "");
13024                 CallStringList []; CallBool false;
13025                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
13026                 CallBuffer "abc\000abc"];
13027   call "test0" [CallString "abc"; CallOptString (Some "def");
13028                 CallStringList ["1"]; CallBool false;
13029                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
13030                 CallBuffer "abc\000abc"];
13031   call "test0" [CallString "abc"; CallOptString (Some "def");
13032                 CallStringList ["1"; "2"]; CallBool false;
13033                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
13034                 CallBuffer "abc\000abc"];
13035   call "test0" [CallString "abc"; CallOptString (Some "def");
13036                 CallStringList ["1"]; CallBool true;
13037                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
13038                 CallBuffer "abc\000abc"];
13039   call "test0" [CallString "abc"; CallOptString (Some "def");
13040                 CallStringList ["1"]; CallBool false;
13041                 CallInt (-1); CallInt64 (-1L); CallString "123"; CallString "456";
13042                 CallBuffer "abc\000abc"];
13043   call "test0" [CallString "abc"; CallOptString (Some "def");
13044                 CallStringList ["1"]; CallBool false;
13045                 CallInt (-2); CallInt64 (-2L); CallString "123"; CallString "456";
13046                 CallBuffer "abc\000abc"];
13047   call "test0" [CallString "abc"; CallOptString (Some "def");
13048                 CallStringList ["1"]; CallBool false;
13049                 CallInt 1; CallInt64 1L; CallString "123"; CallString "456";
13050                 CallBuffer "abc\000abc"];
13051   call "test0" [CallString "abc"; CallOptString (Some "def");
13052                 CallStringList ["1"]; CallBool false;
13053                 CallInt 2; CallInt64 2L; CallString "123"; CallString "456";
13054                 CallBuffer "abc\000abc"];
13055   call "test0" [CallString "abc"; CallOptString (Some "def");
13056                 CallStringList ["1"]; CallBool false;
13057                 CallInt 4095; CallInt64 4095L; CallString "123"; CallString "456";
13058                 CallBuffer "abc\000abc"];
13059   call "test0" [CallString "abc"; CallOptString (Some "def");
13060                 CallStringList ["1"]; CallBool false;
13061                 CallInt 0; CallInt64 0L; CallString ""; CallString "";
13062                 CallBuffer "abc\000abc"]
13063
13064 (* XXX Add here tests of the return and error functions. *)
13065
13066 and generate_max_proc_nr () =
13067   pr "%d\n" max_proc_nr
13068
13069 let output_to filename k =
13070   let filename_new = filename ^ ".new" in
13071   chan := open_out filename_new;
13072   k ();
13073   close_out !chan;
13074   chan := Pervasives.stdout;
13075
13076   (* Is the new file different from the current file? *)
13077   if Sys.file_exists filename && files_equal filename filename_new then
13078     unlink filename_new                 (* same, so skip it *)
13079   else (
13080     (* different, overwrite old one *)
13081     (try chmod filename 0o644 with Unix_error _ -> ());
13082     rename filename_new filename;
13083     chmod filename 0o444;
13084     printf "written %s\n%!" filename;
13085   )
13086
13087 let perror msg = function
13088   | Unix_error (err, _, _) ->
13089       eprintf "%s: %s\n" msg (error_message err)
13090   | exn ->
13091       eprintf "%s: %s\n" msg (Printexc.to_string exn)
13092
13093 (* Main program. *)
13094 let () =
13095   let lock_fd =
13096     try openfile "HACKING" [O_RDWR] 0
13097     with
13098     | Unix_error (ENOENT, _, _) ->
13099         eprintf "\
13100 You are probably running this from the wrong directory.
13101 Run it from the top source directory using the command
13102   src/generator.ml
13103 ";
13104         exit 1
13105     | exn ->
13106         perror "open: HACKING" exn;
13107         exit 1 in
13108
13109   (* Acquire a lock so parallel builds won't try to run the generator
13110    * twice at the same time.  Subsequent builds will wait for the first
13111    * one to finish.  Note the lock is released implicitly when the
13112    * program exits.
13113    *)
13114   (try lockf lock_fd F_LOCK 1
13115    with exn ->
13116      perror "lock: HACKING" exn;
13117      exit 1);
13118
13119   check_functions ();
13120
13121   output_to "src/guestfs_protocol.x" generate_xdr;
13122   output_to "src/guestfs-structs.h" generate_structs_h;
13123   output_to "src/guestfs-actions.h" generate_actions_h;
13124   output_to "src/guestfs-internal-actions.h" generate_internal_actions_h;
13125   output_to "src/actions.c" generate_client_actions;
13126   output_to "src/bindtests.c" generate_bindtests;
13127   output_to "src/guestfs-structs.pod" generate_structs_pod;
13128   output_to "src/guestfs-actions.pod" generate_actions_pod;
13129   output_to "src/guestfs-availability.pod" generate_availability_pod;
13130   output_to "src/MAX_PROC_NR" generate_max_proc_nr;
13131   output_to "src/libguestfs.syms" generate_linker_script;
13132   output_to "daemon/actions.h" generate_daemon_actions_h;
13133   output_to "daemon/stubs.c" generate_daemon_actions;
13134   output_to "daemon/names.c" generate_daemon_names;
13135   output_to "daemon/optgroups.c" generate_daemon_optgroups_c;
13136   output_to "daemon/optgroups.h" generate_daemon_optgroups_h;
13137   output_to "capitests/tests.c" generate_tests;
13138   output_to "fish/cmds.c" generate_fish_cmds;
13139   output_to "fish/completion.c" generate_fish_completion;
13140   output_to "fish/guestfish-actions.pod" generate_fish_actions_pod;
13141   output_to "fish/prepopts.c" generate_fish_prep_options_c;
13142   output_to "fish/prepopts.h" generate_fish_prep_options_h;
13143   output_to "ocaml/guestfs.mli" generate_ocaml_mli;
13144   output_to "ocaml/guestfs.ml" generate_ocaml_ml;
13145   output_to "ocaml/guestfs_c_actions.c" generate_ocaml_c;
13146   output_to "ocaml/bindtests.ml" generate_ocaml_bindtests;
13147   output_to "perl/Guestfs.xs" generate_perl_xs;
13148   output_to "perl/lib/Sys/Guestfs.pm" generate_perl_pm;
13149   output_to "perl/bindtests.pl" generate_perl_bindtests;
13150   output_to "python/guestfs-py.c" generate_python_c;
13151   output_to "python/guestfs.py" generate_python_py;
13152   output_to "python/bindtests.py" generate_python_bindtests;
13153   output_to "ruby/ext/guestfs/_guestfs.c" generate_ruby_c;
13154   output_to "ruby/bindtests.rb" generate_ruby_bindtests;
13155   output_to "java/com/redhat/et/libguestfs/GuestFS.java" generate_java_java;
13156
13157   List.iter (
13158     fun (typ, jtyp) ->
13159       let cols = cols_of_struct typ in
13160       let filename = sprintf "java/com/redhat/et/libguestfs/%s.java" jtyp in
13161       output_to filename (generate_java_struct jtyp cols);
13162   ) java_structs;
13163
13164   output_to "java/Makefile.inc" generate_java_makefile_inc;
13165   output_to "java/com_redhat_et_libguestfs_GuestFS.c" generate_java_c;
13166   output_to "java/Bindtests.java" generate_java_bindtests;
13167   output_to "haskell/Guestfs.hs" generate_haskell_hs;
13168   output_to "haskell/Bindtests.hs" generate_haskell_bindtests;
13169   output_to "csharp/Libguestfs.cs" generate_csharp;
13170   output_to "php/extension/php_guestfs_php.h" generate_php_h;
13171   output_to "php/extension/guestfs_php.c" generate_php_c;
13172
13173   (* Always generate this file last, and unconditionally.  It's used
13174    * by the Makefile to know when we must re-run the generator.
13175    *)
13176   let chan = open_out "src/stamp-generator" in
13177   fprintf chan "1\n";
13178   close_out chan;
13179
13180   printf "generated %d lines of code\n" !lines