Move variable initialization close to variable use.
[libguestfs.git] / src / generator.ml
1 #!/usr/bin/env ocaml
2 (* libguestfs
3  * Copyright (C) 2009-2010 Red Hat Inc.
4  *
5  * This program is free software; you can redistribute it and/or modify
6  * it under the terms of the GNU General Public License as published by
7  * the Free Software Foundation; either version 2 of the License, or
8  * (at your option) any later version.
9  *
10  * This program is distributed in the hope that it will be useful,
11  * but WITHOUT ANY WARRANTY; without even the implied warranty of
12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
13  * GNU General Public License for more details.
14  *
15  * You should have received a copy of the GNU General Public License
16  * along with this program; if not, write to the Free Software
17  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
18  *)
19
20 (* This script generates a large amount of code and documentation for
21  * all the daemon actions.
22  *
23  * To add a new action there are only two files you need to change,
24  * this one to describe the interface (see the big table of
25  * 'daemon_functions' below), and daemon/<somefile>.c to write the
26  * implementation.
27  *
28  * After editing this file, run it (./src/generator.ml) to regenerate
29  * all the output files.  'make' will rerun this automatically when
30  * necessary.  Note that if you are using a separate build directory
31  * you must run generator.ml from the _source_ directory.
32  *
33  * IMPORTANT: This script should NOT print any warnings.  If it prints
34  * warnings, you should treat them as errors.
35  *
36  * OCaml tips:
37  * (1) In emacs, install tuareg-mode to display and format OCaml code
38  * correctly.  'vim' comes with a good OCaml editing mode by default.
39  * (2) Read the resources at http://ocaml-tutorial.org/
40  *)
41
42 #load "unix.cma";;
43 #load "str.cma";;
44 #directory "+xml-light";;
45 #directory "+../pkg-lib/xml-light";; (* for GODI users *)
46 #load "xml-light.cma";;
47
48 open Unix
49 open Printf
50
51 type style = ret * args
52 and ret =
53     (* "RErr" as a return value means an int used as a simple error
54      * indication, ie. 0 or -1.
55      *)
56   | RErr
57
58     (* "RInt" as a return value means an int which is -1 for error
59      * or any value >= 0 on success.  Only use this for smallish
60      * positive ints (0 <= i < 2^30).
61      *)
62   | RInt of string
63
64     (* "RInt64" is the same as RInt, but is guaranteed to be able
65      * to return a full 64 bit value, _except_ that -1 means error
66      * (so -1 cannot be a valid, non-error return value).
67      *)
68   | RInt64 of string
69
70     (* "RBool" is a bool return value which can be true/false or
71      * -1 for error.
72      *)
73   | RBool of string
74
75     (* "RConstString" is a string that refers to a constant value.
76      * The return value must NOT be NULL (since NULL indicates
77      * an error).
78      *
79      * Try to avoid using this.  In particular you cannot use this
80      * for values returned from the daemon, because there is no
81      * thread-safe way to return them in the C API.
82      *)
83   | RConstString of string
84
85     (* "RConstOptString" is an even more broken version of
86      * "RConstString".  The returned string may be NULL and there
87      * is no way to return an error indication.  Avoid using this!
88      *)
89   | RConstOptString of string
90
91     (* "RString" is a returned string.  It must NOT be NULL, since
92      * a NULL return indicates an error.  The caller frees this.
93      *)
94   | RString of string
95
96     (* "RStringList" is a list of strings.  No string in the list
97      * can be NULL.  The caller frees the strings and the array.
98      *)
99   | RStringList of string
100
101     (* "RStruct" is a function which returns a single named structure
102      * or an error indication (in C, a struct, and in other languages
103      * with varying representations, but usually very efficient).  See
104      * after the function list below for the structures.
105      *)
106   | RStruct of string * string          (* name of retval, name of struct *)
107
108     (* "RStructList" is a function which returns either a list/array
109      * of structures (could be zero-length), or an error indication.
110      *)
111   | RStructList of string * string      (* name of retval, name of struct *)
112
113     (* Key-value pairs of untyped strings.  Turns into a hashtable or
114      * dictionary in languages which support it.  DON'T use this as a
115      * general "bucket" for results.  Prefer a stronger typed return
116      * value if one is available, or write a custom struct.  Don't use
117      * this if the list could potentially be very long, since it is
118      * inefficient.  Keys should be unique.  NULLs are not permitted.
119      *)
120   | RHashtable of string
121
122     (* "RBufferOut" is handled almost exactly like RString, but
123      * it allows the string to contain arbitrary 8 bit data including
124      * ASCII NUL.  In the C API this causes an implicit extra parameter
125      * to be added of type <size_t *size_r>.  The extra parameter
126      * returns the actual size of the return buffer in bytes.
127      *
128      * Other programming languages support strings with arbitrary 8 bit
129      * data.
130      *
131      * At the RPC layer we have to use the opaque<> type instead of
132      * string<>.  Returned data is still limited to the max message
133      * size (ie. ~ 2 MB).
134      *)
135   | RBufferOut of string
136
137 and args = argt list    (* Function parameters, guestfs handle is implicit. *)
138
139     (* Note in future we should allow a "variable args" parameter as
140      * the final parameter, to allow commands like
141      *   chmod mode file [file(s)...]
142      * This is not implemented yet, but many commands (such as chmod)
143      * are currently defined with the argument order keeping this future
144      * possibility in mind.
145      *)
146 and argt =
147   | String of string    (* const char *name, cannot be NULL *)
148   | Device of string    (* /dev device name, cannot be NULL *)
149   | Pathname of string  (* file name, cannot be NULL *)
150   | Dev_or_Path of string (* /dev device name or Pathname, cannot be NULL *)
151   | OptString of string (* const char *name, may be NULL *)
152   | StringList of string(* list of strings (each string cannot be NULL) *)
153   | DeviceList of string(* list of Device names (each cannot be NULL) *)
154   | Bool of string      (* boolean *)
155   | Int of string       (* int (smallish ints, signed, <= 31 bits) *)
156   | Int64 of string     (* any 64 bit int *)
157     (* These are treated as filenames (simple string parameters) in
158      * the C API and bindings.  But in the RPC protocol, we transfer
159      * the actual file content up to or down from the daemon.
160      * FileIn: local machine -> daemon (in request)
161      * FileOut: daemon -> local machine (in reply)
162      * In guestfish (only), the special name "-" means read from
163      * stdin or write to stdout.
164      *)
165   | FileIn of string
166   | FileOut of string
167     (* Opaque buffer which can contain arbitrary 8 bit data.
168      * In the C API, this is expressed as <const char *, size_t> pair.
169      * Most other languages have a string type which can contain
170      * ASCII NUL.  We use whatever type is appropriate for each
171      * language.
172      * Buffers are limited by the total message size.  To transfer
173      * large blocks of data, use FileIn/FileOut parameters instead.
174      * To return an arbitrary buffer, use RBufferOut.
175      *)
176   | BufferIn of string
177     (* Key material / passphrase.  Eventually we should treat this
178      * as sensitive and mlock it into physical RAM.  However this
179      * is highly complex because of all the places that XDR-encoded
180      * strings can end up.  So currently the only difference from
181      * 'String' is the way that guestfish requests these parameters
182      * from the user.
183      *)
184   | Key of string
185
186 type flags =
187   | ProtocolLimitWarning  (* display warning about protocol size limits *)
188   | DangerWillRobinson    (* flags particularly dangerous commands *)
189   | FishAlias of string   (* provide an alias for this cmd in guestfish *)
190   | FishOutput of fish_output_t (* how to display output in guestfish *)
191   | NotInFish             (* do not export via guestfish *)
192   | NotInDocs             (* do not add this function to documentation *)
193   | DeprecatedBy of string (* function is deprecated, use .. instead *)
194   | Optional of string    (* function is part of an optional group *)
195
196 and fish_output_t =
197   | FishOutputOctal       (* for int return, print in octal *)
198   | FishOutputHexadecimal (* for int return, print in hex *)
199
200 (* You can supply zero or as many tests as you want per API call.
201  *
202  * Note that the test environment has 3 block devices, of size 500MB,
203  * 50MB and 10MB (respectively /dev/sda, /dev/sdb, /dev/sdc), and
204  * a fourth ISO block device with some known files on it (/dev/sdd).
205  *
206  * Note for partitioning purposes, the 500MB device has 1015 cylinders.
207  * Number of cylinders was 63 for IDE emulated disks with precisely
208  * the same size.  How exactly this is calculated is a mystery.
209  *
210  * The ISO block device (/dev/sdd) comes from images/test.iso.
211  *
212  * To be able to run the tests in a reasonable amount of time,
213  * the virtual machine and block devices are reused between tests.
214  * So don't try testing kill_subprocess :-x
215  *
216  * Between each test we blockdev-setrw, umount-all, lvm-remove-all.
217  *
218  * Don't assume anything about the previous contents of the block
219  * devices.  Use 'Init*' to create some initial scenarios.
220  *
221  * You can add a prerequisite clause to any individual test.  This
222  * is a run-time check, which, if it fails, causes the test to be
223  * skipped.  Useful if testing a command which might not work on
224  * all variations of libguestfs builds.  A test that has prerequisite
225  * of 'Always' is run unconditionally.
226  *
227  * In addition, packagers can skip individual tests by setting the
228  * environment variables:     eg:
229  *   SKIP_TEST_<CMD>_<NUM>=1  SKIP_TEST_COMMAND_3=1  (skips test #3 of command)
230  *   SKIP_TEST_<CMD>=1        SKIP_TEST_ZEROFREE=1   (skips all zerofree tests)
231  *)
232 type tests = (test_init * test_prereq * test) list
233 and test =
234     (* Run the command sequence and just expect nothing to fail. *)
235   | TestRun of seq
236
237     (* Run the command sequence and expect the output of the final
238      * command to be the string.
239      *)
240   | TestOutput of seq * string
241
242     (* Run the command sequence and expect the output of the final
243      * command to be the list of strings.
244      *)
245   | TestOutputList of seq * string list
246
247     (* Run the command sequence and expect the output of the final
248      * command to be the list of block devices (could be either
249      * "/dev/sd.." or "/dev/hd.." form - we don't check the 5th
250      * character of each string).
251      *)
252   | TestOutputListOfDevices of seq * string list
253
254     (* Run the command sequence and expect the output of the final
255      * command to be the integer.
256      *)
257   | TestOutputInt of seq * int
258
259     (* Run the command sequence and expect the output of the final
260      * command to be <op> <int>, eg. ">=", "1".
261      *)
262   | TestOutputIntOp of seq * string * int
263
264     (* Run the command sequence and expect the output of the final
265      * command to be a true value (!= 0 or != NULL).
266      *)
267   | TestOutputTrue of seq
268
269     (* Run the command sequence and expect the output of the final
270      * command to be a false value (== 0 or == NULL, but not an error).
271      *)
272   | TestOutputFalse of seq
273
274     (* Run the command sequence and expect the output of the final
275      * command to be a list of the given length (but don't care about
276      * content).
277      *)
278   | TestOutputLength of seq * int
279
280     (* Run the command sequence and expect the output of the final
281      * command to be a buffer (RBufferOut), ie. string + size.
282      *)
283   | TestOutputBuffer of seq * string
284
285     (* Run the command sequence and expect the output of the final
286      * command to be a structure.
287      *)
288   | TestOutputStruct of seq * test_field_compare list
289
290     (* Run the command sequence and expect the final command (only)
291      * to fail.
292      *)
293   | TestLastFail of seq
294
295 and test_field_compare =
296   | CompareWithInt of string * int
297   | CompareWithIntOp of string * string * int
298   | CompareWithString of string * string
299   | CompareFieldsIntEq of string * string
300   | CompareFieldsStrEq of string * string
301
302 (* Test prerequisites. *)
303 and test_prereq =
304     (* Test always runs. *)
305   | Always
306
307     (* Test is currently disabled - eg. it fails, or it tests some
308      * unimplemented feature.
309      *)
310   | Disabled
311
312     (* 'string' is some C code (a function body) that should return
313      * true or false.  The test will run if the code returns true.
314      *)
315   | If of string
316
317     (* As for 'If' but the test runs _unless_ the code returns true. *)
318   | Unless of string
319
320     (* Run the test only if 'string' is available in the daemon. *)
321   | IfAvailable of string
322
323 (* Some initial scenarios for testing. *)
324 and test_init =
325     (* Do nothing, block devices could contain random stuff including
326      * LVM PVs, and some filesystems might be mounted.  This is usually
327      * a bad idea.
328      *)
329   | InitNone
330
331     (* Block devices are empty and no filesystems are mounted. *)
332   | InitEmpty
333
334     (* /dev/sda contains a single partition /dev/sda1, with random
335      * content.  /dev/sdb and /dev/sdc may have random content.
336      * No LVM.
337      *)
338   | InitPartition
339
340     (* /dev/sda contains a single partition /dev/sda1, which is formatted
341      * as ext2, empty [except for lost+found] and mounted on /.
342      * /dev/sdb and /dev/sdc may have random content.
343      * No LVM.
344      *)
345   | InitBasicFS
346
347     (* /dev/sda:
348      *   /dev/sda1 (is a PV):
349      *     /dev/VG/LV (size 8MB):
350      *       formatted as ext2, empty [except for lost+found], mounted on /
351      * /dev/sdb and /dev/sdc may have random content.
352      *)
353   | InitBasicFSonLVM
354
355     (* /dev/sdd (the ISO, see images/ directory in source)
356      * is mounted on /
357      *)
358   | InitISOFS
359
360 (* Sequence of commands for testing. *)
361 and seq = cmd list
362 and cmd = string list
363
364 (* Note about long descriptions: When referring to another
365  * action, use the format C<guestfs_other> (ie. the full name of
366  * the C function).  This will be replaced as appropriate in other
367  * language bindings.
368  *
369  * Apart from that, long descriptions are just perldoc paragraphs.
370  *)
371
372 (* Generate a random UUID (used in tests). *)
373 let uuidgen () =
374   let chan = open_process_in "uuidgen" in
375   let uuid = input_line chan in
376   (match close_process_in chan with
377    | WEXITED 0 -> ()
378    | WEXITED _ ->
379        failwith "uuidgen: process exited with non-zero status"
380    | WSIGNALED _ | WSTOPPED _ ->
381        failwith "uuidgen: process signalled or stopped by signal"
382   );
383   uuid
384
385 (* These test functions are used in the language binding tests. *)
386
387 let test_all_args = [
388   String "str";
389   OptString "optstr";
390   StringList "strlist";
391   Bool "b";
392   Int "integer";
393   Int64 "integer64";
394   FileIn "filein";
395   FileOut "fileout";
396   BufferIn "bufferin";
397 ]
398
399 let test_all_rets = [
400   (* except for RErr, which is tested thoroughly elsewhere *)
401   "test0rint",         RInt "valout";
402   "test0rint64",       RInt64 "valout";
403   "test0rbool",        RBool "valout";
404   "test0rconststring", RConstString "valout";
405   "test0rconstoptstring", RConstOptString "valout";
406   "test0rstring",      RString "valout";
407   "test0rstringlist",  RStringList "valout";
408   "test0rstruct",      RStruct ("valout", "lvm_pv");
409   "test0rstructlist",  RStructList ("valout", "lvm_pv");
410   "test0rhashtable",   RHashtable "valout";
411 ]
412
413 let test_functions = [
414   ("test0", (RErr, test_all_args), -1, [NotInFish; NotInDocs],
415    [],
416    "internal test function - do not use",
417    "\
418 This is an internal test function which is used to test whether
419 the automatically generated bindings can handle every possible
420 parameter type correctly.
421
422 It echos the contents of each parameter to stdout.
423
424 You probably don't want to call this function.");
425 ] @ List.flatten (
426   List.map (
427     fun (name, ret) ->
428       [(name, (ret, [String "val"]), -1, [NotInFish; NotInDocs],
429         [],
430         "internal test function - do not use",
431         "\
432 This is an internal test function which is used to test whether
433 the automatically generated bindings can handle every possible
434 return type correctly.
435
436 It converts string C<val> to the return type.
437
438 You probably don't want to call this function.");
439        (name ^ "err", (ret, []), -1, [NotInFish; NotInDocs],
440         [],
441         "internal test function - do not use",
442         "\
443 This is an internal test function which is used to test whether
444 the automatically generated bindings can handle every possible
445 return type correctly.
446
447 This function always returns an error.
448
449 You probably don't want to call this function.")]
450   ) test_all_rets
451 )
452
453 (* non_daemon_functions are any functions which don't get processed
454  * in the daemon, eg. functions for setting and getting local
455  * configuration values.
456  *)
457
458 let non_daemon_functions = test_functions @ [
459   ("launch", (RErr, []), -1, [FishAlias "run"],
460    [],
461    "launch the qemu subprocess",
462    "\
463 Internally libguestfs is implemented by running a virtual machine
464 using L<qemu(1)>.
465
466 You should call this after configuring the handle
467 (eg. adding drives) but before performing any actions.");
468
469   ("wait_ready", (RErr, []), -1, [NotInFish],
470    [],
471    "wait until the qemu subprocess launches (no op)",
472    "\
473 This function is a no op.
474
475 In versions of the API E<lt> 1.0.71 you had to call this function
476 just after calling C<guestfs_launch> to wait for the launch
477 to complete.  However this is no longer necessary because
478 C<guestfs_launch> now does the waiting.
479
480 If you see any calls to this function in code then you can just
481 remove them, unless you want to retain compatibility with older
482 versions of the API.");
483
484   ("kill_subprocess", (RErr, []), -1, [],
485    [],
486    "kill the qemu subprocess",
487    "\
488 This kills the qemu subprocess.  You should never need to call this.");
489
490   ("add_drive", (RErr, [String "filename"]), -1, [FishAlias "add"],
491    [],
492    "add an image to examine or modify",
493    "\
494 This function adds a virtual machine disk image C<filename> to the
495 guest.  The first time you call this function, the disk appears as IDE
496 disk 0 (C</dev/sda>) in the guest, the second time as C</dev/sdb>, and
497 so on.
498
499 You don't necessarily need to be root when using libguestfs.  However
500 you obviously do need sufficient permissions to access the filename
501 for whatever operations you want to perform (ie. read access if you
502 just want to read the image or write access if you want to modify the
503 image).
504
505 This is equivalent to the qemu parameter
506 C<-drive file=filename,cache=off,if=...>.
507
508 C<cache=off> is omitted in cases where it is not supported by
509 the underlying filesystem.
510
511 C<if=...> is set at compile time by the configuration option
512 C<./configure --with-drive-if=...>.  In the rare case where you
513 might need to change this at run time, use C<guestfs_add_drive_with_if>
514 or C<guestfs_add_drive_ro_with_if>.
515
516 Note that this call checks for the existence of C<filename>.  This
517 stops you from specifying other types of drive which are supported
518 by qemu such as C<nbd:> and C<http:> URLs.  To specify those, use
519 the general C<guestfs_config> call instead.");
520
521   ("add_cdrom", (RErr, [String "filename"]), -1, [FishAlias "cdrom"],
522    [],
523    "add a CD-ROM disk image to examine",
524    "\
525 This function adds a virtual CD-ROM disk image to the guest.
526
527 This is equivalent to the qemu parameter C<-cdrom filename>.
528
529 Notes:
530
531 =over 4
532
533 =item *
534
535 This call checks for the existence of C<filename>.  This
536 stops you from specifying other types of drive which are supported
537 by qemu such as C<nbd:> and C<http:> URLs.  To specify those, use
538 the general C<guestfs_config> call instead.
539
540 =item *
541
542 If you just want to add an ISO file (often you use this as an
543 efficient way to transfer large files into the guest), then you
544 should probably use C<guestfs_add_drive_ro> instead.
545
546 =back");
547
548   ("add_drive_ro", (RErr, [String "filename"]), -1, [FishAlias "add-ro"],
549    [],
550    "add a drive in snapshot mode (read-only)",
551    "\
552 This adds a drive in snapshot mode, making it effectively
553 read-only.
554
555 Note that writes to the device are allowed, and will be seen for
556 the duration of the guestfs handle, but they are written
557 to a temporary file which is discarded as soon as the guestfs
558 handle is closed.  We don't currently have any method to enable
559 changes to be committed, although qemu can support this.
560
561 This is equivalent to the qemu parameter
562 C<-drive file=filename,snapshot=on,if=...>.
563
564 C<if=...> is set at compile time by the configuration option
565 C<./configure --with-drive-if=...>.  In the rare case where you
566 might need to change this at run time, use C<guestfs_add_drive_with_if>
567 or C<guestfs_add_drive_ro_with_if>.
568
569 Note that this call checks for the existence of C<filename>.  This
570 stops you from specifying other types of drive which are supported
571 by qemu such as C<nbd:> and C<http:> URLs.  To specify those, use
572 the general C<guestfs_config> call instead.");
573
574   ("config", (RErr, [String "qemuparam"; OptString "qemuvalue"]), -1, [],
575    [],
576    "add qemu parameters",
577    "\
578 This can be used to add arbitrary qemu command line parameters
579 of the form C<-param value>.  Actually it's not quite arbitrary - we
580 prevent you from setting some parameters which would interfere with
581 parameters that we use.
582
583 The first character of C<param> string must be a C<-> (dash).
584
585 C<value> can be NULL.");
586
587   ("set_qemu", (RErr, [OptString "qemu"]), -1, [FishAlias "qemu"],
588    [],
589    "set the qemu binary",
590    "\
591 Set the qemu binary that we will use.
592
593 The default is chosen when the library was compiled by the
594 configure script.
595
596 You can also override this by setting the C<LIBGUESTFS_QEMU>
597 environment variable.
598
599 Setting C<qemu> to C<NULL> restores the default qemu binary.
600
601 Note that you should call this function as early as possible
602 after creating the handle.  This is because some pre-launch
603 operations depend on testing qemu features (by running C<qemu -help>).
604 If the qemu binary changes, we don't retest features, and
605 so you might see inconsistent results.  Using the environment
606 variable C<LIBGUESTFS_QEMU> is safest of all since that picks
607 the qemu binary at the same time as the handle is created.");
608
609   ("get_qemu", (RConstString "qemu", []), -1, [],
610    [InitNone, Always, TestRun (
611       [["get_qemu"]])],
612    "get the qemu binary",
613    "\
614 Return the current qemu binary.
615
616 This is always non-NULL.  If it wasn't set already, then this will
617 return the default qemu binary name.");
618
619   ("set_path", (RErr, [OptString "searchpath"]), -1, [FishAlias "path"],
620    [],
621    "set the search path",
622    "\
623 Set the path that libguestfs searches for kernel and initrd.img.
624
625 The default is C<$libdir/guestfs> unless overridden by setting
626 C<LIBGUESTFS_PATH> environment variable.
627
628 Setting C<path> to C<NULL> restores the default path.");
629
630   ("get_path", (RConstString "path", []), -1, [],
631    [InitNone, Always, TestRun (
632       [["get_path"]])],
633    "get the search path",
634    "\
635 Return the current search path.
636
637 This is always non-NULL.  If it wasn't set already, then this will
638 return the default path.");
639
640   ("set_append", (RErr, [OptString "append"]), -1, [FishAlias "append"],
641    [],
642    "add options to kernel command line",
643    "\
644 This function is used to add additional options to the
645 guest kernel command line.
646
647 The default is C<NULL> unless overridden by setting
648 C<LIBGUESTFS_APPEND> environment variable.
649
650 Setting C<append> to C<NULL> means I<no> additional options
651 are passed (libguestfs always adds a few of its own).");
652
653   ("get_append", (RConstOptString "append", []), -1, [],
654    (* This cannot be tested with the current framework.  The
655     * function can return NULL in normal operations, which the
656     * test framework interprets as an error.
657     *)
658    [],
659    "get the additional kernel options",
660    "\
661 Return the additional kernel options which are added to the
662 guest kernel command line.
663
664 If C<NULL> then no options are added.");
665
666   ("set_autosync", (RErr, [Bool "autosync"]), -1, [FishAlias "autosync"],
667    [],
668    "set autosync mode",
669    "\
670 If C<autosync> is true, this enables autosync.  Libguestfs will make a
671 best effort attempt to run C<guestfs_umount_all> followed by
672 C<guestfs_sync> when the handle is closed
673 (also if the program exits without closing handles).
674
675 This is disabled by default (except in guestfish where it is
676 enabled by default).");
677
678   ("get_autosync", (RBool "autosync", []), -1, [],
679    [InitNone, Always, TestRun (
680       [["get_autosync"]])],
681    "get autosync mode",
682    "\
683 Get the autosync flag.");
684
685   ("set_verbose", (RErr, [Bool "verbose"]), -1, [FishAlias "verbose"],
686    [],
687    "set verbose mode",
688    "\
689 If C<verbose> is true, this turns on verbose messages (to C<stderr>).
690
691 Verbose messages are disabled unless the environment variable
692 C<LIBGUESTFS_DEBUG> is defined and set to C<1>.");
693
694   ("get_verbose", (RBool "verbose", []), -1, [],
695    [],
696    "get verbose mode",
697    "\
698 This returns the verbose messages flag.");
699
700   ("is_ready", (RBool "ready", []), -1, [],
701    [InitNone, Always, TestOutputTrue (
702       [["is_ready"]])],
703    "is ready to accept commands",
704    "\
705 This returns true iff this handle is ready to accept commands
706 (in the C<READY> state).
707
708 For more information on states, see L<guestfs(3)>.");
709
710   ("is_config", (RBool "config", []), -1, [],
711    [InitNone, Always, TestOutputFalse (
712       [["is_config"]])],
713    "is in configuration state",
714    "\
715 This returns true iff this handle is being configured
716 (in the C<CONFIG> state).
717
718 For more information on states, see L<guestfs(3)>.");
719
720   ("is_launching", (RBool "launching", []), -1, [],
721    [InitNone, Always, TestOutputFalse (
722       [["is_launching"]])],
723    "is launching subprocess",
724    "\
725 This returns true iff this handle is launching the subprocess
726 (in the C<LAUNCHING> state).
727
728 For more information on states, see L<guestfs(3)>.");
729
730   ("is_busy", (RBool "busy", []), -1, [],
731    [InitNone, Always, TestOutputFalse (
732       [["is_busy"]])],
733    "is busy processing a command",
734    "\
735 This returns true iff this handle is busy processing a command
736 (in the C<BUSY> state).
737
738 For more information on states, see L<guestfs(3)>.");
739
740   ("get_state", (RInt "state", []), -1, [],
741    [],
742    "get the current state",
743    "\
744 This returns the current state as an opaque integer.  This is
745 only useful for printing debug and internal error messages.
746
747 For more information on states, see L<guestfs(3)>.");
748
749   ("set_memsize", (RErr, [Int "memsize"]), -1, [FishAlias "memsize"],
750    [InitNone, Always, TestOutputInt (
751       [["set_memsize"; "500"];
752        ["get_memsize"]], 500)],
753    "set memory allocated to the qemu subprocess",
754    "\
755 This sets the memory size in megabytes allocated to the
756 qemu subprocess.  This only has any effect if called before
757 C<guestfs_launch>.
758
759 You can also change this by setting the environment
760 variable C<LIBGUESTFS_MEMSIZE> before the handle is
761 created.
762
763 For more information on the architecture of libguestfs,
764 see L<guestfs(3)>.");
765
766   ("get_memsize", (RInt "memsize", []), -1, [],
767    [InitNone, Always, TestOutputIntOp (
768       [["get_memsize"]], ">=", 256)],
769    "get memory allocated to the qemu subprocess",
770    "\
771 This gets the memory size in megabytes allocated to the
772 qemu subprocess.
773
774 If C<guestfs_set_memsize> was not called
775 on this handle, and if C<LIBGUESTFS_MEMSIZE> was not set,
776 then this returns the compiled-in default value for memsize.
777
778 For more information on the architecture of libguestfs,
779 see L<guestfs(3)>.");
780
781   ("get_pid", (RInt "pid", []), -1, [FishAlias "pid"],
782    [InitNone, Always, TestOutputIntOp (
783       [["get_pid"]], ">=", 1)],
784    "get PID of qemu subprocess",
785    "\
786 Return the process ID of the qemu subprocess.  If there is no
787 qemu subprocess, then this will return an error.
788
789 This is an internal call used for debugging and testing.");
790
791   ("version", (RStruct ("version", "version"), []), -1, [],
792    [InitNone, Always, TestOutputStruct (
793       [["version"]], [CompareWithInt ("major", 1)])],
794    "get the library version number",
795    "\
796 Return the libguestfs version number that the program is linked
797 against.
798
799 Note that because of dynamic linking this is not necessarily
800 the version of libguestfs that you compiled against.  You can
801 compile the program, and then at runtime dynamically link
802 against a completely different C<libguestfs.so> library.
803
804 This call was added in version C<1.0.58>.  In previous
805 versions of libguestfs there was no way to get the version
806 number.  From C code you can use dynamic linker functions
807 to find out if this symbol exists (if it doesn't, then
808 it's an earlier version).
809
810 The call returns a structure with four elements.  The first
811 three (C<major>, C<minor> and C<release>) are numbers and
812 correspond to the usual version triplet.  The fourth element
813 (C<extra>) is a string and is normally empty, but may be
814 used for distro-specific information.
815
816 To construct the original version string:
817 C<$major.$minor.$release$extra>
818
819 See also: L<guestfs(3)/LIBGUESTFS VERSION NUMBERS>.
820
821 I<Note:> Don't use this call to test for availability
822 of features.  In enterprise distributions we backport
823 features from later versions into earlier versions,
824 making this an unreliable way to test for features.
825 Use C<guestfs_available> instead.");
826
827   ("set_selinux", (RErr, [Bool "selinux"]), -1, [FishAlias "selinux"],
828    [InitNone, Always, TestOutputTrue (
829       [["set_selinux"; "true"];
830        ["get_selinux"]])],
831    "set SELinux enabled or disabled at appliance boot",
832    "\
833 This sets the selinux flag that is passed to the appliance
834 at boot time.  The default is C<selinux=0> (disabled).
835
836 Note that if SELinux is enabled, it is always in
837 Permissive mode (C<enforcing=0>).
838
839 For more information on the architecture of libguestfs,
840 see L<guestfs(3)>.");
841
842   ("get_selinux", (RBool "selinux", []), -1, [],
843    [],
844    "get SELinux enabled flag",
845    "\
846 This returns the current setting of the selinux flag which
847 is passed to the appliance at boot time.  See C<guestfs_set_selinux>.
848
849 For more information on the architecture of libguestfs,
850 see L<guestfs(3)>.");
851
852   ("set_trace", (RErr, [Bool "trace"]), -1, [FishAlias "trace"],
853    [InitNone, Always, TestOutputFalse (
854       [["set_trace"; "false"];
855        ["get_trace"]])],
856    "enable or disable command traces",
857    "\
858 If the command trace flag is set to 1, then commands are
859 printed on stdout before they are executed in a format
860 which is very similar to the one used by guestfish.  In
861 other words, you can run a program with this enabled, and
862 you will get out a script which you can feed to guestfish
863 to perform the same set of actions.
864
865 If you want to trace C API calls into libguestfs (and
866 other libraries) then possibly a better way is to use
867 the external ltrace(1) command.
868
869 Command traces are disabled unless the environment variable
870 C<LIBGUESTFS_TRACE> is defined and set to C<1>.");
871
872   ("get_trace", (RBool "trace", []), -1, [],
873    [],
874    "get command trace enabled flag",
875    "\
876 Return the command trace flag.");
877
878   ("set_direct", (RErr, [Bool "direct"]), -1, [FishAlias "direct"],
879    [InitNone, Always, TestOutputFalse (
880       [["set_direct"; "false"];
881        ["get_direct"]])],
882    "enable or disable direct appliance mode",
883    "\
884 If the direct appliance mode flag is enabled, then stdin and
885 stdout are passed directly through to the appliance once it
886 is launched.
887
888 One consequence of this is that log messages aren't caught
889 by the library and handled by C<guestfs_set_log_message_callback>,
890 but go straight to stdout.
891
892 You probably don't want to use this unless you know what you
893 are doing.
894
895 The default is disabled.");
896
897   ("get_direct", (RBool "direct", []), -1, [],
898    [],
899    "get direct appliance mode flag",
900    "\
901 Return the direct appliance mode flag.");
902
903   ("set_recovery_proc", (RErr, [Bool "recoveryproc"]), -1, [FishAlias "recovery-proc"],
904    [InitNone, Always, TestOutputTrue (
905       [["set_recovery_proc"; "true"];
906        ["get_recovery_proc"]])],
907    "enable or disable the recovery process",
908    "\
909 If this is called with the parameter C<false> then
910 C<guestfs_launch> does not create a recovery process.  The
911 purpose of the recovery process is to stop runaway qemu
912 processes in the case where the main program aborts abruptly.
913
914 This only has any effect if called before C<guestfs_launch>,
915 and the default is true.
916
917 About the only time when you would want to disable this is
918 if the main process will fork itself into the background
919 (\"daemonize\" itself).  In this case the recovery process
920 thinks that the main program has disappeared and so kills
921 qemu, which is not very helpful.");
922
923   ("get_recovery_proc", (RBool "recoveryproc", []), -1, [],
924    [],
925    "get recovery process enabled flag",
926    "\
927 Return the recovery process enabled flag.");
928
929   ("add_drive_with_if", (RErr, [String "filename"; String "iface"]), -1, [],
930    [],
931    "add a drive specifying the QEMU block emulation to use",
932    "\
933 This is the same as C<guestfs_add_drive> but it allows you
934 to specify the QEMU interface emulation to use at run time.");
935
936   ("add_drive_ro_with_if", (RErr, [String "filename"; String "iface"]), -1, [],
937    [],
938    "add a drive read-only specifying the QEMU block emulation to use",
939    "\
940 This is the same as C<guestfs_add_drive_ro> but it allows you
941 to specify the QEMU interface emulation to use at run time.");
942
943 ]
944
945 (* daemon_functions are any functions which cause some action
946  * to take place in the daemon.
947  *)
948
949 let daemon_functions = [
950   ("mount", (RErr, [Device "device"; String "mountpoint"]), 1, [],
951    [InitEmpty, Always, TestOutput (
952       [["part_disk"; "/dev/sda"; "mbr"];
953        ["mkfs"; "ext2"; "/dev/sda1"];
954        ["mount"; "/dev/sda1"; "/"];
955        ["write"; "/new"; "new file contents"];
956        ["cat"; "/new"]], "new file contents")],
957    "mount a guest disk at a position in the filesystem",
958    "\
959 Mount a guest disk at a position in the filesystem.  Block devices
960 are named C</dev/sda>, C</dev/sdb> and so on, as they were added to
961 the guest.  If those block devices contain partitions, they will have
962 the usual names (eg. C</dev/sda1>).  Also LVM C</dev/VG/LV>-style
963 names can be used.
964
965 The rules are the same as for L<mount(2)>:  A filesystem must
966 first be mounted on C</> before others can be mounted.  Other
967 filesystems can only be mounted on directories which already
968 exist.
969
970 The mounted filesystem is writable, if we have sufficient permissions
971 on the underlying device.
972
973 B<Important note:>
974 When you use this call, the filesystem options C<sync> and C<noatime>
975 are set implicitly.  This was originally done because we thought it
976 would improve reliability, but it turns out that I<-o sync> has a
977 very large negative performance impact and negligible effect on
978 reliability.  Therefore we recommend that you avoid using
979 C<guestfs_mount> in any code that needs performance, and instead
980 use C<guestfs_mount_options> (use an empty string for the first
981 parameter if you don't want any options).");
982
983   ("sync", (RErr, []), 2, [],
984    [ InitEmpty, Always, TestRun [["sync"]]],
985    "sync disks, writes are flushed through to the disk image",
986    "\
987 This syncs the disk, so that any writes are flushed through to the
988 underlying disk image.
989
990 You should always call this if you have modified a disk image, before
991 closing the handle.");
992
993   ("touch", (RErr, [Pathname "path"]), 3, [],
994    [InitBasicFS, Always, TestOutputTrue (
995       [["touch"; "/new"];
996        ["exists"; "/new"]])],
997    "update file timestamps or create a new file",
998    "\
999 Touch acts like the L<touch(1)> command.  It can be used to
1000 update the timestamps on a file, or, if the file does not exist,
1001 to create a new zero-length file.
1002
1003 This command only works on regular files, and will fail on other
1004 file types such as directories, symbolic links, block special etc.");
1005
1006   ("cat", (RString "content", [Pathname "path"]), 4, [ProtocolLimitWarning],
1007    [InitISOFS, Always, TestOutput (
1008       [["cat"; "/known-2"]], "abcdef\n")],
1009    "list the contents of a file",
1010    "\
1011 Return the contents of the file named C<path>.
1012
1013 Note that this function cannot correctly handle binary files
1014 (specifically, files containing C<\\0> character which is treated
1015 as end of string).  For those you need to use the C<guestfs_read_file>
1016 or C<guestfs_download> functions which have a more complex interface.");
1017
1018   ("ll", (RString "listing", [Pathname "directory"]), 5, [],
1019    [], (* XXX Tricky to test because it depends on the exact format
1020         * of the 'ls -l' command, which changes between F10 and F11.
1021         *)
1022    "list the files in a directory (long format)",
1023    "\
1024 List the files in C<directory> (relative to the root directory,
1025 there is no cwd) in the format of 'ls -la'.
1026
1027 This command is mostly useful for interactive sessions.  It
1028 is I<not> intended that you try to parse the output string.");
1029
1030   ("ls", (RStringList "listing", [Pathname "directory"]), 6, [],
1031    [InitBasicFS, Always, TestOutputList (
1032       [["touch"; "/new"];
1033        ["touch"; "/newer"];
1034        ["touch"; "/newest"];
1035        ["ls"; "/"]], ["lost+found"; "new"; "newer"; "newest"])],
1036    "list the files in a directory",
1037    "\
1038 List the files in C<directory> (relative to the root directory,
1039 there is no cwd).  The '.' and '..' entries are not returned, but
1040 hidden files are shown.
1041
1042 This command is mostly useful for interactive sessions.  Programs
1043 should probably use C<guestfs_readdir> instead.");
1044
1045   ("list_devices", (RStringList "devices", []), 7, [],
1046    [InitEmpty, Always, TestOutputListOfDevices (
1047       [["list_devices"]], ["/dev/sda"; "/dev/sdb"; "/dev/sdc"; "/dev/sdd"])],
1048    "list the block devices",
1049    "\
1050 List all the block devices.
1051
1052 The full block device names are returned, eg. C</dev/sda>");
1053
1054   ("list_partitions", (RStringList "partitions", []), 8, [],
1055    [InitBasicFS, Always, TestOutputListOfDevices (
1056       [["list_partitions"]], ["/dev/sda1"]);
1057     InitEmpty, Always, TestOutputListOfDevices (
1058       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1059        ["list_partitions"]], ["/dev/sda1"; "/dev/sda2"; "/dev/sda3"])],
1060    "list the partitions",
1061    "\
1062 List all the partitions detected on all block devices.
1063
1064 The full partition device names are returned, eg. C</dev/sda1>
1065
1066 This does not return logical volumes.  For that you will need to
1067 call C<guestfs_lvs>.");
1068
1069   ("pvs", (RStringList "physvols", []), 9, [Optional "lvm2"],
1070    [InitBasicFSonLVM, Always, TestOutputListOfDevices (
1071       [["pvs"]], ["/dev/sda1"]);
1072     InitEmpty, Always, TestOutputListOfDevices (
1073       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1074        ["pvcreate"; "/dev/sda1"];
1075        ["pvcreate"; "/dev/sda2"];
1076        ["pvcreate"; "/dev/sda3"];
1077        ["pvs"]], ["/dev/sda1"; "/dev/sda2"; "/dev/sda3"])],
1078    "list the LVM physical volumes (PVs)",
1079    "\
1080 List all the physical volumes detected.  This is the equivalent
1081 of the L<pvs(8)> command.
1082
1083 This returns a list of just the device names that contain
1084 PVs (eg. C</dev/sda2>).
1085
1086 See also C<guestfs_pvs_full>.");
1087
1088   ("vgs", (RStringList "volgroups", []), 10, [Optional "lvm2"],
1089    [InitBasicFSonLVM, Always, TestOutputList (
1090       [["vgs"]], ["VG"]);
1091     InitEmpty, Always, TestOutputList (
1092       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1093        ["pvcreate"; "/dev/sda1"];
1094        ["pvcreate"; "/dev/sda2"];
1095        ["pvcreate"; "/dev/sda3"];
1096        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1097        ["vgcreate"; "VG2"; "/dev/sda3"];
1098        ["vgs"]], ["VG1"; "VG2"])],
1099    "list the LVM volume groups (VGs)",
1100    "\
1101 List all the volumes groups detected.  This is the equivalent
1102 of the L<vgs(8)> command.
1103
1104 This returns a list of just the volume group names that were
1105 detected (eg. C<VolGroup00>).
1106
1107 See also C<guestfs_vgs_full>.");
1108
1109   ("lvs", (RStringList "logvols", []), 11, [Optional "lvm2"],
1110    [InitBasicFSonLVM, Always, TestOutputList (
1111       [["lvs"]], ["/dev/VG/LV"]);
1112     InitEmpty, Always, TestOutputList (
1113       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1114        ["pvcreate"; "/dev/sda1"];
1115        ["pvcreate"; "/dev/sda2"];
1116        ["pvcreate"; "/dev/sda3"];
1117        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1118        ["vgcreate"; "VG2"; "/dev/sda3"];
1119        ["lvcreate"; "LV1"; "VG1"; "50"];
1120        ["lvcreate"; "LV2"; "VG1"; "50"];
1121        ["lvcreate"; "LV3"; "VG2"; "50"];
1122        ["lvs"]], ["/dev/VG1/LV1"; "/dev/VG1/LV2"; "/dev/VG2/LV3"])],
1123    "list the LVM logical volumes (LVs)",
1124    "\
1125 List all the logical volumes detected.  This is the equivalent
1126 of the L<lvs(8)> command.
1127
1128 This returns a list of the logical volume device names
1129 (eg. C</dev/VolGroup00/LogVol00>).
1130
1131 See also C<guestfs_lvs_full>.");
1132
1133   ("pvs_full", (RStructList ("physvols", "lvm_pv"), []), 12, [Optional "lvm2"],
1134    [], (* XXX how to test? *)
1135    "list the LVM physical volumes (PVs)",
1136    "\
1137 List all the physical volumes detected.  This is the equivalent
1138 of the L<pvs(8)> command.  The \"full\" version includes all fields.");
1139
1140   ("vgs_full", (RStructList ("volgroups", "lvm_vg"), []), 13, [Optional "lvm2"],
1141    [], (* XXX how to test? *)
1142    "list the LVM volume groups (VGs)",
1143    "\
1144 List all the volumes groups detected.  This is the equivalent
1145 of the L<vgs(8)> command.  The \"full\" version includes all fields.");
1146
1147   ("lvs_full", (RStructList ("logvols", "lvm_lv"), []), 14, [Optional "lvm2"],
1148    [], (* XXX how to test? *)
1149    "list the LVM logical volumes (LVs)",
1150    "\
1151 List all the logical volumes detected.  This is the equivalent
1152 of the L<lvs(8)> command.  The \"full\" version includes all fields.");
1153
1154   ("read_lines", (RStringList "lines", [Pathname "path"]), 15, [],
1155    [InitISOFS, Always, TestOutputList (
1156       [["read_lines"; "/known-4"]], ["abc"; "def"; "ghi"]);
1157     InitISOFS, Always, TestOutputList (
1158       [["read_lines"; "/empty"]], [])],
1159    "read file as lines",
1160    "\
1161 Return the contents of the file named C<path>.
1162
1163 The file contents are returned as a list of lines.  Trailing
1164 C<LF> and C<CRLF> character sequences are I<not> returned.
1165
1166 Note that this function cannot correctly handle binary files
1167 (specifically, files containing C<\\0> character which is treated
1168 as end of line).  For those you need to use the C<guestfs_read_file>
1169 function which has a more complex interface.");
1170
1171   ("aug_init", (RErr, [Pathname "root"; Int "flags"]), 16, [Optional "augeas"],
1172    [], (* XXX Augeas code needs tests. *)
1173    "create a new Augeas handle",
1174    "\
1175 Create a new Augeas handle for editing configuration files.
1176 If there was any previous Augeas handle associated with this
1177 guestfs session, then it is closed.
1178
1179 You must call this before using any other C<guestfs_aug_*>
1180 commands.
1181
1182 C<root> is the filesystem root.  C<root> must not be NULL,
1183 use C</> instead.
1184
1185 The flags are the same as the flags defined in
1186 E<lt>augeas.hE<gt>, the logical I<or> of the following
1187 integers:
1188
1189 =over 4
1190
1191 =item C<AUG_SAVE_BACKUP> = 1
1192
1193 Keep the original file with a C<.augsave> extension.
1194
1195 =item C<AUG_SAVE_NEWFILE> = 2
1196
1197 Save changes into a file with extension C<.augnew>, and
1198 do not overwrite original.  Overrides C<AUG_SAVE_BACKUP>.
1199
1200 =item C<AUG_TYPE_CHECK> = 4
1201
1202 Typecheck lenses (can be expensive).
1203
1204 =item C<AUG_NO_STDINC> = 8
1205
1206 Do not use standard load path for modules.
1207
1208 =item C<AUG_SAVE_NOOP> = 16
1209
1210 Make save a no-op, just record what would have been changed.
1211
1212 =item C<AUG_NO_LOAD> = 32
1213
1214 Do not load the tree in C<guestfs_aug_init>.
1215
1216 =back
1217
1218 To close the handle, you can call C<guestfs_aug_close>.
1219
1220 To find out more about Augeas, see L<http://augeas.net/>.");
1221
1222   ("aug_close", (RErr, []), 26, [Optional "augeas"],
1223    [], (* XXX Augeas code needs tests. *)
1224    "close the current Augeas handle",
1225    "\
1226 Close the current Augeas handle and free up any resources
1227 used by it.  After calling this, you have to call
1228 C<guestfs_aug_init> again before you can use any other
1229 Augeas functions.");
1230
1231   ("aug_defvar", (RInt "nrnodes", [String "name"; OptString "expr"]), 17, [Optional "augeas"],
1232    [], (* XXX Augeas code needs tests. *)
1233    "define an Augeas variable",
1234    "\
1235 Defines an Augeas variable C<name> whose value is the result
1236 of evaluating C<expr>.  If C<expr> is NULL, then C<name> is
1237 undefined.
1238
1239 On success this returns the number of nodes in C<expr>, or
1240 C<0> if C<expr> evaluates to something which is not a nodeset.");
1241
1242   ("aug_defnode", (RStruct ("nrnodescreated", "int_bool"), [String "name"; String "expr"; String "val"]), 18, [Optional "augeas"],
1243    [], (* XXX Augeas code needs tests. *)
1244    "define an Augeas node",
1245    "\
1246 Defines a variable C<name> whose value is the result of
1247 evaluating C<expr>.
1248
1249 If C<expr> evaluates to an empty nodeset, a node is created,
1250 equivalent to calling C<guestfs_aug_set> C<expr>, C<value>.
1251 C<name> will be the nodeset containing that single node.
1252
1253 On success this returns a pair containing the
1254 number of nodes in the nodeset, and a boolean flag
1255 if a node was created.");
1256
1257   ("aug_get", (RString "val", [String "augpath"]), 19, [Optional "augeas"],
1258    [], (* XXX Augeas code needs tests. *)
1259    "look up the value of an Augeas path",
1260    "\
1261 Look up the value associated with C<path>.  If C<path>
1262 matches exactly one node, the C<value> is returned.");
1263
1264   ("aug_set", (RErr, [String "augpath"; String "val"]), 20, [Optional "augeas"],
1265    [], (* XXX Augeas code needs tests. *)
1266    "set Augeas path to value",
1267    "\
1268 Set the value associated with C<path> to C<val>.
1269
1270 In the Augeas API, it is possible to clear a node by setting
1271 the value to NULL.  Due to an oversight in the libguestfs API
1272 you cannot do that with this call.  Instead you must use the
1273 C<guestfs_aug_clear> call.");
1274
1275   ("aug_insert", (RErr, [String "augpath"; String "label"; Bool "before"]), 21, [Optional "augeas"],
1276    [], (* XXX Augeas code needs tests. *)
1277    "insert a sibling Augeas node",
1278    "\
1279 Create a new sibling C<label> for C<path>, inserting it into
1280 the tree before or after C<path> (depending on the boolean
1281 flag C<before>).
1282
1283 C<path> must match exactly one existing node in the tree, and
1284 C<label> must be a label, ie. not contain C</>, C<*> or end
1285 with a bracketed index C<[N]>.");
1286
1287   ("aug_rm", (RInt "nrnodes", [String "augpath"]), 22, [Optional "augeas"],
1288    [], (* XXX Augeas code needs tests. *)
1289    "remove an Augeas path",
1290    "\
1291 Remove C<path> and all of its children.
1292
1293 On success this returns the number of entries which were removed.");
1294
1295   ("aug_mv", (RErr, [String "src"; String "dest"]), 23, [Optional "augeas"],
1296    [], (* XXX Augeas code needs tests. *)
1297    "move Augeas node",
1298    "\
1299 Move the node C<src> to C<dest>.  C<src> must match exactly
1300 one node.  C<dest> is overwritten if it exists.");
1301
1302   ("aug_match", (RStringList "matches", [String "augpath"]), 24, [Optional "augeas"],
1303    [], (* XXX Augeas code needs tests. *)
1304    "return Augeas nodes which match augpath",
1305    "\
1306 Returns a list of paths which match the path expression C<path>.
1307 The returned paths are sufficiently qualified so that they match
1308 exactly one node in the current tree.");
1309
1310   ("aug_save", (RErr, []), 25, [Optional "augeas"],
1311    [], (* XXX Augeas code needs tests. *)
1312    "write all pending Augeas changes to disk",
1313    "\
1314 This writes all pending changes to disk.
1315
1316 The flags which were passed to C<guestfs_aug_init> affect exactly
1317 how files are saved.");
1318
1319   ("aug_load", (RErr, []), 27, [Optional "augeas"],
1320    [], (* XXX Augeas code needs tests. *)
1321    "load files into the tree",
1322    "\
1323 Load files into the tree.
1324
1325 See C<aug_load> in the Augeas documentation for the full gory
1326 details.");
1327
1328   ("aug_ls", (RStringList "matches", [String "augpath"]), 28, [Optional "augeas"],
1329    [], (* XXX Augeas code needs tests. *)
1330    "list Augeas nodes under augpath",
1331    "\
1332 This is just a shortcut for listing C<guestfs_aug_match>
1333 C<path/*> and sorting the resulting nodes into alphabetical order.");
1334
1335   ("rm", (RErr, [Pathname "path"]), 29, [],
1336    [InitBasicFS, Always, TestRun
1337       [["touch"; "/new"];
1338        ["rm"; "/new"]];
1339     InitBasicFS, Always, TestLastFail
1340       [["rm"; "/new"]];
1341     InitBasicFS, Always, TestLastFail
1342       [["mkdir"; "/new"];
1343        ["rm"; "/new"]]],
1344    "remove a file",
1345    "\
1346 Remove the single file C<path>.");
1347
1348   ("rmdir", (RErr, [Pathname "path"]), 30, [],
1349    [InitBasicFS, Always, TestRun
1350       [["mkdir"; "/new"];
1351        ["rmdir"; "/new"]];
1352     InitBasicFS, Always, TestLastFail
1353       [["rmdir"; "/new"]];
1354     InitBasicFS, Always, TestLastFail
1355       [["touch"; "/new"];
1356        ["rmdir"; "/new"]]],
1357    "remove a directory",
1358    "\
1359 Remove the single directory C<path>.");
1360
1361   ("rm_rf", (RErr, [Pathname "path"]), 31, [],
1362    [InitBasicFS, Always, TestOutputFalse
1363       [["mkdir"; "/new"];
1364        ["mkdir"; "/new/foo"];
1365        ["touch"; "/new/foo/bar"];
1366        ["rm_rf"; "/new"];
1367        ["exists"; "/new"]]],
1368    "remove a file or directory recursively",
1369    "\
1370 Remove the file or directory C<path>, recursively removing the
1371 contents if its a directory.  This is like the C<rm -rf> shell
1372 command.");
1373
1374   ("mkdir", (RErr, [Pathname "path"]), 32, [],
1375    [InitBasicFS, Always, TestOutputTrue
1376       [["mkdir"; "/new"];
1377        ["is_dir"; "/new"]];
1378     InitBasicFS, Always, TestLastFail
1379       [["mkdir"; "/new/foo/bar"]]],
1380    "create a directory",
1381    "\
1382 Create a directory named C<path>.");
1383
1384   ("mkdir_p", (RErr, [Pathname "path"]), 33, [],
1385    [InitBasicFS, Always, TestOutputTrue
1386       [["mkdir_p"; "/new/foo/bar"];
1387        ["is_dir"; "/new/foo/bar"]];
1388     InitBasicFS, Always, TestOutputTrue
1389       [["mkdir_p"; "/new/foo/bar"];
1390        ["is_dir"; "/new/foo"]];
1391     InitBasicFS, Always, TestOutputTrue
1392       [["mkdir_p"; "/new/foo/bar"];
1393        ["is_dir"; "/new"]];
1394     (* Regression tests for RHBZ#503133: *)
1395     InitBasicFS, Always, TestRun
1396       [["mkdir"; "/new"];
1397        ["mkdir_p"; "/new"]];
1398     InitBasicFS, Always, TestLastFail
1399       [["touch"; "/new"];
1400        ["mkdir_p"; "/new"]]],
1401    "create a directory and parents",
1402    "\
1403 Create a directory named C<path>, creating any parent directories
1404 as necessary.  This is like the C<mkdir -p> shell command.");
1405
1406   ("chmod", (RErr, [Int "mode"; Pathname "path"]), 34, [],
1407    [], (* XXX Need stat command to test *)
1408    "change file mode",
1409    "\
1410 Change the mode (permissions) of C<path> to C<mode>.  Only
1411 numeric modes are supported.
1412
1413 I<Note>: When using this command from guestfish, C<mode>
1414 by default would be decimal, unless you prefix it with
1415 C<0> to get octal, ie. use C<0700> not C<700>.
1416
1417 The mode actually set is affected by the umask.");
1418
1419   ("chown", (RErr, [Int "owner"; Int "group"; Pathname "path"]), 35, [],
1420    [], (* XXX Need stat command to test *)
1421    "change file owner and group",
1422    "\
1423 Change the file owner to C<owner> and group to C<group>.
1424
1425 Only numeric uid and gid are supported.  If you want to use
1426 names, you will need to locate and parse the password file
1427 yourself (Augeas support makes this relatively easy).");
1428
1429   ("exists", (RBool "existsflag", [Pathname "path"]), 36, [],
1430    [InitISOFS, Always, TestOutputTrue (
1431       [["exists"; "/empty"]]);
1432     InitISOFS, Always, TestOutputTrue (
1433       [["exists"; "/directory"]])],
1434    "test if file or directory exists",
1435    "\
1436 This returns C<true> if and only if there is a file, directory
1437 (or anything) with the given C<path> name.
1438
1439 See also C<guestfs_is_file>, C<guestfs_is_dir>, C<guestfs_stat>.");
1440
1441   ("is_file", (RBool "fileflag", [Pathname "path"]), 37, [],
1442    [InitISOFS, Always, TestOutputTrue (
1443       [["is_file"; "/known-1"]]);
1444     InitISOFS, Always, TestOutputFalse (
1445       [["is_file"; "/directory"]])],
1446    "test if file exists",
1447    "\
1448 This returns C<true> if and only if there is a file
1449 with the given C<path> name.  Note that it returns false for
1450 other objects like directories.
1451
1452 See also C<guestfs_stat>.");
1453
1454   ("is_dir", (RBool "dirflag", [Pathname "path"]), 38, [],
1455    [InitISOFS, Always, TestOutputFalse (
1456       [["is_dir"; "/known-3"]]);
1457     InitISOFS, Always, TestOutputTrue (
1458       [["is_dir"; "/directory"]])],
1459    "test if file exists",
1460    "\
1461 This returns C<true> if and only if there is a directory
1462 with the given C<path> name.  Note that it returns false for
1463 other objects like files.
1464
1465 See also C<guestfs_stat>.");
1466
1467   ("pvcreate", (RErr, [Device "device"]), 39, [Optional "lvm2"],
1468    [InitEmpty, Always, TestOutputListOfDevices (
1469       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1470        ["pvcreate"; "/dev/sda1"];
1471        ["pvcreate"; "/dev/sda2"];
1472        ["pvcreate"; "/dev/sda3"];
1473        ["pvs"]], ["/dev/sda1"; "/dev/sda2"; "/dev/sda3"])],
1474    "create an LVM physical volume",
1475    "\
1476 This creates an LVM physical volume on the named C<device>,
1477 where C<device> should usually be a partition name such
1478 as C</dev/sda1>.");
1479
1480   ("vgcreate", (RErr, [String "volgroup"; DeviceList "physvols"]), 40, [Optional "lvm2"],
1481    [InitEmpty, Always, TestOutputList (
1482       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1483        ["pvcreate"; "/dev/sda1"];
1484        ["pvcreate"; "/dev/sda2"];
1485        ["pvcreate"; "/dev/sda3"];
1486        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1487        ["vgcreate"; "VG2"; "/dev/sda3"];
1488        ["vgs"]], ["VG1"; "VG2"])],
1489    "create an LVM volume group",
1490    "\
1491 This creates an LVM volume group called C<volgroup>
1492 from the non-empty list of physical volumes C<physvols>.");
1493
1494   ("lvcreate", (RErr, [String "logvol"; String "volgroup"; Int "mbytes"]), 41, [Optional "lvm2"],
1495    [InitEmpty, Always, TestOutputList (
1496       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1497        ["pvcreate"; "/dev/sda1"];
1498        ["pvcreate"; "/dev/sda2"];
1499        ["pvcreate"; "/dev/sda3"];
1500        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1501        ["vgcreate"; "VG2"; "/dev/sda3"];
1502        ["lvcreate"; "LV1"; "VG1"; "50"];
1503        ["lvcreate"; "LV2"; "VG1"; "50"];
1504        ["lvcreate"; "LV3"; "VG2"; "50"];
1505        ["lvcreate"; "LV4"; "VG2"; "50"];
1506        ["lvcreate"; "LV5"; "VG2"; "50"];
1507        ["lvs"]],
1508       ["/dev/VG1/LV1"; "/dev/VG1/LV2";
1509        "/dev/VG2/LV3"; "/dev/VG2/LV4"; "/dev/VG2/LV5"])],
1510    "create an LVM logical volume",
1511    "\
1512 This creates an LVM logical volume called C<logvol>
1513 on the volume group C<volgroup>, with C<size> megabytes.");
1514
1515   ("mkfs", (RErr, [String "fstype"; Device "device"]), 42, [],
1516    [InitEmpty, Always, TestOutput (
1517       [["part_disk"; "/dev/sda"; "mbr"];
1518        ["mkfs"; "ext2"; "/dev/sda1"];
1519        ["mount_options"; ""; "/dev/sda1"; "/"];
1520        ["write"; "/new"; "new file contents"];
1521        ["cat"; "/new"]], "new file contents")],
1522    "make a filesystem",
1523    "\
1524 This creates a filesystem on C<device> (usually a partition
1525 or LVM logical volume).  The filesystem type is C<fstype>, for
1526 example C<ext3>.");
1527
1528   ("sfdisk", (RErr, [Device "device";
1529                      Int "cyls"; Int "heads"; Int "sectors";
1530                      StringList "lines"]), 43, [DangerWillRobinson],
1531    [],
1532    "create partitions on a block device",
1533    "\
1534 This is a direct interface to the L<sfdisk(8)> program for creating
1535 partitions on block devices.
1536
1537 C<device> should be a block device, for example C</dev/sda>.
1538
1539 C<cyls>, C<heads> and C<sectors> are the number of cylinders, heads
1540 and sectors on the device, which are passed directly to sfdisk as
1541 the I<-C>, I<-H> and I<-S> parameters.  If you pass C<0> for any
1542 of these, then the corresponding parameter is omitted.  Usually for
1543 'large' disks, you can just pass C<0> for these, but for small
1544 (floppy-sized) disks, sfdisk (or rather, the kernel) cannot work
1545 out the right geometry and you will need to tell it.
1546
1547 C<lines> is a list of lines that we feed to C<sfdisk>.  For more
1548 information refer to the L<sfdisk(8)> manpage.
1549
1550 To create a single partition occupying the whole disk, you would
1551 pass C<lines> as a single element list, when the single element being
1552 the string C<,> (comma).
1553
1554 See also: C<guestfs_sfdisk_l>, C<guestfs_sfdisk_N>,
1555 C<guestfs_part_init>");
1556
1557   ("write_file", (RErr, [Pathname "path"; String "content"; Int "size"]), 44, [ProtocolLimitWarning; DeprecatedBy "write"],
1558    (* Regression test for RHBZ#597135. *)
1559    [InitBasicFS, Always, TestLastFail
1560       [["write_file"; "/new"; "abc"; "10000"]]],
1561    "create a file",
1562    "\
1563 This call creates a file called C<path>.  The contents of the
1564 file is the string C<content> (which can contain any 8 bit data),
1565 with length C<size>.
1566
1567 As a special case, if C<size> is C<0>
1568 then the length is calculated using C<strlen> (so in this case
1569 the content cannot contain embedded ASCII NULs).
1570
1571 I<NB.> Owing to a bug, writing content containing ASCII NUL
1572 characters does I<not> work, even if the length is specified.");
1573
1574   ("umount", (RErr, [String "pathordevice"]), 45, [FishAlias "unmount"],
1575    [InitEmpty, Always, TestOutputListOfDevices (
1576       [["part_disk"; "/dev/sda"; "mbr"];
1577        ["mkfs"; "ext2"; "/dev/sda1"];
1578        ["mount_options"; ""; "/dev/sda1"; "/"];
1579        ["mounts"]], ["/dev/sda1"]);
1580     InitEmpty, Always, TestOutputList (
1581       [["part_disk"; "/dev/sda"; "mbr"];
1582        ["mkfs"; "ext2"; "/dev/sda1"];
1583        ["mount_options"; ""; "/dev/sda1"; "/"];
1584        ["umount"; "/"];
1585        ["mounts"]], [])],
1586    "unmount a filesystem",
1587    "\
1588 This unmounts the given filesystem.  The filesystem may be
1589 specified either by its mountpoint (path) or the device which
1590 contains the filesystem.");
1591
1592   ("mounts", (RStringList "devices", []), 46, [],
1593    [InitBasicFS, Always, TestOutputListOfDevices (
1594       [["mounts"]], ["/dev/sda1"])],
1595    "show mounted filesystems",
1596    "\
1597 This returns the list of currently mounted filesystems.  It returns
1598 the list of devices (eg. C</dev/sda1>, C</dev/VG/LV>).
1599
1600 Some internal mounts are not shown.
1601
1602 See also: C<guestfs_mountpoints>");
1603
1604   ("umount_all", (RErr, []), 47, [FishAlias "unmount-all"],
1605    [InitBasicFS, Always, TestOutputList (
1606       [["umount_all"];
1607        ["mounts"]], []);
1608     (* check that umount_all can unmount nested mounts correctly: *)
1609     InitEmpty, Always, TestOutputList (
1610       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1611        ["mkfs"; "ext2"; "/dev/sda1"];
1612        ["mkfs"; "ext2"; "/dev/sda2"];
1613        ["mkfs"; "ext2"; "/dev/sda3"];
1614        ["mount_options"; ""; "/dev/sda1"; "/"];
1615        ["mkdir"; "/mp1"];
1616        ["mount_options"; ""; "/dev/sda2"; "/mp1"];
1617        ["mkdir"; "/mp1/mp2"];
1618        ["mount_options"; ""; "/dev/sda3"; "/mp1/mp2"];
1619        ["mkdir"; "/mp1/mp2/mp3"];
1620        ["umount_all"];
1621        ["mounts"]], [])],
1622    "unmount all filesystems",
1623    "\
1624 This unmounts all mounted filesystems.
1625
1626 Some internal mounts are not unmounted by this call.");
1627
1628   ("lvm_remove_all", (RErr, []), 48, [DangerWillRobinson; Optional "lvm2"],
1629    [],
1630    "remove all LVM LVs, VGs and PVs",
1631    "\
1632 This command removes all LVM logical volumes, volume groups
1633 and physical volumes.");
1634
1635   ("file", (RString "description", [Dev_or_Path "path"]), 49, [],
1636    [InitISOFS, Always, TestOutput (
1637       [["file"; "/empty"]], "empty");
1638     InitISOFS, Always, TestOutput (
1639       [["file"; "/known-1"]], "ASCII text");
1640     InitISOFS, Always, TestLastFail (
1641       [["file"; "/notexists"]]);
1642     InitISOFS, Always, TestOutput (
1643       [["file"; "/abssymlink"]], "symbolic link");
1644     InitISOFS, Always, TestOutput (
1645       [["file"; "/directory"]], "directory")],
1646    "determine file type",
1647    "\
1648 This call uses the standard L<file(1)> command to determine
1649 the type or contents of the file.
1650
1651 This call will also transparently look inside various types
1652 of compressed file.
1653
1654 The exact command which runs is C<file -zb path>.  Note in
1655 particular that the filename is not prepended to the output
1656 (the C<-b> option).
1657
1658 This command can also be used on C</dev/> devices
1659 (and partitions, LV names).  You can for example use this
1660 to determine if a device contains a filesystem, although
1661 it's usually better to use C<guestfs_vfs_type>.
1662
1663 If the C<path> does not begin with C</dev/> then
1664 this command only works for the content of regular files.
1665 For other file types (directory, symbolic link etc) it
1666 will just return the string C<directory> etc.");
1667
1668   ("command", (RString "output", [StringList "arguments"]), 50, [ProtocolLimitWarning],
1669    [InitBasicFS, Always, TestOutput (
1670       [["upload"; "test-command"; "/test-command"];
1671        ["chmod"; "0o755"; "/test-command"];
1672        ["command"; "/test-command 1"]], "Result1");
1673     InitBasicFS, Always, TestOutput (
1674       [["upload"; "test-command"; "/test-command"];
1675        ["chmod"; "0o755"; "/test-command"];
1676        ["command"; "/test-command 2"]], "Result2\n");
1677     InitBasicFS, Always, TestOutput (
1678       [["upload"; "test-command"; "/test-command"];
1679        ["chmod"; "0o755"; "/test-command"];
1680        ["command"; "/test-command 3"]], "\nResult3");
1681     InitBasicFS, Always, TestOutput (
1682       [["upload"; "test-command"; "/test-command"];
1683        ["chmod"; "0o755"; "/test-command"];
1684        ["command"; "/test-command 4"]], "\nResult4\n");
1685     InitBasicFS, Always, TestOutput (
1686       [["upload"; "test-command"; "/test-command"];
1687        ["chmod"; "0o755"; "/test-command"];
1688        ["command"; "/test-command 5"]], "\nResult5\n\n");
1689     InitBasicFS, Always, TestOutput (
1690       [["upload"; "test-command"; "/test-command"];
1691        ["chmod"; "0o755"; "/test-command"];
1692        ["command"; "/test-command 6"]], "\n\nResult6\n\n");
1693     InitBasicFS, Always, TestOutput (
1694       [["upload"; "test-command"; "/test-command"];
1695        ["chmod"; "0o755"; "/test-command"];
1696        ["command"; "/test-command 7"]], "");
1697     InitBasicFS, Always, TestOutput (
1698       [["upload"; "test-command"; "/test-command"];
1699        ["chmod"; "0o755"; "/test-command"];
1700        ["command"; "/test-command 8"]], "\n");
1701     InitBasicFS, Always, TestOutput (
1702       [["upload"; "test-command"; "/test-command"];
1703        ["chmod"; "0o755"; "/test-command"];
1704        ["command"; "/test-command 9"]], "\n\n");
1705     InitBasicFS, Always, TestOutput (
1706       [["upload"; "test-command"; "/test-command"];
1707        ["chmod"; "0o755"; "/test-command"];
1708        ["command"; "/test-command 10"]], "Result10-1\nResult10-2\n");
1709     InitBasicFS, Always, TestOutput (
1710       [["upload"; "test-command"; "/test-command"];
1711        ["chmod"; "0o755"; "/test-command"];
1712        ["command"; "/test-command 11"]], "Result11-1\nResult11-2");
1713     InitBasicFS, Always, TestLastFail (
1714       [["upload"; "test-command"; "/test-command"];
1715        ["chmod"; "0o755"; "/test-command"];
1716        ["command"; "/test-command"]])],
1717    "run a command from the guest filesystem",
1718    "\
1719 This call runs a command from the guest filesystem.  The
1720 filesystem must be mounted, and must contain a compatible
1721 operating system (ie. something Linux, with the same
1722 or compatible processor architecture).
1723
1724 The single parameter is an argv-style list of arguments.
1725 The first element is the name of the program to run.
1726 Subsequent elements are parameters.  The list must be
1727 non-empty (ie. must contain a program name).  Note that
1728 the command runs directly, and is I<not> invoked via
1729 the shell (see C<guestfs_sh>).
1730
1731 The return value is anything printed to I<stdout> by
1732 the command.
1733
1734 If the command returns a non-zero exit status, then
1735 this function returns an error message.  The error message
1736 string is the content of I<stderr> from the command.
1737
1738 The C<$PATH> environment variable will contain at least
1739 C</usr/bin> and C</bin>.  If you require a program from
1740 another location, you should provide the full path in the
1741 first parameter.
1742
1743 Shared libraries and data files required by the program
1744 must be available on filesystems which are mounted in the
1745 correct places.  It is the caller's responsibility to ensure
1746 all filesystems that are needed are mounted at the right
1747 locations.");
1748
1749   ("command_lines", (RStringList "lines", [StringList "arguments"]), 51, [ProtocolLimitWarning],
1750    [InitBasicFS, Always, TestOutputList (
1751       [["upload"; "test-command"; "/test-command"];
1752        ["chmod"; "0o755"; "/test-command"];
1753        ["command_lines"; "/test-command 1"]], ["Result1"]);
1754     InitBasicFS, Always, TestOutputList (
1755       [["upload"; "test-command"; "/test-command"];
1756        ["chmod"; "0o755"; "/test-command"];
1757        ["command_lines"; "/test-command 2"]], ["Result2"]);
1758     InitBasicFS, Always, TestOutputList (
1759       [["upload"; "test-command"; "/test-command"];
1760        ["chmod"; "0o755"; "/test-command"];
1761        ["command_lines"; "/test-command 3"]], ["";"Result3"]);
1762     InitBasicFS, Always, TestOutputList (
1763       [["upload"; "test-command"; "/test-command"];
1764        ["chmod"; "0o755"; "/test-command"];
1765        ["command_lines"; "/test-command 4"]], ["";"Result4"]);
1766     InitBasicFS, Always, TestOutputList (
1767       [["upload"; "test-command"; "/test-command"];
1768        ["chmod"; "0o755"; "/test-command"];
1769        ["command_lines"; "/test-command 5"]], ["";"Result5";""]);
1770     InitBasicFS, Always, TestOutputList (
1771       [["upload"; "test-command"; "/test-command"];
1772        ["chmod"; "0o755"; "/test-command"];
1773        ["command_lines"; "/test-command 6"]], ["";"";"Result6";""]);
1774     InitBasicFS, Always, TestOutputList (
1775       [["upload"; "test-command"; "/test-command"];
1776        ["chmod"; "0o755"; "/test-command"];
1777        ["command_lines"; "/test-command 7"]], []);
1778     InitBasicFS, Always, TestOutputList (
1779       [["upload"; "test-command"; "/test-command"];
1780        ["chmod"; "0o755"; "/test-command"];
1781        ["command_lines"; "/test-command 8"]], [""]);
1782     InitBasicFS, Always, TestOutputList (
1783       [["upload"; "test-command"; "/test-command"];
1784        ["chmod"; "0o755"; "/test-command"];
1785        ["command_lines"; "/test-command 9"]], ["";""]);
1786     InitBasicFS, Always, TestOutputList (
1787       [["upload"; "test-command"; "/test-command"];
1788        ["chmod"; "0o755"; "/test-command"];
1789        ["command_lines"; "/test-command 10"]], ["Result10-1";"Result10-2"]);
1790     InitBasicFS, Always, TestOutputList (
1791       [["upload"; "test-command"; "/test-command"];
1792        ["chmod"; "0o755"; "/test-command"];
1793        ["command_lines"; "/test-command 11"]], ["Result11-1";"Result11-2"])],
1794    "run a command, returning lines",
1795    "\
1796 This is the same as C<guestfs_command>, but splits the
1797 result into a list of lines.
1798
1799 See also: C<guestfs_sh_lines>");
1800
1801   ("stat", (RStruct ("statbuf", "stat"), [Pathname "path"]), 52, [],
1802    [InitISOFS, Always, TestOutputStruct (
1803       [["stat"; "/empty"]], [CompareWithInt ("size", 0)])],
1804    "get file information",
1805    "\
1806 Returns file information for the given C<path>.
1807
1808 This is the same as the C<stat(2)> system call.");
1809
1810   ("lstat", (RStruct ("statbuf", "stat"), [Pathname "path"]), 53, [],
1811    [InitISOFS, Always, TestOutputStruct (
1812       [["lstat"; "/empty"]], [CompareWithInt ("size", 0)])],
1813    "get file information for a symbolic link",
1814    "\
1815 Returns file information for the given C<path>.
1816
1817 This is the same as C<guestfs_stat> except that if C<path>
1818 is a symbolic link, then the link is stat-ed, not the file it
1819 refers to.
1820
1821 This is the same as the C<lstat(2)> system call.");
1822
1823   ("statvfs", (RStruct ("statbuf", "statvfs"), [Pathname "path"]), 54, [],
1824    [InitISOFS, Always, TestOutputStruct (
1825       [["statvfs"; "/"]], [CompareWithInt ("namemax", 255)])],
1826    "get file system statistics",
1827    "\
1828 Returns file system statistics for any mounted file system.
1829 C<path> should be a file or directory in the mounted file system
1830 (typically it is the mount point itself, but it doesn't need to be).
1831
1832 This is the same as the C<statvfs(2)> system call.");
1833
1834   ("tune2fs_l", (RHashtable "superblock", [Device "device"]), 55, [],
1835    [], (* XXX test *)
1836    "get ext2/ext3/ext4 superblock details",
1837    "\
1838 This returns the contents of the ext2, ext3 or ext4 filesystem
1839 superblock on C<device>.
1840
1841 It is the same as running C<tune2fs -l device>.  See L<tune2fs(8)>
1842 manpage for more details.  The list of fields returned isn't
1843 clearly defined, and depends on both the version of C<tune2fs>
1844 that libguestfs was built against, and the filesystem itself.");
1845
1846   ("blockdev_setro", (RErr, [Device "device"]), 56, [],
1847    [InitEmpty, Always, TestOutputTrue (
1848       [["blockdev_setro"; "/dev/sda"];
1849        ["blockdev_getro"; "/dev/sda"]])],
1850    "set block device to read-only",
1851    "\
1852 Sets the block device named C<device> to read-only.
1853
1854 This uses the L<blockdev(8)> command.");
1855
1856   ("blockdev_setrw", (RErr, [Device "device"]), 57, [],
1857    [InitEmpty, Always, TestOutputFalse (
1858       [["blockdev_setrw"; "/dev/sda"];
1859        ["blockdev_getro"; "/dev/sda"]])],
1860    "set block device to read-write",
1861    "\
1862 Sets the block device named C<device> to read-write.
1863
1864 This uses the L<blockdev(8)> command.");
1865
1866   ("blockdev_getro", (RBool "ro", [Device "device"]), 58, [],
1867    [InitEmpty, Always, TestOutputTrue (
1868       [["blockdev_setro"; "/dev/sda"];
1869        ["blockdev_getro"; "/dev/sda"]])],
1870    "is block device set to read-only",
1871    "\
1872 Returns a boolean indicating if the block device is read-only
1873 (true if read-only, false if not).
1874
1875 This uses the L<blockdev(8)> command.");
1876
1877   ("blockdev_getss", (RInt "sectorsize", [Device "device"]), 59, [],
1878    [InitEmpty, Always, TestOutputInt (
1879       [["blockdev_getss"; "/dev/sda"]], 512)],
1880    "get sectorsize of block device",
1881    "\
1882 This returns the size of sectors on a block device.
1883 Usually 512, but can be larger for modern devices.
1884
1885 (Note, this is not the size in sectors, use C<guestfs_blockdev_getsz>
1886 for that).
1887
1888 This uses the L<blockdev(8)> command.");
1889
1890   ("blockdev_getbsz", (RInt "blocksize", [Device "device"]), 60, [],
1891    [InitEmpty, Always, TestOutputInt (
1892       [["blockdev_getbsz"; "/dev/sda"]], 4096)],
1893    "get blocksize of block device",
1894    "\
1895 This returns the block size of a device.
1896
1897 (Note this is different from both I<size in blocks> and
1898 I<filesystem block size>).
1899
1900 This uses the L<blockdev(8)> command.");
1901
1902   ("blockdev_setbsz", (RErr, [Device "device"; Int "blocksize"]), 61, [],
1903    [], (* XXX test *)
1904    "set blocksize of block device",
1905    "\
1906 This sets the block size of a device.
1907
1908 (Note this is different from both I<size in blocks> and
1909 I<filesystem block size>).
1910
1911 This uses the L<blockdev(8)> command.");
1912
1913   ("blockdev_getsz", (RInt64 "sizeinsectors", [Device "device"]), 62, [],
1914    [InitEmpty, Always, TestOutputInt (
1915       [["blockdev_getsz"; "/dev/sda"]], 1024000)],
1916    "get total size of device in 512-byte sectors",
1917    "\
1918 This returns the size of the device in units of 512-byte sectors
1919 (even if the sectorsize isn't 512 bytes ... weird).
1920
1921 See also C<guestfs_blockdev_getss> for the real sector size of
1922 the device, and C<guestfs_blockdev_getsize64> for the more
1923 useful I<size in bytes>.
1924
1925 This uses the L<blockdev(8)> command.");
1926
1927   ("blockdev_getsize64", (RInt64 "sizeinbytes", [Device "device"]), 63, [],
1928    [InitEmpty, Always, TestOutputInt (
1929       [["blockdev_getsize64"; "/dev/sda"]], 524288000)],
1930    "get total size of device in bytes",
1931    "\
1932 This returns the size of the device in bytes.
1933
1934 See also C<guestfs_blockdev_getsz>.
1935
1936 This uses the L<blockdev(8)> command.");
1937
1938   ("blockdev_flushbufs", (RErr, [Device "device"]), 64, [],
1939    [InitEmpty, Always, TestRun
1940       [["blockdev_flushbufs"; "/dev/sda"]]],
1941    "flush device buffers",
1942    "\
1943 This tells the kernel to flush internal buffers associated
1944 with C<device>.
1945
1946 This uses the L<blockdev(8)> command.");
1947
1948   ("blockdev_rereadpt", (RErr, [Device "device"]), 65, [],
1949    [InitEmpty, Always, TestRun
1950       [["blockdev_rereadpt"; "/dev/sda"]]],
1951    "reread partition table",
1952    "\
1953 Reread the partition table on C<device>.
1954
1955 This uses the L<blockdev(8)> command.");
1956
1957   ("upload", (RErr, [FileIn "filename"; Dev_or_Path "remotefilename"]), 66, [],
1958    [InitBasicFS, Always, TestOutput (
1959       (* Pick a file from cwd which isn't likely to change. *)
1960       [["upload"; "../COPYING.LIB"; "/COPYING.LIB"];
1961        ["checksum"; "md5"; "/COPYING.LIB"]],
1962       Digest.to_hex (Digest.file "COPYING.LIB"))],
1963    "upload a file from the local machine",
1964    "\
1965 Upload local file C<filename> to C<remotefilename> on the
1966 filesystem.
1967
1968 C<filename> can also be a named pipe.
1969
1970 See also C<guestfs_download>.");
1971
1972   ("download", (RErr, [Dev_or_Path "remotefilename"; FileOut "filename"]), 67, [],
1973    [InitBasicFS, Always, TestOutput (
1974       (* Pick a file from cwd which isn't likely to change. *)
1975       [["upload"; "../COPYING.LIB"; "/COPYING.LIB"];
1976        ["download"; "/COPYING.LIB"; "testdownload.tmp"];
1977        ["upload"; "testdownload.tmp"; "/upload"];
1978        ["checksum"; "md5"; "/upload"]],
1979       Digest.to_hex (Digest.file "COPYING.LIB"))],
1980    "download a file to the local machine",
1981    "\
1982 Download file C<remotefilename> and save it as C<filename>
1983 on the local machine.
1984
1985 C<filename> can also be a named pipe.
1986
1987 See also C<guestfs_upload>, C<guestfs_cat>.");
1988
1989   ("checksum", (RString "checksum", [String "csumtype"; Pathname "path"]), 68, [],
1990    [InitISOFS, Always, TestOutput (
1991       [["checksum"; "crc"; "/known-3"]], "2891671662");
1992     InitISOFS, Always, TestLastFail (
1993       [["checksum"; "crc"; "/notexists"]]);
1994     InitISOFS, Always, TestOutput (
1995       [["checksum"; "md5"; "/known-3"]], "46d6ca27ee07cdc6fa99c2e138cc522c");
1996     InitISOFS, Always, TestOutput (
1997       [["checksum"; "sha1"; "/known-3"]], "b7ebccc3ee418311091c3eda0a45b83c0a770f15");
1998     InitISOFS, Always, TestOutput (
1999       [["checksum"; "sha224"; "/known-3"]], "d2cd1774b28f3659c14116be0a6dc2bb5c4b350ce9cd5defac707741");
2000     InitISOFS, Always, TestOutput (
2001       [["checksum"; "sha256"; "/known-3"]], "75bb71b90cd20cb13f86d2bea8dad63ac7194e7517c3b52b8d06ff52d3487d30");
2002     InitISOFS, Always, TestOutput (
2003       [["checksum"; "sha384"; "/known-3"]], "5fa7883430f357b5d7b7271d3a1d2872b51d73cba72731de6863d3dea55f30646af2799bef44d5ea776a5ec7941ac640");
2004     InitISOFS, Always, TestOutput (
2005       [["checksum"; "sha512"; "/known-3"]], "2794062c328c6b216dca90443b7f7134c5f40e56bd0ed7853123275a09982a6f992e6ca682f9d2fba34a4c5e870d8fe077694ff831e3032a004ee077e00603f6");
2006     (* Test for RHBZ#579608, absolute symbolic links. *)
2007     InitISOFS, Always, TestOutput (
2008       [["checksum"; "sha512"; "/abssymlink"]], "5f57d0639bc95081c53afc63a449403883818edc64da48930ad6b1a4fb49be90404686877743fbcd7c99811f3def7df7bc22635c885c6a8cf79c806b43451c1a")],
2009    "compute MD5, SHAx or CRC checksum of file",
2010    "\
2011 This call computes the MD5, SHAx or CRC checksum of the
2012 file named C<path>.
2013
2014 The type of checksum to compute is given by the C<csumtype>
2015 parameter which must have one of the following values:
2016
2017 =over 4
2018
2019 =item C<crc>
2020
2021 Compute the cyclic redundancy check (CRC) specified by POSIX
2022 for the C<cksum> command.
2023
2024 =item C<md5>
2025
2026 Compute the MD5 hash (using the C<md5sum> program).
2027
2028 =item C<sha1>
2029
2030 Compute the SHA1 hash (using the C<sha1sum> program).
2031
2032 =item C<sha224>
2033
2034 Compute the SHA224 hash (using the C<sha224sum> program).
2035
2036 =item C<sha256>
2037
2038 Compute the SHA256 hash (using the C<sha256sum> program).
2039
2040 =item C<sha384>
2041
2042 Compute the SHA384 hash (using the C<sha384sum> program).
2043
2044 =item C<sha512>
2045
2046 Compute the SHA512 hash (using the C<sha512sum> program).
2047
2048 =back
2049
2050 The checksum is returned as a printable string.
2051
2052 To get the checksum for a device, use C<guestfs_checksum_device>.
2053
2054 To get the checksums for many files, use C<guestfs_checksums_out>.");
2055
2056   ("tar_in", (RErr, [FileIn "tarfile"; Pathname "directory"]), 69, [],
2057    [InitBasicFS, Always, TestOutput (
2058       [["tar_in"; "../images/helloworld.tar"; "/"];
2059        ["cat"; "/hello"]], "hello\n")],
2060    "unpack tarfile to directory",
2061    "\
2062 This command uploads and unpacks local file C<tarfile> (an
2063 I<uncompressed> tar file) into C<directory>.
2064
2065 To upload a compressed tarball, use C<guestfs_tgz_in>
2066 or C<guestfs_txz_in>.");
2067
2068   ("tar_out", (RErr, [String "directory"; FileOut "tarfile"]), 70, [],
2069    [],
2070    "pack directory into tarfile",
2071    "\
2072 This command packs the contents of C<directory> and downloads
2073 it to local file C<tarfile>.
2074
2075 To download a compressed tarball, use C<guestfs_tgz_out>
2076 or C<guestfs_txz_out>.");
2077
2078   ("tgz_in", (RErr, [FileIn "tarball"; Pathname "directory"]), 71, [],
2079    [InitBasicFS, Always, TestOutput (
2080       [["tgz_in"; "../images/helloworld.tar.gz"; "/"];
2081        ["cat"; "/hello"]], "hello\n")],
2082    "unpack compressed tarball to directory",
2083    "\
2084 This command uploads and unpacks local file C<tarball> (a
2085 I<gzip compressed> tar file) into C<directory>.
2086
2087 To upload an uncompressed tarball, use C<guestfs_tar_in>.");
2088
2089   ("tgz_out", (RErr, [Pathname "directory"; FileOut "tarball"]), 72, [],
2090    [],
2091    "pack directory into compressed tarball",
2092    "\
2093 This command packs the contents of C<directory> and downloads
2094 it to local file C<tarball>.
2095
2096 To download an uncompressed tarball, use C<guestfs_tar_out>.");
2097
2098   ("mount_ro", (RErr, [Device "device"; String "mountpoint"]), 73, [],
2099    [InitBasicFS, Always, TestLastFail (
2100       [["umount"; "/"];
2101        ["mount_ro"; "/dev/sda1"; "/"];
2102        ["touch"; "/new"]]);
2103     InitBasicFS, Always, TestOutput (
2104       [["write"; "/new"; "data"];
2105        ["umount"; "/"];
2106        ["mount_ro"; "/dev/sda1"; "/"];
2107        ["cat"; "/new"]], "data")],
2108    "mount a guest disk, read-only",
2109    "\
2110 This is the same as the C<guestfs_mount> command, but it
2111 mounts the filesystem with the read-only (I<-o ro>) flag.");
2112
2113   ("mount_options", (RErr, [String "options"; Device "device"; String "mountpoint"]), 74, [],
2114    [],
2115    "mount a guest disk with mount options",
2116    "\
2117 This is the same as the C<guestfs_mount> command, but it
2118 allows you to set the mount options as for the
2119 L<mount(8)> I<-o> flag.
2120
2121 If the C<options> parameter is an empty string, then
2122 no options are passed (all options default to whatever
2123 the filesystem uses).");
2124
2125   ("mount_vfs", (RErr, [String "options"; String "vfstype"; Device "device"; String "mountpoint"]), 75, [],
2126    [],
2127    "mount a guest disk with mount options and vfstype",
2128    "\
2129 This is the same as the C<guestfs_mount> command, but it
2130 allows you to set both the mount options and the vfstype
2131 as for the L<mount(8)> I<-o> and I<-t> flags.");
2132
2133   ("debug", (RString "result", [String "subcmd"; StringList "extraargs"]), 76, [],
2134    [],
2135    "debugging and internals",
2136    "\
2137 The C<guestfs_debug> command exposes some internals of
2138 C<guestfsd> (the guestfs daemon) that runs inside the
2139 qemu subprocess.
2140
2141 There is no comprehensive help for this command.  You have
2142 to look at the file C<daemon/debug.c> in the libguestfs source
2143 to find out what you can do.");
2144
2145   ("lvremove", (RErr, [Device "device"]), 77, [Optional "lvm2"],
2146    [InitEmpty, Always, TestOutputList (
2147       [["part_disk"; "/dev/sda"; "mbr"];
2148        ["pvcreate"; "/dev/sda1"];
2149        ["vgcreate"; "VG"; "/dev/sda1"];
2150        ["lvcreate"; "LV1"; "VG"; "50"];
2151        ["lvcreate"; "LV2"; "VG"; "50"];
2152        ["lvremove"; "/dev/VG/LV1"];
2153        ["lvs"]], ["/dev/VG/LV2"]);
2154     InitEmpty, Always, TestOutputList (
2155       [["part_disk"; "/dev/sda"; "mbr"];
2156        ["pvcreate"; "/dev/sda1"];
2157        ["vgcreate"; "VG"; "/dev/sda1"];
2158        ["lvcreate"; "LV1"; "VG"; "50"];
2159        ["lvcreate"; "LV2"; "VG"; "50"];
2160        ["lvremove"; "/dev/VG"];
2161        ["lvs"]], []);
2162     InitEmpty, Always, TestOutputList (
2163       [["part_disk"; "/dev/sda"; "mbr"];
2164        ["pvcreate"; "/dev/sda1"];
2165        ["vgcreate"; "VG"; "/dev/sda1"];
2166        ["lvcreate"; "LV1"; "VG"; "50"];
2167        ["lvcreate"; "LV2"; "VG"; "50"];
2168        ["lvremove"; "/dev/VG"];
2169        ["vgs"]], ["VG"])],
2170    "remove an LVM logical volume",
2171    "\
2172 Remove an LVM logical volume C<device>, where C<device> is
2173 the path to the LV, such as C</dev/VG/LV>.
2174
2175 You can also remove all LVs in a volume group by specifying
2176 the VG name, C</dev/VG>.");
2177
2178   ("vgremove", (RErr, [String "vgname"]), 78, [Optional "lvm2"],
2179    [InitEmpty, Always, TestOutputList (
2180       [["part_disk"; "/dev/sda"; "mbr"];
2181        ["pvcreate"; "/dev/sda1"];
2182        ["vgcreate"; "VG"; "/dev/sda1"];
2183        ["lvcreate"; "LV1"; "VG"; "50"];
2184        ["lvcreate"; "LV2"; "VG"; "50"];
2185        ["vgremove"; "VG"];
2186        ["lvs"]], []);
2187     InitEmpty, Always, TestOutputList (
2188       [["part_disk"; "/dev/sda"; "mbr"];
2189        ["pvcreate"; "/dev/sda1"];
2190        ["vgcreate"; "VG"; "/dev/sda1"];
2191        ["lvcreate"; "LV1"; "VG"; "50"];
2192        ["lvcreate"; "LV2"; "VG"; "50"];
2193        ["vgremove"; "VG"];
2194        ["vgs"]], [])],
2195    "remove an LVM volume group",
2196    "\
2197 Remove an LVM volume group C<vgname>, (for example C<VG>).
2198
2199 This also forcibly removes all logical volumes in the volume
2200 group (if any).");
2201
2202   ("pvremove", (RErr, [Device "device"]), 79, [Optional "lvm2"],
2203    [InitEmpty, Always, TestOutputListOfDevices (
2204       [["part_disk"; "/dev/sda"; "mbr"];
2205        ["pvcreate"; "/dev/sda1"];
2206        ["vgcreate"; "VG"; "/dev/sda1"];
2207        ["lvcreate"; "LV1"; "VG"; "50"];
2208        ["lvcreate"; "LV2"; "VG"; "50"];
2209        ["vgremove"; "VG"];
2210        ["pvremove"; "/dev/sda1"];
2211        ["lvs"]], []);
2212     InitEmpty, Always, TestOutputListOfDevices (
2213       [["part_disk"; "/dev/sda"; "mbr"];
2214        ["pvcreate"; "/dev/sda1"];
2215        ["vgcreate"; "VG"; "/dev/sda1"];
2216        ["lvcreate"; "LV1"; "VG"; "50"];
2217        ["lvcreate"; "LV2"; "VG"; "50"];
2218        ["vgremove"; "VG"];
2219        ["pvremove"; "/dev/sda1"];
2220        ["vgs"]], []);
2221     InitEmpty, Always, TestOutputListOfDevices (
2222       [["part_disk"; "/dev/sda"; "mbr"];
2223        ["pvcreate"; "/dev/sda1"];
2224        ["vgcreate"; "VG"; "/dev/sda1"];
2225        ["lvcreate"; "LV1"; "VG"; "50"];
2226        ["lvcreate"; "LV2"; "VG"; "50"];
2227        ["vgremove"; "VG"];
2228        ["pvremove"; "/dev/sda1"];
2229        ["pvs"]], [])],
2230    "remove an LVM physical volume",
2231    "\
2232 This wipes a physical volume C<device> so that LVM will no longer
2233 recognise it.
2234
2235 The implementation uses the C<pvremove> command which refuses to
2236 wipe physical volumes that contain any volume groups, so you have
2237 to remove those first.");
2238
2239   ("set_e2label", (RErr, [Device "device"; String "label"]), 80, [],
2240    [InitBasicFS, Always, TestOutput (
2241       [["set_e2label"; "/dev/sda1"; "testlabel"];
2242        ["get_e2label"; "/dev/sda1"]], "testlabel")],
2243    "set the ext2/3/4 filesystem label",
2244    "\
2245 This sets the ext2/3/4 filesystem label of the filesystem on
2246 C<device> to C<label>.  Filesystem labels are limited to
2247 16 characters.
2248
2249 You can use either C<guestfs_tune2fs_l> or C<guestfs_get_e2label>
2250 to return the existing label on a filesystem.");
2251
2252   ("get_e2label", (RString "label", [Device "device"]), 81, [DeprecatedBy "vfs_label"],
2253    [],
2254    "get the ext2/3/4 filesystem label",
2255    "\
2256 This returns the ext2/3/4 filesystem label of the filesystem on
2257 C<device>.");
2258
2259   ("set_e2uuid", (RErr, [Device "device"; String "uuid"]), 82, [],
2260    (let uuid = uuidgen () in
2261     [InitBasicFS, Always, TestOutput (
2262        [["set_e2uuid"; "/dev/sda1"; uuid];
2263         ["get_e2uuid"; "/dev/sda1"]], uuid);
2264      InitBasicFS, Always, TestOutput (
2265        [["set_e2uuid"; "/dev/sda1"; "clear"];
2266         ["get_e2uuid"; "/dev/sda1"]], "");
2267      (* We can't predict what UUIDs will be, so just check the commands run. *)
2268      InitBasicFS, Always, TestRun (
2269        [["set_e2uuid"; "/dev/sda1"; "random"]]);
2270      InitBasicFS, Always, TestRun (
2271        [["set_e2uuid"; "/dev/sda1"; "time"]])]),
2272    "set the ext2/3/4 filesystem UUID",
2273    "\
2274 This sets the ext2/3/4 filesystem UUID of the filesystem on
2275 C<device> to C<uuid>.  The format of the UUID and alternatives
2276 such as C<clear>, C<random> and C<time> are described in the
2277 L<tune2fs(8)> manpage.
2278
2279 You can use either C<guestfs_tune2fs_l> or C<guestfs_get_e2uuid>
2280 to return the existing UUID of a filesystem.");
2281
2282   ("get_e2uuid", (RString "uuid", [Device "device"]), 83, [DeprecatedBy "vfs_uuid"],
2283    (* Regression test for RHBZ#597112. *)
2284    (let uuid = uuidgen () in
2285     [InitBasicFS, Always, TestOutput (
2286        [["mke2journal"; "1024"; "/dev/sdb"];
2287         ["set_e2uuid"; "/dev/sdb"; uuid];
2288         ["get_e2uuid"; "/dev/sdb"]], uuid)]),
2289    "get the ext2/3/4 filesystem UUID",
2290    "\
2291 This returns the ext2/3/4 filesystem UUID of the filesystem on
2292 C<device>.");
2293
2294   ("fsck", (RInt "status", [String "fstype"; Device "device"]), 84, [FishOutput FishOutputHexadecimal],
2295    [InitBasicFS, Always, TestOutputInt (
2296       [["umount"; "/dev/sda1"];
2297        ["fsck"; "ext2"; "/dev/sda1"]], 0);
2298     InitBasicFS, Always, TestOutputInt (
2299       [["umount"; "/dev/sda1"];
2300        ["zero"; "/dev/sda1"];
2301        ["fsck"; "ext2"; "/dev/sda1"]], 8)],
2302    "run the filesystem checker",
2303    "\
2304 This runs the filesystem checker (fsck) on C<device> which
2305 should have filesystem type C<fstype>.
2306
2307 The returned integer is the status.  See L<fsck(8)> for the
2308 list of status codes from C<fsck>.
2309
2310 Notes:
2311
2312 =over 4
2313
2314 =item *
2315
2316 Multiple status codes can be summed together.
2317
2318 =item *
2319
2320 A non-zero return code can mean \"success\", for example if
2321 errors have been corrected on the filesystem.
2322
2323 =item *
2324
2325 Checking or repairing NTFS volumes is not supported
2326 (by linux-ntfs).
2327
2328 =back
2329
2330 This command is entirely equivalent to running C<fsck -a -t fstype device>.");
2331
2332   ("zero", (RErr, [Device "device"]), 85, [],
2333    [InitBasicFS, Always, TestOutput (
2334       [["umount"; "/dev/sda1"];
2335        ["zero"; "/dev/sda1"];
2336        ["file"; "/dev/sda1"]], "data")],
2337    "write zeroes to the device",
2338    "\
2339 This command writes zeroes over the first few blocks of C<device>.
2340
2341 How many blocks are zeroed isn't specified (but it's I<not> enough
2342 to securely wipe the device).  It should be sufficient to remove
2343 any partition tables, filesystem superblocks and so on.
2344
2345 See also: C<guestfs_zero_device>, C<guestfs_scrub_device>.");
2346
2347   ("grub_install", (RErr, [Pathname "root"; Device "device"]), 86, [],
2348    (* See:
2349     * https://bugzilla.redhat.com/show_bug.cgi?id=484986
2350     * https://bugzilla.redhat.com/show_bug.cgi?id=479760
2351     *)
2352    [InitBasicFS, Always, TestOutputTrue (
2353       [["mkdir_p"; "/boot/grub"];
2354        ["write"; "/boot/grub/device.map"; "(hd0) /dev/vda"];
2355        ["grub_install"; "/"; "/dev/vda"];
2356        ["is_dir"; "/boot"]])],
2357    "install GRUB",
2358    "\
2359 This command installs GRUB (the Grand Unified Bootloader) on
2360 C<device>, with the root directory being C<root>.
2361
2362 Note: If grub-install reports the error
2363 \"No suitable drive was found in the generated device map.\"
2364 it may be that you need to create a C</boot/grub/device.map>
2365 file first that contains the mapping between grub device names
2366 and Linux device names.  It is usually sufficient to create
2367 a file containing:
2368
2369  (hd0) /dev/vda
2370
2371 replacing C</dev/vda> with the name of the installation device.");
2372
2373   ("cp", (RErr, [Pathname "src"; Pathname "dest"]), 87, [],
2374    [InitBasicFS, Always, TestOutput (
2375       [["write"; "/old"; "file content"];
2376        ["cp"; "/old"; "/new"];
2377        ["cat"; "/new"]], "file content");
2378     InitBasicFS, Always, TestOutputTrue (
2379       [["write"; "/old"; "file content"];
2380        ["cp"; "/old"; "/new"];
2381        ["is_file"; "/old"]]);
2382     InitBasicFS, Always, TestOutput (
2383       [["write"; "/old"; "file content"];
2384        ["mkdir"; "/dir"];
2385        ["cp"; "/old"; "/dir/new"];
2386        ["cat"; "/dir/new"]], "file content")],
2387    "copy a file",
2388    "\
2389 This copies a file from C<src> to C<dest> where C<dest> is
2390 either a destination filename or destination directory.");
2391
2392   ("cp_a", (RErr, [Pathname "src"; Pathname "dest"]), 88, [],
2393    [InitBasicFS, Always, TestOutput (
2394       [["mkdir"; "/olddir"];
2395        ["mkdir"; "/newdir"];
2396        ["write"; "/olddir/file"; "file content"];
2397        ["cp_a"; "/olddir"; "/newdir"];
2398        ["cat"; "/newdir/olddir/file"]], "file content")],
2399    "copy a file or directory recursively",
2400    "\
2401 This copies a file or directory from C<src> to C<dest>
2402 recursively using the C<cp -a> command.");
2403
2404   ("mv", (RErr, [Pathname "src"; Pathname "dest"]), 89, [],
2405    [InitBasicFS, Always, TestOutput (
2406       [["write"; "/old"; "file content"];
2407        ["mv"; "/old"; "/new"];
2408        ["cat"; "/new"]], "file content");
2409     InitBasicFS, Always, TestOutputFalse (
2410       [["write"; "/old"; "file content"];
2411        ["mv"; "/old"; "/new"];
2412        ["is_file"; "/old"]])],
2413    "move a file",
2414    "\
2415 This moves a file from C<src> to C<dest> where C<dest> is
2416 either a destination filename or destination directory.");
2417
2418   ("drop_caches", (RErr, [Int "whattodrop"]), 90, [],
2419    [InitEmpty, Always, TestRun (
2420       [["drop_caches"; "3"]])],
2421    "drop kernel page cache, dentries and inodes",
2422    "\
2423 This instructs the guest kernel to drop its page cache,
2424 and/or dentries and inode caches.  The parameter C<whattodrop>
2425 tells the kernel what precisely to drop, see
2426 L<http://linux-mm.org/Drop_Caches>
2427
2428 Setting C<whattodrop> to 3 should drop everything.
2429
2430 This automatically calls L<sync(2)> before the operation,
2431 so that the maximum guest memory is freed.");
2432
2433   ("dmesg", (RString "kmsgs", []), 91, [],
2434    [InitEmpty, Always, TestRun (
2435       [["dmesg"]])],
2436    "return kernel messages",
2437    "\
2438 This returns the kernel messages (C<dmesg> output) from
2439 the guest kernel.  This is sometimes useful for extended
2440 debugging of problems.
2441
2442 Another way to get the same information is to enable
2443 verbose messages with C<guestfs_set_verbose> or by setting
2444 the environment variable C<LIBGUESTFS_DEBUG=1> before
2445 running the program.");
2446
2447   ("ping_daemon", (RErr, []), 92, [],
2448    [InitEmpty, Always, TestRun (
2449       [["ping_daemon"]])],
2450    "ping the guest daemon",
2451    "\
2452 This is a test probe into the guestfs daemon running inside
2453 the qemu subprocess.  Calling this function checks that the
2454 daemon responds to the ping message, without affecting the daemon
2455 or attached block device(s) in any other way.");
2456
2457   ("equal", (RBool "equality", [Pathname "file1"; Pathname "file2"]), 93, [],
2458    [InitBasicFS, Always, TestOutputTrue (
2459       [["write"; "/file1"; "contents of a file"];
2460        ["cp"; "/file1"; "/file2"];
2461        ["equal"; "/file1"; "/file2"]]);
2462     InitBasicFS, Always, TestOutputFalse (
2463       [["write"; "/file1"; "contents of a file"];
2464        ["write"; "/file2"; "contents of another file"];
2465        ["equal"; "/file1"; "/file2"]]);
2466     InitBasicFS, Always, TestLastFail (
2467       [["equal"; "/file1"; "/file2"]])],
2468    "test if two files have equal contents",
2469    "\
2470 This compares the two files C<file1> and C<file2> and returns
2471 true if their content is exactly equal, or false otherwise.
2472
2473 The external L<cmp(1)> program is used for the comparison.");
2474
2475   ("strings", (RStringList "stringsout", [Pathname "path"]), 94, [ProtocolLimitWarning],
2476    [InitISOFS, Always, TestOutputList (
2477       [["strings"; "/known-5"]], ["abcdefghi"; "jklmnopqr"]);
2478     InitISOFS, Always, TestOutputList (
2479       [["strings"; "/empty"]], []);
2480     (* Test for RHBZ#579608, absolute symbolic links. *)
2481     InitISOFS, Always, TestRun (
2482       [["strings"; "/abssymlink"]])],
2483    "print the printable strings in a file",
2484    "\
2485 This runs the L<strings(1)> command on a file and returns
2486 the list of printable strings found.");
2487
2488   ("strings_e", (RStringList "stringsout", [String "encoding"; Pathname "path"]), 95, [ProtocolLimitWarning],
2489    [InitISOFS, Always, TestOutputList (
2490       [["strings_e"; "b"; "/known-5"]], []);
2491     InitBasicFS, Always, TestOutputList (
2492       [["write"; "/new"; "\000h\000e\000l\000l\000o\000\n\000w\000o\000r\000l\000d\000\n"];
2493        ["strings_e"; "b"; "/new"]], ["hello"; "world"])],
2494    "print the printable strings in a file",
2495    "\
2496 This is like the C<guestfs_strings> command, but allows you to
2497 specify the encoding of strings that are looked for in
2498 the source file C<path>.
2499
2500 Allowed encodings are:
2501
2502 =over 4
2503
2504 =item s
2505
2506 Single 7-bit-byte characters like ASCII and the ASCII-compatible
2507 parts of ISO-8859-X (this is what C<guestfs_strings> uses).
2508
2509 =item S
2510
2511 Single 8-bit-byte characters.
2512
2513 =item b
2514
2515 16-bit big endian strings such as those encoded in
2516 UTF-16BE or UCS-2BE.
2517
2518 =item l (lower case letter L)
2519
2520 16-bit little endian such as UTF-16LE and UCS-2LE.
2521 This is useful for examining binaries in Windows guests.
2522
2523 =item B
2524
2525 32-bit big endian such as UCS-4BE.
2526
2527 =item L
2528
2529 32-bit little endian such as UCS-4LE.
2530
2531 =back
2532
2533 The returned strings are transcoded to UTF-8.");
2534
2535   ("hexdump", (RString "dump", [Pathname "path"]), 96, [ProtocolLimitWarning],
2536    [InitISOFS, Always, TestOutput (
2537       [["hexdump"; "/known-4"]], "00000000  61 62 63 0a 64 65 66 0a  67 68 69                 |abc.def.ghi|\n0000000b\n");
2538     (* Test for RHBZ#501888c2 regression which caused large hexdump
2539      * commands to segfault.
2540      *)
2541     InitISOFS, Always, TestRun (
2542       [["hexdump"; "/100krandom"]]);
2543     (* Test for RHBZ#579608, absolute symbolic links. *)
2544     InitISOFS, Always, TestRun (
2545       [["hexdump"; "/abssymlink"]])],
2546    "dump a file in hexadecimal",
2547    "\
2548 This runs C<hexdump -C> on the given C<path>.  The result is
2549 the human-readable, canonical hex dump of the file.");
2550
2551   ("zerofree", (RErr, [Device "device"]), 97, [Optional "zerofree"],
2552    [InitNone, Always, TestOutput (
2553       [["part_disk"; "/dev/sda"; "mbr"];
2554        ["mkfs"; "ext3"; "/dev/sda1"];
2555        ["mount_options"; ""; "/dev/sda1"; "/"];
2556        ["write"; "/new"; "test file"];
2557        ["umount"; "/dev/sda1"];
2558        ["zerofree"; "/dev/sda1"];
2559        ["mount_options"; ""; "/dev/sda1"; "/"];
2560        ["cat"; "/new"]], "test file")],
2561    "zero unused inodes and disk blocks on ext2/3 filesystem",
2562    "\
2563 This runs the I<zerofree> program on C<device>.  This program
2564 claims to zero unused inodes and disk blocks on an ext2/3
2565 filesystem, thus making it possible to compress the filesystem
2566 more effectively.
2567
2568 You should B<not> run this program if the filesystem is
2569 mounted.
2570
2571 It is possible that using this program can damage the filesystem
2572 or data on the filesystem.");
2573
2574   ("pvresize", (RErr, [Device "device"]), 98, [Optional "lvm2"],
2575    [],
2576    "resize an LVM physical volume",
2577    "\
2578 This resizes (expands or shrinks) an existing LVM physical
2579 volume to match the new size of the underlying device.");
2580
2581   ("sfdisk_N", (RErr, [Device "device"; Int "partnum";
2582                        Int "cyls"; Int "heads"; Int "sectors";
2583                        String "line"]), 99, [DangerWillRobinson],
2584    [],
2585    "modify a single partition on a block device",
2586    "\
2587 This runs L<sfdisk(8)> option to modify just the single
2588 partition C<n> (note: C<n> counts from 1).
2589
2590 For other parameters, see C<guestfs_sfdisk>.  You should usually
2591 pass C<0> for the cyls/heads/sectors parameters.
2592
2593 See also: C<guestfs_part_add>");
2594
2595   ("sfdisk_l", (RString "partitions", [Device "device"]), 100, [],
2596    [],
2597    "display the partition table",
2598    "\
2599 This displays the partition table on C<device>, in the
2600 human-readable output of the L<sfdisk(8)> command.  It is
2601 not intended to be parsed.
2602
2603 See also: C<guestfs_part_list>");
2604
2605   ("sfdisk_kernel_geometry", (RString "partitions", [Device "device"]), 101, [],
2606    [],
2607    "display the kernel geometry",
2608    "\
2609 This displays the kernel's idea of the geometry of C<device>.
2610
2611 The result is in human-readable format, and not designed to
2612 be parsed.");
2613
2614   ("sfdisk_disk_geometry", (RString "partitions", [Device "device"]), 102, [],
2615    [],
2616    "display the disk geometry from the partition table",
2617    "\
2618 This displays the disk geometry of C<device> read from the
2619 partition table.  Especially in the case where the underlying
2620 block device has been resized, this can be different from the
2621 kernel's idea of the geometry (see C<guestfs_sfdisk_kernel_geometry>).
2622
2623 The result is in human-readable format, and not designed to
2624 be parsed.");
2625
2626   ("vg_activate_all", (RErr, [Bool "activate"]), 103, [Optional "lvm2"],
2627    [],
2628    "activate or deactivate all volume groups",
2629    "\
2630 This command activates or (if C<activate> is false) deactivates
2631 all logical volumes in all volume groups.
2632 If activated, then they are made known to the
2633 kernel, ie. they appear as C</dev/mapper> devices.  If deactivated,
2634 then those devices disappear.
2635
2636 This command is the same as running C<vgchange -a y|n>");
2637
2638   ("vg_activate", (RErr, [Bool "activate"; StringList "volgroups"]), 104, [Optional "lvm2"],
2639    [],
2640    "activate or deactivate some volume groups",
2641    "\
2642 This command activates or (if C<activate> is false) deactivates
2643 all logical volumes in the listed volume groups C<volgroups>.
2644 If activated, then they are made known to the
2645 kernel, ie. they appear as C</dev/mapper> devices.  If deactivated,
2646 then those devices disappear.
2647
2648 This command is the same as running C<vgchange -a y|n volgroups...>
2649
2650 Note that if C<volgroups> is an empty list then B<all> volume groups
2651 are activated or deactivated.");
2652
2653   ("lvresize", (RErr, [Device "device"; Int "mbytes"]), 105, [Optional "lvm2"],
2654    [InitNone, Always, TestOutput (
2655       [["part_disk"; "/dev/sda"; "mbr"];
2656        ["pvcreate"; "/dev/sda1"];
2657        ["vgcreate"; "VG"; "/dev/sda1"];
2658        ["lvcreate"; "LV"; "VG"; "10"];
2659        ["mkfs"; "ext2"; "/dev/VG/LV"];
2660        ["mount_options"; ""; "/dev/VG/LV"; "/"];
2661        ["write"; "/new"; "test content"];
2662        ["umount"; "/"];
2663        ["lvresize"; "/dev/VG/LV"; "20"];
2664        ["e2fsck_f"; "/dev/VG/LV"];
2665        ["resize2fs"; "/dev/VG/LV"];
2666        ["mount_options"; ""; "/dev/VG/LV"; "/"];
2667        ["cat"; "/new"]], "test content");
2668     InitNone, Always, TestRun (
2669       (* Make an LV smaller to test RHBZ#587484. *)
2670       [["part_disk"; "/dev/sda"; "mbr"];
2671        ["pvcreate"; "/dev/sda1"];
2672        ["vgcreate"; "VG"; "/dev/sda1"];
2673        ["lvcreate"; "LV"; "VG"; "20"];
2674        ["lvresize"; "/dev/VG/LV"; "10"]])],
2675    "resize an LVM logical volume",
2676    "\
2677 This resizes (expands or shrinks) an existing LVM logical
2678 volume to C<mbytes>.  When reducing, data in the reduced part
2679 is lost.");
2680
2681   ("resize2fs", (RErr, [Device "device"]), 106, [],
2682    [], (* lvresize tests this *)
2683    "resize an ext2, ext3 or ext4 filesystem",
2684    "\
2685 This resizes an ext2, ext3 or ext4 filesystem to match the size of
2686 the underlying device.
2687
2688 I<Note:> It is sometimes required that you run C<guestfs_e2fsck_f>
2689 on the C<device> before calling this command.  For unknown reasons
2690 C<resize2fs> sometimes gives an error about this and sometimes not.
2691 In any case, it is always safe to call C<guestfs_e2fsck_f> before
2692 calling this function.");
2693
2694   ("find", (RStringList "names", [Pathname "directory"]), 107, [ProtocolLimitWarning],
2695    [InitBasicFS, Always, TestOutputList (
2696       [["find"; "/"]], ["lost+found"]);
2697     InitBasicFS, Always, TestOutputList (
2698       [["touch"; "/a"];
2699        ["mkdir"; "/b"];
2700        ["touch"; "/b/c"];
2701        ["find"; "/"]], ["a"; "b"; "b/c"; "lost+found"]);
2702     InitBasicFS, Always, TestOutputList (
2703       [["mkdir_p"; "/a/b/c"];
2704        ["touch"; "/a/b/c/d"];
2705        ["find"; "/a/b/"]], ["c"; "c/d"])],
2706    "find all files and directories",
2707    "\
2708 This command lists out all files and directories, recursively,
2709 starting at C<directory>.  It is essentially equivalent to
2710 running the shell command C<find directory -print> but some
2711 post-processing happens on the output, described below.
2712
2713 This returns a list of strings I<without any prefix>.  Thus
2714 if the directory structure was:
2715
2716  /tmp/a
2717  /tmp/b
2718  /tmp/c/d
2719
2720 then the returned list from C<guestfs_find> C</tmp> would be
2721 4 elements:
2722
2723  a
2724  b
2725  c
2726  c/d
2727
2728 If C<directory> is not a directory, then this command returns
2729 an error.
2730
2731 The returned list is sorted.
2732
2733 See also C<guestfs_find0>.");
2734
2735   ("e2fsck_f", (RErr, [Device "device"]), 108, [],
2736    [], (* lvresize tests this *)
2737    "check an ext2/ext3 filesystem",
2738    "\
2739 This runs C<e2fsck -p -f device>, ie. runs the ext2/ext3
2740 filesystem checker on C<device>, noninteractively (C<-p>),
2741 even if the filesystem appears to be clean (C<-f>).
2742
2743 This command is only needed because of C<guestfs_resize2fs>
2744 (q.v.).  Normally you should use C<guestfs_fsck>.");
2745
2746   ("sleep", (RErr, [Int "secs"]), 109, [],
2747    [InitNone, Always, TestRun (
2748       [["sleep"; "1"]])],
2749    "sleep for some seconds",
2750    "\
2751 Sleep for C<secs> seconds.");
2752
2753   ("ntfs_3g_probe", (RInt "status", [Bool "rw"; Device "device"]), 110, [Optional "ntfs3g"],
2754    [InitNone, Always, TestOutputInt (
2755       [["part_disk"; "/dev/sda"; "mbr"];
2756        ["mkfs"; "ntfs"; "/dev/sda1"];
2757        ["ntfs_3g_probe"; "true"; "/dev/sda1"]], 0);
2758     InitNone, Always, TestOutputInt (
2759       [["part_disk"; "/dev/sda"; "mbr"];
2760        ["mkfs"; "ext2"; "/dev/sda1"];
2761        ["ntfs_3g_probe"; "true"; "/dev/sda1"]], 12)],
2762    "probe NTFS volume",
2763    "\
2764 This command runs the L<ntfs-3g.probe(8)> command which probes
2765 an NTFS C<device> for mountability.  (Not all NTFS volumes can
2766 be mounted read-write, and some cannot be mounted at all).
2767
2768 C<rw> is a boolean flag.  Set it to true if you want to test
2769 if the volume can be mounted read-write.  Set it to false if
2770 you want to test if the volume can be mounted read-only.
2771
2772 The return value is an integer which C<0> if the operation
2773 would succeed, or some non-zero value documented in the
2774 L<ntfs-3g.probe(8)> manual page.");
2775
2776   ("sh", (RString "output", [String "command"]), 111, [],
2777    [], (* XXX needs tests *)
2778    "run a command via the shell",
2779    "\
2780 This call runs a command from the guest filesystem via the
2781 guest's C</bin/sh>.
2782
2783 This is like C<guestfs_command>, but passes the command to:
2784
2785  /bin/sh -c \"command\"
2786
2787 Depending on the guest's shell, this usually results in
2788 wildcards being expanded, shell expressions being interpolated
2789 and so on.
2790
2791 All the provisos about C<guestfs_command> apply to this call.");
2792
2793   ("sh_lines", (RStringList "lines", [String "command"]), 112, [],
2794    [], (* XXX needs tests *)
2795    "run a command via the shell returning lines",
2796    "\
2797 This is the same as C<guestfs_sh>, but splits the result
2798 into a list of lines.
2799
2800 See also: C<guestfs_command_lines>");
2801
2802   ("glob_expand", (RStringList "paths", [Pathname "pattern"]), 113, [],
2803    (* Use Pathname here, and hence ABS_PATH (pattern,... in generated
2804     * code in stubs.c, since all valid glob patterns must start with "/".
2805     * There is no concept of "cwd" in libguestfs, hence no "."-relative names.
2806     *)
2807    [InitBasicFS, Always, TestOutputList (
2808       [["mkdir_p"; "/a/b/c"];
2809        ["touch"; "/a/b/c/d"];
2810        ["touch"; "/a/b/c/e"];
2811        ["glob_expand"; "/a/b/c/*"]], ["/a/b/c/d"; "/a/b/c/e"]);
2812     InitBasicFS, Always, TestOutputList (
2813       [["mkdir_p"; "/a/b/c"];
2814        ["touch"; "/a/b/c/d"];
2815        ["touch"; "/a/b/c/e"];
2816        ["glob_expand"; "/a/*/c/*"]], ["/a/b/c/d"; "/a/b/c/e"]);
2817     InitBasicFS, Always, TestOutputList (
2818       [["mkdir_p"; "/a/b/c"];
2819        ["touch"; "/a/b/c/d"];
2820        ["touch"; "/a/b/c/e"];
2821        ["glob_expand"; "/a/*/x/*"]], [])],
2822    "expand a wildcard path",
2823    "\
2824 This command searches for all the pathnames matching
2825 C<pattern> according to the wildcard expansion rules
2826 used by the shell.
2827
2828 If no paths match, then this returns an empty list
2829 (note: not an error).
2830
2831 It is just a wrapper around the C L<glob(3)> function
2832 with flags C<GLOB_MARK|GLOB_BRACE>.
2833 See that manual page for more details.");
2834
2835   ("scrub_device", (RErr, [Device "device"]), 114, [DangerWillRobinson; Optional "scrub"],
2836    [InitNone, Always, TestRun ( (* use /dev/sdc because it's smaller *)
2837       [["scrub_device"; "/dev/sdc"]])],
2838    "scrub (securely wipe) a device",
2839    "\
2840 This command writes patterns over C<device> to make data retrieval
2841 more difficult.
2842
2843 It is an interface to the L<scrub(1)> program.  See that
2844 manual page for more details.");
2845
2846   ("scrub_file", (RErr, [Pathname "file"]), 115, [Optional "scrub"],
2847    [InitBasicFS, Always, TestRun (
2848       [["write"; "/file"; "content"];
2849        ["scrub_file"; "/file"]])],
2850    "scrub (securely wipe) a file",
2851    "\
2852 This command writes patterns over a file to make data retrieval
2853 more difficult.
2854
2855 The file is I<removed> after scrubbing.
2856
2857 It is an interface to the L<scrub(1)> program.  See that
2858 manual page for more details.");
2859
2860   ("scrub_freespace", (RErr, [Pathname "dir"]), 116, [Optional "scrub"],
2861    [], (* XXX needs testing *)
2862    "scrub (securely wipe) free space",
2863    "\
2864 This command creates the directory C<dir> and then fills it
2865 with files until the filesystem is full, and scrubs the files
2866 as for C<guestfs_scrub_file>, and deletes them.
2867 The intention is to scrub any free space on the partition
2868 containing C<dir>.
2869
2870 It is an interface to the L<scrub(1)> program.  See that
2871 manual page for more details.");
2872
2873   ("mkdtemp", (RString "dir", [Pathname "template"]), 117, [],
2874    [InitBasicFS, Always, TestRun (
2875       [["mkdir"; "/tmp"];
2876        ["mkdtemp"; "/tmp/tmpXXXXXX"]])],
2877    "create a temporary directory",
2878    "\
2879 This command creates a temporary directory.  The
2880 C<template> parameter should be a full pathname for the
2881 temporary directory name with the final six characters being
2882 \"XXXXXX\".
2883
2884 For example: \"/tmp/myprogXXXXXX\" or \"/Temp/myprogXXXXXX\",
2885 the second one being suitable for Windows filesystems.
2886
2887 The name of the temporary directory that was created
2888 is returned.
2889
2890 The temporary directory is created with mode 0700
2891 and is owned by root.
2892
2893 The caller is responsible for deleting the temporary
2894 directory and its contents after use.
2895
2896 See also: L<mkdtemp(3)>");
2897
2898   ("wc_l", (RInt "lines", [Pathname "path"]), 118, [],
2899    [InitISOFS, Always, TestOutputInt (
2900       [["wc_l"; "/10klines"]], 10000);
2901     (* Test for RHBZ#579608, absolute symbolic links. *)
2902     InitISOFS, Always, TestOutputInt (
2903       [["wc_l"; "/abssymlink"]], 10000)],
2904    "count lines in a file",
2905    "\
2906 This command counts the lines in a file, using the
2907 C<wc -l> external command.");
2908
2909   ("wc_w", (RInt "words", [Pathname "path"]), 119, [],
2910    [InitISOFS, Always, TestOutputInt (
2911       [["wc_w"; "/10klines"]], 10000)],
2912    "count words in a file",
2913    "\
2914 This command counts the words in a file, using the
2915 C<wc -w> external command.");
2916
2917   ("wc_c", (RInt "chars", [Pathname "path"]), 120, [],
2918    [InitISOFS, Always, TestOutputInt (
2919       [["wc_c"; "/100kallspaces"]], 102400)],
2920    "count characters in a file",
2921    "\
2922 This command counts the characters in a file, using the
2923 C<wc -c> external command.");
2924
2925   ("head", (RStringList "lines", [Pathname "path"]), 121, [ProtocolLimitWarning],
2926    [InitISOFS, Always, TestOutputList (
2927       [["head"; "/10klines"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz";"3abcdefghijklmnopqrstuvwxyz";"4abcdefghijklmnopqrstuvwxyz";"5abcdefghijklmnopqrstuvwxyz";"6abcdefghijklmnopqrstuvwxyz";"7abcdefghijklmnopqrstuvwxyz";"8abcdefghijklmnopqrstuvwxyz";"9abcdefghijklmnopqrstuvwxyz"]);
2928     (* Test for RHBZ#579608, absolute symbolic links. *)
2929     InitISOFS, Always, TestOutputList (
2930       [["head"; "/abssymlink"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz";"3abcdefghijklmnopqrstuvwxyz";"4abcdefghijklmnopqrstuvwxyz";"5abcdefghijklmnopqrstuvwxyz";"6abcdefghijklmnopqrstuvwxyz";"7abcdefghijklmnopqrstuvwxyz";"8abcdefghijklmnopqrstuvwxyz";"9abcdefghijklmnopqrstuvwxyz"])],
2931    "return first 10 lines of a file",
2932    "\
2933 This command returns up to the first 10 lines of a file as
2934 a list of strings.");
2935
2936   ("head_n", (RStringList "lines", [Int "nrlines"; Pathname "path"]), 122, [ProtocolLimitWarning],
2937    [InitISOFS, Always, TestOutputList (
2938       [["head_n"; "3"; "/10klines"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz"]);
2939     InitISOFS, Always, TestOutputList (
2940       [["head_n"; "-9997"; "/10klines"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz"]);
2941     InitISOFS, Always, TestOutputList (
2942       [["head_n"; "0"; "/10klines"]], [])],
2943    "return first N lines of a file",
2944    "\
2945 If the parameter C<nrlines> is a positive number, this returns the first
2946 C<nrlines> lines of the file C<path>.
2947
2948 If the parameter C<nrlines> is a negative number, this returns lines
2949 from the file C<path>, excluding the last C<nrlines> lines.
2950
2951 If the parameter C<nrlines> is zero, this returns an empty list.");
2952
2953   ("tail", (RStringList "lines", [Pathname "path"]), 123, [ProtocolLimitWarning],
2954    [InitISOFS, Always, TestOutputList (
2955       [["tail"; "/10klines"]], ["9990abcdefghijklmnopqrstuvwxyz";"9991abcdefghijklmnopqrstuvwxyz";"9992abcdefghijklmnopqrstuvwxyz";"9993abcdefghijklmnopqrstuvwxyz";"9994abcdefghijklmnopqrstuvwxyz";"9995abcdefghijklmnopqrstuvwxyz";"9996abcdefghijklmnopqrstuvwxyz";"9997abcdefghijklmnopqrstuvwxyz";"9998abcdefghijklmnopqrstuvwxyz";"9999abcdefghijklmnopqrstuvwxyz"])],
2956    "return last 10 lines of a file",
2957    "\
2958 This command returns up to the last 10 lines of a file as
2959 a list of strings.");
2960
2961   ("tail_n", (RStringList "lines", [Int "nrlines"; Pathname "path"]), 124, [ProtocolLimitWarning],
2962    [InitISOFS, Always, TestOutputList (
2963       [["tail_n"; "3"; "/10klines"]], ["9997abcdefghijklmnopqrstuvwxyz";"9998abcdefghijklmnopqrstuvwxyz";"9999abcdefghijklmnopqrstuvwxyz"]);
2964     InitISOFS, Always, TestOutputList (
2965       [["tail_n"; "-9998"; "/10klines"]], ["9997abcdefghijklmnopqrstuvwxyz";"9998abcdefghijklmnopqrstuvwxyz";"9999abcdefghijklmnopqrstuvwxyz"]);
2966     InitISOFS, Always, TestOutputList (
2967       [["tail_n"; "0"; "/10klines"]], [])],
2968    "return last N lines of a file",
2969    "\
2970 If the parameter C<nrlines> is a positive number, this returns the last
2971 C<nrlines> lines of the file C<path>.
2972
2973 If the parameter C<nrlines> is a negative number, this returns lines
2974 from the file C<path>, starting with the C<-nrlines>th line.
2975
2976 If the parameter C<nrlines> is zero, this returns an empty list.");
2977
2978   ("df", (RString "output", []), 125, [],
2979    [], (* XXX Tricky to test because it depends on the exact format
2980         * of the 'df' command and other imponderables.
2981         *)
2982    "report file system disk space usage",
2983    "\
2984 This command runs the C<df> command to report disk space used.
2985
2986 This command is mostly useful for interactive sessions.  It
2987 is I<not> intended that you try to parse the output string.
2988 Use C<statvfs> from programs.");
2989
2990   ("df_h", (RString "output", []), 126, [],
2991    [], (* XXX Tricky to test because it depends on the exact format
2992         * of the 'df' command and other imponderables.
2993         *)
2994    "report file system disk space usage (human readable)",
2995    "\
2996 This command runs the C<df -h> command to report disk space used
2997 in human-readable format.
2998
2999 This command is mostly useful for interactive sessions.  It
3000 is I<not> intended that you try to parse the output string.
3001 Use C<statvfs> from programs.");
3002
3003   ("du", (RInt64 "sizekb", [Pathname "path"]), 127, [],
3004    [InitISOFS, Always, TestOutputInt (
3005       [["du"; "/directory"]], 2 (* ISO fs blocksize is 2K *))],
3006    "estimate file space usage",
3007    "\
3008 This command runs the C<du -s> command to estimate file space
3009 usage for C<path>.
3010
3011 C<path> can be a file or a directory.  If C<path> is a directory
3012 then the estimate includes the contents of the directory and all
3013 subdirectories (recursively).
3014
3015 The result is the estimated size in I<kilobytes>
3016 (ie. units of 1024 bytes).");
3017
3018   ("initrd_list", (RStringList "filenames", [Pathname "path"]), 128, [],
3019    [InitISOFS, Always, TestOutputList (
3020       [["initrd_list"; "/initrd"]], ["empty";"known-1";"known-2";"known-3";"known-4"; "known-5"])],
3021    "list files in an initrd",
3022    "\
3023 This command lists out files contained in an initrd.
3024
3025 The files are listed without any initial C</> character.  The
3026 files are listed in the order they appear (not necessarily
3027 alphabetical).  Directory names are listed as separate items.
3028
3029 Old Linux kernels (2.4 and earlier) used a compressed ext2
3030 filesystem as initrd.  We I<only> support the newer initramfs
3031 format (compressed cpio files).");
3032
3033   ("mount_loop", (RErr, [Pathname "file"; Pathname "mountpoint"]), 129, [],
3034    [],
3035    "mount a file using the loop device",
3036    "\
3037 This command lets you mount C<file> (a filesystem image
3038 in a file) on a mount point.  It is entirely equivalent to
3039 the command C<mount -o loop file mountpoint>.");
3040
3041   ("mkswap", (RErr, [Device "device"]), 130, [],
3042    [InitEmpty, Always, TestRun (
3043       [["part_disk"; "/dev/sda"; "mbr"];
3044        ["mkswap"; "/dev/sda1"]])],
3045    "create a swap partition",
3046    "\
3047 Create a swap partition on C<device>.");
3048
3049   ("mkswap_L", (RErr, [String "label"; Device "device"]), 131, [],
3050    [InitEmpty, Always, TestRun (
3051       [["part_disk"; "/dev/sda"; "mbr"];
3052        ["mkswap_L"; "hello"; "/dev/sda1"]])],
3053    "create a swap partition with a label",
3054    "\
3055 Create a swap partition on C<device> with label C<label>.
3056
3057 Note that you cannot attach a swap label to a block device
3058 (eg. C</dev/sda>), just to a partition.  This appears to be
3059 a limitation of the kernel or swap tools.");
3060
3061   ("mkswap_U", (RErr, [String "uuid"; Device "device"]), 132, [Optional "linuxfsuuid"],
3062    (let uuid = uuidgen () in
3063     [InitEmpty, Always, TestRun (
3064        [["part_disk"; "/dev/sda"; "mbr"];
3065         ["mkswap_U"; uuid; "/dev/sda1"]])]),
3066    "create a swap partition with an explicit UUID",
3067    "\
3068 Create a swap partition on C<device> with UUID C<uuid>.");
3069
3070   ("mknod", (RErr, [Int "mode"; Int "devmajor"; Int "devminor"; Pathname "path"]), 133, [Optional "mknod"],
3071    [InitBasicFS, Always, TestOutputStruct (
3072       [["mknod"; "0o10777"; "0"; "0"; "/node"];
3073        (* NB: default umask 022 means 0777 -> 0755 in these tests *)
3074        ["stat"; "/node"]], [CompareWithInt ("mode", 0o10755)]);
3075     InitBasicFS, Always, TestOutputStruct (
3076       [["mknod"; "0o60777"; "66"; "99"; "/node"];
3077        ["stat"; "/node"]], [CompareWithInt ("mode", 0o60755)])],
3078    "make block, character or FIFO devices",
3079    "\
3080 This call creates block or character special devices, or
3081 named pipes (FIFOs).
3082
3083 The C<mode> parameter should be the mode, using the standard
3084 constants.  C<devmajor> and C<devminor> are the
3085 device major and minor numbers, only used when creating block
3086 and character special devices.
3087
3088 Note that, just like L<mknod(2)>, the mode must be bitwise
3089 OR'd with S_IFBLK, S_IFCHR, S_IFIFO or S_IFSOCK (otherwise this call
3090 just creates a regular file).  These constants are
3091 available in the standard Linux header files, or you can use
3092 C<guestfs_mknod_b>, C<guestfs_mknod_c> or C<guestfs_mkfifo>
3093 which are wrappers around this command which bitwise OR
3094 in the appropriate constant for you.
3095
3096 The mode actually set is affected by the umask.");
3097
3098   ("mkfifo", (RErr, [Int "mode"; Pathname "path"]), 134, [Optional "mknod"],
3099    [InitBasicFS, Always, TestOutputStruct (
3100       [["mkfifo"; "0o777"; "/node"];
3101        ["stat"; "/node"]], [CompareWithInt ("mode", 0o10755)])],
3102    "make FIFO (named pipe)",
3103    "\
3104 This call creates a FIFO (named pipe) called C<path> with
3105 mode C<mode>.  It is just a convenient wrapper around
3106 C<guestfs_mknod>.
3107
3108 The mode actually set is affected by the umask.");
3109
3110   ("mknod_b", (RErr, [Int "mode"; Int "devmajor"; Int "devminor"; Pathname "path"]), 135, [Optional "mknod"],
3111    [InitBasicFS, Always, TestOutputStruct (
3112       [["mknod_b"; "0o777"; "99"; "66"; "/node"];
3113        ["stat"; "/node"]], [CompareWithInt ("mode", 0o60755)])],
3114    "make block device node",
3115    "\
3116 This call creates a block device node called C<path> with
3117 mode C<mode> and device major/minor C<devmajor> and C<devminor>.
3118 It is just a convenient wrapper around C<guestfs_mknod>.
3119
3120 The mode actually set is affected by the umask.");
3121
3122   ("mknod_c", (RErr, [Int "mode"; Int "devmajor"; Int "devminor"; Pathname "path"]), 136, [Optional "mknod"],
3123    [InitBasicFS, Always, TestOutputStruct (
3124       [["mknod_c"; "0o777"; "99"; "66"; "/node"];
3125        ["stat"; "/node"]], [CompareWithInt ("mode", 0o20755)])],
3126    "make char device node",
3127    "\
3128 This call creates a char device node called C<path> with
3129 mode C<mode> and device major/minor C<devmajor> and C<devminor>.
3130 It is just a convenient wrapper around C<guestfs_mknod>.
3131
3132 The mode actually set is affected by the umask.");
3133
3134   ("umask", (RInt "oldmask", [Int "mask"]), 137, [FishOutput FishOutputOctal],
3135    [InitEmpty, Always, TestOutputInt (
3136       [["umask"; "0o22"]], 0o22)],
3137    "set file mode creation mask (umask)",
3138    "\
3139 This function sets the mask used for creating new files and
3140 device nodes to C<mask & 0777>.
3141
3142 Typical umask values would be C<022> which creates new files
3143 with permissions like \"-rw-r--r--\" or \"-rwxr-xr-x\", and
3144 C<002> which creates new files with permissions like
3145 \"-rw-rw-r--\" or \"-rwxrwxr-x\".
3146
3147 The default umask is C<022>.  This is important because it
3148 means that directories and device nodes will be created with
3149 C<0644> or C<0755> mode even if you specify C<0777>.
3150
3151 See also C<guestfs_get_umask>,
3152 L<umask(2)>, C<guestfs_mknod>, C<guestfs_mkdir>.
3153
3154 This call returns the previous umask.");
3155
3156   ("readdir", (RStructList ("entries", "dirent"), [Pathname "dir"]), 138, [],
3157    [],
3158    "read directories entries",
3159    "\
3160 This returns the list of directory entries in directory C<dir>.
3161
3162 All entries in the directory are returned, including C<.> and
3163 C<..>.  The entries are I<not> sorted, but returned in the same
3164 order as the underlying filesystem.
3165
3166 Also this call returns basic file type information about each
3167 file.  The C<ftyp> field will contain one of the following characters:
3168
3169 =over 4
3170
3171 =item 'b'
3172
3173 Block special
3174
3175 =item 'c'
3176
3177 Char special
3178
3179 =item 'd'
3180
3181 Directory
3182
3183 =item 'f'
3184
3185 FIFO (named pipe)
3186
3187 =item 'l'
3188
3189 Symbolic link
3190
3191 =item 'r'
3192
3193 Regular file
3194
3195 =item 's'
3196
3197 Socket
3198
3199 =item 'u'
3200
3201 Unknown file type
3202
3203 =item '?'
3204
3205 The L<readdir(3)> call returned a C<d_type> field with an
3206 unexpected value
3207
3208 =back
3209
3210 This function is primarily intended for use by programs.  To
3211 get a simple list of names, use C<guestfs_ls>.  To get a printable
3212 directory for human consumption, use C<guestfs_ll>.");
3213
3214   ("sfdiskM", (RErr, [Device "device"; StringList "lines"]), 139, [DangerWillRobinson],
3215    [],
3216    "create partitions on a block device",
3217    "\
3218 This is a simplified interface to the C<guestfs_sfdisk>
3219 command, where partition sizes are specified in megabytes
3220 only (rounded to the nearest cylinder) and you don't need
3221 to specify the cyls, heads and sectors parameters which
3222 were rarely if ever used anyway.
3223
3224 See also: C<guestfs_sfdisk>, the L<sfdisk(8)> manpage
3225 and C<guestfs_part_disk>");
3226
3227   ("zfile", (RString "description", [String "meth"; Pathname "path"]), 140, [DeprecatedBy "file"],
3228    [],
3229    "determine file type inside a compressed file",
3230    "\
3231 This command runs C<file> after first decompressing C<path>
3232 using C<method>.
3233
3234 C<method> must be one of C<gzip>, C<compress> or C<bzip2>.
3235
3236 Since 1.0.63, use C<guestfs_file> instead which can now
3237 process compressed files.");
3238
3239   ("getxattrs", (RStructList ("xattrs", "xattr"), [Pathname "path"]), 141, [Optional "linuxxattrs"],
3240    [],
3241    "list extended attributes of a file or directory",
3242    "\
3243 This call lists the extended attributes of the file or directory
3244 C<path>.
3245
3246 At the system call level, this is a combination of the
3247 L<listxattr(2)> and L<getxattr(2)> calls.
3248
3249 See also: C<guestfs_lgetxattrs>, L<attr(5)>.");
3250
3251   ("lgetxattrs", (RStructList ("xattrs", "xattr"), [Pathname "path"]), 142, [Optional "linuxxattrs"],
3252    [],
3253    "list extended attributes of a file or directory",
3254    "\
3255 This is the same as C<guestfs_getxattrs>, but if C<path>
3256 is a symbolic link, then it returns the extended attributes
3257 of the link itself.");
3258
3259   ("setxattr", (RErr, [String "xattr";
3260                        String "val"; Int "vallen"; (* will be BufferIn *)
3261                        Pathname "path"]), 143, [Optional "linuxxattrs"],
3262    [],
3263    "set extended attribute of a file or directory",
3264    "\
3265 This call sets the extended attribute named C<xattr>
3266 of the file C<path> to the value C<val> (of length C<vallen>).
3267 The value is arbitrary 8 bit data.
3268
3269 See also: C<guestfs_lsetxattr>, L<attr(5)>.");
3270
3271   ("lsetxattr", (RErr, [String "xattr";
3272                         String "val"; Int "vallen"; (* will be BufferIn *)
3273                         Pathname "path"]), 144, [Optional "linuxxattrs"],
3274    [],
3275    "set extended attribute of a file or directory",
3276    "\
3277 This is the same as C<guestfs_setxattr>, but if C<path>
3278 is a symbolic link, then it sets an extended attribute
3279 of the link itself.");
3280
3281   ("removexattr", (RErr, [String "xattr"; Pathname "path"]), 145, [Optional "linuxxattrs"],
3282    [],
3283    "remove extended attribute of a file or directory",
3284    "\
3285 This call removes the extended attribute named C<xattr>
3286 of the file C<path>.
3287
3288 See also: C<guestfs_lremovexattr>, L<attr(5)>.");
3289
3290   ("lremovexattr", (RErr, [String "xattr"; Pathname "path"]), 146, [Optional "linuxxattrs"],
3291    [],
3292    "remove extended attribute of a file or directory",
3293    "\
3294 This is the same as C<guestfs_removexattr>, but if C<path>
3295 is a symbolic link, then it removes an extended attribute
3296 of the link itself.");
3297
3298   ("mountpoints", (RHashtable "mps", []), 147, [],
3299    [],
3300    "show mountpoints",
3301    "\
3302 This call is similar to C<guestfs_mounts>.  That call returns
3303 a list of devices.  This one returns a hash table (map) of
3304 device name to directory where the device is mounted.");
3305
3306   ("mkmountpoint", (RErr, [String "exemptpath"]), 148, [],
3307    (* This is a special case: while you would expect a parameter
3308     * of type "Pathname", that doesn't work, because it implies
3309     * NEED_ROOT in the generated calling code in stubs.c, and
3310     * this function cannot use NEED_ROOT.
3311     *)
3312    [],
3313    "create a mountpoint",
3314    "\
3315 C<guestfs_mkmountpoint> and C<guestfs_rmmountpoint> are
3316 specialized calls that can be used to create extra mountpoints
3317 before mounting the first filesystem.
3318
3319 These calls are I<only> necessary in some very limited circumstances,
3320 mainly the case where you want to mount a mix of unrelated and/or
3321 read-only filesystems together.
3322
3323 For example, live CDs often contain a \"Russian doll\" nest of
3324 filesystems, an ISO outer layer, with a squashfs image inside, with
3325 an ext2/3 image inside that.  You can unpack this as follows
3326 in guestfish:
3327
3328  add-ro Fedora-11-i686-Live.iso
3329  run
3330  mkmountpoint /cd
3331  mkmountpoint /squash
3332  mkmountpoint /ext3
3333  mount /dev/sda /cd
3334  mount-loop /cd/LiveOS/squashfs.img /squash
3335  mount-loop /squash/LiveOS/ext3fs.img /ext3
3336
3337 The inner filesystem is now unpacked under the /ext3 mountpoint.");
3338
3339   ("rmmountpoint", (RErr, [String "exemptpath"]), 149, [],
3340    [],
3341    "remove a mountpoint",
3342    "\
3343 This calls removes a mountpoint that was previously created
3344 with C<guestfs_mkmountpoint>.  See C<guestfs_mkmountpoint>
3345 for full details.");
3346
3347   ("read_file", (RBufferOut "content", [Pathname "path"]), 150, [ProtocolLimitWarning],
3348    [InitISOFS, Always, TestOutputBuffer (
3349       [["read_file"; "/known-4"]], "abc\ndef\nghi");
3350     (* Test various near large, large and too large files (RHBZ#589039). *)
3351     InitBasicFS, Always, TestLastFail (
3352       [["touch"; "/a"];
3353        ["truncate_size"; "/a"; "4194303"]; (* GUESTFS_MESSAGE_MAX - 1 *)
3354        ["read_file"; "/a"]]);
3355     InitBasicFS, Always, TestLastFail (
3356       [["touch"; "/a"];
3357        ["truncate_size"; "/a"; "4194304"]; (* GUESTFS_MESSAGE_MAX *)
3358        ["read_file"; "/a"]]);
3359     InitBasicFS, Always, TestLastFail (
3360       [["touch"; "/a"];
3361        ["truncate_size"; "/a"; "41943040"]; (* GUESTFS_MESSAGE_MAX * 10 *)
3362        ["read_file"; "/a"]])],
3363    "read a file",
3364    "\
3365 This calls returns the contents of the file C<path> as a
3366 buffer.
3367
3368 Unlike C<guestfs_cat>, this function can correctly
3369 handle files that contain embedded ASCII NUL characters.
3370 However unlike C<guestfs_download>, this function is limited
3371 in the total size of file that can be handled.");
3372
3373   ("grep", (RStringList "lines", [String "regex"; Pathname "path"]), 151, [ProtocolLimitWarning],
3374    [InitISOFS, Always, TestOutputList (
3375       [["grep"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"]);
3376     InitISOFS, Always, TestOutputList (
3377       [["grep"; "nomatch"; "/test-grep.txt"]], []);
3378     (* Test for RHBZ#579608, absolute symbolic links. *)
3379     InitISOFS, Always, TestOutputList (
3380       [["grep"; "nomatch"; "/abssymlink"]], [])],
3381    "return lines matching a pattern",
3382    "\
3383 This calls the external C<grep> program and returns the
3384 matching lines.");
3385
3386   ("egrep", (RStringList "lines", [String "regex"; Pathname "path"]), 152, [ProtocolLimitWarning],
3387    [InitISOFS, Always, TestOutputList (
3388       [["egrep"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"])],
3389    "return lines matching a pattern",
3390    "\
3391 This calls the external C<egrep> program and returns the
3392 matching lines.");
3393
3394   ("fgrep", (RStringList "lines", [String "pattern"; Pathname "path"]), 153, [ProtocolLimitWarning],
3395    [InitISOFS, Always, TestOutputList (
3396       [["fgrep"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"])],
3397    "return lines matching a pattern",
3398    "\
3399 This calls the external C<fgrep> program and returns the
3400 matching lines.");
3401
3402   ("grepi", (RStringList "lines", [String "regex"; Pathname "path"]), 154, [ProtocolLimitWarning],
3403    [InitISOFS, Always, TestOutputList (
3404       [["grepi"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"; "ABC"])],
3405    "return lines matching a pattern",
3406    "\
3407 This calls the external C<grep -i> program and returns the
3408 matching lines.");
3409
3410   ("egrepi", (RStringList "lines", [String "regex"; Pathname "path"]), 155, [ProtocolLimitWarning],
3411    [InitISOFS, Always, TestOutputList (
3412       [["egrepi"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"; "ABC"])],
3413    "return lines matching a pattern",
3414    "\
3415 This calls the external C<egrep -i> program and returns the
3416 matching lines.");
3417
3418   ("fgrepi", (RStringList "lines", [String "pattern"; Pathname "path"]), 156, [ProtocolLimitWarning],
3419    [InitISOFS, Always, TestOutputList (
3420       [["fgrepi"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"; "ABC"])],
3421    "return lines matching a pattern",
3422    "\
3423 This calls the external C<fgrep -i> program and returns the
3424 matching lines.");
3425
3426   ("zgrep", (RStringList "lines", [String "regex"; Pathname "path"]), 157, [ProtocolLimitWarning],
3427    [InitISOFS, Always, TestOutputList (
3428       [["zgrep"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"])],
3429    "return lines matching a pattern",
3430    "\
3431 This calls the external C<zgrep> program and returns the
3432 matching lines.");
3433
3434   ("zegrep", (RStringList "lines", [String "regex"; Pathname "path"]), 158, [ProtocolLimitWarning],
3435    [InitISOFS, Always, TestOutputList (
3436       [["zegrep"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"])],
3437    "return lines matching a pattern",
3438    "\
3439 This calls the external C<zegrep> program and returns the
3440 matching lines.");
3441
3442   ("zfgrep", (RStringList "lines", [String "pattern"; Pathname "path"]), 159, [ProtocolLimitWarning],
3443    [InitISOFS, Always, TestOutputList (
3444       [["zfgrep"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"])],
3445    "return lines matching a pattern",
3446    "\
3447 This calls the external C<zfgrep> program and returns the
3448 matching lines.");
3449
3450   ("zgrepi", (RStringList "lines", [String "regex"; Pathname "path"]), 160, [ProtocolLimitWarning],
3451    [InitISOFS, Always, TestOutputList (
3452       [["zgrepi"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"; "ABC"])],
3453    "return lines matching a pattern",
3454    "\
3455 This calls the external C<zgrep -i> program and returns the
3456 matching lines.");
3457
3458   ("zegrepi", (RStringList "lines", [String "regex"; Pathname "path"]), 161, [ProtocolLimitWarning],
3459    [InitISOFS, Always, TestOutputList (
3460       [["zegrepi"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"; "ABC"])],
3461    "return lines matching a pattern",
3462    "\
3463 This calls the external C<zegrep -i> program and returns the
3464 matching lines.");
3465
3466   ("zfgrepi", (RStringList "lines", [String "pattern"; Pathname "path"]), 162, [ProtocolLimitWarning],
3467    [InitISOFS, Always, TestOutputList (
3468       [["zfgrepi"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"; "ABC"])],
3469    "return lines matching a pattern",
3470    "\
3471 This calls the external C<zfgrep -i> program and returns the
3472 matching lines.");
3473
3474   ("realpath", (RString "rpath", [Pathname "path"]), 163, [Optional "realpath"],
3475    [InitISOFS, Always, TestOutput (
3476       [["realpath"; "/../directory"]], "/directory")],
3477    "canonicalized absolute pathname",
3478    "\
3479 Return the canonicalized absolute pathname of C<path>.  The
3480 returned path has no C<.>, C<..> or symbolic link path elements.");
3481
3482   ("ln", (RErr, [String "target"; Pathname "linkname"]), 164, [],
3483    [InitBasicFS, Always, TestOutputStruct (
3484       [["touch"; "/a"];
3485        ["ln"; "/a"; "/b"];
3486        ["stat"; "/b"]], [CompareWithInt ("nlink", 2)])],
3487    "create a hard link",
3488    "\
3489 This command creates a hard link using the C<ln> command.");
3490
3491   ("ln_f", (RErr, [String "target"; Pathname "linkname"]), 165, [],
3492    [InitBasicFS, Always, TestOutputStruct (
3493       [["touch"; "/a"];
3494        ["touch"; "/b"];
3495        ["ln_f"; "/a"; "/b"];
3496        ["stat"; "/b"]], [CompareWithInt ("nlink", 2)])],
3497    "create a hard link",
3498    "\
3499 This command creates a hard link using the C<ln -f> command.
3500 The C<-f> option removes the link (C<linkname>) if it exists already.");
3501
3502   ("ln_s", (RErr, [String "target"; Pathname "linkname"]), 166, [],
3503    [InitBasicFS, Always, TestOutputStruct (
3504       [["touch"; "/a"];
3505        ["ln_s"; "a"; "/b"];
3506        ["lstat"; "/b"]], [CompareWithInt ("mode", 0o120777)])],
3507    "create a symbolic link",
3508    "\
3509 This command creates a symbolic link using the C<ln -s> command.");
3510
3511   ("ln_sf", (RErr, [String "target"; Pathname "linkname"]), 167, [],
3512    [InitBasicFS, Always, TestOutput (
3513       [["mkdir_p"; "/a/b"];
3514        ["touch"; "/a/b/c"];
3515        ["ln_sf"; "../d"; "/a/b/c"];
3516        ["readlink"; "/a/b/c"]], "../d")],
3517    "create a symbolic link",
3518    "\
3519 This command creates a symbolic link using the C<ln -sf> command,
3520 The C<-f> option removes the link (C<linkname>) if it exists already.");
3521
3522   ("readlink", (RString "link", [Pathname "path"]), 168, [],
3523    [] (* XXX tested above *),
3524    "read the target of a symbolic link",
3525    "\
3526 This command reads the target of a symbolic link.");
3527
3528   ("fallocate", (RErr, [Pathname "path"; Int "len"]), 169, [DeprecatedBy "fallocate64"],
3529    [InitBasicFS, Always, TestOutputStruct (
3530       [["fallocate"; "/a"; "1000000"];
3531        ["stat"; "/a"]], [CompareWithInt ("size", 1_000_000)])],
3532    "preallocate a file in the guest filesystem",
3533    "\
3534 This command preallocates a file (containing zero bytes) named
3535 C<path> of size C<len> bytes.  If the file exists already, it
3536 is overwritten.
3537
3538 Do not confuse this with the guestfish-specific
3539 C<alloc> command which allocates a file in the host and
3540 attaches it as a device.");
3541
3542   ("swapon_device", (RErr, [Device "device"]), 170, [],
3543    [InitPartition, Always, TestRun (
3544       [["mkswap"; "/dev/sda1"];
3545        ["swapon_device"; "/dev/sda1"];
3546        ["swapoff_device"; "/dev/sda1"]])],
3547    "enable swap on device",
3548    "\
3549 This command enables the libguestfs appliance to use the
3550 swap device or partition named C<device>.  The increased
3551 memory is made available for all commands, for example
3552 those run using C<guestfs_command> or C<guestfs_sh>.
3553
3554 Note that you should not swap to existing guest swap
3555 partitions unless you know what you are doing.  They may
3556 contain hibernation information, or other information that
3557 the guest doesn't want you to trash.  You also risk leaking
3558 information about the host to the guest this way.  Instead,
3559 attach a new host device to the guest and swap on that.");
3560
3561   ("swapoff_device", (RErr, [Device "device"]), 171, [],
3562    [], (* XXX tested by swapon_device *)
3563    "disable swap on device",
3564    "\
3565 This command disables the libguestfs appliance swap
3566 device or partition named C<device>.
3567 See C<guestfs_swapon_device>.");
3568
3569   ("swapon_file", (RErr, [Pathname "file"]), 172, [],
3570    [InitBasicFS, Always, TestRun (
3571       [["fallocate"; "/swap"; "8388608"];
3572        ["mkswap_file"; "/swap"];
3573        ["swapon_file"; "/swap"];
3574        ["swapoff_file"; "/swap"]])],
3575    "enable swap on file",
3576    "\
3577 This command enables swap to a file.
3578 See C<guestfs_swapon_device> for other notes.");
3579
3580   ("swapoff_file", (RErr, [Pathname "file"]), 173, [],
3581    [], (* XXX tested by swapon_file *)
3582    "disable swap on file",
3583    "\
3584 This command disables the libguestfs appliance swap on file.");
3585
3586   ("swapon_label", (RErr, [String "label"]), 174, [],
3587    [InitEmpty, Always, TestRun (
3588       [["part_disk"; "/dev/sdb"; "mbr"];
3589        ["mkswap_L"; "swapit"; "/dev/sdb1"];
3590        ["swapon_label"; "swapit"];
3591        ["swapoff_label"; "swapit"];
3592        ["zero"; "/dev/sdb"];
3593        ["blockdev_rereadpt"; "/dev/sdb"]])],
3594    "enable swap on labeled swap partition",
3595    "\
3596 This command enables swap to a labeled swap partition.
3597 See C<guestfs_swapon_device> for other notes.");
3598
3599   ("swapoff_label", (RErr, [String "label"]), 175, [],
3600    [], (* XXX tested by swapon_label *)
3601    "disable swap on labeled swap partition",
3602    "\
3603 This command disables the libguestfs appliance swap on
3604 labeled swap partition.");
3605
3606   ("swapon_uuid", (RErr, [String "uuid"]), 176, [Optional "linuxfsuuid"],
3607    (let uuid = uuidgen () in
3608     [InitEmpty, Always, TestRun (
3609        [["mkswap_U"; uuid; "/dev/sdb"];
3610         ["swapon_uuid"; uuid];
3611         ["swapoff_uuid"; uuid]])]),
3612    "enable swap on swap partition by UUID",
3613    "\
3614 This command enables swap to a swap partition with the given UUID.
3615 See C<guestfs_swapon_device> for other notes.");
3616
3617   ("swapoff_uuid", (RErr, [String "uuid"]), 177, [Optional "linuxfsuuid"],
3618    [], (* XXX tested by swapon_uuid *)
3619    "disable swap on swap partition by UUID",
3620    "\
3621 This command disables the libguestfs appliance swap partition
3622 with the given UUID.");
3623
3624   ("mkswap_file", (RErr, [Pathname "path"]), 178, [],
3625    [InitBasicFS, Always, TestRun (
3626       [["fallocate"; "/swap"; "8388608"];
3627        ["mkswap_file"; "/swap"]])],
3628    "create a swap file",
3629    "\
3630 Create a swap file.
3631
3632 This command just writes a swap file signature to an existing
3633 file.  To create the file itself, use something like C<guestfs_fallocate>.");
3634
3635   ("inotify_init", (RErr, [Int "maxevents"]), 179, [Optional "inotify"],
3636    [InitISOFS, Always, TestRun (
3637       [["inotify_init"; "0"]])],
3638    "create an inotify handle",
3639    "\
3640 This command creates a new inotify handle.
3641 The inotify subsystem can be used to notify events which happen to
3642 objects in the guest filesystem.
3643
3644 C<maxevents> is the maximum number of events which will be
3645 queued up between calls to C<guestfs_inotify_read> or
3646 C<guestfs_inotify_files>.
3647 If this is passed as C<0>, then the kernel (or previously set)
3648 default is used.  For Linux 2.6.29 the default was 16384 events.
3649 Beyond this limit, the kernel throws away events, but records
3650 the fact that it threw them away by setting a flag
3651 C<IN_Q_OVERFLOW> in the returned structure list (see
3652 C<guestfs_inotify_read>).
3653
3654 Before any events are generated, you have to add some
3655 watches to the internal watch list.  See:
3656 C<guestfs_inotify_add_watch>,
3657 C<guestfs_inotify_rm_watch> and
3658 C<guestfs_inotify_watch_all>.
3659
3660 Queued up events should be read periodically by calling
3661 C<guestfs_inotify_read>
3662 (or C<guestfs_inotify_files> which is just a helpful
3663 wrapper around C<guestfs_inotify_read>).  If you don't
3664 read the events out often enough then you risk the internal
3665 queue overflowing.
3666
3667 The handle should be closed after use by calling
3668 C<guestfs_inotify_close>.  This also removes any
3669 watches automatically.
3670
3671 See also L<inotify(7)> for an overview of the inotify interface
3672 as exposed by the Linux kernel, which is roughly what we expose
3673 via libguestfs.  Note that there is one global inotify handle
3674 per libguestfs instance.");
3675
3676   ("inotify_add_watch", (RInt64 "wd", [Pathname "path"; Int "mask"]), 180, [Optional "inotify"],
3677    [InitBasicFS, Always, TestOutputList (
3678       [["inotify_init"; "0"];
3679        ["inotify_add_watch"; "/"; "1073741823"];
3680        ["touch"; "/a"];
3681        ["touch"; "/b"];
3682        ["inotify_files"]], ["a"; "b"])],
3683    "add an inotify watch",
3684    "\
3685 Watch C<path> for the events listed in C<mask>.
3686
3687 Note that if C<path> is a directory then events within that
3688 directory are watched, but this does I<not> happen recursively
3689 (in subdirectories).
3690
3691 Note for non-C or non-Linux callers: the inotify events are
3692 defined by the Linux kernel ABI and are listed in
3693 C</usr/include/sys/inotify.h>.");
3694
3695   ("inotify_rm_watch", (RErr, [Int(*XXX64*) "wd"]), 181, [Optional "inotify"],
3696    [],
3697    "remove an inotify watch",
3698    "\
3699 Remove a previously defined inotify watch.
3700 See C<guestfs_inotify_add_watch>.");
3701
3702   ("inotify_read", (RStructList ("events", "inotify_event"), []), 182, [Optional "inotify"],
3703    [],
3704    "return list of inotify events",
3705    "\
3706 Return the complete queue of events that have happened
3707 since the previous read call.
3708
3709 If no events have happened, this returns an empty list.
3710
3711 I<Note>: In order to make sure that all events have been
3712 read, you must call this function repeatedly until it
3713 returns an empty list.  The reason is that the call will
3714 read events up to the maximum appliance-to-host message
3715 size and leave remaining events in the queue.");
3716
3717   ("inotify_files", (RStringList "paths", []), 183, [Optional "inotify"],
3718    [],
3719    "return list of watched files that had events",
3720    "\
3721 This function is a helpful wrapper around C<guestfs_inotify_read>
3722 which just returns a list of pathnames of objects that were
3723 touched.  The returned pathnames are sorted and deduplicated.");
3724
3725   ("inotify_close", (RErr, []), 184, [Optional "inotify"],
3726    [],
3727    "close the inotify handle",
3728    "\
3729 This closes the inotify handle which was previously
3730 opened by inotify_init.  It removes all watches, throws
3731 away any pending events, and deallocates all resources.");
3732
3733   ("setcon", (RErr, [String "context"]), 185, [Optional "selinux"],
3734    [],
3735    "set SELinux security context",
3736    "\
3737 This sets the SELinux security context of the daemon
3738 to the string C<context>.
3739
3740 See the documentation about SELINUX in L<guestfs(3)>.");
3741
3742   ("getcon", (RString "context", []), 186, [Optional "selinux"],
3743    [],
3744    "get SELinux security context",
3745    "\
3746 This gets the SELinux security context of the daemon.
3747
3748 See the documentation about SELINUX in L<guestfs(3)>,
3749 and C<guestfs_setcon>");
3750
3751   ("mkfs_b", (RErr, [String "fstype"; Int "blocksize"; Device "device"]), 187, [],
3752    [InitEmpty, Always, TestOutput (
3753       [["part_disk"; "/dev/sda"; "mbr"];
3754        ["mkfs_b"; "ext2"; "4096"; "/dev/sda1"];
3755        ["mount_options"; ""; "/dev/sda1"; "/"];
3756        ["write"; "/new"; "new file contents"];
3757        ["cat"; "/new"]], "new file contents");
3758     InitEmpty, Always, TestRun (
3759       [["part_disk"; "/dev/sda"; "mbr"];
3760        ["mkfs_b"; "vfat"; "32768"; "/dev/sda1"]]);
3761     InitEmpty, Always, TestLastFail (
3762       [["part_disk"; "/dev/sda"; "mbr"];
3763        ["mkfs_b"; "vfat"; "32769"; "/dev/sda1"]]);
3764     InitEmpty, Always, TestLastFail (
3765       [["part_disk"; "/dev/sda"; "mbr"];
3766        ["mkfs_b"; "vfat"; "33280"; "/dev/sda1"]]);
3767     InitEmpty, IfAvailable "ntfsprogs", TestRun (
3768       [["part_disk"; "/dev/sda"; "mbr"];
3769        ["mkfs_b"; "ntfs"; "32768"; "/dev/sda1"]])],
3770    "make a filesystem with block size",
3771    "\
3772 This call is similar to C<guestfs_mkfs>, but it allows you to
3773 control the block size of the resulting filesystem.  Supported
3774 block sizes depend on the filesystem type, but typically they
3775 are C<1024>, C<2048> or C<4096> only.
3776
3777 For VFAT and NTFS the C<blocksize> parameter is treated as
3778 the requested cluster size.");
3779
3780   ("mke2journal", (RErr, [Int "blocksize"; Device "device"]), 188, [],
3781    [InitEmpty, Always, TestOutput (
3782       [["sfdiskM"; "/dev/sda"; ",100 ,"];
3783        ["mke2journal"; "4096"; "/dev/sda1"];
3784        ["mke2fs_J"; "ext2"; "4096"; "/dev/sda2"; "/dev/sda1"];
3785        ["mount_options"; ""; "/dev/sda2"; "/"];
3786        ["write"; "/new"; "new file contents"];
3787        ["cat"; "/new"]], "new file contents")],
3788    "make ext2/3/4 external journal",
3789    "\
3790 This creates an ext2 external journal on C<device>.  It is equivalent
3791 to the command:
3792
3793  mke2fs -O journal_dev -b blocksize device");
3794
3795   ("mke2journal_L", (RErr, [Int "blocksize"; String "label"; Device "device"]), 189, [],
3796    [InitEmpty, Always, TestOutput (
3797       [["sfdiskM"; "/dev/sda"; ",100 ,"];
3798        ["mke2journal_L"; "4096"; "JOURNAL"; "/dev/sda1"];
3799        ["mke2fs_JL"; "ext2"; "4096"; "/dev/sda2"; "JOURNAL"];
3800        ["mount_options"; ""; "/dev/sda2"; "/"];
3801        ["write"; "/new"; "new file contents"];
3802        ["cat"; "/new"]], "new file contents")],
3803    "make ext2/3/4 external journal with label",
3804    "\
3805 This creates an ext2 external journal on C<device> with label C<label>.");
3806
3807   ("mke2journal_U", (RErr, [Int "blocksize"; String "uuid"; Device "device"]), 190, [Optional "linuxfsuuid"],
3808    (let uuid = uuidgen () in
3809     [InitEmpty, Always, TestOutput (
3810        [["sfdiskM"; "/dev/sda"; ",100 ,"];
3811         ["mke2journal_U"; "4096"; uuid; "/dev/sda1"];
3812         ["mke2fs_JU"; "ext2"; "4096"; "/dev/sda2"; uuid];
3813         ["mount_options"; ""; "/dev/sda2"; "/"];
3814         ["write"; "/new"; "new file contents"];
3815         ["cat"; "/new"]], "new file contents")]),
3816    "make ext2/3/4 external journal with UUID",
3817    "\
3818 This creates an ext2 external journal on C<device> with UUID C<uuid>.");
3819
3820   ("mke2fs_J", (RErr, [String "fstype"; Int "blocksize"; Device "device"; Device "journal"]), 191, [],
3821    [],
3822    "make ext2/3/4 filesystem with external journal",
3823    "\
3824 This creates an ext2/3/4 filesystem on C<device> with
3825 an external journal on C<journal>.  It is equivalent
3826 to the command:
3827
3828  mke2fs -t fstype -b blocksize -J device=<journal> <device>
3829
3830 See also C<guestfs_mke2journal>.");
3831
3832   ("mke2fs_JL", (RErr, [String "fstype"; Int "blocksize"; Device "device"; String "label"]), 192, [],
3833    [],
3834    "make ext2/3/4 filesystem with external journal",
3835    "\
3836 This creates an ext2/3/4 filesystem on C<device> with
3837 an external journal on the journal labeled C<label>.
3838
3839 See also C<guestfs_mke2journal_L>.");
3840
3841   ("mke2fs_JU", (RErr, [String "fstype"; Int "blocksize"; Device "device"; String "uuid"]), 193, [Optional "linuxfsuuid"],
3842    [],
3843    "make ext2/3/4 filesystem with external journal",
3844    "\
3845 This creates an ext2/3/4 filesystem on C<device> with
3846 an external journal on the journal with UUID C<uuid>.
3847
3848 See also C<guestfs_mke2journal_U>.");
3849
3850   ("modprobe", (RErr, [String "modulename"]), 194, [Optional "linuxmodules"],
3851    [InitNone, Always, TestRun [["modprobe"; "fat"]]],
3852    "load a kernel module",
3853    "\
3854 This loads a kernel module in the appliance.
3855
3856 The kernel module must have been whitelisted when libguestfs
3857 was built (see C<appliance/kmod.whitelist.in> in the source).");
3858
3859   ("echo_daemon", (RString "output", [StringList "words"]), 195, [],
3860    [InitNone, Always, TestOutput (
3861       [["echo_daemon"; "This is a test"]], "This is a test"
3862     )],
3863    "echo arguments back to the client",
3864    "\
3865 This command concatenates the list of C<words> passed with single spaces
3866 between them and returns the resulting string.
3867
3868 You can use this command to test the connection through to the daemon.
3869
3870 See also C<guestfs_ping_daemon>.");
3871
3872   ("find0", (RErr, [Pathname "directory"; FileOut "files"]), 196, [],
3873    [], (* There is a regression test for this. *)
3874    "find all files and directories, returning NUL-separated list",
3875    "\
3876 This command lists out all files and directories, recursively,
3877 starting at C<directory>, placing the resulting list in the
3878 external file called C<files>.
3879
3880 This command works the same way as C<guestfs_find> with the
3881 following exceptions:
3882
3883 =over 4
3884
3885 =item *
3886
3887 The resulting list is written to an external file.
3888
3889 =item *
3890
3891 Items (filenames) in the result are separated
3892 by C<\\0> characters.  See L<find(1)> option I<-print0>.
3893
3894 =item *
3895
3896 This command is not limited in the number of names that it
3897 can return.
3898
3899 =item *
3900
3901 The result list is not sorted.
3902
3903 =back");
3904
3905   ("case_sensitive_path", (RString "rpath", [Pathname "path"]), 197, [],
3906    [InitISOFS, Always, TestOutput (
3907       [["case_sensitive_path"; "/DIRECTORY"]], "/directory");
3908     InitISOFS, Always, TestOutput (
3909       [["case_sensitive_path"; "/DIRECTORY/"]], "/directory");
3910     InitISOFS, Always, TestOutput (
3911       [["case_sensitive_path"; "/Known-1"]], "/known-1");
3912     InitISOFS, Always, TestLastFail (
3913       [["case_sensitive_path"; "/Known-1/"]]);
3914     InitBasicFS, Always, TestOutput (
3915       [["mkdir"; "/a"];
3916        ["mkdir"; "/a/bbb"];
3917        ["touch"; "/a/bbb/c"];
3918        ["case_sensitive_path"; "/A/bbB/C"]], "/a/bbb/c");
3919     InitBasicFS, Always, TestOutput (
3920       [["mkdir"; "/a"];
3921        ["mkdir"; "/a/bbb"];
3922        ["touch"; "/a/bbb/c"];
3923        ["case_sensitive_path"; "/A////bbB/C"]], "/a/bbb/c");
3924     InitBasicFS, Always, TestLastFail (
3925       [["mkdir"; "/a"];
3926        ["mkdir"; "/a/bbb"];
3927        ["touch"; "/a/bbb/c"];
3928        ["case_sensitive_path"; "/A/bbb/../bbb/C"]])],
3929    "return true path on case-insensitive filesystem",
3930    "\
3931 This can be used to resolve case insensitive paths on
3932 a filesystem which is case sensitive.  The use case is
3933 to resolve paths which you have read from Windows configuration
3934 files or the Windows Registry, to the true path.
3935
3936 The command handles a peculiarity of the Linux ntfs-3g
3937 filesystem driver (and probably others), which is that although
3938 the underlying filesystem is case-insensitive, the driver
3939 exports the filesystem to Linux as case-sensitive.
3940
3941 One consequence of this is that special directories such
3942 as C<c:\\windows> may appear as C</WINDOWS> or C</windows>
3943 (or other things) depending on the precise details of how
3944 they were created.  In Windows itself this would not be
3945 a problem.
3946
3947 Bug or feature?  You decide:
3948 L<http://www.tuxera.com/community/ntfs-3g-faq/#posixfilenames1>
3949
3950 This function resolves the true case of each element in the
3951 path and returns the case-sensitive path.
3952
3953 Thus C<guestfs_case_sensitive_path> (\"/Windows/System32\")
3954 might return C<\"/WINDOWS/system32\"> (the exact return value
3955 would depend on details of how the directories were originally
3956 created under Windows).
3957
3958 I<Note>:
3959 This function does not handle drive names, backslashes etc.
3960
3961 See also C<guestfs_realpath>.");
3962
3963   ("vfs_type", (RString "fstype", [Device "device"]), 198, [],
3964    [InitBasicFS, Always, TestOutput (
3965       [["vfs_type"; "/dev/sda1"]], "ext2")],
3966    "get the Linux VFS type corresponding to a mounted device",
3967    "\
3968 This command gets the filesystem type corresponding to
3969 the filesystem on C<device>.
3970
3971 For most filesystems, the result is the name of the Linux
3972 VFS module which would be used to mount this filesystem
3973 if you mounted it without specifying the filesystem type.
3974 For example a string such as C<ext3> or C<ntfs>.");
3975
3976   ("truncate", (RErr, [Pathname "path"]), 199, [],
3977    [InitBasicFS, Always, TestOutputStruct (
3978       [["write"; "/test"; "some stuff so size is not zero"];
3979        ["truncate"; "/test"];
3980        ["stat"; "/test"]], [CompareWithInt ("size", 0)])],
3981    "truncate a file to zero size",
3982    "\
3983 This command truncates C<path> to a zero-length file.  The
3984 file must exist already.");
3985
3986   ("truncate_size", (RErr, [Pathname "path"; Int64 "size"]), 200, [],
3987    [InitBasicFS, Always, TestOutputStruct (
3988       [["touch"; "/test"];
3989        ["truncate_size"; "/test"; "1000"];
3990        ["stat"; "/test"]], [CompareWithInt ("size", 1000)])],
3991    "truncate a file to a particular size",
3992    "\
3993 This command truncates C<path> to size C<size> bytes.  The file
3994 must exist already.
3995
3996 If the current file size is less than C<size> then
3997 the file is extended to the required size with zero bytes.
3998 This creates a sparse file (ie. disk blocks are not allocated
3999 for the file until you write to it).  To create a non-sparse
4000 file of zeroes, use C<guestfs_fallocate64> instead.");
4001
4002   ("utimens", (RErr, [Pathname "path"; Int64 "atsecs"; Int64 "atnsecs"; Int64 "mtsecs"; Int64 "mtnsecs"]), 201, [],
4003    [InitBasicFS, Always, TestOutputStruct (
4004       [["touch"; "/test"];
4005        ["utimens"; "/test"; "12345"; "67890"; "9876"; "5432"];
4006        ["stat"; "/test"]], [CompareWithInt ("mtime", 9876)])],
4007    "set timestamp of a file with nanosecond precision",
4008    "\
4009 This command sets the timestamps of a file with nanosecond
4010 precision.
4011
4012 C<atsecs, atnsecs> are the last access time (atime) in secs and
4013 nanoseconds from the epoch.
4014
4015 C<mtsecs, mtnsecs> are the last modification time (mtime) in
4016 secs and nanoseconds from the epoch.
4017
4018 If the C<*nsecs> field contains the special value C<-1> then
4019 the corresponding timestamp is set to the current time.  (The
4020 C<*secs> field is ignored in this case).
4021
4022 If the C<*nsecs> field contains the special value C<-2> then
4023 the corresponding timestamp is left unchanged.  (The
4024 C<*secs> field is ignored in this case).");
4025
4026   ("mkdir_mode", (RErr, [Pathname "path"; Int "mode"]), 202, [],
4027    [InitBasicFS, Always, TestOutputStruct (
4028       [["mkdir_mode"; "/test"; "0o111"];
4029        ["stat"; "/test"]], [CompareWithInt ("mode", 0o40111)])],
4030    "create a directory with a particular mode",
4031    "\
4032 This command creates a directory, setting the initial permissions
4033 of the directory to C<mode>.
4034
4035 For common Linux filesystems, the actual mode which is set will
4036 be C<mode & ~umask & 01777>.  Non-native-Linux filesystems may
4037 interpret the mode in other ways.
4038
4039 See also C<guestfs_mkdir>, C<guestfs_umask>");
4040
4041   ("lchown", (RErr, [Int "owner"; Int "group"; Pathname "path"]), 203, [],
4042    [], (* XXX *)
4043    "change file owner and group",
4044    "\
4045 Change the file owner to C<owner> and group to C<group>.
4046 This is like C<guestfs_chown> but if C<path> is a symlink then
4047 the link itself is changed, not the target.
4048
4049 Only numeric uid and gid are supported.  If you want to use
4050 names, you will need to locate and parse the password file
4051 yourself (Augeas support makes this relatively easy).");
4052
4053   ("lstatlist", (RStructList ("statbufs", "stat"), [Pathname "path"; StringList "names"]), 204, [],
4054    [], (* XXX *)
4055    "lstat on multiple files",
4056    "\
4057 This call allows you to perform the C<guestfs_lstat> operation
4058 on multiple files, where all files are in the directory C<path>.
4059 C<names> is the list of files from this directory.
4060
4061 On return you get a list of stat structs, with a one-to-one
4062 correspondence to the C<names> list.  If any name did not exist
4063 or could not be lstat'd, then the C<ino> field of that structure
4064 is set to C<-1>.
4065
4066 This call is intended for programs that want to efficiently
4067 list a directory contents without making many round-trips.
4068 See also C<guestfs_lxattrlist> for a similarly efficient call
4069 for getting extended attributes.  Very long directory listings
4070 might cause the protocol message size to be exceeded, causing
4071 this call to fail.  The caller must split up such requests
4072 into smaller groups of names.");
4073
4074   ("lxattrlist", (RStructList ("xattrs", "xattr"), [Pathname "path"; StringList "names"]), 205, [Optional "linuxxattrs"],
4075    [], (* XXX *)
4076    "lgetxattr on multiple files",
4077    "\
4078 This call allows you to get the extended attributes
4079 of multiple files, where all files are in the directory C<path>.
4080 C<names> is the list of files from this directory.
4081
4082 On return you get a flat list of xattr structs which must be
4083 interpreted sequentially.  The first xattr struct always has a zero-length
4084 C<attrname>.  C<attrval> in this struct is zero-length
4085 to indicate there was an error doing C<lgetxattr> for this
4086 file, I<or> is a C string which is a decimal number
4087 (the number of following attributes for this file, which could
4088 be C<\"0\">).  Then after the first xattr struct are the
4089 zero or more attributes for the first named file.
4090 This repeats for the second and subsequent files.
4091
4092 This call is intended for programs that want to efficiently
4093 list a directory contents without making many round-trips.
4094 See also C<guestfs_lstatlist> for a similarly efficient call
4095 for getting standard stats.  Very long directory listings
4096 might cause the protocol message size to be exceeded, causing
4097 this call to fail.  The caller must split up such requests
4098 into smaller groups of names.");
4099
4100   ("readlinklist", (RStringList "links", [Pathname "path"; StringList "names"]), 206, [],
4101    [], (* XXX *)
4102    "readlink on multiple files",
4103    "\
4104 This call allows you to do a C<readlink> operation
4105 on multiple files, where all files are in the directory C<path>.
4106 C<names> is the list of files from this directory.
4107
4108 On return you get a list of strings, with a one-to-one
4109 correspondence to the C<names> list.  Each string is the
4110 value of the symbolic link.
4111
4112 If the C<readlink(2)> operation fails on any name, then
4113 the corresponding result string is the empty string C<\"\">.
4114 However the whole operation is completed even if there
4115 were C<readlink(2)> errors, and so you can call this
4116 function with names where you don't know if they are
4117 symbolic links already (albeit slightly less efficient).
4118
4119 This call is intended for programs that want to efficiently
4120 list a directory contents without making many round-trips.
4121 Very long directory listings might cause the protocol
4122 message size to be exceeded, causing
4123 this call to fail.  The caller must split up such requests
4124 into smaller groups of names.");
4125
4126   ("pread", (RBufferOut "content", [Pathname "path"; Int "count"; Int64 "offset"]), 207, [ProtocolLimitWarning],
4127    [InitISOFS, Always, TestOutputBuffer (
4128       [["pread"; "/known-4"; "1"; "3"]], "\n");
4129     InitISOFS, Always, TestOutputBuffer (
4130       [["pread"; "/empty"; "0"; "100"]], "")],
4131    "read part of a file",
4132    "\
4133 This command lets you read part of a file.  It reads C<count>
4134 bytes of the file, starting at C<offset>, from file C<path>.
4135
4136 This may read fewer bytes than requested.  For further details
4137 see the L<pread(2)> system call.
4138
4139 See also C<guestfs_pwrite>.");
4140
4141   ("part_init", (RErr, [Device "device"; String "parttype"]), 208, [],
4142    [InitEmpty, Always, TestRun (
4143       [["part_init"; "/dev/sda"; "gpt"]])],
4144    "create an empty partition table",
4145    "\
4146 This creates an empty partition table on C<device> of one of the
4147 partition types listed below.  Usually C<parttype> should be
4148 either C<msdos> or C<gpt> (for large disks).
4149
4150 Initially there are no partitions.  Following this, you should
4151 call C<guestfs_part_add> for each partition required.
4152
4153 Possible values for C<parttype> are:
4154
4155 =over 4
4156
4157 =item B<efi> | B<gpt>
4158
4159 Intel EFI / GPT partition table.
4160
4161 This is recommended for >= 2 TB partitions that will be accessed
4162 from Linux and Intel-based Mac OS X.  It also has limited backwards
4163 compatibility with the C<mbr> format.
4164
4165 =item B<mbr> | B<msdos>
4166
4167 The standard PC \"Master Boot Record\" (MBR) format used
4168 by MS-DOS and Windows.  This partition type will B<only> work
4169 for device sizes up to 2 TB.  For large disks we recommend
4170 using C<gpt>.
4171
4172 =back
4173
4174 Other partition table types that may work but are not
4175 supported include:
4176
4177 =over 4
4178
4179 =item B<aix>
4180
4181 AIX disk labels.
4182
4183 =item B<amiga> | B<rdb>
4184
4185 Amiga \"Rigid Disk Block\" format.
4186
4187 =item B<bsd>
4188
4189 BSD disk labels.
4190
4191 =item B<dasd>
4192
4193 DASD, used on IBM mainframes.
4194
4195 =item B<dvh>
4196
4197 MIPS/SGI volumes.
4198
4199 =item B<mac>
4200
4201 Old Mac partition format.  Modern Macs use C<gpt>.
4202
4203 =item B<pc98>
4204
4205 NEC PC-98 format, common in Japan apparently.
4206
4207 =item B<sun>
4208
4209 Sun disk labels.
4210
4211 =back");
4212
4213   ("part_add", (RErr, [Device "device"; String "prlogex"; Int64 "startsect"; Int64 "endsect"]), 209, [],
4214    [InitEmpty, Always, TestRun (
4215       [["part_init"; "/dev/sda"; "mbr"];
4216        ["part_add"; "/dev/sda"; "primary"; "1"; "-1"]]);
4217     InitEmpty, Always, TestRun (
4218       [["part_init"; "/dev/sda"; "gpt"];
4219        ["part_add"; "/dev/sda"; "primary"; "34"; "127"];
4220        ["part_add"; "/dev/sda"; "primary"; "128"; "-34"]]);
4221     InitEmpty, Always, TestRun (
4222       [["part_init"; "/dev/sda"; "mbr"];
4223        ["part_add"; "/dev/sda"; "primary"; "32"; "127"];
4224        ["part_add"; "/dev/sda"; "primary"; "128"; "255"];
4225        ["part_add"; "/dev/sda"; "primary"; "256"; "511"];
4226        ["part_add"; "/dev/sda"; "primary"; "512"; "-1"]])],
4227    "add a partition to the device",
4228    "\
4229 This command adds a partition to C<device>.  If there is no partition
4230 table on the device, call C<guestfs_part_init> first.
4231
4232 The C<prlogex> parameter is the type of partition.  Normally you
4233 should pass C<p> or C<primary> here, but MBR partition tables also
4234 support C<l> (or C<logical>) and C<e> (or C<extended>) partition
4235 types.
4236
4237 C<startsect> and C<endsect> are the start and end of the partition
4238 in I<sectors>.  C<endsect> may be negative, which means it counts
4239 backwards from the end of the disk (C<-1> is the last sector).
4240
4241 Creating a partition which covers the whole disk is not so easy.
4242 Use C<guestfs_part_disk> to do that.");
4243
4244   ("part_disk", (RErr, [Device "device"; String "parttype"]), 210, [DangerWillRobinson],
4245    [InitEmpty, Always, TestRun (
4246       [["part_disk"; "/dev/sda"; "mbr"]]);
4247     InitEmpty, Always, TestRun (
4248       [["part_disk"; "/dev/sda"; "gpt"]])],
4249    "partition whole disk with a single primary partition",
4250    "\
4251 This command is simply a combination of C<guestfs_part_init>
4252 followed by C<guestfs_part_add> to create a single primary partition
4253 covering the whole disk.
4254
4255 C<parttype> is the partition table type, usually C<mbr> or C<gpt>,
4256 but other possible values are described in C<guestfs_part_init>.");
4257
4258   ("part_set_bootable", (RErr, [Device "device"; Int "partnum"; Bool "bootable"]), 211, [],
4259    [InitEmpty, Always, TestRun (
4260       [["part_disk"; "/dev/sda"; "mbr"];
4261        ["part_set_bootable"; "/dev/sda"; "1"; "true"]])],
4262    "make a partition bootable",
4263    "\
4264 This sets the bootable flag on partition numbered C<partnum> on
4265 device C<device>.  Note that partitions are numbered from 1.
4266
4267 The bootable flag is used by some operating systems (notably
4268 Windows) to determine which partition to boot from.  It is by
4269 no means universally recognized.");
4270
4271   ("part_set_name", (RErr, [Device "device"; Int "partnum"; String "name"]), 212, [],
4272    [InitEmpty, Always, TestRun (
4273       [["part_disk"; "/dev/sda"; "gpt"];
4274        ["part_set_name"; "/dev/sda"; "1"; "thepartname"]])],
4275    "set partition name",
4276    "\
4277 This sets the partition name on partition numbered C<partnum> on
4278 device C<device>.  Note that partitions are numbered from 1.
4279
4280 The partition name can only be set on certain types of partition
4281 table.  This works on C<gpt> but not on C<mbr> partitions.");
4282
4283   ("part_list", (RStructList ("partitions", "partition"), [Device "device"]), 213, [],
4284    [], (* XXX Add a regression test for this. *)
4285    "list partitions on a device",
4286    "\
4287 This command parses the partition table on C<device> and
4288 returns the list of partitions found.
4289
4290 The fields in the returned structure are:
4291
4292 =over 4
4293
4294 =item B<part_num>
4295
4296 Partition number, counting from 1.
4297
4298 =item B<part_start>
4299
4300 Start of the partition I<in bytes>.  To get sectors you have to
4301 divide by the device's sector size, see C<guestfs_blockdev_getss>.
4302
4303 =item B<part_end>
4304
4305 End of the partition in bytes.
4306
4307 =item B<part_size>
4308
4309 Size of the partition in bytes.
4310
4311 =back");
4312
4313   ("part_get_parttype", (RString "parttype", [Device "device"]), 214, [],
4314    [InitEmpty, Always, TestOutput (
4315       [["part_disk"; "/dev/sda"; "gpt"];
4316        ["part_get_parttype"; "/dev/sda"]], "gpt")],
4317    "get the partition table type",
4318    "\
4319 This command examines the partition table on C<device> and
4320 returns the partition table type (format) being used.
4321
4322 Common return values include: C<msdos> (a DOS/Windows style MBR
4323 partition table), C<gpt> (a GPT/EFI-style partition table).  Other
4324 values are possible, although unusual.  See C<guestfs_part_init>
4325 for a full list.");
4326
4327   ("fill", (RErr, [Int "c"; Int "len"; Pathname "path"]), 215, [],
4328    [InitBasicFS, Always, TestOutputBuffer (
4329       [["fill"; "0x63"; "10"; "/test"];
4330        ["read_file"; "/test"]], "cccccccccc")],
4331    "fill a file with octets",
4332    "\
4333 This command creates a new file called C<path>.  The initial
4334 content of the file is C<len> octets of C<c>, where C<c>
4335 must be a number in the range C<[0..255]>.
4336
4337 To fill a file with zero bytes (sparsely), it is
4338 much more efficient to use C<guestfs_truncate_size>.
4339 To create a file with a pattern of repeating bytes
4340 use C<guestfs_fill_pattern>.");
4341
4342   ("available", (RErr, [StringList "groups"]), 216, [],
4343    [InitNone, Always, TestRun [["available"; ""]]],
4344    "test availability of some parts of the API",
4345    "\
4346 This command is used to check the availability of some
4347 groups of functionality in the appliance, which not all builds of
4348 the libguestfs appliance will be able to provide.
4349
4350 The libguestfs groups, and the functions that those
4351 groups correspond to, are listed in L<guestfs(3)/AVAILABILITY>.
4352 You can also fetch this list at runtime by calling
4353 C<guestfs_available_all_groups>.
4354
4355 The argument C<groups> is a list of group names, eg:
4356 C<[\"inotify\", \"augeas\"]> would check for the availability of
4357 the Linux inotify functions and Augeas (configuration file
4358 editing) functions.
4359
4360 The command returns no error if I<all> requested groups are available.
4361
4362 It fails with an error if one or more of the requested
4363 groups is unavailable in the appliance.
4364
4365 If an unknown group name is included in the
4366 list of groups then an error is always returned.
4367
4368 I<Notes:>
4369
4370 =over 4
4371
4372 =item *
4373
4374 You must call C<guestfs_launch> before calling this function.
4375
4376 The reason is because we don't know what groups are
4377 supported by the appliance/daemon until it is running and can
4378 be queried.
4379
4380 =item *
4381
4382 If a group of functions is available, this does not necessarily
4383 mean that they will work.  You still have to check for errors
4384 when calling individual API functions even if they are
4385 available.
4386
4387 =item *
4388
4389 It is usually the job of distro packagers to build
4390 complete functionality into the libguestfs appliance.
4391 Upstream libguestfs, if built from source with all
4392 requirements satisfied, will support everything.
4393
4394 =item *
4395
4396 This call was added in version C<1.0.80>.  In previous
4397 versions of libguestfs all you could do would be to speculatively
4398 execute a command to find out if the daemon implemented it.
4399 See also C<guestfs_version>.
4400
4401 =back");
4402
4403   ("dd", (RErr, [Dev_or_Path "src"; Dev_or_Path "dest"]), 217, [],
4404    [InitBasicFS, Always, TestOutputBuffer (
4405       [["write"; "/src"; "hello, world"];
4406        ["dd"; "/src"; "/dest"];
4407        ["read_file"; "/dest"]], "hello, world")],
4408    "copy from source to destination using dd",
4409    "\
4410 This command copies from one source device or file C<src>
4411 to another destination device or file C<dest>.  Normally you
4412 would use this to copy to or from a device or partition, for
4413 example to duplicate a filesystem.
4414
4415 If the destination is a device, it must be as large or larger
4416 than the source file or device, otherwise the copy will fail.
4417 This command cannot do partial copies (see C<guestfs_copy_size>).");
4418
4419   ("filesize", (RInt64 "size", [Pathname "file"]), 218, [],
4420    [InitBasicFS, Always, TestOutputInt (
4421       [["write"; "/file"; "hello, world"];
4422        ["filesize"; "/file"]], 12)],
4423    "return the size of the file in bytes",
4424    "\
4425 This command returns the size of C<file> in bytes.
4426
4427 To get other stats about a file, use C<guestfs_stat>, C<guestfs_lstat>,
4428 C<guestfs_is_dir>, C<guestfs_is_file> etc.
4429 To get the size of block devices, use C<guestfs_blockdev_getsize64>.");
4430
4431   ("lvrename", (RErr, [String "logvol"; String "newlogvol"]), 219, [],
4432    [InitBasicFSonLVM, Always, TestOutputList (
4433       [["lvrename"; "/dev/VG/LV"; "/dev/VG/LV2"];
4434        ["lvs"]], ["/dev/VG/LV2"])],
4435    "rename an LVM logical volume",
4436    "\
4437 Rename a logical volume C<logvol> with the new name C<newlogvol>.");
4438
4439   ("vgrename", (RErr, [String "volgroup"; String "newvolgroup"]), 220, [],
4440    [InitBasicFSonLVM, Always, TestOutputList (
4441       [["umount"; "/"];
4442        ["vg_activate"; "false"; "VG"];
4443        ["vgrename"; "VG"; "VG2"];
4444        ["vg_activate"; "true"; "VG2"];
4445        ["mount_options"; ""; "/dev/VG2/LV"; "/"];
4446        ["vgs"]], ["VG2"])],
4447    "rename an LVM volume group",
4448    "\
4449 Rename a volume group C<volgroup> with the new name C<newvolgroup>.");
4450
4451   ("initrd_cat", (RBufferOut "content", [Pathname "initrdpath"; String "filename"]), 221, [ProtocolLimitWarning],
4452    [InitISOFS, Always, TestOutputBuffer (
4453       [["initrd_cat"; "/initrd"; "known-4"]], "abc\ndef\nghi")],
4454    "list the contents of a single file in an initrd",
4455    "\
4456 This command unpacks the file C<filename> from the initrd file
4457 called C<initrdpath>.  The filename must be given I<without> the
4458 initial C</> character.
4459
4460 For example, in guestfish you could use the following command
4461 to examine the boot script (usually called C</init>)
4462 contained in a Linux initrd or initramfs image:
4463
4464  initrd-cat /boot/initrd-<version>.img init
4465
4466 See also C<guestfs_initrd_list>.");
4467
4468   ("pvuuid", (RString "uuid", [Device "device"]), 222, [],
4469    [],
4470    "get the UUID of a physical volume",
4471    "\
4472 This command returns the UUID of the LVM PV C<device>.");
4473
4474   ("vguuid", (RString "uuid", [String "vgname"]), 223, [],
4475    [],
4476    "get the UUID of a volume group",
4477    "\
4478 This command returns the UUID of the LVM VG named C<vgname>.");
4479
4480   ("lvuuid", (RString "uuid", [Device "device"]), 224, [],
4481    [],
4482    "get the UUID of a logical volume",
4483    "\
4484 This command returns the UUID of the LVM LV C<device>.");
4485
4486   ("vgpvuuids", (RStringList "uuids", [String "vgname"]), 225, [],
4487    [],
4488    "get the PV UUIDs containing the volume group",
4489    "\
4490 Given a VG called C<vgname>, this returns the UUIDs of all
4491 the physical volumes that this volume group resides on.
4492
4493 You can use this along with C<guestfs_pvs> and C<guestfs_pvuuid>
4494 calls to associate physical volumes and volume groups.
4495
4496 See also C<guestfs_vglvuuids>.");
4497
4498   ("vglvuuids", (RStringList "uuids", [String "vgname"]), 226, [],
4499    [],
4500    "get the LV UUIDs of all LVs in the volume group",
4501    "\
4502 Given a VG called C<vgname>, this returns the UUIDs of all
4503 the logical volumes created in this volume group.
4504
4505 You can use this along with C<guestfs_lvs> and C<guestfs_lvuuid>
4506 calls to associate logical volumes and volume groups.
4507
4508 See also C<guestfs_vgpvuuids>.");
4509
4510   ("copy_size", (RErr, [Dev_or_Path "src"; Dev_or_Path "dest"; Int64 "size"]), 227, [],
4511    [InitBasicFS, Always, TestOutputBuffer (
4512       [["write"; "/src"; "hello, world"];
4513        ["copy_size"; "/src"; "/dest"; "5"];
4514        ["read_file"; "/dest"]], "hello")],
4515    "copy size bytes from source to destination using dd",
4516    "\
4517 This command copies exactly C<size> bytes from one source device
4518 or file C<src> to another destination device or file C<dest>.
4519
4520 Note this will fail if the source is too short or if the destination
4521 is not large enough.");
4522
4523   ("zero_device", (RErr, [Device "device"]), 228, [DangerWillRobinson],
4524    [InitBasicFSonLVM, Always, TestRun (
4525       [["zero_device"; "/dev/VG/LV"]])],
4526    "write zeroes to an entire device",
4527    "\
4528 This command writes zeroes over the entire C<device>.  Compare
4529 with C<guestfs_zero> which just zeroes the first few blocks of
4530 a device.");
4531
4532   ("txz_in", (RErr, [FileIn "tarball"; Pathname "directory"]), 229, [Optional "xz"],
4533    [InitBasicFS, Always, TestOutput (
4534       [["txz_in"; "../images/helloworld.tar.xz"; "/"];
4535        ["cat"; "/hello"]], "hello\n")],
4536    "unpack compressed tarball to directory",
4537    "\
4538 This command uploads and unpacks local file C<tarball> (an
4539 I<xz compressed> tar file) into C<directory>.");
4540
4541   ("txz_out", (RErr, [Pathname "directory"; FileOut "tarball"]), 230, [Optional "xz"],
4542    [],
4543    "pack directory into compressed tarball",
4544    "\
4545 This command packs the contents of C<directory> and downloads
4546 it to local file C<tarball> (as an xz compressed tar archive).");
4547
4548   ("ntfsresize", (RErr, [Device "device"]), 231, [Optional "ntfsprogs"],
4549    [],
4550    "resize an NTFS filesystem",
4551    "\
4552 This command resizes an NTFS filesystem, expanding or
4553 shrinking it to the size of the underlying device.
4554 See also L<ntfsresize(8)>.");
4555
4556   ("vgscan", (RErr, []), 232, [],
4557    [InitEmpty, Always, TestRun (
4558       [["vgscan"]])],
4559    "rescan for LVM physical volumes, volume groups and logical volumes",
4560    "\
4561 This rescans all block devices and rebuilds the list of LVM
4562 physical volumes, volume groups and logical volumes.");
4563
4564   ("part_del", (RErr, [Device "device"; Int "partnum"]), 233, [],
4565    [InitEmpty, Always, TestRun (
4566       [["part_init"; "/dev/sda"; "mbr"];
4567        ["part_add"; "/dev/sda"; "primary"; "1"; "-1"];
4568        ["part_del"; "/dev/sda"; "1"]])],
4569    "delete a partition",
4570    "\
4571 This command deletes the partition numbered C<partnum> on C<device>.
4572
4573 Note that in the case of MBR partitioning, deleting an
4574 extended partition also deletes any logical partitions
4575 it contains.");
4576
4577   ("part_get_bootable", (RBool "bootable", [Device "device"; Int "partnum"]), 234, [],
4578    [InitEmpty, Always, TestOutputTrue (
4579       [["part_init"; "/dev/sda"; "mbr"];
4580        ["part_add"; "/dev/sda"; "primary"; "1"; "-1"];
4581        ["part_set_bootable"; "/dev/sda"; "1"; "true"];
4582        ["part_get_bootable"; "/dev/sda"; "1"]])],
4583    "return true if a partition is bootable",
4584    "\
4585 This command returns true if the partition C<partnum> on
4586 C<device> has the bootable flag set.
4587
4588 See also C<guestfs_part_set_bootable>.");
4589
4590   ("part_get_mbr_id", (RInt "idbyte", [Device "device"; Int "partnum"]), 235, [FishOutput FishOutputHexadecimal],
4591    [InitEmpty, Always, TestOutputInt (
4592       [["part_init"; "/dev/sda"; "mbr"];
4593        ["part_add"; "/dev/sda"; "primary"; "1"; "-1"];
4594        ["part_set_mbr_id"; "/dev/sda"; "1"; "0x7f"];
4595        ["part_get_mbr_id"; "/dev/sda"; "1"]], 0x7f)],
4596    "get the MBR type byte (ID byte) from a partition",
4597    "\
4598 Returns the MBR type byte (also known as the ID byte) from
4599 the numbered partition C<partnum>.
4600
4601 Note that only MBR (old DOS-style) partitions have type bytes.
4602 You will get undefined results for other partition table
4603 types (see C<guestfs_part_get_parttype>).");
4604
4605   ("part_set_mbr_id", (RErr, [Device "device"; Int "partnum"; Int "idbyte"]), 236, [],
4606    [], (* tested by part_get_mbr_id *)
4607    "set the MBR type byte (ID byte) of a partition",
4608    "\
4609 Sets the MBR type byte (also known as the ID byte) of
4610 the numbered partition C<partnum> to C<idbyte>.  Note
4611 that the type bytes quoted in most documentation are
4612 in fact hexadecimal numbers, but usually documented
4613 without any leading \"0x\" which might be confusing.
4614
4615 Note that only MBR (old DOS-style) partitions have type bytes.
4616 You will get undefined results for other partition table
4617 types (see C<guestfs_part_get_parttype>).");
4618
4619   ("checksum_device", (RString "checksum", [String "csumtype"; Device "device"]), 237, [],
4620    [InitISOFS, Always, TestOutput (
4621       [["checksum_device"; "md5"; "/dev/sdd"]],
4622       (Digest.to_hex (Digest.file "images/test.iso")))],
4623    "compute MD5, SHAx or CRC checksum of the contents of a device",
4624    "\
4625 This call computes the MD5, SHAx or CRC checksum of the
4626 contents of the device named C<device>.  For the types of
4627 checksums supported see the C<guestfs_checksum> command.");
4628
4629   ("lvresize_free", (RErr, [Device "lv"; Int "percent"]), 238, [Optional "lvm2"],
4630    [InitNone, Always, TestRun (
4631       [["part_disk"; "/dev/sda"; "mbr"];
4632        ["pvcreate"; "/dev/sda1"];
4633        ["vgcreate"; "VG"; "/dev/sda1"];
4634        ["lvcreate"; "LV"; "VG"; "10"];
4635        ["lvresize_free"; "/dev/VG/LV"; "100"]])],
4636    "expand an LV to fill free space",
4637    "\
4638 This expands an existing logical volume C<lv> so that it fills
4639 C<pc>% of the remaining free space in the volume group.  Commonly
4640 you would call this with pc = 100 which expands the logical volume
4641 as much as possible, using all remaining free space in the volume
4642 group.");
4643
4644   ("aug_clear", (RErr, [String "augpath"]), 239, [Optional "augeas"],
4645    [], (* XXX Augeas code needs tests. *)
4646    "clear Augeas path",
4647    "\
4648 Set the value associated with C<path> to C<NULL>.  This
4649 is the same as the L<augtool(1)> C<clear> command.");
4650
4651   ("get_umask", (RInt "mask", []), 240, [FishOutput FishOutputOctal],
4652    [InitEmpty, Always, TestOutputInt (
4653       [["get_umask"]], 0o22)],
4654    "get the current umask",
4655    "\
4656 Return the current umask.  By default the umask is C<022>
4657 unless it has been set by calling C<guestfs_umask>.");
4658
4659   ("debug_upload", (RErr, [FileIn "filename"; String "tmpname"; Int "mode"]), 241, [],
4660    [],
4661    "upload a file to the appliance (internal use only)",
4662    "\
4663 The C<guestfs_debug_upload> command uploads a file to
4664 the libguestfs appliance.
4665
4666 There is no comprehensive help for this command.  You have
4667 to look at the file C<daemon/debug.c> in the libguestfs source
4668 to find out what it is for.");
4669
4670   ("base64_in", (RErr, [FileIn "base64file"; Pathname "filename"]), 242, [],
4671    [InitBasicFS, Always, TestOutput (
4672       [["base64_in"; "../images/hello.b64"; "/hello"];
4673        ["cat"; "/hello"]], "hello\n")],
4674    "upload base64-encoded data to file",
4675    "\
4676 This command uploads base64-encoded data from C<base64file>
4677 to C<filename>.");
4678
4679   ("base64_out", (RErr, [Pathname "filename"; FileOut "base64file"]), 243, [],
4680    [],
4681    "download file and encode as base64",
4682    "\
4683 This command downloads the contents of C<filename>, writing
4684 it out to local file C<base64file> encoded as base64.");
4685
4686   ("checksums_out", (RErr, [String "csumtype"; Pathname "directory"; FileOut "sumsfile"]), 244, [],
4687    [],
4688    "compute MD5, SHAx or CRC checksum of files in a directory",
4689    "\
4690 This command computes the checksums of all regular files in
4691 C<directory> and then emits a list of those checksums to
4692 the local output file C<sumsfile>.
4693
4694 This can be used for verifying the integrity of a virtual
4695 machine.  However to be properly secure you should pay
4696 attention to the output of the checksum command (it uses
4697 the ones from GNU coreutils).  In particular when the
4698 filename is not printable, coreutils uses a special
4699 backslash syntax.  For more information, see the GNU
4700 coreutils info file.");
4701
4702   ("fill_pattern", (RErr, [String "pattern"; Int "len"; Pathname "path"]), 245, [],
4703    [InitBasicFS, Always, TestOutputBuffer (
4704       [["fill_pattern"; "abcdefghijklmnopqrstuvwxyz"; "28"; "/test"];
4705        ["read_file"; "/test"]], "abcdefghijklmnopqrstuvwxyzab")],
4706    "fill a file with a repeating pattern of bytes",
4707    "\
4708 This function is like C<guestfs_fill> except that it creates
4709 a new file of length C<len> containing the repeating pattern
4710 of bytes in C<pattern>.  The pattern is truncated if necessary
4711 to ensure the length of the file is exactly C<len> bytes.");
4712
4713   ("write", (RErr, [Pathname "path"; BufferIn "content"]), 246, [ProtocolLimitWarning],
4714    [InitBasicFS, Always, TestOutput (
4715       [["write"; "/new"; "new file contents"];
4716        ["cat"; "/new"]], "new file contents");
4717     InitBasicFS, Always, TestOutput (
4718       [["write"; "/new"; "\nnew file contents\n"];
4719        ["cat"; "/new"]], "\nnew file contents\n");
4720     InitBasicFS, Always, TestOutput (
4721       [["write"; "/new"; "\n\n"];
4722        ["cat"; "/new"]], "\n\n");
4723     InitBasicFS, Always, TestOutput (
4724       [["write"; "/new"; ""];
4725        ["cat"; "/new"]], "");
4726     InitBasicFS, Always, TestOutput (
4727       [["write"; "/new"; "\n\n\n"];
4728        ["cat"; "/new"]], "\n\n\n");
4729     InitBasicFS, Always, TestOutput (
4730       [["write"; "/new"; "\n"];
4731        ["cat"; "/new"]], "\n")],
4732    "create a new file",
4733    "\
4734 This call creates a file called C<path>.  The content of the
4735 file is the string C<content> (which can contain any 8 bit data).");
4736
4737   ("pwrite", (RInt "nbytes", [Pathname "path"; BufferIn "content"; Int64 "offset"]), 247, [ProtocolLimitWarning],
4738    [InitBasicFS, Always, TestOutput (
4739       [["write"; "/new"; "new file contents"];
4740        ["pwrite"; "/new"; "data"; "4"];
4741        ["cat"; "/new"]], "new data contents");
4742     InitBasicFS, Always, TestOutput (
4743       [["write"; "/new"; "new file contents"];
4744        ["pwrite"; "/new"; "is extended"; "9"];
4745        ["cat"; "/new"]], "new file is extended");
4746     InitBasicFS, Always, TestOutput (
4747       [["write"; "/new"; "new file contents"];
4748        ["pwrite"; "/new"; ""; "4"];
4749        ["cat"; "/new"]], "new file contents")],
4750    "write to part of a file",
4751    "\
4752 This command writes to part of a file.  It writes the data
4753 buffer C<content> to the file C<path> starting at offset C<offset>.
4754
4755 This command implements the L<pwrite(2)> system call, and like
4756 that system call it may not write the full data requested.  The
4757 return value is the number of bytes that were actually written
4758 to the file.  This could even be 0, although short writes are
4759 unlikely for regular files in ordinary circumstances.
4760
4761 See also C<guestfs_pread>.");
4762
4763   ("resize2fs_size", (RErr, [Device "device"; Int64 "size"]), 248, [],
4764    [],
4765    "resize an ext2, ext3 or ext4 filesystem (with size)",
4766    "\
4767 This command is the same as C<guestfs_resize2fs> except that it
4768 allows you to specify the new size (in bytes) explicitly.");
4769
4770   ("pvresize_size", (RErr, [Device "device"; Int64 "size"]), 249, [Optional "lvm2"],
4771    [],
4772    "resize an LVM physical volume (with size)",
4773    "\
4774 This command is the same as C<guestfs_pvresize> except that it
4775 allows you to specify the new size (in bytes) explicitly.");
4776
4777   ("ntfsresize_size", (RErr, [Device "device"; Int64 "size"]), 250, [Optional "ntfsprogs"],
4778    [],
4779    "resize an NTFS filesystem (with size)",
4780    "\
4781 This command is the same as C<guestfs_ntfsresize> except that it
4782 allows you to specify the new size (in bytes) explicitly.");
4783
4784   ("available_all_groups", (RStringList "groups", []), 251, [],
4785    [InitNone, Always, TestRun [["available_all_groups"]]],
4786    "return a list of all optional groups",
4787    "\
4788 This command returns a list of all optional groups that this
4789 daemon knows about.  Note this returns both supported and unsupported
4790 groups.  To find out which ones the daemon can actually support
4791 you have to call C<guestfs_available> on each member of the
4792 returned list.
4793
4794 See also C<guestfs_available> and L<guestfs(3)/AVAILABILITY>.");
4795
4796   ("fallocate64", (RErr, [Pathname "path"; Int64 "len"]), 252, [],
4797    [InitBasicFS, Always, TestOutputStruct (
4798       [["fallocate64"; "/a"; "1000000"];
4799        ["stat"; "/a"]], [CompareWithInt ("size", 1_000_000)])],
4800    "preallocate a file in the guest filesystem",
4801    "\
4802 This command preallocates a file (containing zero bytes) named
4803 C<path> of size C<len> bytes.  If the file exists already, it
4804 is overwritten.
4805
4806 Note that this call allocates disk blocks for the file.
4807 To create a sparse file use C<guestfs_truncate_size> instead.
4808
4809 The deprecated call C<guestfs_fallocate> does the same,
4810 but owing to an oversight it only allowed 30 bit lengths
4811 to be specified, effectively limiting the maximum size
4812 of files created through that call to 1GB.
4813
4814 Do not confuse this with the guestfish-specific
4815 C<alloc> and C<sparse> commands which create
4816 a file in the host and attach it as a device.");
4817
4818   ("vfs_label", (RString "label", [Device "device"]), 253, [],
4819    [InitBasicFS, Always, TestOutput (
4820        [["set_e2label"; "/dev/sda1"; "LTEST"];
4821         ["vfs_label"; "/dev/sda1"]], "LTEST")],
4822    "get the filesystem label",
4823    "\
4824 This returns the filesystem label of the filesystem on
4825 C<device>.
4826
4827 If the filesystem is unlabeled, this returns the empty string.");
4828
4829   ("vfs_uuid", (RString "uuid", [Device "device"]), 254, [],
4830    (let uuid = uuidgen () in
4831     [InitBasicFS, Always, TestOutput (
4832        [["set_e2uuid"; "/dev/sda1"; uuid];
4833         ["vfs_uuid"; "/dev/sda1"]], uuid)]),
4834    "get the filesystem UUID",
4835    "\
4836 This returns the filesystem UUID of the filesystem on
4837 C<device>.
4838
4839 If the filesystem does not have a UUID, this returns the empty string.");
4840
4841   ("lvm_set_filter", (RErr, [DeviceList "devices"]), 255, [Optional "lvm2"],
4842    (* Can't be tested with the current framework because
4843     * the VG is being used by the mounted filesystem, so
4844     * the vgchange -an command we do first will fail.
4845     *)
4846     [],
4847    "set LVM device filter",
4848    "\
4849 This sets the LVM device filter so that LVM will only be
4850 able to \"see\" the block devices in the list C<devices>,
4851 and will ignore all other attached block devices.
4852
4853 Where disk image(s) contain duplicate PVs or VGs, this
4854 command is useful to get LVM to ignore the duplicates, otherwise
4855 LVM can get confused.  Note also there are two types
4856 of duplication possible: either cloned PVs/VGs which have
4857 identical UUIDs; or VGs that are not cloned but just happen
4858 to have the same name.  In normal operation you cannot
4859 create this situation, but you can do it outside LVM, eg.
4860 by cloning disk images or by bit twiddling inside the LVM
4861 metadata.
4862
4863 This command also clears the LVM cache and performs a volume
4864 group scan.
4865
4866 You can filter whole block devices or individual partitions.
4867
4868 You cannot use this if any VG is currently in use (eg.
4869 contains a mounted filesystem), even if you are not
4870 filtering out that VG.");
4871
4872   ("lvm_clear_filter", (RErr, []), 256, [],
4873    [], (* see note on lvm_set_filter *)
4874    "clear LVM device filter",
4875    "\
4876 This undoes the effect of C<guestfs_lvm_set_filter>.  LVM
4877 will be able to see every block device.
4878
4879 This command also clears the LVM cache and performs a volume
4880 group scan.");
4881
4882   ("luks_open", (RErr, [Device "device"; Key "key"; String "mapname"]), 257, [Optional "luks"],
4883    [],
4884    "open a LUKS-encrypted block device",
4885    "\
4886 This command opens a block device which has been encrypted
4887 according to the Linux Unified Key Setup (LUKS) standard.
4888
4889 C<device> is the encrypted block device or partition.
4890
4891 The caller must supply one of the keys associated with the
4892 LUKS block device, in the C<key> parameter.
4893
4894 This creates a new block device called C</dev/mapper/mapname>.
4895 Reads and writes to this block device are decrypted from and
4896 encrypted to the underlying C<device> respectively.
4897
4898 If this block device contains LVM volume groups, then
4899 calling C<guestfs_vgscan> followed by C<guestfs_vg_activate_all>
4900 will make them visible.");
4901
4902   ("luks_open_ro", (RErr, [Device "device"; Key "key"; String "mapname"]), 258, [Optional "luks"],
4903    [],
4904    "open a LUKS-encrypted block device read-only",
4905    "\
4906 This is the same as C<guestfs_luks_open> except that a read-only
4907 mapping is created.");
4908
4909   ("luks_close", (RErr, [Device "device"]), 259, [Optional "luks"],
4910    [],
4911    "close a LUKS device",
4912    "\
4913 This closes a LUKS device that was created earlier by
4914 C<guestfs_luks_open> or C<guestfs_luks_open_ro>.  The
4915 C<device> parameter must be the name of the LUKS mapping
4916 device (ie. C</dev/mapper/mapname>) and I<not> the name
4917 of the underlying block device.");
4918
4919 ]
4920
4921 let all_functions = non_daemon_functions @ daemon_functions
4922
4923 (* In some places we want the functions to be displayed sorted
4924  * alphabetically, so this is useful:
4925  *)
4926 let all_functions_sorted =
4927   List.sort (fun (n1,_,_,_,_,_,_) (n2,_,_,_,_,_,_) ->
4928                compare n1 n2) all_functions
4929
4930 (* This is used to generate the src/MAX_PROC_NR file which
4931  * contains the maximum procedure number, a surrogate for the
4932  * ABI version number.  See src/Makefile.am for the details.
4933  *)
4934 let max_proc_nr =
4935   let proc_nrs = List.map (
4936     fun (_, _, proc_nr, _, _, _, _) -> proc_nr
4937   ) daemon_functions in
4938   List.fold_left max 0 proc_nrs
4939
4940 (* Field types for structures. *)
4941 type field =
4942   | FChar                       (* C 'char' (really, a 7 bit byte). *)
4943   | FString                     (* nul-terminated ASCII string, NOT NULL. *)
4944   | FBuffer                     (* opaque buffer of bytes, (char *, int) pair *)
4945   | FUInt32
4946   | FInt32
4947   | FUInt64
4948   | FInt64
4949   | FBytes                      (* Any int measure that counts bytes. *)
4950   | FUUID                       (* 32 bytes long, NOT nul-terminated. *)
4951   | FOptPercent                 (* [0..100], or -1 meaning "not present". *)
4952
4953 (* Because we generate extra parsing code for LVM command line tools,
4954  * we have to pull out the LVM columns separately here.
4955  *)
4956 let lvm_pv_cols = [
4957   "pv_name", FString;
4958   "pv_uuid", FUUID;
4959   "pv_fmt", FString;
4960   "pv_size", FBytes;
4961   "dev_size", FBytes;
4962   "pv_free", FBytes;
4963   "pv_used", FBytes;
4964   "pv_attr", FString (* XXX *);
4965   "pv_pe_count", FInt64;
4966   "pv_pe_alloc_count", FInt64;
4967   "pv_tags", FString;
4968   "pe_start", FBytes;
4969   "pv_mda_count", FInt64;
4970   "pv_mda_free", FBytes;
4971   (* Not in Fedora 10:
4972      "pv_mda_size", FBytes;
4973   *)
4974 ]
4975 let lvm_vg_cols = [
4976   "vg_name", FString;
4977   "vg_uuid", FUUID;
4978   "vg_fmt", FString;
4979   "vg_attr", FString (* XXX *);
4980   "vg_size", FBytes;
4981   "vg_free", FBytes;
4982   "vg_sysid", FString;
4983   "vg_extent_size", FBytes;
4984   "vg_extent_count", FInt64;
4985   "vg_free_count", FInt64;
4986   "max_lv", FInt64;
4987   "max_pv", FInt64;
4988   "pv_count", FInt64;
4989   "lv_count", FInt64;
4990   "snap_count", FInt64;
4991   "vg_seqno", FInt64;
4992   "vg_tags", FString;
4993   "vg_mda_count", FInt64;
4994   "vg_mda_free", FBytes;
4995   (* Not in Fedora 10:
4996      "vg_mda_size", FBytes;
4997   *)
4998 ]
4999 let lvm_lv_cols = [
5000   "lv_name", FString;
5001   "lv_uuid", FUUID;
5002   "lv_attr", FString (* XXX *);
5003   "lv_major", FInt64;
5004   "lv_minor", FInt64;
5005   "lv_kernel_major", FInt64;
5006   "lv_kernel_minor", FInt64;
5007   "lv_size", FBytes;
5008   "seg_count", FInt64;
5009   "origin", FString;
5010   "snap_percent", FOptPercent;
5011   "copy_percent", FOptPercent;
5012   "move_pv", FString;
5013   "lv_tags", FString;
5014   "mirror_log", FString;
5015   "modules", FString;
5016 ]
5017
5018 (* Names and fields in all structures (in RStruct and RStructList)
5019  * that we support.
5020  *)
5021 let structs = [
5022   (* The old RIntBool return type, only ever used for aug_defnode.  Do
5023    * not use this struct in any new code.
5024    *)
5025   "int_bool", [
5026     "i", FInt32;                (* for historical compatibility *)
5027     "b", FInt32;                (* for historical compatibility *)
5028   ];
5029
5030   (* LVM PVs, VGs, LVs. *)
5031   "lvm_pv", lvm_pv_cols;
5032   "lvm_vg", lvm_vg_cols;
5033   "lvm_lv", lvm_lv_cols;
5034
5035   (* Column names and types from stat structures.
5036    * NB. Can't use things like 'st_atime' because glibc header files
5037    * define some of these as macros.  Ugh.
5038    *)
5039   "stat", [
5040     "dev", FInt64;
5041     "ino", FInt64;
5042     "mode", FInt64;
5043     "nlink", FInt64;
5044     "uid", FInt64;
5045     "gid", FInt64;
5046     "rdev", FInt64;
5047     "size", FInt64;
5048     "blksize", FInt64;
5049     "blocks", FInt64;
5050     "atime", FInt64;
5051     "mtime", FInt64;
5052     "ctime", FInt64;
5053   ];
5054   "statvfs", [
5055     "bsize", FInt64;
5056     "frsize", FInt64;
5057     "blocks", FInt64;
5058     "bfree", FInt64;
5059     "bavail", FInt64;
5060     "files", FInt64;
5061     "ffree", FInt64;
5062     "favail", FInt64;
5063     "fsid", FInt64;
5064     "flag", FInt64;
5065     "namemax", FInt64;
5066   ];
5067
5068   (* Column names in dirent structure. *)
5069   "dirent", [
5070     "ino", FInt64;
5071     (* 'b' 'c' 'd' 'f' (FIFO) 'l' 'r' (regular file) 's' 'u' '?' *)
5072     "ftyp", FChar;
5073     "name", FString;
5074   ];
5075
5076   (* Version numbers. *)
5077   "version", [
5078     "major", FInt64;
5079     "minor", FInt64;
5080     "release", FInt64;
5081     "extra", FString;
5082   ];
5083
5084   (* Extended attribute. *)
5085   "xattr", [
5086     "attrname", FString;
5087     "attrval", FBuffer;
5088   ];
5089
5090   (* Inotify events. *)
5091   "inotify_event", [
5092     "in_wd", FInt64;
5093     "in_mask", FUInt32;
5094     "in_cookie", FUInt32;
5095     "in_name", FString;
5096   ];
5097
5098   (* Partition table entry. *)
5099   "partition", [
5100     "part_num", FInt32;
5101     "part_start", FBytes;
5102     "part_end", FBytes;
5103     "part_size", FBytes;
5104   ];
5105 ] (* end of structs *)
5106
5107 (* Ugh, Java has to be different ..
5108  * These names are also used by the Haskell bindings.
5109  *)
5110 let java_structs = [
5111   "int_bool", "IntBool";
5112   "lvm_pv", "PV";
5113   "lvm_vg", "VG";
5114   "lvm_lv", "LV";
5115   "stat", "Stat";
5116   "statvfs", "StatVFS";
5117   "dirent", "Dirent";
5118   "version", "Version";
5119   "xattr", "XAttr";
5120   "inotify_event", "INotifyEvent";
5121   "partition", "Partition";
5122 ]
5123
5124 (* What structs are actually returned. *)
5125 type rstructs_used_t = RStructOnly | RStructListOnly | RStructAndList
5126
5127 (* Returns a list of RStruct/RStructList structs that are returned
5128  * by any function.  Each element of returned list is a pair:
5129  *
5130  * (structname, RStructOnly)
5131  *    == there exists function which returns RStruct (_, structname)
5132  * (structname, RStructListOnly)
5133  *    == there exists function which returns RStructList (_, structname)
5134  * (structname, RStructAndList)
5135  *    == there are functions returning both RStruct (_, structname)
5136  *                                      and RStructList (_, structname)
5137  *)
5138 let rstructs_used_by functions =
5139   (* ||| is a "logical OR" for rstructs_used_t *)
5140   let (|||) a b =
5141     match a, b with
5142     | RStructAndList, _
5143     | _, RStructAndList -> RStructAndList
5144     | RStructOnly, RStructListOnly
5145     | RStructListOnly, RStructOnly -> RStructAndList
5146     | RStructOnly, RStructOnly -> RStructOnly
5147     | RStructListOnly, RStructListOnly -> RStructListOnly
5148   in
5149
5150   let h = Hashtbl.create 13 in
5151
5152   (* if elem->oldv exists, update entry using ||| operator,
5153    * else just add elem->newv to the hash
5154    *)
5155   let update elem newv =
5156     try  let oldv = Hashtbl.find h elem in
5157          Hashtbl.replace h elem (newv ||| oldv)
5158     with Not_found -> Hashtbl.add h elem newv
5159   in
5160
5161   List.iter (
5162     fun (_, style, _, _, _, _, _) ->
5163       match fst style with
5164       | RStruct (_, structname) -> update structname RStructOnly
5165       | RStructList (_, structname) -> update structname RStructListOnly
5166       | _ -> ()
5167   ) functions;
5168
5169   (* return key->values as a list of (key,value) *)
5170   Hashtbl.fold (fun key value xs -> (key, value) :: xs) h []
5171
5172 (* Used for testing language bindings. *)
5173 type callt =
5174   | CallString of string
5175   | CallOptString of string option
5176   | CallStringList of string list
5177   | CallInt of int
5178   | CallInt64 of int64
5179   | CallBool of bool
5180   | CallBuffer of string
5181
5182 (* Used to memoize the result of pod2text. *)
5183 let pod2text_memo_filename = "src/.pod2text.data"
5184 let pod2text_memo : ((int * string * string), string list) Hashtbl.t =
5185   try
5186     let chan = open_in pod2text_memo_filename in
5187     let v = input_value chan in
5188     close_in chan;
5189     v
5190   with
5191     _ -> Hashtbl.create 13
5192 let pod2text_memo_updated () =
5193   let chan = open_out pod2text_memo_filename in
5194   output_value chan pod2text_memo;
5195   close_out chan
5196
5197 (* Useful functions.
5198  * Note we don't want to use any external OCaml libraries which
5199  * makes this a bit harder than it should be.
5200  *)
5201 module StringMap = Map.Make (String)
5202
5203 let failwithf fs = ksprintf failwith fs
5204
5205 let unique = let i = ref 0 in fun () -> incr i; !i
5206
5207 let replace_char s c1 c2 =
5208   let s2 = String.copy s in
5209   let r = ref false in
5210   for i = 0 to String.length s2 - 1 do
5211     if String.unsafe_get s2 i = c1 then (
5212       String.unsafe_set s2 i c2;
5213       r := true
5214     )
5215   done;
5216   if not !r then s else s2
5217
5218 let isspace c =
5219   c = ' '
5220   (* || c = '\f' *) || c = '\n' || c = '\r' || c = '\t' (* || c = '\v' *)
5221
5222 let triml ?(test = isspace) str =
5223   let i = ref 0 in
5224   let n = ref (String.length str) in
5225   while !n > 0 && test str.[!i]; do
5226     decr n;
5227     incr i
5228   done;
5229   if !i = 0 then str
5230   else String.sub str !i !n
5231
5232 let trimr ?(test = isspace) str =
5233   let n = ref (String.length str) in
5234   while !n > 0 && test str.[!n-1]; do
5235     decr n
5236   done;
5237   if !n = String.length str then str
5238   else String.sub str 0 !n
5239
5240 let trim ?(test = isspace) str =
5241   trimr ~test (triml ~test str)
5242
5243 let rec find s sub =
5244   let len = String.length s in
5245   let sublen = String.length sub in
5246   let rec loop i =
5247     if i <= len-sublen then (
5248       let rec loop2 j =
5249         if j < sublen then (
5250           if s.[i+j] = sub.[j] then loop2 (j+1)
5251           else -1
5252         ) else
5253           i (* found *)
5254       in
5255       let r = loop2 0 in
5256       if r = -1 then loop (i+1) else r
5257     ) else
5258       -1 (* not found *)
5259   in
5260   loop 0
5261
5262 let rec replace_str s s1 s2 =
5263   let len = String.length s in
5264   let sublen = String.length s1 in
5265   let i = find s s1 in
5266   if i = -1 then s
5267   else (
5268     let s' = String.sub s 0 i in
5269     let s'' = String.sub s (i+sublen) (len-i-sublen) in
5270     s' ^ s2 ^ replace_str s'' s1 s2
5271   )
5272
5273 let rec string_split sep str =
5274   let len = String.length str in
5275   let seplen = String.length sep in
5276   let i = find str sep in
5277   if i = -1 then [str]
5278   else (
5279     let s' = String.sub str 0 i in
5280     let s'' = String.sub str (i+seplen) (len-i-seplen) in
5281     s' :: string_split sep s''
5282   )
5283
5284 let files_equal n1 n2 =
5285   let cmd = sprintf "cmp -s %s %s" (Filename.quote n1) (Filename.quote n2) in
5286   match Sys.command cmd with
5287   | 0 -> true
5288   | 1 -> false
5289   | i -> failwithf "%s: failed with error code %d" cmd i
5290
5291 let rec filter_map f = function
5292   | [] -> []
5293   | x :: xs ->
5294       match f x with
5295       | Some y -> y :: filter_map f xs
5296       | None -> filter_map f xs
5297
5298 let rec find_map f = function
5299   | [] -> raise Not_found
5300   | x :: xs ->
5301       match f x with
5302       | Some y -> y
5303       | None -> find_map f xs
5304
5305 let iteri f xs =
5306   let rec loop i = function
5307     | [] -> ()
5308     | x :: xs -> f i x; loop (i+1) xs
5309   in
5310   loop 0 xs
5311
5312 let mapi f xs =
5313   let rec loop i = function
5314     | [] -> []
5315     | x :: xs -> let r = f i x in r :: loop (i+1) xs
5316   in
5317   loop 0 xs
5318
5319 let count_chars c str =
5320   let count = ref 0 in
5321   for i = 0 to String.length str - 1 do
5322     if c = String.unsafe_get str i then incr count
5323   done;
5324   !count
5325
5326 let explode str =
5327   let r = ref [] in
5328   for i = 0 to String.length str - 1 do
5329     let c = String.unsafe_get str i in
5330     r := c :: !r;
5331   done;
5332   List.rev !r
5333
5334 let map_chars f str =
5335   List.map f (explode str)
5336
5337 let name_of_argt = function
5338   | Pathname n | Device n | Dev_or_Path n | String n | OptString n
5339   | StringList n | DeviceList n | Bool n | Int n | Int64 n
5340   | FileIn n | FileOut n | BufferIn n | Key n -> n
5341
5342 let java_name_of_struct typ =
5343   try List.assoc typ java_structs
5344   with Not_found ->
5345     failwithf
5346       "java_name_of_struct: no java_structs entry corresponding to %s" typ
5347
5348 let cols_of_struct typ =
5349   try List.assoc typ structs
5350   with Not_found ->
5351     failwithf "cols_of_struct: unknown struct %s" typ
5352
5353 let seq_of_test = function
5354   | TestRun s | TestOutput (s, _) | TestOutputList (s, _)
5355   | TestOutputListOfDevices (s, _)
5356   | TestOutputInt (s, _) | TestOutputIntOp (s, _, _)
5357   | TestOutputTrue s | TestOutputFalse s
5358   | TestOutputLength (s, _) | TestOutputBuffer (s, _)
5359   | TestOutputStruct (s, _)
5360   | TestLastFail s -> s
5361
5362 (* Handling for function flags. *)
5363 let protocol_limit_warning =
5364   "Because of the message protocol, there is a transfer limit
5365 of somewhere between 2MB and 4MB.  See L<guestfs(3)/PROTOCOL LIMITS>."
5366
5367 let danger_will_robinson =
5368   "B<This command is dangerous.  Without careful use you
5369 can easily destroy all your data>."
5370
5371 let deprecation_notice flags =
5372   try
5373     let alt =
5374       find_map (function DeprecatedBy str -> Some str | _ -> None) flags in
5375     let txt =
5376       sprintf "This function is deprecated.
5377 In new code, use the C<%s> call instead.
5378
5379 Deprecated functions will not be removed from the API, but the
5380 fact that they are deprecated indicates that there are problems
5381 with correct use of these functions." alt in
5382     Some txt
5383   with
5384     Not_found -> None
5385
5386 (* Create list of optional groups. *)
5387 let optgroups =
5388   let h = Hashtbl.create 13 in
5389   List.iter (
5390     fun (name, _, _, flags, _, _, _) ->
5391       List.iter (
5392         function
5393         | Optional group ->
5394             let names = try Hashtbl.find h group with Not_found -> [] in
5395             Hashtbl.replace h group (name :: names)
5396         | _ -> ()
5397       ) flags
5398   ) daemon_functions;
5399   let groups = Hashtbl.fold (fun k _ ks -> k :: ks) h [] in
5400   let groups =
5401     List.map (
5402       fun group -> group, List.sort compare (Hashtbl.find h group)
5403     ) groups in
5404   List.sort (fun x y -> compare (fst x) (fst y)) groups
5405
5406 (* Check function names etc. for consistency. *)
5407 let check_functions () =
5408   let contains_uppercase str =
5409     let len = String.length str in
5410     let rec loop i =
5411       if i >= len then false
5412       else (
5413         let c = str.[i] in
5414         if c >= 'A' && c <= 'Z' then true
5415         else loop (i+1)
5416       )
5417     in
5418     loop 0
5419   in
5420
5421   (* Check function names. *)
5422   List.iter (
5423     fun (name, _, _, _, _, _, _) ->
5424       if String.length name >= 7 && String.sub name 0 7 = "guestfs" then
5425         failwithf "function name %s does not need 'guestfs' prefix" name;
5426       if name = "" then
5427         failwithf "function name is empty";
5428       if name.[0] < 'a' || name.[0] > 'z' then
5429         failwithf "function name %s must start with lowercase a-z" name;
5430       if String.contains name '-' then
5431         failwithf "function name %s should not contain '-', use '_' instead."
5432           name
5433   ) all_functions;
5434
5435   (* Check function parameter/return names. *)
5436   List.iter (
5437     fun (name, style, _, _, _, _, _) ->
5438       let check_arg_ret_name n =
5439         if contains_uppercase n then
5440           failwithf "%s param/ret %s should not contain uppercase chars"
5441             name n;
5442         if String.contains n '-' || String.contains n '_' then
5443           failwithf "%s param/ret %s should not contain '-' or '_'"
5444             name n;
5445         if n = "value" then
5446           failwithf "%s has a param/ret called 'value', which causes conflicts in the OCaml bindings, use something like 'val' or a more descriptive name" name;
5447         if n = "int" || n = "char" || n = "short" || n = "long" then
5448           failwithf "%s has a param/ret which conflicts with a C type (eg. 'int', 'char' etc.)" name;
5449         if n = "i" || n = "n" then
5450           failwithf "%s has a param/ret called 'i' or 'n', which will cause some conflicts in the generated code" name;
5451         if n = "argv" || n = "args" then
5452           failwithf "%s has a param/ret called 'argv' or 'args', which will cause some conflicts in the generated code" name;
5453
5454         (* List Haskell, OCaml and C keywords here.
5455          * http://www.haskell.org/haskellwiki/Keywords
5456          * http://caml.inria.fr/pub/docs/manual-ocaml/lex.html#operator-char
5457          * http://en.wikipedia.org/wiki/C_syntax#Reserved_keywords
5458          * Formatted via: cat c haskell ocaml|sort -u|grep -vE '_|^val$' \
5459          *   |perl -pe 's/(.+)/"$1";/'|fmt -70
5460          * Omitting _-containing words, since they're handled above.
5461          * Omitting the OCaml reserved word, "val", is ok,
5462          * and saves us from renaming several parameters.
5463          *)
5464         let reserved = [
5465           "and"; "as"; "asr"; "assert"; "auto"; "begin"; "break"; "case";
5466           "char"; "class"; "const"; "constraint"; "continue"; "data";
5467           "default"; "deriving"; "do"; "done"; "double"; "downto"; "else";
5468           "end"; "enum"; "exception"; "extern"; "external"; "false"; "float";
5469           "for"; "forall"; "foreign"; "fun"; "function"; "functor"; "goto";
5470           "hiding"; "if"; "import"; "in"; "include"; "infix"; "infixl";
5471           "infixr"; "inherit"; "initializer"; "inline"; "instance"; "int";
5472           "interface";
5473           "land"; "lazy"; "let"; "long"; "lor"; "lsl"; "lsr"; "lxor";
5474           "match"; "mdo"; "method"; "mod"; "module"; "mutable"; "new";
5475           "newtype"; "object"; "of"; "open"; "or"; "private"; "qualified";
5476           "rec"; "register"; "restrict"; "return"; "short"; "sig"; "signed";
5477           "sizeof"; "static"; "struct"; "switch"; "then"; "to"; "true"; "try";
5478           "type"; "typedef"; "union"; "unsigned"; "virtual"; "void";
5479           "volatile"; "when"; "where"; "while";
5480           ] in
5481         if List.mem n reserved then
5482           failwithf "%s has param/ret using reserved word %s" name n;
5483       in
5484
5485       (match fst style with
5486        | RErr -> ()
5487        | RInt n | RInt64 n | RBool n
5488        | RConstString n | RConstOptString n | RString n
5489        | RStringList n | RStruct (n, _) | RStructList (n, _)
5490        | RHashtable n | RBufferOut n ->
5491            check_arg_ret_name n
5492       );
5493       List.iter (fun arg -> check_arg_ret_name (name_of_argt arg)) (snd style)
5494   ) all_functions;
5495
5496   (* Check short descriptions. *)
5497   List.iter (
5498     fun (name, _, _, _, _, shortdesc, _) ->
5499       if shortdesc.[0] <> Char.lowercase shortdesc.[0] then
5500         failwithf "short description of %s should begin with lowercase." name;
5501       let c = shortdesc.[String.length shortdesc-1] in
5502       if c = '\n' || c = '.' then
5503         failwithf "short description of %s should not end with . or \\n." name
5504   ) all_functions;
5505
5506   (* Check long descriptions. *)
5507   List.iter (
5508     fun (name, _, _, _, _, _, longdesc) ->
5509       if longdesc.[String.length longdesc-1] = '\n' then
5510         failwithf "long description of %s should not end with \\n." name
5511   ) all_functions;
5512
5513   (* Check proc_nrs. *)
5514   List.iter (
5515     fun (name, _, proc_nr, _, _, _, _) ->
5516       if proc_nr <= 0 then
5517         failwithf "daemon function %s should have proc_nr > 0" name
5518   ) daemon_functions;
5519
5520   List.iter (
5521     fun (name, _, proc_nr, _, _, _, _) ->
5522       if proc_nr <> -1 then
5523         failwithf "non-daemon function %s should have proc_nr -1" name
5524   ) non_daemon_functions;
5525
5526   let proc_nrs =
5527     List.map (fun (name, _, proc_nr, _, _, _, _) -> name, proc_nr)
5528       daemon_functions in
5529   let proc_nrs =
5530     List.sort (fun (_,nr1) (_,nr2) -> compare nr1 nr2) proc_nrs in
5531   let rec loop = function
5532     | [] -> ()
5533     | [_] -> ()
5534     | (name1,nr1) :: ((name2,nr2) :: _ as rest) when nr1 < nr2 ->
5535         loop rest
5536     | (name1,nr1) :: (name2,nr2) :: _ ->
5537         failwithf "%s and %s have conflicting procedure numbers (%d, %d)"
5538           name1 name2 nr1 nr2
5539   in
5540   loop proc_nrs;
5541
5542   (* Check tests. *)
5543   List.iter (
5544     function
5545       (* Ignore functions that have no tests.  We generate a
5546        * warning when the user does 'make check' instead.
5547        *)
5548     | name, _, _, _, [], _, _ -> ()
5549     | name, _, _, _, tests, _, _ ->
5550         let funcs =
5551           List.map (
5552             fun (_, _, test) ->
5553               match seq_of_test test with
5554               | [] ->
5555                   failwithf "%s has a test containing an empty sequence" name
5556               | cmds -> List.map List.hd cmds
5557           ) tests in
5558         let funcs = List.flatten funcs in
5559
5560         let tested = List.mem name funcs in
5561
5562         if not tested then
5563           failwithf "function %s has tests but does not test itself" name
5564   ) all_functions
5565
5566 (* 'pr' prints to the current output file. *)
5567 let chan = ref Pervasives.stdout
5568 let lines = ref 0
5569 let pr fs =
5570   ksprintf
5571     (fun str ->
5572        let i = count_chars '\n' str in
5573        lines := !lines + i;
5574        output_string !chan str
5575     ) fs
5576
5577 let copyright_years =
5578   let this_year = 1900 + (localtime (time ())).tm_year in
5579   if this_year > 2009 then sprintf "2009-%04d" this_year else "2009"
5580
5581 (* Generate a header block in a number of standard styles. *)
5582 type comment_style =
5583     CStyle | CPlusPlusStyle | HashStyle | OCamlStyle | HaskellStyle
5584 type license = GPLv2plus | LGPLv2plus
5585
5586 let generate_header ?(extra_inputs = []) comment license =
5587   let inputs = "src/generator.ml" :: extra_inputs in
5588   let c = match comment with
5589     | CStyle ->         pr "/* "; " *"
5590     | CPlusPlusStyle -> pr "// "; "//"
5591     | HashStyle ->      pr "# ";  "#"
5592     | OCamlStyle ->     pr "(* "; " *"
5593     | HaskellStyle ->   pr "{- "; "  " in
5594   pr "libguestfs generated file\n";
5595   pr "%s WARNING: THIS FILE IS GENERATED FROM:\n" c;
5596   List.iter (pr "%s   %s\n" c) inputs;
5597   pr "%s ANY CHANGES YOU MAKE TO THIS FILE WILL BE LOST.\n" c;
5598   pr "%s\n" c;
5599   pr "%s Copyright (C) %s Red Hat Inc.\n" c copyright_years;
5600   pr "%s\n" c;
5601   (match license with
5602    | GPLv2plus ->
5603        pr "%s This program is free software; you can redistribute it and/or modify\n" c;
5604        pr "%s it under the terms of the GNU General Public License as published by\n" c;
5605        pr "%s the Free Software Foundation; either version 2 of the License, or\n" c;
5606        pr "%s (at your option) any later version.\n" c;
5607        pr "%s\n" c;
5608        pr "%s This program is distributed in the hope that it will be useful,\n" c;
5609        pr "%s but WITHOUT ANY WARRANTY; without even the implied warranty of\n" c;
5610        pr "%s MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the\n" c;
5611        pr "%s GNU General Public License for more details.\n" c;
5612        pr "%s\n" c;
5613        pr "%s You should have received a copy of the GNU General Public License along\n" c;
5614        pr "%s with this program; if not, write to the Free Software Foundation, Inc.,\n" c;
5615        pr "%s 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA.\n" c;
5616
5617    | LGPLv2plus ->
5618        pr "%s This library is free software; you can redistribute it and/or\n" c;
5619        pr "%s modify it under the terms of the GNU Lesser General Public\n" c;
5620        pr "%s License as published by the Free Software Foundation; either\n" c;
5621        pr "%s version 2 of the License, or (at your option) any later version.\n" c;
5622        pr "%s\n" c;
5623        pr "%s This library is distributed in the hope that it will be useful,\n" c;
5624        pr "%s but WITHOUT ANY WARRANTY; without even the implied warranty of\n" c;
5625        pr "%s MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU\n" c;
5626        pr "%s Lesser General Public License for more details.\n" c;
5627        pr "%s\n" c;
5628        pr "%s You should have received a copy of the GNU Lesser General Public\n" c;
5629        pr "%s License along with this library; if not, write to the Free Software\n" c;
5630        pr "%s Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA\n" c;
5631   );
5632   (match comment with
5633    | CStyle -> pr " */\n"
5634    | CPlusPlusStyle
5635    | HashStyle -> ()
5636    | OCamlStyle -> pr " *)\n"
5637    | HaskellStyle -> pr "-}\n"
5638   );
5639   pr "\n"
5640
5641 (* Start of main code generation functions below this line. *)
5642
5643 (* Generate the pod documentation for the C API. *)
5644 let rec generate_actions_pod () =
5645   List.iter (
5646     fun (shortname, style, _, flags, _, _, longdesc) ->
5647       if not (List.mem NotInDocs flags) then (
5648         let name = "guestfs_" ^ shortname in
5649         pr "=head2 %s\n\n" name;
5650         pr " ";
5651         generate_prototype ~extern:false ~handle:"g" name style;
5652         pr "\n\n";
5653         pr "%s\n\n" longdesc;
5654         (match fst style with
5655          | RErr ->
5656              pr "This function returns 0 on success or -1 on error.\n\n"
5657          | RInt _ ->
5658              pr "On error this function returns -1.\n\n"
5659          | RInt64 _ ->
5660              pr "On error this function returns -1.\n\n"
5661          | RBool _ ->
5662              pr "This function returns a C truth value on success or -1 on error.\n\n"
5663          | RConstString _ ->
5664              pr "This function returns a string, or NULL on error.
5665 The string is owned by the guest handle and must I<not> be freed.\n\n"
5666          | RConstOptString _ ->
5667              pr "This function returns a string which may be NULL.
5668 There is way to return an error from this function.
5669 The string is owned by the guest handle and must I<not> be freed.\n\n"
5670          | RString _ ->
5671              pr "This function returns a string, or NULL on error.
5672 I<The caller must free the returned string after use>.\n\n"
5673          | RStringList _ ->
5674              pr "This function returns a NULL-terminated array of strings
5675 (like L<environ(3)>), or NULL if there was an error.
5676 I<The caller must free the strings and the array after use>.\n\n"
5677          | RStruct (_, typ) ->
5678              pr "This function returns a C<struct guestfs_%s *>,
5679 or NULL if there was an error.
5680 I<The caller must call C<guestfs_free_%s> after use>.\n\n" typ typ
5681          | RStructList (_, typ) ->
5682              pr "This function returns a C<struct guestfs_%s_list *>
5683 (see E<lt>guestfs-structs.hE<gt>),
5684 or NULL if there was an error.
5685 I<The caller must call C<guestfs_free_%s_list> after use>.\n\n" typ typ
5686          | RHashtable _ ->
5687              pr "This function returns a NULL-terminated array of
5688 strings, or NULL if there was an error.
5689 The array of strings will always have length C<2n+1>, where
5690 C<n> keys and values alternate, followed by the trailing NULL entry.
5691 I<The caller must free the strings and the array after use>.\n\n"
5692          | RBufferOut _ ->
5693              pr "This function returns a buffer, or NULL on error.
5694 The size of the returned buffer is written to C<*size_r>.
5695 I<The caller must free the returned buffer after use>.\n\n"
5696         );
5697         if List.mem ProtocolLimitWarning flags then
5698           pr "%s\n\n" protocol_limit_warning;
5699         if List.mem DangerWillRobinson flags then
5700           pr "%s\n\n" danger_will_robinson;
5701         if List.exists (function Key _ -> true | _ -> false) (snd style) then
5702           pr "This function takes a key or passphrase parameter which
5703 could contain sensitive material.  Read the section
5704 L</KEYS AND PASSPHRASES> for more information.\n\n";
5705         match deprecation_notice flags with
5706         | None -> ()
5707         | Some txt -> pr "%s\n\n" txt
5708       )
5709   ) all_functions_sorted
5710
5711 and generate_structs_pod () =
5712   (* Structs documentation. *)
5713   List.iter (
5714     fun (typ, cols) ->
5715       pr "=head2 guestfs_%s\n" typ;
5716       pr "\n";
5717       pr " struct guestfs_%s {\n" typ;
5718       List.iter (
5719         function
5720         | name, FChar -> pr "   char %s;\n" name
5721         | name, FUInt32 -> pr "   uint32_t %s;\n" name
5722         | name, FInt32 -> pr "   int32_t %s;\n" name
5723         | name, (FUInt64|FBytes) -> pr "   uint64_t %s;\n" name
5724         | name, FInt64 -> pr "   int64_t %s;\n" name
5725         | name, FString -> pr "   char *%s;\n" name
5726         | name, FBuffer ->
5727             pr "   /* The next two fields describe a byte array. */\n";
5728             pr "   uint32_t %s_len;\n" name;
5729             pr "   char *%s;\n" name
5730         | name, FUUID ->
5731             pr "   /* The next field is NOT nul-terminated, be careful when printing it: */\n";
5732             pr "   char %s[32];\n" name
5733         | name, FOptPercent ->
5734             pr "   /* The next field is [0..100] or -1 meaning 'not present': */\n";
5735             pr "   float %s;\n" name
5736       ) cols;
5737       pr " };\n";
5738       pr " \n";
5739       pr " struct guestfs_%s_list {\n" typ;
5740       pr "   uint32_t len; /* Number of elements in list. */\n";
5741       pr "   struct guestfs_%s *val; /* Elements. */\n" typ;
5742       pr " };\n";
5743       pr " \n";
5744       pr " void guestfs_free_%s (struct guestfs_free_%s *);\n" typ typ;
5745       pr " void guestfs_free_%s_list (struct guestfs_free_%s_list *);\n"
5746         typ typ;
5747       pr "\n"
5748   ) structs
5749
5750 and generate_availability_pod () =
5751   (* Availability documentation. *)
5752   pr "=over 4\n";
5753   pr "\n";
5754   List.iter (
5755     fun (group, functions) ->
5756       pr "=item B<%s>\n" group;
5757       pr "\n";
5758       pr "The following functions:\n";
5759       List.iter (pr "L</guestfs_%s>\n") functions;
5760       pr "\n"
5761   ) optgroups;
5762   pr "=back\n";
5763   pr "\n"
5764
5765 (* Generate the protocol (XDR) file, 'guestfs_protocol.x' and
5766  * indirectly 'guestfs_protocol.h' and 'guestfs_protocol.c'.
5767  *
5768  * We have to use an underscore instead of a dash because otherwise
5769  * rpcgen generates incorrect code.
5770  *
5771  * This header is NOT exported to clients, but see also generate_structs_h.
5772  *)
5773 and generate_xdr () =
5774   generate_header CStyle LGPLv2plus;
5775
5776   (* This has to be defined to get around a limitation in Sun's rpcgen. *)
5777   pr "typedef string str<>;\n";
5778   pr "\n";
5779
5780   (* Internal structures. *)
5781   List.iter (
5782     function
5783     | typ, cols ->
5784         pr "struct guestfs_int_%s {\n" typ;
5785         List.iter (function
5786                    | name, FChar -> pr "  char %s;\n" name
5787                    | name, FString -> pr "  string %s<>;\n" name
5788                    | name, FBuffer -> pr "  opaque %s<>;\n" name
5789                    | name, FUUID -> pr "  opaque %s[32];\n" name
5790                    | name, (FInt32|FUInt32) -> pr "  int %s;\n" name
5791                    | name, (FInt64|FUInt64|FBytes) -> pr "  hyper %s;\n" name
5792                    | name, FOptPercent -> pr "  float %s;\n" name
5793                   ) cols;
5794         pr "};\n";
5795         pr "\n";
5796         pr "typedef struct guestfs_int_%s guestfs_int_%s_list<>;\n" typ typ;
5797         pr "\n";
5798   ) structs;
5799
5800   List.iter (
5801     fun (shortname, style, _, _, _, _, _) ->
5802       let name = "guestfs_" ^ shortname in
5803
5804       (match snd style with
5805        | [] -> ()
5806        | args ->
5807            pr "struct %s_args {\n" name;
5808            List.iter (
5809              function
5810              | Pathname n | Device n | Dev_or_Path n | String n | Key n ->
5811                  pr "  string %s<>;\n" n
5812              | OptString n -> pr "  str *%s;\n" n
5813              | StringList n | DeviceList n -> pr "  str %s<>;\n" n
5814              | Bool n -> pr "  bool %s;\n" n
5815              | Int n -> pr "  int %s;\n" n
5816              | Int64 n -> pr "  hyper %s;\n" n
5817              | BufferIn n ->
5818                  pr "  opaque %s<>;\n" n
5819              | FileIn _ | FileOut _ -> ()
5820            ) args;
5821            pr "};\n\n"
5822       );
5823       (match fst style with
5824        | RErr -> ()
5825        | RInt n ->
5826            pr "struct %s_ret {\n" name;
5827            pr "  int %s;\n" n;
5828            pr "};\n\n"
5829        | RInt64 n ->
5830            pr "struct %s_ret {\n" name;
5831            pr "  hyper %s;\n" n;
5832            pr "};\n\n"
5833        | RBool n ->
5834            pr "struct %s_ret {\n" name;
5835            pr "  bool %s;\n" n;
5836            pr "};\n\n"
5837        | RConstString _ | RConstOptString _ ->
5838            failwithf "RConstString|RConstOptString cannot be used by daemon functions"
5839        | RString n ->
5840            pr "struct %s_ret {\n" name;
5841            pr "  string %s<>;\n" n;
5842            pr "};\n\n"
5843        | RStringList n ->
5844            pr "struct %s_ret {\n" name;
5845            pr "  str %s<>;\n" n;
5846            pr "};\n\n"
5847        | RStruct (n, typ) ->
5848            pr "struct %s_ret {\n" name;
5849            pr "  guestfs_int_%s %s;\n" typ n;
5850            pr "};\n\n"
5851        | RStructList (n, typ) ->
5852            pr "struct %s_ret {\n" name;
5853            pr "  guestfs_int_%s_list %s;\n" typ n;
5854            pr "};\n\n"
5855        | RHashtable n ->
5856            pr "struct %s_ret {\n" name;
5857            pr "  str %s<>;\n" n;
5858            pr "};\n\n"
5859        | RBufferOut n ->
5860            pr "struct %s_ret {\n" name;
5861            pr "  opaque %s<>;\n" n;
5862            pr "};\n\n"
5863       );
5864   ) daemon_functions;
5865
5866   (* Table of procedure numbers. *)
5867   pr "enum guestfs_procedure {\n";
5868   List.iter (
5869     fun (shortname, _, proc_nr, _, _, _, _) ->
5870       pr "  GUESTFS_PROC_%s = %d,\n" (String.uppercase shortname) proc_nr
5871   ) daemon_functions;
5872   pr "  GUESTFS_PROC_NR_PROCS\n";
5873   pr "};\n";
5874   pr "\n";
5875
5876   (* Having to choose a maximum message size is annoying for several
5877    * reasons (it limits what we can do in the API), but it (a) makes
5878    * the protocol a lot simpler, and (b) provides a bound on the size
5879    * of the daemon which operates in limited memory space.
5880    *)
5881   pr "const GUESTFS_MESSAGE_MAX = %d;\n" (4 * 1024 * 1024);
5882   pr "\n";
5883
5884   (* Message header, etc. *)
5885   pr "\
5886 /* The communication protocol is now documented in the guestfs(3)
5887  * manpage.
5888  */
5889
5890 const GUESTFS_PROGRAM = 0x2000F5F5;
5891 const GUESTFS_PROTOCOL_VERSION = 1;
5892
5893 /* These constants must be larger than any possible message length. */
5894 const GUESTFS_LAUNCH_FLAG = 0xf5f55ff5;
5895 const GUESTFS_CANCEL_FLAG = 0xffffeeee;
5896
5897 enum guestfs_message_direction {
5898   GUESTFS_DIRECTION_CALL = 0,        /* client -> daemon */
5899   GUESTFS_DIRECTION_REPLY = 1        /* daemon -> client */
5900 };
5901
5902 enum guestfs_message_status {
5903   GUESTFS_STATUS_OK = 0,
5904   GUESTFS_STATUS_ERROR = 1
5905 };
5906
5907 const GUESTFS_ERROR_LEN = 256;
5908
5909 struct guestfs_message_error {
5910   string error_message<GUESTFS_ERROR_LEN>;
5911 };
5912
5913 struct guestfs_message_header {
5914   unsigned prog;                     /* GUESTFS_PROGRAM */
5915   unsigned vers;                     /* GUESTFS_PROTOCOL_VERSION */
5916   guestfs_procedure proc;            /* GUESTFS_PROC_x */
5917   guestfs_message_direction direction;
5918   unsigned serial;                   /* message serial number */
5919   guestfs_message_status status;
5920 };
5921
5922 const GUESTFS_MAX_CHUNK_SIZE = 8192;
5923
5924 struct guestfs_chunk {
5925   int cancel;                        /* if non-zero, transfer is cancelled */
5926   /* data size is 0 bytes if the transfer has finished successfully */
5927   opaque data<GUESTFS_MAX_CHUNK_SIZE>;
5928 };
5929 "
5930
5931 (* Generate the guestfs-structs.h file. *)
5932 and generate_structs_h () =
5933   generate_header CStyle LGPLv2plus;
5934
5935   (* This is a public exported header file containing various
5936    * structures.  The structures are carefully written to have
5937    * exactly the same in-memory format as the XDR structures that
5938    * we use on the wire to the daemon.  The reason for creating
5939    * copies of these structures here is just so we don't have to
5940    * export the whole of guestfs_protocol.h (which includes much
5941    * unrelated and XDR-dependent stuff that we don't want to be
5942    * public, or required by clients).
5943    *
5944    * To reiterate, we will pass these structures to and from the
5945    * client with a simple assignment or memcpy, so the format
5946    * must be identical to what rpcgen / the RFC defines.
5947    *)
5948
5949   (* Public structures. *)
5950   List.iter (
5951     fun (typ, cols) ->
5952       pr "struct guestfs_%s {\n" typ;
5953       List.iter (
5954         function
5955         | name, FChar -> pr "  char %s;\n" name
5956         | name, FString -> pr "  char *%s;\n" name
5957         | name, FBuffer ->
5958             pr "  uint32_t %s_len;\n" name;
5959             pr "  char *%s;\n" name
5960         | name, FUUID -> pr "  char %s[32]; /* this is NOT nul-terminated, be careful when printing */\n" name
5961         | name, FUInt32 -> pr "  uint32_t %s;\n" name
5962         | name, FInt32 -> pr "  int32_t %s;\n" name
5963         | name, (FUInt64|FBytes) -> pr "  uint64_t %s;\n" name
5964         | name, FInt64 -> pr "  int64_t %s;\n" name
5965         | name, FOptPercent -> pr "  float %s; /* [0..100] or -1 */\n" name
5966       ) cols;
5967       pr "};\n";
5968       pr "\n";
5969       pr "struct guestfs_%s_list {\n" typ;
5970       pr "  uint32_t len;\n";
5971       pr "  struct guestfs_%s *val;\n" typ;
5972       pr "};\n";
5973       pr "\n";
5974       pr "extern void guestfs_free_%s (struct guestfs_%s *);\n" typ typ;
5975       pr "extern void guestfs_free_%s_list (struct guestfs_%s_list *);\n" typ typ;
5976       pr "\n"
5977   ) structs
5978
5979 (* Generate the guestfs-actions.h file. *)
5980 and generate_actions_h () =
5981   generate_header CStyle LGPLv2plus;
5982   List.iter (
5983     fun (shortname, style, _, _, _, _, _) ->
5984       let name = "guestfs_" ^ shortname in
5985       generate_prototype ~single_line:true ~newline:true ~handle:"g"
5986         name style
5987   ) all_functions
5988
5989 (* Generate the guestfs-internal-actions.h file. *)
5990 and generate_internal_actions_h () =
5991   generate_header CStyle LGPLv2plus;
5992   List.iter (
5993     fun (shortname, style, _, _, _, _, _) ->
5994       let name = "guestfs__" ^ shortname in
5995       generate_prototype ~single_line:true ~newline:true ~handle:"g"
5996         name style
5997   ) non_daemon_functions
5998
5999 (* Generate the client-side dispatch stubs. *)
6000 and generate_client_actions () =
6001   generate_header CStyle LGPLv2plus;
6002
6003   pr "\
6004 #include <stdio.h>
6005 #include <stdlib.h>
6006 #include <stdint.h>
6007 #include <string.h>
6008 #include <inttypes.h>
6009
6010 #include \"guestfs.h\"
6011 #include \"guestfs-internal.h\"
6012 #include \"guestfs-internal-actions.h\"
6013 #include \"guestfs_protocol.h\"
6014
6015 #define error guestfs_error
6016 //#define perrorf guestfs_perrorf
6017 #define safe_malloc guestfs_safe_malloc
6018 #define safe_realloc guestfs_safe_realloc
6019 //#define safe_strdup guestfs_safe_strdup
6020 #define safe_memdup guestfs_safe_memdup
6021
6022 /* Check the return message from a call for validity. */
6023 static int
6024 check_reply_header (guestfs_h *g,
6025                     const struct guestfs_message_header *hdr,
6026                     unsigned int proc_nr, unsigned int serial)
6027 {
6028   if (hdr->prog != GUESTFS_PROGRAM) {
6029     error (g, \"wrong program (%%d/%%d)\", hdr->prog, GUESTFS_PROGRAM);
6030     return -1;
6031   }
6032   if (hdr->vers != GUESTFS_PROTOCOL_VERSION) {
6033     error (g, \"wrong protocol version (%%d/%%d)\",
6034            hdr->vers, GUESTFS_PROTOCOL_VERSION);
6035     return -1;
6036   }
6037   if (hdr->direction != GUESTFS_DIRECTION_REPLY) {
6038     error (g, \"unexpected message direction (%%d/%%d)\",
6039            hdr->direction, GUESTFS_DIRECTION_REPLY);
6040     return -1;
6041   }
6042   if (hdr->proc != proc_nr) {
6043     error (g, \"unexpected procedure number (%%d/%%d)\", hdr->proc, proc_nr);
6044     return -1;
6045   }
6046   if (hdr->serial != serial) {
6047     error (g, \"unexpected serial (%%d/%%d)\", hdr->serial, serial);
6048     return -1;
6049   }
6050
6051   return 0;
6052 }
6053
6054 /* Check we are in the right state to run a high-level action. */
6055 static int
6056 check_state (guestfs_h *g, const char *caller)
6057 {
6058   if (!guestfs__is_ready (g)) {
6059     if (guestfs__is_config (g) || guestfs__is_launching (g))
6060       error (g, \"%%s: call launch before using this function\\n(in guestfish, don't forget to use the 'run' command)\",
6061         caller);
6062     else
6063       error (g, \"%%s called from the wrong state, %%d != READY\",
6064         caller, guestfs__get_state (g));
6065     return -1;
6066   }
6067   return 0;
6068 }
6069
6070 ";
6071
6072   let error_code_of = function
6073     | RErr | RInt _ | RInt64 _ | RBool _ -> "-1"
6074     | RConstString _ | RConstOptString _
6075     | RString _ | RStringList _
6076     | RStruct _ | RStructList _
6077     | RHashtable _ | RBufferOut _ -> "NULL"
6078   in
6079
6080   (* Generate code to check String-like parameters are not passed in
6081    * as NULL (returning an error if they are).
6082    *)
6083   let check_null_strings shortname style =
6084     let pr_newline = ref false in
6085     List.iter (
6086       function
6087       (* parameters which should not be NULL *)
6088       | String n
6089       | Device n
6090       | Pathname n
6091       | Dev_or_Path n
6092       | FileIn n
6093       | FileOut n
6094       | BufferIn n
6095       | StringList n
6096       | DeviceList n
6097       | Key n ->
6098           pr "  if (%s == NULL) {\n" n;
6099           pr "    error (g, \"%%s: %%s: parameter cannot be NULL\",\n";
6100           pr "           \"%s\", \"%s\");\n" shortname n;
6101           pr "    return %s;\n" (error_code_of (fst style));
6102           pr "  }\n";
6103           pr_newline := true
6104
6105       (* can be NULL *)
6106       | OptString _
6107
6108       (* not applicable *)
6109       | Bool _
6110       | Int _
6111       | Int64 _ -> ()
6112     ) (snd style);
6113
6114     if !pr_newline then pr "\n";
6115   in
6116
6117   (* Generate code to generate guestfish call traces. *)
6118   let trace_call shortname style =
6119     pr "  if (guestfs__get_trace (g)) {\n";
6120
6121     let needs_i =
6122       List.exists (function
6123                    | StringList _ | DeviceList _ -> true
6124                    | _ -> false) (snd style) in
6125     if needs_i then (
6126       pr "    size_t i;\n";
6127       pr "\n"
6128     );
6129
6130     pr "    printf (\"%s\");\n" shortname;
6131     List.iter (
6132       function
6133       | String n                        (* strings *)
6134       | Device n
6135       | Pathname n
6136       | Dev_or_Path n
6137       | FileIn n
6138       | FileOut n
6139       | BufferIn n
6140       | Key n ->
6141           (* guestfish doesn't support string escaping, so neither do we *)
6142           pr "    printf (\" \\\"%%s\\\"\", %s);\n" n
6143       | OptString n ->                  (* string option *)
6144           pr "    if (%s) printf (\" \\\"%%s\\\"\", %s);\n" n n;
6145           pr "    else printf (\" null\");\n"
6146       | StringList n
6147       | DeviceList n ->                 (* string list *)
6148           pr "    putchar (' ');\n";
6149           pr "    putchar ('\"');\n";
6150           pr "    for (i = 0; %s[i]; ++i) {\n" n;
6151           pr "      if (i > 0) putchar (' ');\n";
6152           pr "      fputs (%s[i], stdout);\n" n;
6153           pr "    }\n";
6154           pr "    putchar ('\"');\n";
6155       | Bool n ->                       (* boolean *)
6156           pr "    fputs (%s ? \" true\" : \" false\", stdout);\n" n
6157       | Int n ->                        (* int *)
6158           pr "    printf (\" %%d\", %s);\n" n
6159       | Int64 n ->
6160           pr "    printf (\" %%\" PRIi64, %s);\n" n
6161     ) (snd style);
6162     pr "    putchar ('\\n');\n";
6163     pr "  }\n";
6164     pr "\n";
6165   in
6166
6167   (* For non-daemon functions, generate a wrapper around each function. *)
6168   List.iter (
6169     fun (shortname, style, _, _, _, _, _) ->
6170       let name = "guestfs_" ^ shortname in
6171
6172       generate_prototype ~extern:false ~semicolon:false ~newline:true
6173         ~handle:"g" name style;
6174       pr "{\n";
6175       check_null_strings shortname style;
6176       trace_call shortname style;
6177       pr "  return guestfs__%s " shortname;
6178       generate_c_call_args ~handle:"g" style;
6179       pr ";\n";
6180       pr "}\n";
6181       pr "\n"
6182   ) non_daemon_functions;
6183
6184   (* Client-side stubs for each function. *)
6185   List.iter (
6186     fun (shortname, style, _, _, _, _, _) ->
6187       let name = "guestfs_" ^ shortname in
6188       let error_code = error_code_of (fst style) in
6189
6190       (* Generate the action stub. *)
6191       generate_prototype ~extern:false ~semicolon:false ~newline:true
6192         ~handle:"g" name style;
6193
6194       pr "{\n";
6195
6196       (match snd style with
6197        | [] -> ()
6198        | _ -> pr "  struct %s_args args;\n" name
6199       );
6200
6201       pr "  guestfs_message_header hdr;\n";
6202       pr "  guestfs_message_error err;\n";
6203       let has_ret =
6204         match fst style with
6205         | RErr -> false
6206         | RConstString _ | RConstOptString _ ->
6207             failwithf "RConstString|RConstOptString cannot be used by daemon functions"
6208         | RInt _ | RInt64 _
6209         | RBool _ | RString _ | RStringList _
6210         | RStruct _ | RStructList _
6211         | RHashtable _ | RBufferOut _ ->
6212             pr "  struct %s_ret ret;\n" name;
6213             true in
6214
6215       pr "  int serial;\n";
6216       pr "  int r;\n";
6217       pr "\n";
6218       check_null_strings shortname style;
6219       trace_call shortname style;
6220       pr "  if (check_state (g, \"%s\") == -1) return %s;\n"
6221         shortname error_code;
6222       pr "  guestfs___set_busy (g);\n";
6223       pr "\n";
6224
6225       (* Send the main header and arguments. *)
6226       (match snd style with
6227        | [] ->
6228            pr "  serial = guestfs___send (g, GUESTFS_PROC_%s, NULL, NULL);\n"
6229              (String.uppercase shortname)
6230        | args ->
6231            List.iter (
6232              function
6233              | Pathname n | Device n | Dev_or_Path n | String n | Key n ->
6234                  pr "  args.%s = (char *) %s;\n" n n
6235              | OptString n ->
6236                  pr "  args.%s = %s ? (char **) &%s : NULL;\n" n n n
6237              | StringList n | DeviceList n ->
6238                  pr "  args.%s.%s_val = (char **) %s;\n" n n n;
6239                  pr "  for (args.%s.%s_len = 0; %s[args.%s.%s_len]; args.%s.%s_len++) ;\n" n n n n n n n;
6240              | Bool n ->
6241                  pr "  args.%s = %s;\n" n n
6242              | Int n ->
6243                  pr "  args.%s = %s;\n" n n
6244              | Int64 n ->
6245                  pr "  args.%s = %s;\n" n n
6246              | FileIn _ | FileOut _ -> ()
6247              | BufferIn n ->
6248                  pr "  /* Just catch grossly large sizes. XDR encoding will make this precise. */\n";
6249                  pr "  if (%s_size >= GUESTFS_MESSAGE_MAX) {\n" n;
6250                  pr "    error (g, \"%%s: size of input buffer too large\", \"%s\");\n"
6251                    shortname;
6252                  pr "    guestfs___end_busy (g);\n";
6253                  pr "    return %s;\n" error_code;
6254                  pr "  }\n";
6255                  pr "  args.%s.%s_val = (char *) %s;\n" n n n;
6256                  pr "  args.%s.%s_len = %s_size;\n" n n n
6257            ) args;
6258            pr "  serial = guestfs___send (g, GUESTFS_PROC_%s,\n"
6259              (String.uppercase shortname);
6260            pr "        (xdrproc_t) xdr_%s_args, (char *) &args);\n"
6261              name;
6262       );
6263       pr "  if (serial == -1) {\n";
6264       pr "    guestfs___end_busy (g);\n";
6265       pr "    return %s;\n" error_code;
6266       pr "  }\n";
6267       pr "\n";
6268
6269       (* Send any additional files (FileIn) requested. *)
6270       let need_read_reply_label = ref false in
6271       List.iter (
6272         function
6273         | FileIn n ->
6274             pr "  r = guestfs___send_file (g, %s);\n" n;
6275             pr "  if (r == -1) {\n";
6276             pr "    guestfs___end_busy (g);\n";
6277             pr "    return %s;\n" error_code;
6278             pr "  }\n";
6279             pr "  if (r == -2) /* daemon cancelled */\n";
6280             pr "    goto read_reply;\n";
6281             need_read_reply_label := true;
6282             pr "\n";
6283         | _ -> ()
6284       ) (snd style);
6285
6286       (* Wait for the reply from the remote end. *)
6287       if !need_read_reply_label then pr " read_reply:\n";
6288       pr "  memset (&hdr, 0, sizeof hdr);\n";
6289       pr "  memset (&err, 0, sizeof err);\n";
6290       if has_ret then pr "  memset (&ret, 0, sizeof ret);\n";
6291       pr "\n";
6292       pr "  r = guestfs___recv (g, \"%s\", &hdr, &err,\n        " shortname;
6293       if not has_ret then
6294         pr "NULL, NULL"
6295       else
6296         pr "(xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret" shortname;
6297       pr ");\n";
6298
6299       pr "  if (r == -1) {\n";
6300       pr "    guestfs___end_busy (g);\n";
6301       pr "    return %s;\n" error_code;
6302       pr "  }\n";
6303       pr "\n";
6304
6305       pr "  if (check_reply_header (g, &hdr, GUESTFS_PROC_%s, serial) == -1) {\n"
6306         (String.uppercase shortname);
6307       pr "    guestfs___end_busy (g);\n";
6308       pr "    return %s;\n" error_code;
6309       pr "  }\n";
6310       pr "\n";
6311
6312       pr "  if (hdr.status == GUESTFS_STATUS_ERROR) {\n";
6313       pr "    error (g, \"%%s: %%s\", \"%s\", err.error_message);\n" shortname;
6314       pr "    free (err.error_message);\n";
6315       pr "    guestfs___end_busy (g);\n";
6316       pr "    return %s;\n" error_code;
6317       pr "  }\n";
6318       pr "\n";
6319
6320       (* Expecting to receive further files (FileOut)? *)
6321       List.iter (
6322         function
6323         | FileOut n ->
6324             pr "  if (guestfs___recv_file (g, %s) == -1) {\n" n;
6325             pr "    guestfs___end_busy (g);\n";
6326             pr "    return %s;\n" error_code;
6327             pr "  }\n";
6328             pr "\n";
6329         | _ -> ()
6330       ) (snd style);
6331
6332       pr "  guestfs___end_busy (g);\n";
6333
6334       (match fst style with
6335        | RErr -> pr "  return 0;\n"
6336        | RInt n | RInt64 n | RBool n ->
6337            pr "  return ret.%s;\n" n
6338        | RConstString _ | RConstOptString _ ->
6339            failwithf "RConstString|RConstOptString cannot be used by daemon functions"
6340        | RString n ->
6341            pr "  return ret.%s; /* caller will free */\n" n
6342        | RStringList n | RHashtable n ->
6343            pr "  /* caller will free this, but we need to add a NULL entry */\n";
6344            pr "  ret.%s.%s_val =\n" n n;
6345            pr "    safe_realloc (g, ret.%s.%s_val,\n" n n;
6346            pr "                  sizeof (char *) * (ret.%s.%s_len + 1));\n"
6347              n n;
6348            pr "  ret.%s.%s_val[ret.%s.%s_len] = NULL;\n" n n n n;
6349            pr "  return ret.%s.%s_val;\n" n n
6350        | RStruct (n, _) ->
6351            pr "  /* caller will free this */\n";
6352            pr "  return safe_memdup (g, &ret.%s, sizeof (ret.%s));\n" n n
6353        | RStructList (n, _) ->
6354            pr "  /* caller will free this */\n";
6355            pr "  return safe_memdup (g, &ret.%s, sizeof (ret.%s));\n" n n
6356        | RBufferOut n ->
6357            pr "  /* RBufferOut is tricky: If the buffer is zero-length, then\n";
6358            pr "   * _val might be NULL here.  To make the API saner for\n";
6359            pr "   * callers, we turn this case into a unique pointer (using\n";
6360            pr "   * malloc(1)).\n";
6361            pr "   */\n";
6362            pr "  if (ret.%s.%s_len > 0) {\n" n n;
6363            pr "    *size_r = ret.%s.%s_len;\n" n n;
6364            pr "    return ret.%s.%s_val; /* caller will free */\n" n n;
6365            pr "  } else {\n";
6366            pr "    free (ret.%s.%s_val);\n" n n;
6367            pr "    char *p = safe_malloc (g, 1);\n";
6368            pr "    *size_r = ret.%s.%s_len;\n" n n;
6369            pr "    return p;\n";
6370            pr "  }\n";
6371       );
6372
6373       pr "}\n\n"
6374   ) daemon_functions;
6375
6376   (* Functions to free structures. *)
6377   pr "/* Structure-freeing functions.  These rely on the fact that the\n";
6378   pr " * structure format is identical to the XDR format.  See note in\n";
6379   pr " * generator.ml.\n";
6380   pr " */\n";
6381   pr "\n";
6382
6383   List.iter (
6384     fun (typ, _) ->
6385       pr "void\n";
6386       pr "guestfs_free_%s (struct guestfs_%s *x)\n" typ typ;
6387       pr "{\n";
6388       pr "  xdr_free ((xdrproc_t) xdr_guestfs_int_%s, (char *) x);\n" typ;
6389       pr "  free (x);\n";
6390       pr "}\n";
6391       pr "\n";
6392
6393       pr "void\n";
6394       pr "guestfs_free_%s_list (struct guestfs_%s_list *x)\n" typ typ;
6395       pr "{\n";
6396       pr "  xdr_free ((xdrproc_t) xdr_guestfs_int_%s_list, (char *) x);\n" typ;
6397       pr "  free (x);\n";
6398       pr "}\n";
6399       pr "\n";
6400
6401   ) structs;
6402
6403 (* Generate daemon/actions.h. *)
6404 and generate_daemon_actions_h () =
6405   generate_header CStyle GPLv2plus;
6406
6407   pr "#include \"../src/guestfs_protocol.h\"\n";
6408   pr "\n";
6409
6410   List.iter (
6411     fun (name, style, _, _, _, _, _) ->
6412       generate_prototype
6413         ~single_line:true ~newline:true ~in_daemon:true ~prefix:"do_"
6414         name style;
6415   ) daemon_functions
6416
6417 (* Generate the linker script which controls the visibility of
6418  * symbols in the public ABI and ensures no other symbols get
6419  * exported accidentally.
6420  *)
6421 and generate_linker_script () =
6422   generate_header HashStyle GPLv2plus;
6423
6424   let globals = [
6425     "guestfs_create";
6426     "guestfs_close";
6427     "guestfs_get_error_handler";
6428     "guestfs_get_out_of_memory_handler";
6429     "guestfs_last_error";
6430     "guestfs_set_close_callback";
6431     "guestfs_set_error_handler";
6432     "guestfs_set_launch_done_callback";
6433     "guestfs_set_log_message_callback";
6434     "guestfs_set_out_of_memory_handler";
6435     "guestfs_set_subprocess_quit_callback";
6436
6437     (* Unofficial parts of the API: the bindings code use these
6438      * functions, so it is useful to export them.
6439      *)
6440     "guestfs_safe_calloc";
6441     "guestfs_safe_malloc";
6442     "guestfs_safe_strdup";
6443     "guestfs_safe_memdup";
6444   ] in
6445   let functions =
6446     List.map (fun (name, _, _, _, _, _, _) -> "guestfs_" ^ name)
6447       all_functions in
6448   let structs =
6449     List.concat (
6450       List.map (fun (typ, _) ->
6451                   ["guestfs_free_" ^ typ; "guestfs_free_" ^ typ ^ "_list"])
6452         structs
6453     ) in
6454   let globals = List.sort compare (globals @ functions @ structs) in
6455
6456   pr "{\n";
6457   pr "    global:\n";
6458   List.iter (pr "        %s;\n") globals;
6459   pr "\n";
6460
6461   pr "    local:\n";
6462   pr "        *;\n";
6463   pr "};\n"
6464
6465 (* Generate the server-side stubs. *)
6466 and generate_daemon_actions () =
6467   generate_header CStyle GPLv2plus;
6468
6469   pr "#include <config.h>\n";
6470   pr "\n";
6471   pr "#include <stdio.h>\n";
6472   pr "#include <stdlib.h>\n";
6473   pr "#include <string.h>\n";
6474   pr "#include <inttypes.h>\n";
6475   pr "#include <rpc/types.h>\n";
6476   pr "#include <rpc/xdr.h>\n";
6477   pr "\n";
6478   pr "#include \"daemon.h\"\n";
6479   pr "#include \"c-ctype.h\"\n";
6480   pr "#include \"../src/guestfs_protocol.h\"\n";
6481   pr "#include \"actions.h\"\n";
6482   pr "\n";
6483
6484   List.iter (
6485     fun (name, style, _, _, _, _, _) ->
6486       (* Generate server-side stubs. *)
6487       pr "static void %s_stub (XDR *xdr_in)\n" name;
6488       pr "{\n";
6489       let error_code =
6490         match fst style with
6491         | RErr | RInt _ -> pr "  int r;\n"; "-1"
6492         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
6493         | RBool _ -> pr "  int r;\n"; "-1"
6494         | RConstString _ | RConstOptString _ ->
6495             failwithf "RConstString|RConstOptString cannot be used by daemon functions"
6496         | RString _ -> pr "  char *r;\n"; "NULL"
6497         | RStringList _ | RHashtable _ -> pr "  char **r;\n"; "NULL"
6498         | RStruct (_, typ) -> pr "  guestfs_int_%s *r;\n" typ; "NULL"
6499         | RStructList (_, typ) -> pr "  guestfs_int_%s_list *r;\n" typ; "NULL"
6500         | RBufferOut _ ->
6501             pr "  size_t size = 1;\n";
6502             pr "  char *r;\n";
6503             "NULL" in
6504
6505       (match snd style with
6506        | [] -> ()
6507        | args ->
6508            pr "  struct guestfs_%s_args args;\n" name;
6509            List.iter (
6510              function
6511              | Device n | Dev_or_Path n
6512              | Pathname n
6513              | String n
6514              | Key n -> ()
6515              | OptString n -> pr "  char *%s;\n" n
6516              | StringList n | DeviceList n -> pr "  char **%s;\n" n
6517              | Bool n -> pr "  int %s;\n" n
6518              | Int n -> pr "  int %s;\n" n
6519              | Int64 n -> pr "  int64_t %s;\n" n
6520              | FileIn _ | FileOut _ -> ()
6521              | BufferIn n ->
6522                  pr "  const char *%s;\n" n;
6523                  pr "  size_t %s_size;\n" n
6524            ) args
6525       );
6526       pr "\n";
6527
6528       let is_filein =
6529         List.exists (function FileIn _ -> true | _ -> false) (snd style) in
6530
6531       (match snd style with
6532        | [] -> ()
6533        | args ->
6534            pr "  memset (&args, 0, sizeof args);\n";
6535            pr "\n";
6536            pr "  if (!xdr_guestfs_%s_args (xdr_in, &args)) {\n" name;
6537            if is_filein then
6538              pr "    if (cancel_receive () != -2)\n";
6539            pr "      reply_with_error (\"daemon failed to decode procedure arguments\");\n";
6540            pr "    goto done;\n";
6541            pr "  }\n";
6542            let pr_args n =
6543              pr "  char *%s = args.%s;\n" n n
6544            in
6545            let pr_list_handling_code n =
6546              pr "  %s = realloc (args.%s.%s_val,\n" n n n;
6547              pr "                sizeof (char *) * (args.%s.%s_len+1));\n" n n;
6548              pr "  if (%s == NULL) {\n" n;
6549              if is_filein then
6550                pr "    if (cancel_receive () != -2)\n";
6551              pr "      reply_with_perror (\"realloc\");\n";
6552              pr "    goto done;\n";
6553              pr "  }\n";
6554              pr "  %s[args.%s.%s_len] = NULL;\n" n n n;
6555              pr "  args.%s.%s_val = %s;\n" n n n;
6556            in
6557            List.iter (
6558              function
6559              | Pathname n ->
6560                  pr_args n;
6561                  pr "  ABS_PATH (%s, %s, goto done);\n"
6562                    n (if is_filein then "cancel_receive ()" else "0");
6563              | Device n ->
6564                  pr_args n;
6565                  pr "  RESOLVE_DEVICE (%s, %s, goto done);\n"
6566                    n (if is_filein then "cancel_receive ()" else "0");
6567              | Dev_or_Path n ->
6568                  pr_args n;
6569                  pr "  REQUIRE_ROOT_OR_RESOLVE_DEVICE (%s, %s, goto done);\n"
6570                    n (if is_filein then "cancel_receive ()" else "0");
6571              | String n | Key n -> pr_args n
6572              | OptString n -> pr "  %s = args.%s ? *args.%s : NULL;\n" n n n
6573              | StringList n ->
6574                  pr_list_handling_code n;
6575              | DeviceList n ->
6576                  pr_list_handling_code n;
6577                  pr "  /* Ensure that each is a device,\n";
6578                  pr "   * and perform device name translation.\n";
6579                  pr "   */\n";
6580                  pr "  {\n";
6581                  pr "    size_t i;\n";
6582                  pr "    for (i = 0; %s[i] != NULL; ++i)\n" n;
6583                  pr "      RESOLVE_DEVICE (%s[i], %s, goto done);\n" n
6584                    (if is_filein then "cancel_receive ()" else "0");
6585                  pr "  }\n";
6586              | Bool n -> pr "  %s = args.%s;\n" n n
6587              | Int n -> pr "  %s = args.%s;\n" n n
6588              | Int64 n -> pr "  %s = args.%s;\n" n n
6589              | FileIn _ | FileOut _ -> ()
6590              | BufferIn n ->
6591                  pr "  %s = args.%s.%s_val;\n" n n n;
6592                  pr "  %s_size = args.%s.%s_len;\n" n n n
6593            ) args;
6594            pr "\n"
6595       );
6596
6597       (* this is used at least for do_equal *)
6598       if List.exists (function Pathname _ -> true | _ -> false) (snd style) then (
6599         (* Emit NEED_ROOT just once, even when there are two or
6600            more Pathname args *)
6601         pr "  NEED_ROOT (%s, goto done);\n"
6602           (if is_filein then "cancel_receive ()" else "0");
6603       );
6604
6605       (* Don't want to call the impl with any FileIn or FileOut
6606        * parameters, since these go "outside" the RPC protocol.
6607        *)
6608       let args' =
6609         List.filter (function FileIn _ | FileOut _ -> false | _ -> true)
6610           (snd style) in
6611       pr "  r = do_%s " name;
6612       generate_c_call_args (fst style, args');
6613       pr ";\n";
6614
6615       (match fst style with
6616        | RErr | RInt _ | RInt64 _ | RBool _
6617        | RConstString _ | RConstOptString _
6618        | RString _ | RStringList _ | RHashtable _
6619        | RStruct (_, _) | RStructList (_, _) ->
6620            pr "  if (r == %s)\n" error_code;
6621            pr "    /* do_%s has already called reply_with_error */\n" name;
6622            pr "    goto done;\n";
6623            pr "\n"
6624        | RBufferOut _ ->
6625            pr "  /* size == 0 && r == NULL could be a non-error case (just\n";
6626            pr "   * an ordinary zero-length buffer), so be careful ...\n";
6627            pr "   */\n";
6628            pr "  if (size == 1 && r == %s)\n" error_code;
6629            pr "    /* do_%s has already called reply_with_error */\n" name;
6630            pr "    goto done;\n";
6631            pr "\n"
6632       );
6633
6634       (* If there are any FileOut parameters, then the impl must
6635        * send its own reply.
6636        *)
6637       let no_reply =
6638         List.exists (function FileOut _ -> true | _ -> false) (snd style) in
6639       if no_reply then
6640         pr "  /* do_%s has already sent a reply */\n" name
6641       else (
6642         match fst style with
6643         | RErr -> pr "  reply (NULL, NULL);\n"
6644         | RInt n | RInt64 n | RBool n ->
6645             pr "  struct guestfs_%s_ret ret;\n" name;
6646             pr "  ret.%s = r;\n" n;
6647             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
6648               name
6649         | RConstString _ | RConstOptString _ ->
6650             failwithf "RConstString|RConstOptString cannot be used by daemon functions"
6651         | RString n ->
6652             pr "  struct guestfs_%s_ret ret;\n" name;
6653             pr "  ret.%s = r;\n" n;
6654             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
6655               name;
6656             pr "  free (r);\n"
6657         | RStringList n | RHashtable n ->
6658             pr "  struct guestfs_%s_ret ret;\n" name;
6659             pr "  ret.%s.%s_len = count_strings (r);\n" n n;
6660             pr "  ret.%s.%s_val = r;\n" n n;
6661             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
6662               name;
6663             pr "  free_strings (r);\n"
6664         | RStruct (n, _) ->
6665             pr "  struct guestfs_%s_ret ret;\n" name;
6666             pr "  ret.%s = *r;\n" n;
6667             pr "  reply ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
6668               name;
6669             pr "  xdr_free ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
6670               name
6671         | RStructList (n, _) ->
6672             pr "  struct guestfs_%s_ret ret;\n" name;
6673             pr "  ret.%s = *r;\n" n;
6674             pr "  reply ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
6675               name;
6676             pr "  xdr_free ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
6677               name
6678         | RBufferOut n ->
6679             pr "  struct guestfs_%s_ret ret;\n" name;
6680             pr "  ret.%s.%s_val = r;\n" n n;
6681             pr "  ret.%s.%s_len = size;\n" n n;
6682             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
6683               name;
6684             pr "  free (r);\n"
6685       );
6686
6687       (* Free the args. *)
6688       pr "done:\n";
6689       (match snd style with
6690        | [] -> ()
6691        | _ ->
6692            pr "  xdr_free ((xdrproc_t) xdr_guestfs_%s_args, (char *) &args);\n"
6693              name
6694       );
6695       pr "  return;\n";
6696       pr "}\n\n";
6697   ) daemon_functions;
6698
6699   (* Dispatch function. *)
6700   pr "void dispatch_incoming_message (XDR *xdr_in)\n";
6701   pr "{\n";
6702   pr "  switch (proc_nr) {\n";
6703
6704   List.iter (
6705     fun (name, style, _, _, _, _, _) ->
6706       pr "    case GUESTFS_PROC_%s:\n" (String.uppercase name);
6707       pr "      %s_stub (xdr_in);\n" name;
6708       pr "      break;\n"
6709   ) daemon_functions;
6710
6711   pr "    default:\n";
6712   pr "      reply_with_error (\"dispatch_incoming_message: unknown procedure number %%d, set LIBGUESTFS_PATH to point to the matching libguestfs appliance directory\", proc_nr);\n";
6713   pr "  }\n";
6714   pr "}\n";
6715   pr "\n";
6716
6717   (* LVM columns and tokenization functions. *)
6718   (* XXX This generates crap code.  We should rethink how we
6719    * do this parsing.
6720    *)
6721   List.iter (
6722     function
6723     | typ, cols ->
6724         pr "static const char *lvm_%s_cols = \"%s\";\n"
6725           typ (String.concat "," (List.map fst cols));
6726         pr "\n";
6727
6728         pr "static int lvm_tokenize_%s (char *str, guestfs_int_lvm_%s *r)\n" typ typ;
6729         pr "{\n";
6730         pr "  char *tok, *p, *next;\n";
6731         pr "  size_t i, j;\n";
6732         pr "\n";
6733         (*
6734           pr "  fprintf (stderr, \"%%s: <<%%s>>\\n\", __func__, str);\n";
6735           pr "\n";
6736         *)
6737         pr "  if (!str) {\n";
6738         pr "    fprintf (stderr, \"%%s: failed: passed a NULL string\\n\", __func__);\n";
6739         pr "    return -1;\n";
6740         pr "  }\n";
6741         pr "  if (!*str || c_isspace (*str)) {\n";
6742         pr "    fprintf (stderr, \"%%s: failed: passed a empty string or one beginning with whitespace\\n\", __func__);\n";
6743         pr "    return -1;\n";
6744         pr "  }\n";
6745         pr "  tok = str;\n";
6746         List.iter (
6747           fun (name, coltype) ->
6748             pr "  if (!tok) {\n";
6749             pr "    fprintf (stderr, \"%%s: failed: string finished early, around token %%s\\n\", __func__, \"%s\");\n" name;
6750             pr "    return -1;\n";
6751             pr "  }\n";
6752             pr "  p = strchrnul (tok, ',');\n";
6753             pr "  if (*p) next = p+1; else next = NULL;\n";
6754             pr "  *p = '\\0';\n";
6755             (match coltype with
6756              | FString ->
6757                  pr "  r->%s = strdup (tok);\n" name;
6758                  pr "  if (r->%s == NULL) {\n" name;
6759                  pr "    perror (\"strdup\");\n";
6760                  pr "    return -1;\n";
6761                  pr "  }\n"
6762              | FUUID ->
6763                  pr "  for (i = j = 0; i < 32; ++j) {\n";
6764                  pr "    if (tok[j] == '\\0') {\n";
6765                  pr "      fprintf (stderr, \"%%s: failed to parse UUID from '%%s'\\n\", __func__, tok);\n";
6766                  pr "      return -1;\n";
6767                  pr "    } else if (tok[j] != '-')\n";
6768                  pr "      r->%s[i++] = tok[j];\n" name;
6769                  pr "  }\n";
6770              | FBytes ->
6771                  pr "  if (sscanf (tok, \"%%\"SCNu64, &r->%s) != 1) {\n" name;
6772                  pr "    fprintf (stderr, \"%%s: failed to parse size '%%s' from token %%s\\n\", __func__, tok, \"%s\");\n" name;
6773                  pr "    return -1;\n";
6774                  pr "  }\n";
6775              | FInt64 ->
6776                  pr "  if (sscanf (tok, \"%%\"SCNi64, &r->%s) != 1) {\n" name;
6777                  pr "    fprintf (stderr, \"%%s: failed to parse int '%%s' from token %%s\\n\", __func__, tok, \"%s\");\n" name;
6778                  pr "    return -1;\n";
6779                  pr "  }\n";
6780              | FOptPercent ->
6781                  pr "  if (tok[0] == '\\0')\n";
6782                  pr "    r->%s = -1;\n" name;
6783                  pr "  else if (sscanf (tok, \"%%f\", &r->%s) != 1) {\n" name;
6784                  pr "    fprintf (stderr, \"%%s: failed to parse float '%%s' from token %%s\\n\", __func__, tok, \"%s\");\n" name;
6785                  pr "    return -1;\n";
6786                  pr "  }\n";
6787              | FBuffer | FInt32 | FUInt32 | FUInt64 | FChar ->
6788                  assert false (* can never be an LVM column *)
6789             );
6790             pr "  tok = next;\n";
6791         ) cols;
6792
6793         pr "  if (tok != NULL) {\n";
6794         pr "    fprintf (stderr, \"%%s: failed: extra tokens at end of string\\n\", __func__);\n";
6795         pr "    return -1;\n";
6796         pr "  }\n";
6797         pr "  return 0;\n";
6798         pr "}\n";
6799         pr "\n";
6800
6801         pr "guestfs_int_lvm_%s_list *\n" typ;
6802         pr "parse_command_line_%ss (void)\n" typ;
6803         pr "{\n";
6804         pr "  char *out, *err;\n";
6805         pr "  char *p, *pend;\n";
6806         pr "  int r, i;\n";
6807         pr "  guestfs_int_lvm_%s_list *ret;\n" typ;
6808         pr "  void *newp;\n";
6809         pr "\n";
6810         pr "  ret = malloc (sizeof *ret);\n";
6811         pr "  if (!ret) {\n";
6812         pr "    reply_with_perror (\"malloc\");\n";
6813         pr "    return NULL;\n";
6814         pr "  }\n";
6815         pr "\n";
6816         pr "  ret->guestfs_int_lvm_%s_list_len = 0;\n" typ;
6817         pr "  ret->guestfs_int_lvm_%s_list_val = NULL;\n" typ;
6818         pr "\n";
6819         pr "  r = command (&out, &err,\n";
6820         pr "           \"lvm\", \"%ss\",\n" typ;
6821         pr "           \"-o\", lvm_%s_cols, \"--unbuffered\", \"--noheadings\",\n" typ;
6822         pr "           \"--nosuffix\", \"--separator\", \",\", \"--units\", \"b\", NULL);\n";
6823         pr "  if (r == -1) {\n";
6824         pr "    reply_with_error (\"%%s\", err);\n";
6825         pr "    free (out);\n";
6826         pr "    free (err);\n";
6827         pr "    free (ret);\n";
6828         pr "    return NULL;\n";
6829         pr "  }\n";
6830         pr "\n";
6831         pr "  free (err);\n";
6832         pr "\n";
6833         pr "  /* Tokenize each line of the output. */\n";
6834         pr "  p = out;\n";
6835         pr "  i = 0;\n";
6836         pr "  while (p) {\n";
6837         pr "    pend = strchr (p, '\\n');       /* Get the next line of output. */\n";
6838         pr "    if (pend) {\n";
6839         pr "      *pend = '\\0';\n";
6840         pr "      pend++;\n";
6841         pr "    }\n";
6842         pr "\n";
6843         pr "    while (*p && c_isspace (*p))    /* Skip any leading whitespace. */\n";
6844         pr "      p++;\n";
6845         pr "\n";
6846         pr "    if (!*p) {                      /* Empty line?  Skip it. */\n";
6847         pr "      p = pend;\n";
6848         pr "      continue;\n";
6849         pr "    }\n";
6850         pr "\n";
6851         pr "    /* Allocate some space to store this next entry. */\n";
6852         pr "    newp = realloc (ret->guestfs_int_lvm_%s_list_val,\n" typ;
6853         pr "                sizeof (guestfs_int_lvm_%s) * (i+1));\n" typ;
6854         pr "    if (newp == NULL) {\n";
6855         pr "      reply_with_perror (\"realloc\");\n";
6856         pr "      free (ret->guestfs_int_lvm_%s_list_val);\n" typ;
6857         pr "      free (ret);\n";
6858         pr "      free (out);\n";
6859         pr "      return NULL;\n";
6860         pr "    }\n";
6861         pr "    ret->guestfs_int_lvm_%s_list_val = newp;\n" typ;
6862         pr "\n";
6863         pr "    /* Tokenize the next entry. */\n";
6864         pr "    r = lvm_tokenize_%s (p, &ret->guestfs_int_lvm_%s_list_val[i]);\n" typ typ;
6865         pr "    if (r == -1) {\n";
6866         pr "      reply_with_error (\"failed to parse output of '%ss' command\");\n" typ;
6867         pr "      free (ret->guestfs_int_lvm_%s_list_val);\n" typ;
6868         pr "      free (ret);\n";
6869         pr "      free (out);\n";
6870         pr "      return NULL;\n";
6871         pr "    }\n";
6872         pr "\n";
6873         pr "    ++i;\n";
6874         pr "    p = pend;\n";
6875         pr "  }\n";
6876         pr "\n";
6877         pr "  ret->guestfs_int_lvm_%s_list_len = i;\n" typ;
6878         pr "\n";
6879         pr "  free (out);\n";
6880         pr "  return ret;\n";
6881         pr "}\n"
6882
6883   ) ["pv", lvm_pv_cols; "vg", lvm_vg_cols; "lv", lvm_lv_cols]
6884
6885 (* Generate a list of function names, for debugging in the daemon.. *)
6886 and generate_daemon_names () =
6887   generate_header CStyle GPLv2plus;
6888
6889   pr "#include <config.h>\n";
6890   pr "\n";
6891   pr "#include \"daemon.h\"\n";
6892   pr "\n";
6893
6894   pr "/* This array is indexed by proc_nr.  See guestfs_protocol.x. */\n";
6895   pr "const char *function_names[] = {\n";
6896   List.iter (
6897     fun (name, _, proc_nr, _, _, _, _) -> pr "  [%d] = \"%s\",\n" proc_nr name
6898   ) daemon_functions;
6899   pr "};\n";
6900
6901 (* Generate the optional groups for the daemon to implement
6902  * guestfs_available.
6903  *)
6904 and generate_daemon_optgroups_c () =
6905   generate_header CStyle GPLv2plus;
6906
6907   pr "#include <config.h>\n";
6908   pr "\n";
6909   pr "#include \"daemon.h\"\n";
6910   pr "#include \"optgroups.h\"\n";
6911   pr "\n";
6912
6913   pr "struct optgroup optgroups[] = {\n";
6914   List.iter (
6915     fun (group, _) ->
6916       pr "  { \"%s\", optgroup_%s_available },\n" group group
6917   ) optgroups;
6918   pr "  { NULL, NULL }\n";
6919   pr "};\n"
6920
6921 and generate_daemon_optgroups_h () =
6922   generate_header CStyle GPLv2plus;
6923
6924   List.iter (
6925     fun (group, _) ->
6926       pr "extern int optgroup_%s_available (void);\n" group
6927   ) optgroups
6928
6929 (* Generate the tests. *)
6930 and generate_tests () =
6931   generate_header CStyle GPLv2plus;
6932
6933   pr "\
6934 #include <stdio.h>
6935 #include <stdlib.h>
6936 #include <string.h>
6937 #include <unistd.h>
6938 #include <sys/types.h>
6939 #include <fcntl.h>
6940
6941 #include \"guestfs.h\"
6942 #include \"guestfs-internal.h\"
6943
6944 static guestfs_h *g;
6945 static int suppress_error = 0;
6946
6947 static void print_error (guestfs_h *g, void *data, const char *msg)
6948 {
6949   if (!suppress_error)
6950     fprintf (stderr, \"%%s\\n\", msg);
6951 }
6952
6953 /* FIXME: nearly identical code appears in fish.c */
6954 static void print_strings (char *const *argv)
6955 {
6956   size_t argc;
6957
6958   for (argc = 0; argv[argc] != NULL; ++argc)
6959     printf (\"\\t%%s\\n\", argv[argc]);
6960 }
6961
6962 /*
6963 static void print_table (char const *const *argv)
6964 {
6965   size_t i;
6966
6967   for (i = 0; argv[i] != NULL; i += 2)
6968     printf (\"%%s: %%s\\n\", argv[i], argv[i+1]);
6969 }
6970 */
6971
6972 static int
6973 is_available (const char *group)
6974 {
6975   const char *groups[] = { group, NULL };
6976   int r;
6977
6978   suppress_error = 1;
6979   r = guestfs_available (g, (char **) groups);
6980   suppress_error = 0;
6981
6982   return r == 0;
6983 }
6984
6985 static void
6986 incr (guestfs_h *g, void *iv)
6987 {
6988   int *i = (int *) iv;
6989   (*i)++;
6990 }
6991
6992 ";
6993
6994   (* Generate a list of commands which are not tested anywhere. *)
6995   pr "static void no_test_warnings (void)\n";
6996   pr "{\n";
6997
6998   let hash : (string, bool) Hashtbl.t = Hashtbl.create 13 in
6999   List.iter (
7000     fun (_, _, _, _, tests, _, _) ->
7001       let tests = filter_map (
7002         function
7003         | (_, (Always|If _|Unless _|IfAvailable _), test) -> Some test
7004         | (_, Disabled, _) -> None
7005       ) tests in
7006       let seq = List.concat (List.map seq_of_test tests) in
7007       let cmds_tested = List.map List.hd seq in
7008       List.iter (fun cmd -> Hashtbl.replace hash cmd true) cmds_tested
7009   ) all_functions;
7010
7011   List.iter (
7012     fun (name, _, _, _, _, _, _) ->
7013       if not (Hashtbl.mem hash name) then
7014         pr "  fprintf (stderr, \"warning: \\\"guestfs_%s\\\" has no tests\\n\");\n" name
7015   ) all_functions;
7016
7017   pr "}\n";
7018   pr "\n";
7019
7020   (* Generate the actual tests.  Note that we generate the tests
7021    * in reverse order, deliberately, so that (in general) the
7022    * newest tests run first.  This makes it quicker and easier to
7023    * debug them.
7024    *)
7025   let test_names =
7026     List.map (
7027       fun (name, _, _, flags, tests, _, _) ->
7028         mapi (generate_one_test name flags) tests
7029     ) (List.rev all_functions) in
7030   let test_names = List.concat test_names in
7031   let nr_tests = List.length test_names in
7032
7033   pr "\
7034 int main (int argc, char *argv[])
7035 {
7036   char c = 0;
7037   unsigned long int n_failed = 0;
7038   const char *filename;
7039   int fd;
7040   int nr_tests, test_num = 0;
7041
7042   setbuf (stdout, NULL);
7043
7044   no_test_warnings ();
7045
7046   g = guestfs_create ();
7047   if (g == NULL) {
7048     printf (\"guestfs_create FAILED\\n\");
7049     exit (EXIT_FAILURE);
7050   }
7051
7052   guestfs_set_error_handler (g, print_error, NULL);
7053
7054   guestfs_set_path (g, \"../appliance\");
7055
7056   filename = \"test1.img\";
7057   fd = open (filename, O_WRONLY|O_CREAT|O_NOCTTY|O_NONBLOCK|O_TRUNC, 0666);
7058   if (fd == -1) {
7059     perror (filename);
7060     exit (EXIT_FAILURE);
7061   }
7062   if (lseek (fd, %d, SEEK_SET) == -1) {
7063     perror (\"lseek\");
7064     close (fd);
7065     unlink (filename);
7066     exit (EXIT_FAILURE);
7067   }
7068   if (write (fd, &c, 1) == -1) {
7069     perror (\"write\");
7070     close (fd);
7071     unlink (filename);
7072     exit (EXIT_FAILURE);
7073   }
7074   if (close (fd) == -1) {
7075     perror (filename);
7076     unlink (filename);
7077     exit (EXIT_FAILURE);
7078   }
7079   if (guestfs_add_drive (g, filename) == -1) {
7080     printf (\"guestfs_add_drive %%s FAILED\\n\", filename);
7081     exit (EXIT_FAILURE);
7082   }
7083
7084   filename = \"test2.img\";
7085   fd = open (filename, O_WRONLY|O_CREAT|O_NOCTTY|O_NONBLOCK|O_TRUNC, 0666);
7086   if (fd == -1) {
7087     perror (filename);
7088     exit (EXIT_FAILURE);
7089   }
7090   if (lseek (fd, %d, SEEK_SET) == -1) {
7091     perror (\"lseek\");
7092     close (fd);
7093     unlink (filename);
7094     exit (EXIT_FAILURE);
7095   }
7096   if (write (fd, &c, 1) == -1) {
7097     perror (\"write\");
7098     close (fd);
7099     unlink (filename);
7100     exit (EXIT_FAILURE);
7101   }
7102   if (close (fd) == -1) {
7103     perror (filename);
7104     unlink (filename);
7105     exit (EXIT_FAILURE);
7106   }
7107   if (guestfs_add_drive (g, filename) == -1) {
7108     printf (\"guestfs_add_drive %%s FAILED\\n\", filename);
7109     exit (EXIT_FAILURE);
7110   }
7111
7112   filename = \"test3.img\";
7113   fd = open (filename, O_WRONLY|O_CREAT|O_NOCTTY|O_NONBLOCK|O_TRUNC, 0666);
7114   if (fd == -1) {
7115     perror (filename);
7116     exit (EXIT_FAILURE);
7117   }
7118   if (lseek (fd, %d, SEEK_SET) == -1) {
7119     perror (\"lseek\");
7120     close (fd);
7121     unlink (filename);
7122     exit (EXIT_FAILURE);
7123   }
7124   if (write (fd, &c, 1) == -1) {
7125     perror (\"write\");
7126     close (fd);
7127     unlink (filename);
7128     exit (EXIT_FAILURE);
7129   }
7130   if (close (fd) == -1) {
7131     perror (filename);
7132     unlink (filename);
7133     exit (EXIT_FAILURE);
7134   }
7135   if (guestfs_add_drive (g, filename) == -1) {
7136     printf (\"guestfs_add_drive %%s FAILED\\n\", filename);
7137     exit (EXIT_FAILURE);
7138   }
7139
7140   if (guestfs_add_drive_ro (g, \"../images/test.iso\") == -1) {
7141     printf (\"guestfs_add_drive_ro ../images/test.iso FAILED\\n\");
7142     exit (EXIT_FAILURE);
7143   }
7144
7145   /* Set a timeout in case qemu hangs during launch (RHBZ#505329). */
7146   alarm (600);
7147
7148   if (guestfs_launch (g) == -1) {
7149     printf (\"guestfs_launch FAILED\\n\");
7150     exit (EXIT_FAILURE);
7151   }
7152
7153   /* Cancel previous alarm. */
7154   alarm (0);
7155
7156   nr_tests = %d;
7157
7158 " (500 * 1024 * 1024) (50 * 1024 * 1024) (10 * 1024 * 1024) nr_tests;
7159
7160   iteri (
7161     fun i test_name ->
7162       pr "  test_num++;\n";
7163       pr "  if (guestfs_get_verbose (g))\n";
7164       pr "    printf (\"-------------------------------------------------------------------------------\\n\");\n";
7165       pr "  printf (\"%%3d/%%3d %s\\n\", test_num, nr_tests);\n" test_name;
7166       pr "  if (%s () == -1) {\n" test_name;
7167       pr "    printf (\"%s FAILED\\n\");\n" test_name;
7168       pr "    n_failed++;\n";
7169       pr "  }\n";
7170   ) test_names;
7171   pr "\n";
7172
7173   pr "  /* Check close callback is called. */
7174   int close_sentinel = 1;
7175   guestfs_set_close_callback (g, incr, &close_sentinel);
7176
7177   guestfs_close (g);
7178
7179   if (close_sentinel != 2) {
7180     fprintf (stderr, \"close callback was not called\\n\");
7181     exit (EXIT_FAILURE);
7182   }
7183
7184   unlink (\"test1.img\");
7185   unlink (\"test2.img\");
7186   unlink (\"test3.img\");
7187
7188 ";
7189
7190   pr "  if (n_failed > 0) {\n";
7191   pr "    printf (\"***** %%lu / %%d tests FAILED *****\\n\", n_failed, nr_tests);\n";
7192   pr "    exit (EXIT_FAILURE);\n";
7193   pr "  }\n";
7194   pr "\n";
7195
7196   pr "  exit (EXIT_SUCCESS);\n";
7197   pr "}\n"
7198
7199 and generate_one_test name flags i (init, prereq, test) =
7200   let test_name = sprintf "test_%s_%d" name i in
7201
7202   pr "\
7203 static int %s_skip (void)
7204 {
7205   const char *str;
7206
7207   str = getenv (\"TEST_ONLY\");
7208   if (str)
7209     return strstr (str, \"%s\") == NULL;
7210   str = getenv (\"SKIP_%s\");
7211   if (str && STREQ (str, \"1\")) return 1;
7212   str = getenv (\"SKIP_TEST_%s\");
7213   if (str && STREQ (str, \"1\")) return 1;
7214   return 0;
7215 }
7216
7217 " test_name name (String.uppercase test_name) (String.uppercase name);
7218
7219   (match prereq with
7220    | Disabled | Always | IfAvailable _ -> ()
7221    | If code | Unless code ->
7222        pr "static int %s_prereq (void)\n" test_name;
7223        pr "{\n";
7224        pr "  %s\n" code;
7225        pr "}\n";
7226        pr "\n";
7227   );
7228
7229   pr "\
7230 static int %s (void)
7231 {
7232   if (%s_skip ()) {
7233     printf (\"        %%s skipped (reason: environment variable set)\\n\", \"%s\");
7234     return 0;
7235   }
7236
7237 " test_name test_name test_name;
7238
7239   (* Optional functions should only be tested if the relevant
7240    * support is available in the daemon.
7241    *)
7242   List.iter (
7243     function
7244     | Optional group ->
7245         pr "  if (!is_available (\"%s\")) {\n" group;
7246         pr "    printf (\"        %%s skipped (reason: group %%s not available in daemon)\\n\", \"%s\", \"%s\");\n" test_name group;
7247         pr "    return 0;\n";
7248         pr "  }\n";
7249     | _ -> ()
7250   ) flags;
7251
7252   (match prereq with
7253    | Disabled ->
7254        pr "  printf (\"        %%s skipped (reason: test disabled in generator)\\n\", \"%s\");\n" test_name
7255    | If _ ->
7256        pr "  if (! %s_prereq ()) {\n" test_name;
7257        pr "    printf (\"        %%s skipped (reason: test prerequisite)\\n\", \"%s\");\n" test_name;
7258        pr "    return 0;\n";
7259        pr "  }\n";
7260        pr "\n";
7261        generate_one_test_body name i test_name init test;
7262    | Unless _ ->
7263        pr "  if (%s_prereq ()) {\n" test_name;
7264        pr "    printf (\"        %%s skipped (reason: test prerequisite)\\n\", \"%s\");\n" test_name;
7265        pr "    return 0;\n";
7266        pr "  }\n";
7267        pr "\n";
7268        generate_one_test_body name i test_name init test;
7269    | IfAvailable group ->
7270        pr "  if (!is_available (\"%s\")) {\n" group;
7271        pr "    printf (\"        %%s skipped (reason: %%s not available)\\n\", \"%s\", \"%s\");\n" test_name group;
7272        pr "    return 0;\n";
7273        pr "  }\n";
7274        pr "\n";
7275        generate_one_test_body name i test_name init test;
7276    | Always ->
7277        generate_one_test_body name i test_name init test
7278   );
7279
7280   pr "  return 0;\n";
7281   pr "}\n";
7282   pr "\n";
7283   test_name
7284
7285 and generate_one_test_body name i test_name init test =
7286   (match init with
7287    | InitNone (* XXX at some point, InitNone and InitEmpty became
7288                * folded together as the same thing.  Really we should
7289                * make InitNone do nothing at all, but the tests may
7290                * need to be checked to make sure this is OK.
7291                *)
7292    | InitEmpty ->
7293        pr "  /* InitNone|InitEmpty for %s */\n" test_name;
7294        List.iter (generate_test_command_call test_name)
7295          [["blockdev_setrw"; "/dev/sda"];
7296           ["umount_all"];
7297           ["lvm_remove_all"]]
7298    | InitPartition ->
7299        pr "  /* InitPartition for %s: create /dev/sda1 */\n" test_name;
7300        List.iter (generate_test_command_call test_name)
7301          [["blockdev_setrw"; "/dev/sda"];
7302           ["umount_all"];
7303           ["lvm_remove_all"];
7304           ["part_disk"; "/dev/sda"; "mbr"]]
7305    | InitBasicFS ->
7306        pr "  /* InitBasicFS for %s: create ext2 on /dev/sda1 */\n" test_name;
7307        List.iter (generate_test_command_call test_name)
7308          [["blockdev_setrw"; "/dev/sda"];
7309           ["umount_all"];
7310           ["lvm_remove_all"];
7311           ["part_disk"; "/dev/sda"; "mbr"];
7312           ["mkfs"; "ext2"; "/dev/sda1"];
7313           ["mount_options"; ""; "/dev/sda1"; "/"]]
7314    | InitBasicFSonLVM ->
7315        pr "  /* InitBasicFSonLVM for %s: create ext2 on /dev/VG/LV */\n"
7316          test_name;
7317        List.iter (generate_test_command_call test_name)
7318          [["blockdev_setrw"; "/dev/sda"];
7319           ["umount_all"];
7320           ["lvm_remove_all"];
7321           ["part_disk"; "/dev/sda"; "mbr"];
7322           ["pvcreate"; "/dev/sda1"];
7323           ["vgcreate"; "VG"; "/dev/sda1"];
7324           ["lvcreate"; "LV"; "VG"; "8"];
7325           ["mkfs"; "ext2"; "/dev/VG/LV"];
7326           ["mount_options"; ""; "/dev/VG/LV"; "/"]]
7327    | InitISOFS ->
7328        pr "  /* InitISOFS for %s */\n" test_name;
7329        List.iter (generate_test_command_call test_name)
7330          [["blockdev_setrw"; "/dev/sda"];
7331           ["umount_all"];
7332           ["lvm_remove_all"];
7333           ["mount_ro"; "/dev/sdd"; "/"]]
7334   );
7335
7336   let get_seq_last = function
7337     | [] ->
7338         failwithf "%s: you cannot use [] (empty list) when expecting a command"
7339           test_name
7340     | seq ->
7341         let seq = List.rev seq in
7342         List.rev (List.tl seq), List.hd seq
7343   in
7344
7345   match test with
7346   | TestRun seq ->
7347       pr "  /* TestRun for %s (%d) */\n" name i;
7348       List.iter (generate_test_command_call test_name) seq
7349   | TestOutput (seq, expected) ->
7350       pr "  /* TestOutput for %s (%d) */\n" name i;
7351       pr "  const char *expected = \"%s\";\n" (c_quote expected);
7352       let seq, last = get_seq_last seq in
7353       let test () =
7354         pr "    if (STRNEQ (r, expected)) {\n";
7355         pr "      fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r);\n" test_name;
7356         pr "      return -1;\n";
7357         pr "    }\n"
7358       in
7359       List.iter (generate_test_command_call test_name) seq;
7360       generate_test_command_call ~test test_name last
7361   | TestOutputList (seq, expected) ->
7362       pr "  /* TestOutputList for %s (%d) */\n" name i;
7363       let seq, last = get_seq_last seq in
7364       let test () =
7365         iteri (
7366           fun i str ->
7367             pr "    if (!r[%d]) {\n" i;
7368             pr "      fprintf (stderr, \"%s: short list returned from command\\n\");\n" test_name;
7369             pr "      print_strings (r);\n";
7370             pr "      return -1;\n";
7371             pr "    }\n";
7372             pr "    {\n";
7373             pr "      const char *expected = \"%s\";\n" (c_quote str);
7374             pr "      if (STRNEQ (r[%d], expected)) {\n" i;
7375             pr "        fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r[%d]);\n" test_name i;
7376             pr "        return -1;\n";
7377             pr "      }\n";
7378             pr "    }\n"
7379         ) expected;
7380         pr "    if (r[%d] != NULL) {\n" (List.length expected);
7381         pr "      fprintf (stderr, \"%s: extra elements returned from command\\n\");\n"
7382           test_name;
7383         pr "      print_strings (r);\n";
7384         pr "      return -1;\n";
7385         pr "    }\n"
7386       in
7387       List.iter (generate_test_command_call test_name) seq;
7388       generate_test_command_call ~test test_name last
7389   | TestOutputListOfDevices (seq, expected) ->
7390       pr "  /* TestOutputListOfDevices for %s (%d) */\n" name i;
7391       let seq, last = get_seq_last seq in
7392       let test () =
7393         iteri (
7394           fun i str ->
7395             pr "    if (!r[%d]) {\n" i;
7396             pr "      fprintf (stderr, \"%s: short list returned from command\\n\");\n" test_name;
7397             pr "      print_strings (r);\n";
7398             pr "      return -1;\n";
7399             pr "    }\n";
7400             pr "    {\n";
7401             pr "      const char *expected = \"%s\";\n" (c_quote str);
7402             pr "      r[%d][5] = 's';\n" i;
7403             pr "      if (STRNEQ (r[%d], expected)) {\n" i;
7404             pr "        fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r[%d]);\n" test_name i;
7405             pr "        return -1;\n";
7406             pr "      }\n";
7407             pr "    }\n"
7408         ) expected;
7409         pr "    if (r[%d] != NULL) {\n" (List.length expected);
7410         pr "      fprintf (stderr, \"%s: extra elements returned from command\\n\");\n"
7411           test_name;
7412         pr "      print_strings (r);\n";
7413         pr "      return -1;\n";
7414         pr "    }\n"
7415       in
7416       List.iter (generate_test_command_call test_name) seq;
7417       generate_test_command_call ~test test_name last
7418   | TestOutputInt (seq, expected) ->
7419       pr "  /* TestOutputInt for %s (%d) */\n" name i;
7420       let seq, last = get_seq_last seq in
7421       let test () =
7422         pr "    if (r != %d) {\n" expected;
7423         pr "      fprintf (stderr, \"%s: expected %d but got %%d\\n\","
7424           test_name expected;
7425         pr "               (int) r);\n";
7426         pr "      return -1;\n";
7427         pr "    }\n"
7428       in
7429       List.iter (generate_test_command_call test_name) seq;
7430       generate_test_command_call ~test test_name last
7431   | TestOutputIntOp (seq, op, expected) ->
7432       pr "  /* TestOutputIntOp for %s (%d) */\n" name i;
7433       let seq, last = get_seq_last seq in
7434       let test () =
7435         pr "    if (! (r %s %d)) {\n" op expected;
7436         pr "      fprintf (stderr, \"%s: expected %s %d but got %%d\\n\","
7437           test_name op expected;
7438         pr "               (int) r);\n";
7439         pr "      return -1;\n";
7440         pr "    }\n"
7441       in
7442       List.iter (generate_test_command_call test_name) seq;
7443       generate_test_command_call ~test test_name last
7444   | TestOutputTrue seq ->
7445       pr "  /* TestOutputTrue for %s (%d) */\n" name i;
7446       let seq, last = get_seq_last seq in
7447       let test () =
7448         pr "    if (!r) {\n";
7449         pr "      fprintf (stderr, \"%s: expected true, got false\\n\");\n"
7450           test_name;
7451         pr "      return -1;\n";
7452         pr "    }\n"
7453       in
7454       List.iter (generate_test_command_call test_name) seq;
7455       generate_test_command_call ~test test_name last
7456   | TestOutputFalse seq ->
7457       pr "  /* TestOutputFalse for %s (%d) */\n" name i;
7458       let seq, last = get_seq_last seq in
7459       let test () =
7460         pr "    if (r) {\n";
7461         pr "      fprintf (stderr, \"%s: expected false, got true\\n\");\n"
7462           test_name;
7463         pr "      return -1;\n";
7464         pr "    }\n"
7465       in
7466       List.iter (generate_test_command_call test_name) seq;
7467       generate_test_command_call ~test test_name last
7468   | TestOutputLength (seq, expected) ->
7469       pr "  /* TestOutputLength for %s (%d) */\n" name i;
7470       let seq, last = get_seq_last seq in
7471       let test () =
7472         pr "    int j;\n";
7473         pr "    for (j = 0; j < %d; ++j)\n" expected;
7474         pr "      if (r[j] == NULL) {\n";
7475         pr "        fprintf (stderr, \"%s: short list returned\\n\");\n"
7476           test_name;
7477         pr "        print_strings (r);\n";
7478         pr "        return -1;\n";
7479         pr "      }\n";
7480         pr "    if (r[j] != NULL) {\n";
7481         pr "      fprintf (stderr, \"%s: long list returned\\n\");\n"
7482           test_name;
7483         pr "      print_strings (r);\n";
7484         pr "      return -1;\n";
7485         pr "    }\n"
7486       in
7487       List.iter (generate_test_command_call test_name) seq;
7488       generate_test_command_call ~test test_name last
7489   | TestOutputBuffer (seq, expected) ->
7490       pr "  /* TestOutputBuffer for %s (%d) */\n" name i;
7491       pr "  const char *expected = \"%s\";\n" (c_quote expected);
7492       let seq, last = get_seq_last seq in
7493       let len = String.length expected in
7494       let test () =
7495         pr "    if (size != %d) {\n" len;
7496         pr "      fprintf (stderr, \"%s: returned size of buffer wrong, expected %d but got %%zu\\n\", size);\n" test_name len;
7497         pr "      return -1;\n";
7498         pr "    }\n";
7499         pr "    if (STRNEQLEN (r, expected, size)) {\n";
7500         pr "      fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r);\n" test_name;
7501         pr "      return -1;\n";
7502         pr "    }\n"
7503       in
7504       List.iter (generate_test_command_call test_name) seq;
7505       generate_test_command_call ~test test_name last
7506   | TestOutputStruct (seq, checks) ->
7507       pr "  /* TestOutputStruct for %s (%d) */\n" name i;
7508       let seq, last = get_seq_last seq in
7509       let test () =
7510         List.iter (
7511           function
7512           | CompareWithInt (field, expected) ->
7513               pr "    if (r->%s != %d) {\n" field expected;
7514               pr "      fprintf (stderr, \"%s: %s was %%d, expected %d\\n\",\n"
7515                 test_name field expected;
7516               pr "               (int) r->%s);\n" field;
7517               pr "      return -1;\n";
7518               pr "    }\n"
7519           | CompareWithIntOp (field, op, expected) ->
7520               pr "    if (!(r->%s %s %d)) {\n" field op expected;
7521               pr "      fprintf (stderr, \"%s: %s was %%d, expected %s %d\\n\",\n"
7522                 test_name field op expected;
7523               pr "               (int) r->%s);\n" field;
7524               pr "      return -1;\n";
7525               pr "    }\n"
7526           | CompareWithString (field, expected) ->
7527               pr "    if (STRNEQ (r->%s, \"%s\")) {\n" field expected;
7528               pr "      fprintf (stderr, \"%s: %s was \"%%s\", expected \"%s\"\\n\",\n"
7529                 test_name field expected;
7530               pr "               r->%s);\n" field;
7531               pr "      return -1;\n";
7532               pr "    }\n"
7533           | CompareFieldsIntEq (field1, field2) ->
7534               pr "    if (r->%s != r->%s) {\n" field1 field2;
7535               pr "      fprintf (stderr, \"%s: %s (%%d) <> %s (%%d)\\n\",\n"
7536                 test_name field1 field2;
7537               pr "               (int) r->%s, (int) r->%s);\n" field1 field2;
7538               pr "      return -1;\n";
7539               pr "    }\n"
7540           | CompareFieldsStrEq (field1, field2) ->
7541               pr "    if (STRNEQ (r->%s, r->%s)) {\n" field1 field2;
7542               pr "      fprintf (stderr, \"%s: %s (\"%%s\") <> %s (\"%%s\")\\n\",\n"
7543                 test_name field1 field2;
7544               pr "               r->%s, r->%s);\n" field1 field2;
7545               pr "      return -1;\n";
7546               pr "    }\n"
7547         ) checks
7548       in
7549       List.iter (generate_test_command_call test_name) seq;
7550       generate_test_command_call ~test test_name last
7551   | TestLastFail seq ->
7552       pr "  /* TestLastFail for %s (%d) */\n" name i;
7553       let seq, last = get_seq_last seq in
7554       List.iter (generate_test_command_call test_name) seq;
7555       generate_test_command_call test_name ~expect_error:true last
7556
7557 (* Generate the code to run a command, leaving the result in 'r'.
7558  * If you expect to get an error then you should set expect_error:true.
7559  *)
7560 and generate_test_command_call ?(expect_error = false) ?test test_name cmd =
7561   match cmd with
7562   | [] -> assert false
7563   | name :: args ->
7564       (* Look up the command to find out what args/ret it has. *)
7565       let style =
7566         try
7567           let _, style, _, _, _, _, _ =
7568             List.find (fun (n, _, _, _, _, _, _) -> n = name) all_functions in
7569           style
7570         with Not_found ->
7571           failwithf "%s: in test, command %s was not found" test_name name in
7572
7573       if List.length (snd style) <> List.length args then
7574         failwithf "%s: in test, wrong number of args given to %s"
7575           test_name name;
7576
7577       pr "  {\n";
7578
7579       List.iter (
7580         function
7581         | OptString n, "NULL" -> ()
7582         | Pathname n, arg
7583         | Device n, arg
7584         | Dev_or_Path n, arg
7585         | String n, arg
7586         | OptString n, arg
7587         | Key n, arg ->
7588             pr "    const char *%s = \"%s\";\n" n (c_quote arg);
7589         | BufferIn n, arg ->
7590             pr "    const char *%s = \"%s\";\n" n (c_quote arg);
7591             pr "    size_t %s_size = %d;\n" n (String.length arg)
7592         | Int _, _
7593         | Int64 _, _
7594         | Bool _, _
7595         | FileIn _, _ | FileOut _, _ -> ()
7596         | StringList n, "" | DeviceList n, "" ->
7597             pr "    const char *const %s[1] = { NULL };\n" n
7598         | StringList n, arg | DeviceList n, arg ->
7599             let strs = string_split " " arg in
7600             iteri (
7601               fun i str ->
7602                 pr "    const char *%s_%d = \"%s\";\n" n i (c_quote str);
7603             ) strs;
7604             pr "    const char *const %s[] = {\n" n;
7605             iteri (
7606               fun i _ -> pr "      %s_%d,\n" n i
7607             ) strs;
7608             pr "      NULL\n";
7609             pr "    };\n";
7610       ) (List.combine (snd style) args);
7611
7612       let error_code =
7613         match fst style with
7614         | RErr | RInt _ | RBool _ -> pr "    int r;\n"; "-1"
7615         | RInt64 _ -> pr "    int64_t r;\n"; "-1"
7616         | RConstString _ | RConstOptString _ ->
7617             pr "    const char *r;\n"; "NULL"
7618         | RString _ -> pr "    char *r;\n"; "NULL"
7619         | RStringList _ | RHashtable _ ->
7620             pr "    char **r;\n";
7621             pr "    size_t i;\n";
7622             "NULL"
7623         | RStruct (_, typ) ->
7624             pr "    struct guestfs_%s *r;\n" typ; "NULL"
7625         | RStructList (_, typ) ->
7626             pr "    struct guestfs_%s_list *r;\n" typ; "NULL"
7627         | RBufferOut _ ->
7628             pr "    char *r;\n";
7629             pr "    size_t size;\n";
7630             "NULL" in
7631
7632       pr "    suppress_error = %d;\n" (if expect_error then 1 else 0);
7633       pr "    r = guestfs_%s (g" name;
7634
7635       (* Generate the parameters. *)
7636       List.iter (
7637         function
7638         | OptString _, "NULL" -> pr ", NULL"
7639         | Pathname n, _
7640         | Device n, _ | Dev_or_Path n, _
7641         | String n, _
7642         | OptString n, _
7643         | Key n, _ ->
7644             pr ", %s" n
7645         | BufferIn n, _ ->
7646             pr ", %s, %s_size" n n
7647         | FileIn _, arg | FileOut _, arg ->
7648             pr ", \"%s\"" (c_quote arg)
7649         | StringList n, _ | DeviceList n, _ ->
7650             pr ", (char **) %s" n
7651         | Int _, arg ->
7652             let i =
7653               try int_of_string arg
7654               with Failure "int_of_string" ->
7655                 failwithf "%s: expecting an int, but got '%s'" test_name arg in
7656             pr ", %d" i
7657         | Int64 _, arg ->
7658             let i =
7659               try Int64.of_string arg
7660               with Failure "int_of_string" ->
7661                 failwithf "%s: expecting an int64, but got '%s'" test_name arg in
7662             pr ", %Ld" i
7663         | Bool _, arg ->
7664             let b = bool_of_string arg in pr ", %d" (if b then 1 else 0)
7665       ) (List.combine (snd style) args);
7666
7667       (match fst style with
7668        | RBufferOut _ -> pr ", &size"
7669        | _ -> ()
7670       );
7671
7672       pr ");\n";
7673
7674       if not expect_error then
7675         pr "    if (r == %s)\n" error_code
7676       else
7677         pr "    if (r != %s)\n" error_code;
7678       pr "      return -1;\n";
7679
7680       (* Insert the test code. *)
7681       (match test with
7682        | None -> ()
7683        | Some f -> f ()
7684       );
7685
7686       (match fst style with
7687        | RErr | RInt _ | RInt64 _ | RBool _
7688        | RConstString _ | RConstOptString _ -> ()
7689        | RString _ | RBufferOut _ -> pr "    free (r);\n"
7690        | RStringList _ | RHashtable _ ->
7691            pr "    for (i = 0; r[i] != NULL; ++i)\n";
7692            pr "      free (r[i]);\n";
7693            pr "    free (r);\n"
7694        | RStruct (_, typ) ->
7695            pr "    guestfs_free_%s (r);\n" typ
7696        | RStructList (_, typ) ->
7697            pr "    guestfs_free_%s_list (r);\n" typ
7698       );
7699
7700       pr "  }\n"
7701
7702 and c_quote str =
7703   let str = replace_str str "\r" "\\r" in
7704   let str = replace_str str "\n" "\\n" in
7705   let str = replace_str str "\t" "\\t" in
7706   let str = replace_str str "\000" "\\0" in
7707   str
7708
7709 (* Generate a lot of different functions for guestfish. *)
7710 and generate_fish_cmds () =
7711   generate_header CStyle GPLv2plus;
7712
7713   let all_functions =
7714     List.filter (
7715       fun (_, _, _, flags, _, _, _) -> not (List.mem NotInFish flags)
7716     ) all_functions in
7717   let all_functions_sorted =
7718     List.filter (
7719       fun (_, _, _, flags, _, _, _) -> not (List.mem NotInFish flags)
7720     ) all_functions_sorted in
7721
7722   pr "#include <config.h>\n";
7723   pr "\n";
7724   pr "#include <stdio.h>\n";
7725   pr "#include <stdlib.h>\n";
7726   pr "#include <string.h>\n";
7727   pr "#include <inttypes.h>\n";
7728   pr "\n";
7729   pr "#include <guestfs.h>\n";
7730   pr "#include \"c-ctype.h\"\n";
7731   pr "#include \"full-write.h\"\n";
7732   pr "#include \"xstrtol.h\"\n";
7733   pr "#include \"fish.h\"\n";
7734   pr "\n";
7735   pr "/* Valid suffixes allowed for numbers.  See Gnulib xstrtol function. */\n";
7736   pr "static const char *xstrtol_suffixes = \"0kKMGTPEZY\";\n";
7737   pr "\n";
7738
7739   (* list_commands function, which implements guestfish -h *)
7740   pr "void list_commands (void)\n";
7741   pr "{\n";
7742   pr "  printf (\"    %%-16s     %%s\\n\", _(\"Command\"), _(\"Description\"));\n";
7743   pr "  list_builtin_commands ();\n";
7744   List.iter (
7745     fun (name, _, _, flags, _, shortdesc, _) ->
7746       let name = replace_char name '_' '-' in
7747       pr "  printf (\"%%-20s %%s\\n\", \"%s\", _(\"%s\"));\n"
7748         name shortdesc
7749   ) all_functions_sorted;
7750   pr "  printf (\"    %%s\\n\",";
7751   pr "          _(\"Use -h <cmd> / help <cmd> to show detailed help for a command.\"));\n";
7752   pr "}\n";
7753   pr "\n";
7754
7755   (* display_command function, which implements guestfish -h cmd *)
7756   pr "int display_command (const char *cmd)\n";
7757   pr "{\n";
7758   List.iter (
7759     fun (name, style, _, flags, _, shortdesc, longdesc) ->
7760       let name2 = replace_char name '_' '-' in
7761       let alias =
7762         try find_map (function FishAlias n -> Some n | _ -> None) flags
7763         with Not_found -> name in
7764       let longdesc = replace_str longdesc "C<guestfs_" "C<" in
7765       let synopsis =
7766         match snd style with
7767         | [] -> name2
7768         | args ->
7769             let args = List.filter (function Key _ -> false | _ -> true) args in
7770             sprintf "%s %s"
7771               name2 (String.concat " " (List.map name_of_argt args)) in
7772
7773       let warnings =
7774         if List.exists (function Key _ -> true | _ -> false) (snd style) then
7775           "\n\nThis command has one or more key or passphrase parameters.
7776 Guestfish will prompt for these separately."
7777         else "" in
7778
7779       let warnings =
7780         warnings ^
7781           if List.mem ProtocolLimitWarning flags then
7782             ("\n\n" ^ protocol_limit_warning)
7783           else "" in
7784
7785       (* For DangerWillRobinson commands, we should probably have
7786        * guestfish prompt before allowing you to use them (especially
7787        * in interactive mode). XXX
7788        *)
7789       let warnings =
7790         warnings ^
7791           if List.mem DangerWillRobinson flags then
7792             ("\n\n" ^ danger_will_robinson)
7793           else "" in
7794
7795       let warnings =
7796         warnings ^
7797           match deprecation_notice flags with
7798           | None -> ""
7799           | Some txt -> "\n\n" ^ txt in
7800
7801       let describe_alias =
7802         if name <> alias then
7803           sprintf "\n\nYou can use '%s' as an alias for this command." alias
7804         else "" in
7805
7806       pr "  if (";
7807       pr "STRCASEEQ (cmd, \"%s\")" name;
7808       if name <> name2 then
7809         pr " || STRCASEEQ (cmd, \"%s\")" name2;
7810       if name <> alias then
7811         pr " || STRCASEEQ (cmd, \"%s\")" alias;
7812       pr ") {\n";
7813       pr "    pod2text (\"%s\", _(\"%s\"), %S);\n"
7814         name2 shortdesc
7815         ("=head1 SYNOPSIS\n\n " ^ synopsis ^ "\n\n" ^
7816          "=head1 DESCRIPTION\n\n" ^
7817          longdesc ^ warnings ^ describe_alias);
7818       pr "    return 0;\n";
7819       pr "  }\n";
7820       pr "  else\n"
7821   ) all_functions;
7822   pr "    return display_builtin_command (cmd);\n";
7823   pr "}\n";
7824   pr "\n";
7825
7826   let emit_print_list_function typ =
7827     pr "static void print_%s_list (struct guestfs_%s_list *%ss)\n"
7828       typ typ typ;
7829     pr "{\n";
7830     pr "  unsigned int i;\n";
7831     pr "\n";
7832     pr "  for (i = 0; i < %ss->len; ++i) {\n" typ;
7833     pr "    printf (\"[%%d] = {\\n\", i);\n";
7834     pr "    print_%s_indent (&%ss->val[i], \"  \");\n" typ typ;
7835     pr "    printf (\"}\\n\");\n";
7836     pr "  }\n";
7837     pr "}\n";
7838     pr "\n";
7839   in
7840
7841   (* print_* functions *)
7842   List.iter (
7843     fun (typ, cols) ->
7844       let needs_i =
7845         List.exists (function (_, (FUUID|FBuffer)) -> true | _ -> false) cols in
7846
7847       pr "static void print_%s_indent (struct guestfs_%s *%s, const char *indent)\n" typ typ typ;
7848       pr "{\n";
7849       if needs_i then (
7850         pr "  unsigned int i;\n";
7851         pr "\n"
7852       );
7853       List.iter (
7854         function
7855         | name, FString ->
7856             pr "  printf (\"%%s%s: %%s\\n\", indent, %s->%s);\n" name typ name
7857         | name, FUUID ->
7858             pr "  printf (\"%%s%s: \", indent);\n" name;
7859             pr "  for (i = 0; i < 32; ++i)\n";
7860             pr "    printf (\"%%c\", %s->%s[i]);\n" typ name;
7861             pr "  printf (\"\\n\");\n"
7862         | name, FBuffer ->
7863             pr "  printf (\"%%s%s: \", indent);\n" name;
7864             pr "  for (i = 0; i < %s->%s_len; ++i)\n" typ name;
7865             pr "    if (c_isprint (%s->%s[i]))\n" typ name;
7866             pr "      printf (\"%%c\", %s->%s[i]);\n" typ name;
7867             pr "    else\n";
7868             pr "      printf (\"\\\\x%%02x\", %s->%s[i]);\n" typ name;
7869             pr "  printf (\"\\n\");\n"
7870         | name, (FUInt64|FBytes) ->
7871             pr "  printf (\"%%s%s: %%\" PRIu64 \"\\n\", indent, %s->%s);\n"
7872               name typ name
7873         | name, FInt64 ->
7874             pr "  printf (\"%%s%s: %%\" PRIi64 \"\\n\", indent, %s->%s);\n"
7875               name typ name
7876         | name, FUInt32 ->
7877             pr "  printf (\"%%s%s: %%\" PRIu32 \"\\n\", indent, %s->%s);\n"
7878               name typ name
7879         | name, FInt32 ->
7880             pr "  printf (\"%%s%s: %%\" PRIi32 \"\\n\", indent, %s->%s);\n"
7881               name typ name
7882         | name, FChar ->
7883             pr "  printf (\"%%s%s: %%c\\n\", indent, %s->%s);\n"
7884               name typ name
7885         | name, FOptPercent ->
7886             pr "  if (%s->%s >= 0) printf (\"%%s%s: %%g %%%%\\n\", indent, %s->%s);\n"
7887               typ name name typ name;
7888             pr "  else printf (\"%%s%s: \\n\", indent);\n" name
7889       ) cols;
7890       pr "}\n";
7891       pr "\n";
7892   ) structs;
7893
7894   (* Emit a print_TYPE_list function definition only if that function is used. *)
7895   List.iter (
7896     function
7897     | typ, (RStructListOnly | RStructAndList) ->
7898         (* generate the function for typ *)
7899         emit_print_list_function typ
7900     | typ, _ -> () (* empty *)
7901   ) (rstructs_used_by all_functions);
7902
7903   (* Emit a print_TYPE function definition only if that function is used. *)
7904   List.iter (
7905     function
7906     | typ, (RStructOnly | RStructAndList) ->
7907         pr "static void print_%s (struct guestfs_%s *%s)\n" typ typ typ;
7908         pr "{\n";
7909         pr "  print_%s_indent (%s, \"\");\n" typ typ;
7910         pr "}\n";
7911         pr "\n";
7912     | typ, _ -> () (* empty *)
7913   ) (rstructs_used_by all_functions);
7914
7915   (* run_<action> actions *)
7916   List.iter (
7917     fun (name, style, _, flags, _, _, _) ->
7918       pr "static int run_%s (const char *cmd, int argc, char *argv[])\n" name;
7919       pr "{\n";
7920       (match fst style with
7921        | RErr
7922        | RInt _
7923        | RBool _ -> pr "  int r;\n"
7924        | RInt64 _ -> pr "  int64_t r;\n"
7925        | RConstString _ | RConstOptString _ -> pr "  const char *r;\n"
7926        | RString _ -> pr "  char *r;\n"
7927        | RStringList _ | RHashtable _ -> pr "  char **r;\n"
7928        | RStruct (_, typ) -> pr "  struct guestfs_%s *r;\n" typ
7929        | RStructList (_, typ) -> pr "  struct guestfs_%s_list *r;\n" typ
7930        | RBufferOut _ ->
7931            pr "  char *r;\n";
7932            pr "  size_t size;\n";
7933       );
7934       List.iter (
7935         function
7936         | Device n
7937         | String n
7938         | OptString n -> pr "  const char *%s;\n" n
7939         | Pathname n
7940         | Dev_or_Path n
7941         | FileIn n
7942         | FileOut n
7943         | Key n -> pr "  char *%s;\n" n
7944         | BufferIn n ->
7945             pr "  const char *%s;\n" n;
7946             pr "  size_t %s_size;\n" n
7947         | StringList n | DeviceList n -> pr "  char **%s;\n" n
7948         | Bool n -> pr "  int %s;\n" n
7949         | Int n -> pr "  int %s;\n" n
7950         | Int64 n -> pr "  int64_t %s;\n" n
7951       ) (snd style);
7952
7953       (* Check and convert parameters. *)
7954       let argc_expected =
7955         let args_no_keys =
7956           List.filter (function Key _ -> false | _ -> true) (snd style) in
7957         List.length args_no_keys in
7958       pr "  if (argc != %d) {\n" argc_expected;
7959       pr "    fprintf (stderr, _(\"%%s should have %%d parameter(s)\\n\"), cmd, %d);\n"
7960         argc_expected;
7961       pr "    fprintf (stderr, _(\"type 'help %%s' for help on %%s\\n\"), cmd, cmd);\n";
7962       pr "    return -1;\n";
7963       pr "  }\n";
7964
7965       let parse_integer fn fntyp rtyp range name =
7966         pr "  {\n";
7967         pr "    strtol_error xerr;\n";
7968         pr "    %s r;\n" fntyp;
7969         pr "\n";
7970         pr "    xerr = %s (argv[i++], NULL, 0, &r, xstrtol_suffixes);\n" fn;
7971         pr "    if (xerr != LONGINT_OK) {\n";
7972         pr "      fprintf (stderr,\n";
7973         pr "               _(\"%%s: %%s: invalid integer parameter (%%s returned %%d)\\n\"),\n";
7974         pr "               cmd, \"%s\", \"%s\", xerr);\n" name fn;
7975         pr "      return -1;\n";
7976         pr "    }\n";
7977         (match range with
7978          | None -> ()
7979          | Some (min, max, comment) ->
7980              pr "    /* %s */\n" comment;
7981              pr "    if (r < %s || r > %s) {\n" min max;
7982              pr "      fprintf (stderr, _(\"%%s: %%s: integer out of range\\n\"), cmd, \"%s\");\n"
7983                name;
7984              pr "      return -1;\n";
7985              pr "    }\n";
7986              pr "    /* The check above should ensure this assignment does not overflow. */\n";
7987         );
7988         pr "    %s = r;\n" name;
7989         pr "  }\n";
7990       in
7991
7992       if snd style <> [] then
7993         pr "  size_t i = 0;\n";
7994
7995       List.iter (
7996         function
7997         | Device name
7998         | String name ->
7999             pr "  %s = argv[i++];\n" name
8000         | Pathname name
8001         | Dev_or_Path name ->
8002             pr "  %s = resolve_win_path (argv[i++]);\n" name;
8003             pr "  if (%s == NULL) return -1;\n" name
8004         | OptString name ->
8005             pr "  %s = STRNEQ (argv[i], \"\") ? argv[i] : NULL;\n" name;
8006             pr "  i++;\n"
8007         | BufferIn name ->
8008             pr "  %s = argv[i];\n" name;
8009             pr "  %s_size = strlen (argv[i]);\n" name;
8010             pr "  i++;\n"
8011         | FileIn name ->
8012             pr "  %s = file_in (argv[i++]);\n" name;
8013             pr "  if (%s == NULL) return -1;\n" name
8014         | FileOut name ->
8015             pr "  %s = file_out (argv[i++]);\n" name;
8016             pr "  if (%s == NULL) return -1;\n" name
8017         | StringList name | DeviceList name ->
8018             pr "  %s = parse_string_list (argv[i++]);\n" name;
8019             pr "  if (%s == NULL) return -1;\n" name
8020         | Key name ->
8021             pr "  %s = read_key (\"%s\");\n" name name;
8022             pr "  if (%s == NULL) return -1;\n" name
8023         | Bool name ->
8024             pr "  %s = is_true (argv[i++]) ? 1 : 0;\n" name
8025         | Int name ->
8026             let range =
8027               let min = "(-(2LL<<30))"
8028               and max = "((2LL<<30)-1)"
8029               and comment =
8030                 "The Int type in the generator is a signed 31 bit int." in
8031               Some (min, max, comment) in
8032             parse_integer "xstrtoll" "long long" "int" range name
8033         | Int64 name ->
8034             parse_integer "xstrtoll" "long long" "int64_t" None name
8035       ) (snd style);
8036
8037       (* Call C API function. *)
8038       pr "  r = guestfs_%s " name;
8039       generate_c_call_args ~handle:"g" style;
8040       pr ";\n";
8041
8042       List.iter (
8043         function
8044         | Device _ | String _
8045         | OptString _ | Bool _
8046         | Int _ | Int64 _
8047         | BufferIn _ -> ()
8048         | Pathname name | Dev_or_Path name | FileOut name
8049         | Key name ->
8050             pr "  free (%s);\n" name
8051         | FileIn name ->
8052             pr "  free_file_in (%s);\n" name
8053         | StringList name | DeviceList name ->
8054             pr "  free_strings (%s);\n" name
8055       ) (snd style);
8056
8057       (* Any output flags? *)
8058       let fish_output =
8059         let flags = filter_map (
8060           function FishOutput flag -> Some flag | _ -> None
8061         ) flags in
8062         match flags with
8063         | [] -> None
8064         | [f] -> Some f
8065         | _ ->
8066             failwithf "%s: more than one FishOutput flag is not allowed" name in
8067
8068       (* Check return value for errors and display command results. *)
8069       (match fst style with
8070        | RErr -> pr "  return r;\n"
8071        | RInt _ ->
8072            pr "  if (r == -1) return -1;\n";
8073            (match fish_output with
8074             | None ->
8075                 pr "  printf (\"%%d\\n\", r);\n";
8076             | Some FishOutputOctal ->
8077                 pr "  printf (\"%%s%%o\\n\", r != 0 ? \"0\" : \"\", r);\n";
8078             | Some FishOutputHexadecimal ->
8079                 pr "  printf (\"%%s%%x\\n\", r != 0 ? \"0x\" : \"\", r);\n");
8080            pr "  return 0;\n"
8081        | RInt64 _ ->
8082            pr "  if (r == -1) return -1;\n";
8083            (match fish_output with
8084             | None ->
8085                 pr "  printf (\"%%\" PRIi64 \"\\n\", r);\n";
8086             | Some FishOutputOctal ->
8087                 pr "  printf (\"%%s%%\" PRIo64 \"\\n\", r != 0 ? \"0\" : \"\", r);\n";
8088             | Some FishOutputHexadecimal ->
8089                 pr "  printf (\"%%s%%\" PRIx64 \"\\n\", r != 0 ? \"0x\" : \"\", r);\n");
8090            pr "  return 0;\n"
8091        | RBool _ ->
8092            pr "  if (r == -1) return -1;\n";
8093            pr "  if (r) printf (\"true\\n\"); else printf (\"false\\n\");\n";
8094            pr "  return 0;\n"
8095        | RConstString _ ->
8096            pr "  if (r == NULL) return -1;\n";
8097            pr "  printf (\"%%s\\n\", r);\n";
8098            pr "  return 0;\n"
8099        | RConstOptString _ ->
8100            pr "  printf (\"%%s\\n\", r ? : \"(null)\");\n";
8101            pr "  return 0;\n"
8102        | RString _ ->
8103            pr "  if (r == NULL) return -1;\n";
8104            pr "  printf (\"%%s\\n\", r);\n";
8105            pr "  free (r);\n";
8106            pr "  return 0;\n"
8107        | RStringList _ ->
8108            pr "  if (r == NULL) return -1;\n";
8109            pr "  print_strings (r);\n";
8110            pr "  free_strings (r);\n";
8111            pr "  return 0;\n"
8112        | RStruct (_, typ) ->
8113            pr "  if (r == NULL) return -1;\n";
8114            pr "  print_%s (r);\n" typ;
8115            pr "  guestfs_free_%s (r);\n" typ;
8116            pr "  return 0;\n"
8117        | RStructList (_, typ) ->
8118            pr "  if (r == NULL) return -1;\n";
8119            pr "  print_%s_list (r);\n" typ;
8120            pr "  guestfs_free_%s_list (r);\n" typ;
8121            pr "  return 0;\n"
8122        | RHashtable _ ->
8123            pr "  if (r == NULL) return -1;\n";
8124            pr "  print_table (r);\n";
8125            pr "  free_strings (r);\n";
8126            pr "  return 0;\n"
8127        | RBufferOut _ ->
8128            pr "  if (r == NULL) return -1;\n";
8129            pr "  if (full_write (1, r, size) != size) {\n";
8130            pr "    perror (\"write\");\n";
8131            pr "    free (r);\n";
8132            pr "    return -1;\n";
8133            pr "  }\n";
8134            pr "  free (r);\n";
8135            pr "  return 0;\n"
8136       );
8137       pr "}\n";
8138       pr "\n"
8139   ) all_functions;
8140
8141   (* run_action function *)
8142   pr "int run_action (const char *cmd, int argc, char *argv[])\n";
8143   pr "{\n";
8144   List.iter (
8145     fun (name, _, _, flags, _, _, _) ->
8146       let name2 = replace_char name '_' '-' in
8147       let alias =
8148         try find_map (function FishAlias n -> Some n | _ -> None) flags
8149         with Not_found -> name in
8150       pr "  if (";
8151       pr "STRCASEEQ (cmd, \"%s\")" name;
8152       if name <> name2 then
8153         pr " || STRCASEEQ (cmd, \"%s\")" name2;
8154       if name <> alias then
8155         pr " || STRCASEEQ (cmd, \"%s\")" alias;
8156       pr ")\n";
8157       pr "    return run_%s (cmd, argc, argv);\n" name;
8158       pr "  else\n";
8159   ) all_functions;
8160   pr "    {\n";
8161   pr "      fprintf (stderr, _(\"%%s: unknown command\\n\"), cmd);\n";
8162   pr "      if (command_num == 1)\n";
8163   pr "        extended_help_message ();\n";
8164   pr "      return -1;\n";
8165   pr "    }\n";
8166   pr "  return 0;\n";
8167   pr "}\n";
8168   pr "\n"
8169
8170 (* Readline completion for guestfish. *)
8171 and generate_fish_completion () =
8172   generate_header CStyle GPLv2plus;
8173
8174   let all_functions =
8175     List.filter (
8176       fun (_, _, _, flags, _, _, _) -> not (List.mem NotInFish flags)
8177     ) all_functions in
8178
8179   pr "\
8180 #include <config.h>
8181
8182 #include <stdio.h>
8183 #include <stdlib.h>
8184 #include <string.h>
8185
8186 #ifdef HAVE_LIBREADLINE
8187 #include <readline/readline.h>
8188 #endif
8189
8190 #include \"fish.h\"
8191
8192 #ifdef HAVE_LIBREADLINE
8193
8194 static const char *const commands[] = {
8195   BUILTIN_COMMANDS_FOR_COMPLETION,
8196 ";
8197
8198   (* Get the commands, including the aliases.  They don't need to be
8199    * sorted - the generator() function just does a dumb linear search.
8200    *)
8201   let commands =
8202     List.map (
8203       fun (name, _, _, flags, _, _, _) ->
8204         let name2 = replace_char name '_' '-' in
8205         let alias =
8206           try find_map (function FishAlias n -> Some n | _ -> None) flags
8207           with Not_found -> name in
8208
8209         if name <> alias then [name2; alias] else [name2]
8210     ) all_functions in
8211   let commands = List.flatten commands in
8212
8213   List.iter (pr "  \"%s\",\n") commands;
8214
8215   pr "  NULL
8216 };
8217
8218 static char *
8219 generator (const char *text, int state)
8220 {
8221   static size_t index, len;
8222   const char *name;
8223
8224   if (!state) {
8225     index = 0;
8226     len = strlen (text);
8227   }
8228
8229   rl_attempted_completion_over = 1;
8230
8231   while ((name = commands[index]) != NULL) {
8232     index++;
8233     if (STRCASEEQLEN (name, text, len))
8234       return strdup (name);
8235   }
8236
8237   return NULL;
8238 }
8239
8240 #endif /* HAVE_LIBREADLINE */
8241
8242 #ifdef HAVE_RL_COMPLETION_MATCHES
8243 #define RL_COMPLETION_MATCHES rl_completion_matches
8244 #else
8245 #ifdef HAVE_COMPLETION_MATCHES
8246 #define RL_COMPLETION_MATCHES completion_matches
8247 #endif
8248 #endif /* else just fail if we don't have either symbol */
8249
8250 char **
8251 do_completion (const char *text, int start, int end)
8252 {
8253   char **matches = NULL;
8254
8255 #ifdef HAVE_LIBREADLINE
8256   rl_completion_append_character = ' ';
8257
8258   if (start == 0)
8259     matches = RL_COMPLETION_MATCHES (text, generator);
8260   else if (complete_dest_paths)
8261     matches = RL_COMPLETION_MATCHES (text, complete_dest_paths_generator);
8262 #endif
8263
8264   return matches;
8265 }
8266 ";
8267
8268 (* Generate the POD documentation for guestfish. *)
8269 and generate_fish_actions_pod () =
8270   let all_functions_sorted =
8271     List.filter (
8272       fun (_, _, _, flags, _, _, _) ->
8273         not (List.mem NotInFish flags || List.mem NotInDocs flags)
8274     ) all_functions_sorted in
8275
8276   let rex = Str.regexp "C<guestfs_\\([^>]+\\)>" in
8277
8278   List.iter (
8279     fun (name, style, _, flags, _, _, longdesc) ->
8280       let longdesc =
8281         Str.global_substitute rex (
8282           fun s ->
8283             let sub =
8284               try Str.matched_group 1 s
8285               with Not_found ->
8286                 failwithf "error substituting C<guestfs_...> in longdesc of function %s" name in
8287             "C<" ^ replace_char sub '_' '-' ^ ">"
8288         ) longdesc in
8289       let name = replace_char name '_' '-' in
8290       let alias =
8291         try find_map (function FishAlias n -> Some n | _ -> None) flags
8292         with Not_found -> name in
8293
8294       pr "=head2 %s" name;
8295       if name <> alias then
8296         pr " | %s" alias;
8297       pr "\n";
8298       pr "\n";
8299       pr " %s" name;
8300       List.iter (
8301         function
8302         | Pathname n | Device n | Dev_or_Path n | String n ->
8303             pr " %s" n
8304         | OptString n -> pr " %s" n
8305         | StringList n | DeviceList n -> pr " '%s ...'" n
8306         | Bool _ -> pr " true|false"
8307         | Int n -> pr " %s" n
8308         | Int64 n -> pr " %s" n
8309         | FileIn n | FileOut n -> pr " (%s|-)" n
8310         | BufferIn n -> pr " %s" n
8311         | Key _ -> () (* keys are entered at a prompt *)
8312       ) (snd style);
8313       pr "\n";
8314       pr "\n";
8315       pr "%s\n\n" longdesc;
8316
8317       if List.exists (function FileIn _ | FileOut _ -> true
8318                       | _ -> false) (snd style) then
8319         pr "Use C<-> instead of a filename to read/write from stdin/stdout.\n\n";
8320
8321       if List.exists (function Key _ -> true | _ -> false) (snd style) then
8322         pr "This command has one or more key or passphrase parameters.
8323 Guestfish will prompt for these separately.\n\n";
8324
8325       if List.mem ProtocolLimitWarning flags then
8326         pr "%s\n\n" protocol_limit_warning;
8327
8328       if List.mem DangerWillRobinson flags then
8329         pr "%s\n\n" danger_will_robinson;
8330
8331       match deprecation_notice flags with
8332       | None -> ()
8333       | Some txt -> pr "%s\n\n" txt
8334   ) all_functions_sorted
8335
8336 (* Generate a C function prototype. *)
8337 and generate_prototype ?(extern = true) ?(static = false) ?(semicolon = true)
8338     ?(single_line = false) ?(newline = false) ?(in_daemon = false)
8339     ?(prefix = "")
8340     ?handle name style =
8341   if extern then pr "extern ";
8342   if static then pr "static ";
8343   (match fst style with
8344    | RErr -> pr "int "
8345    | RInt _ -> pr "int "
8346    | RInt64 _ -> pr "int64_t "
8347    | RBool _ -> pr "int "
8348    | RConstString _ | RConstOptString _ -> pr "const char *"
8349    | RString _ | RBufferOut _ -> pr "char *"
8350    | RStringList _ | RHashtable _ -> pr "char **"
8351    | RStruct (_, typ) ->
8352        if not in_daemon then pr "struct guestfs_%s *" typ
8353        else pr "guestfs_int_%s *" typ
8354    | RStructList (_, typ) ->
8355        if not in_daemon then pr "struct guestfs_%s_list *" typ
8356        else pr "guestfs_int_%s_list *" typ
8357   );
8358   let is_RBufferOut = match fst style with RBufferOut _ -> true | _ -> false in
8359   pr "%s%s (" prefix name;
8360   if handle = None && List.length (snd style) = 0 && not is_RBufferOut then
8361     pr "void"
8362   else (
8363     let comma = ref false in
8364     (match handle with
8365      | None -> ()
8366      | Some handle -> pr "guestfs_h *%s" handle; comma := true
8367     );
8368     let next () =
8369       if !comma then (
8370         if single_line then pr ", " else pr ",\n\t\t"
8371       );
8372       comma := true
8373     in
8374     List.iter (
8375       function
8376       | Pathname n
8377       | Device n | Dev_or_Path n
8378       | String n
8379       | OptString n
8380       | Key n ->
8381           next ();
8382           pr "const char *%s" n
8383       | StringList n | DeviceList n ->
8384           next ();
8385           pr "char *const *%s" n
8386       | Bool n -> next (); pr "int %s" n
8387       | Int n -> next (); pr "int %s" n
8388       | Int64 n -> next (); pr "int64_t %s" n
8389       | FileIn n
8390       | FileOut n ->
8391           if not in_daemon then (next (); pr "const char *%s" n)
8392       | BufferIn n ->
8393           next ();
8394           pr "const char *%s" n;
8395           next ();
8396           pr "size_t %s_size" n
8397     ) (snd style);
8398     if is_RBufferOut then (next (); pr "size_t *size_r");
8399   );
8400   pr ")";
8401   if semicolon then pr ";";
8402   if newline then pr "\n"
8403
8404 (* Generate C call arguments, eg "(handle, foo, bar)" *)
8405 and generate_c_call_args ?handle ?(decl = false) style =
8406   pr "(";
8407   let comma = ref false in
8408   let next () =
8409     if !comma then pr ", ";
8410     comma := true
8411   in
8412   (match handle with
8413    | None -> ()
8414    | Some handle -> pr "%s" handle; comma := true
8415   );
8416   List.iter (
8417     function
8418     | BufferIn n ->
8419         next ();
8420         pr "%s, %s_size" n n
8421     | arg ->
8422         next ();
8423         pr "%s" (name_of_argt arg)
8424   ) (snd style);
8425   (* For RBufferOut calls, add implicit &size parameter. *)
8426   if not decl then (
8427     match fst style with
8428     | RBufferOut _ ->
8429         next ();
8430         pr "&size"
8431     | _ -> ()
8432   );
8433   pr ")"
8434
8435 (* Generate the OCaml bindings interface. *)
8436 and generate_ocaml_mli () =
8437   generate_header OCamlStyle LGPLv2plus;
8438
8439   pr "\
8440 (** For API documentation you should refer to the C API
8441     in the guestfs(3) manual page.  The OCaml API uses almost
8442     exactly the same calls. *)
8443
8444 type t
8445 (** A [guestfs_h] handle. *)
8446
8447 exception Error of string
8448 (** This exception is raised when there is an error. *)
8449
8450 exception Handle_closed of string
8451 (** This exception is raised if you use a {!Guestfs.t} handle
8452     after calling {!close} on it.  The string is the name of
8453     the function. *)
8454
8455 val create : unit -> t
8456 (** Create a {!Guestfs.t} handle. *)
8457
8458 val close : t -> unit
8459 (** Close the {!Guestfs.t} handle and free up all resources used
8460     by it immediately.
8461
8462     Handles are closed by the garbage collector when they become
8463     unreferenced, but callers can call this in order to provide
8464     predictable cleanup. *)
8465
8466 ";
8467   generate_ocaml_structure_decls ();
8468
8469   (* The actions. *)
8470   List.iter (
8471     fun (name, style, _, _, _, shortdesc, _) ->
8472       generate_ocaml_prototype name style;
8473       pr "(** %s *)\n" shortdesc;
8474       pr "\n"
8475   ) all_functions_sorted
8476
8477 (* Generate the OCaml bindings implementation. *)
8478 and generate_ocaml_ml () =
8479   generate_header OCamlStyle LGPLv2plus;
8480
8481   pr "\
8482 type t
8483
8484 exception Error of string
8485 exception Handle_closed of string
8486
8487 external create : unit -> t = \"ocaml_guestfs_create\"
8488 external close : t -> unit = \"ocaml_guestfs_close\"
8489
8490 (* Give the exceptions names, so they can be raised from the C code. *)
8491 let () =
8492   Callback.register_exception \"ocaml_guestfs_error\" (Error \"\");
8493   Callback.register_exception \"ocaml_guestfs_closed\" (Handle_closed \"\")
8494
8495 ";
8496
8497   generate_ocaml_structure_decls ();
8498
8499   (* The actions. *)
8500   List.iter (
8501     fun (name, style, _, _, _, shortdesc, _) ->
8502       generate_ocaml_prototype ~is_external:true name style;
8503   ) all_functions_sorted
8504
8505 (* Generate the OCaml bindings C implementation. *)
8506 and generate_ocaml_c () =
8507   generate_header CStyle LGPLv2plus;
8508
8509   pr "\
8510 #include <stdio.h>
8511 #include <stdlib.h>
8512 #include <string.h>
8513
8514 #include <caml/config.h>
8515 #include <caml/alloc.h>
8516 #include <caml/callback.h>
8517 #include <caml/fail.h>
8518 #include <caml/memory.h>
8519 #include <caml/mlvalues.h>
8520 #include <caml/signals.h>
8521
8522 #include \"guestfs.h\"
8523
8524 #include \"guestfs_c.h\"
8525
8526 /* Copy a hashtable of string pairs into an assoc-list.  We return
8527  * the list in reverse order, but hashtables aren't supposed to be
8528  * ordered anyway.
8529  */
8530 static CAMLprim value
8531 copy_table (char * const * argv)
8532 {
8533   CAMLparam0 ();
8534   CAMLlocal5 (rv, pairv, kv, vv, cons);
8535   size_t i;
8536
8537   rv = Val_int (0);
8538   for (i = 0; argv[i] != NULL; i += 2) {
8539     kv = caml_copy_string (argv[i]);
8540     vv = caml_copy_string (argv[i+1]);
8541     pairv = caml_alloc (2, 0);
8542     Store_field (pairv, 0, kv);
8543     Store_field (pairv, 1, vv);
8544     cons = caml_alloc (2, 0);
8545     Store_field (cons, 1, rv);
8546     rv = cons;
8547     Store_field (cons, 0, pairv);
8548   }
8549
8550   CAMLreturn (rv);
8551 }
8552
8553 ";
8554
8555   (* Struct copy functions. *)
8556
8557   let emit_ocaml_copy_list_function typ =
8558     pr "static CAMLprim value\n";
8559     pr "copy_%s_list (const struct guestfs_%s_list *%ss)\n" typ typ typ;
8560     pr "{\n";
8561     pr "  CAMLparam0 ();\n";
8562     pr "  CAMLlocal2 (rv, v);\n";
8563     pr "  unsigned int i;\n";
8564     pr "\n";
8565     pr "  if (%ss->len == 0)\n" typ;
8566     pr "    CAMLreturn (Atom (0));\n";
8567     pr "  else {\n";
8568     pr "    rv = caml_alloc (%ss->len, 0);\n" typ;
8569     pr "    for (i = 0; i < %ss->len; ++i) {\n" typ;
8570     pr "      v = copy_%s (&%ss->val[i]);\n" typ typ;
8571     pr "      caml_modify (&Field (rv, i), v);\n";
8572     pr "    }\n";
8573     pr "    CAMLreturn (rv);\n";
8574     pr "  }\n";
8575     pr "}\n";
8576     pr "\n";
8577   in
8578
8579   List.iter (
8580     fun (typ, cols) ->
8581       let has_optpercent_col =
8582         List.exists (function (_, FOptPercent) -> true | _ -> false) cols in
8583
8584       pr "static CAMLprim value\n";
8585       pr "copy_%s (const struct guestfs_%s *%s)\n" typ typ typ;
8586       pr "{\n";
8587       pr "  CAMLparam0 ();\n";
8588       if has_optpercent_col then
8589         pr "  CAMLlocal3 (rv, v, v2);\n"
8590       else
8591         pr "  CAMLlocal2 (rv, v);\n";
8592       pr "\n";
8593       pr "  rv = caml_alloc (%d, 0);\n" (List.length cols);
8594       iteri (
8595         fun i col ->
8596           (match col with
8597            | name, FString ->
8598                pr "  v = caml_copy_string (%s->%s);\n" typ name
8599            | name, FBuffer ->
8600                pr "  v = caml_alloc_string (%s->%s_len);\n" typ name;
8601                pr "  memcpy (String_val (v), %s->%s, %s->%s_len);\n"
8602                  typ name typ name
8603            | name, FUUID ->
8604                pr "  v = caml_alloc_string (32);\n";
8605                pr "  memcpy (String_val (v), %s->%s, 32);\n" typ name
8606            | name, (FBytes|FInt64|FUInt64) ->
8607                pr "  v = caml_copy_int64 (%s->%s);\n" typ name
8608            | name, (FInt32|FUInt32) ->
8609                pr "  v = caml_copy_int32 (%s->%s);\n" typ name
8610            | name, FOptPercent ->
8611                pr "  if (%s->%s >= 0) { /* Some %s */\n" typ name name;
8612                pr "    v2 = caml_copy_double (%s->%s);\n" typ name;
8613                pr "    v = caml_alloc (1, 0);\n";
8614                pr "    Store_field (v, 0, v2);\n";
8615                pr "  } else /* None */\n";
8616                pr "    v = Val_int (0);\n";
8617            | name, FChar ->
8618                pr "  v = Val_int (%s->%s);\n" typ name
8619           );
8620           pr "  Store_field (rv, %d, v);\n" i
8621       ) cols;
8622       pr "  CAMLreturn (rv);\n";
8623       pr "}\n";
8624       pr "\n";
8625   ) structs;
8626
8627   (* Emit a copy_TYPE_list function definition only if that function is used. *)
8628   List.iter (
8629     function
8630     | typ, (RStructListOnly | RStructAndList) ->
8631         (* generate the function for typ *)
8632         emit_ocaml_copy_list_function typ
8633     | typ, _ -> () (* empty *)
8634   ) (rstructs_used_by all_functions);
8635
8636   (* The wrappers. *)
8637   List.iter (
8638     fun (name, style, _, _, _, _, _) ->
8639       pr "/* Automatically generated wrapper for function\n";
8640       pr " * ";
8641       generate_ocaml_prototype name style;
8642       pr " */\n";
8643       pr "\n";
8644
8645       let params =
8646         "gv" :: List.map (fun arg -> name_of_argt arg ^ "v") (snd style) in
8647
8648       let needs_extra_vs =
8649         match fst style with RConstOptString _ -> true | _ -> false in
8650
8651       pr "/* Emit prototype to appease gcc's -Wmissing-prototypes. */\n";
8652       pr "CAMLprim value ocaml_guestfs_%s (value %s" name (List.hd params);
8653       List.iter (pr ", value %s") (List.tl params); pr ");\n";
8654       pr "\n";
8655
8656       pr "CAMLprim value\n";
8657       pr "ocaml_guestfs_%s (value %s" name (List.hd params);
8658       List.iter (pr ", value %s") (List.tl params);
8659       pr ")\n";
8660       pr "{\n";
8661
8662       (match params with
8663        | [p1; p2; p3; p4; p5] ->
8664            pr "  CAMLparam5 (%s);\n" (String.concat ", " params)
8665        | p1 :: p2 :: p3 :: p4 :: p5 :: rest ->
8666            pr "  CAMLparam5 (%s);\n" (String.concat ", " [p1; p2; p3; p4; p5]);
8667            pr "  CAMLxparam%d (%s);\n"
8668              (List.length rest) (String.concat ", " rest)
8669        | ps ->
8670            pr "  CAMLparam%d (%s);\n" (List.length ps) (String.concat ", " ps)
8671       );
8672       if not needs_extra_vs then
8673         pr "  CAMLlocal1 (rv);\n"
8674       else
8675         pr "  CAMLlocal3 (rv, v, v2);\n";
8676       pr "\n";
8677
8678       pr "  guestfs_h *g = Guestfs_val (gv);\n";
8679       pr "  if (g == NULL)\n";
8680       pr "    ocaml_guestfs_raise_closed (\"%s\");\n" name;
8681       pr "\n";
8682
8683       List.iter (
8684         function
8685         | Pathname n
8686         | Device n | Dev_or_Path n
8687         | String n
8688         | FileIn n
8689         | FileOut n
8690         | Key n ->
8691             (* Copy strings in case the GC moves them: RHBZ#604691 *)
8692             pr "  char *%s = guestfs_safe_strdup (g, String_val (%sv));\n" n n
8693         | OptString n ->
8694             pr "  char *%s =\n" n;
8695             pr "    %sv != Val_int (0) ?" n;
8696             pr "      guestfs_safe_strdup (g, String_val (Field (%sv, 0))) : NULL;\n" n
8697         | BufferIn n ->
8698             pr "  size_t %s_size = caml_string_length (%sv);\n" n n;
8699             pr "  char *%s = guestfs_safe_memdup (g, String_val (%sv), %s_size);\n" n n n
8700         | StringList n | DeviceList n ->
8701             pr "  char **%s = ocaml_guestfs_strings_val (g, %sv);\n" n n
8702         | Bool n ->
8703             pr "  int %s = Bool_val (%sv);\n" n n
8704         | Int n ->
8705             pr "  int %s = Int_val (%sv);\n" n n
8706         | Int64 n ->
8707             pr "  int64_t %s = Int64_val (%sv);\n" n n
8708       ) (snd style);
8709       let error_code =
8710         match fst style with
8711         | RErr -> pr "  int r;\n"; "-1"
8712         | RInt _ -> pr "  int r;\n"; "-1"
8713         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
8714         | RBool _ -> pr "  int r;\n"; "-1"
8715         | RConstString _ | RConstOptString _ ->
8716             pr "  const char *r;\n"; "NULL"
8717         | RString _ -> pr "  char *r;\n"; "NULL"
8718         | RStringList _ ->
8719             pr "  size_t i;\n";
8720             pr "  char **r;\n";
8721             "NULL"
8722         | RStruct (_, typ) ->
8723             pr "  struct guestfs_%s *r;\n" typ; "NULL"
8724         | RStructList (_, typ) ->
8725             pr "  struct guestfs_%s_list *r;\n" typ; "NULL"
8726         | RHashtable _ ->
8727             pr "  size_t i;\n";
8728             pr "  char **r;\n";
8729             "NULL"
8730         | RBufferOut _ ->
8731             pr "  char *r;\n";
8732             pr "  size_t size;\n";
8733             "NULL" in
8734       pr "\n";
8735
8736       pr "  caml_enter_blocking_section ();\n";
8737       pr "  r = guestfs_%s " name;
8738       generate_c_call_args ~handle:"g" style;
8739       pr ";\n";
8740       pr "  caml_leave_blocking_section ();\n";
8741
8742       (* Free strings if we copied them above. *)
8743       List.iter (
8744         function
8745         | Pathname n | Device n | Dev_or_Path n | String n | OptString n
8746         | FileIn n | FileOut n | BufferIn n | Key n ->
8747             pr "  free (%s);\n" n
8748         | StringList n | DeviceList n ->
8749             pr "  ocaml_guestfs_free_strings (%s);\n" n;
8750         | Bool _ | Int _ | Int64 _ -> ()
8751       ) (snd style);
8752
8753       pr "  if (r == %s)\n" error_code;
8754       pr "    ocaml_guestfs_raise_error (g, \"%s\");\n" name;
8755       pr "\n";
8756
8757       (match fst style with
8758        | RErr -> pr "  rv = Val_unit;\n"
8759        | RInt _ -> pr "  rv = Val_int (r);\n"
8760        | RInt64 _ ->
8761            pr "  rv = caml_copy_int64 (r);\n"
8762        | RBool _ -> pr "  rv = Val_bool (r);\n"
8763        | RConstString _ ->
8764            pr "  rv = caml_copy_string (r);\n"
8765        | RConstOptString _ ->
8766            pr "  if (r) { /* Some string */\n";
8767            pr "    v = caml_alloc (1, 0);\n";
8768            pr "    v2 = caml_copy_string (r);\n";
8769            pr "    Store_field (v, 0, v2);\n";
8770            pr "  } else /* None */\n";
8771            pr "    v = Val_int (0);\n";
8772        | RString _ ->
8773            pr "  rv = caml_copy_string (r);\n";
8774            pr "  free (r);\n"
8775        | RStringList _ ->
8776            pr "  rv = caml_copy_string_array ((const char **) r);\n";
8777            pr "  for (i = 0; r[i] != NULL; ++i) free (r[i]);\n";
8778            pr "  free (r);\n"
8779        | RStruct (_, typ) ->
8780            pr "  rv = copy_%s (r);\n" typ;
8781            pr "  guestfs_free_%s (r);\n" typ;
8782        | RStructList (_, typ) ->
8783            pr "  rv = copy_%s_list (r);\n" typ;
8784            pr "  guestfs_free_%s_list (r);\n" typ;
8785        | RHashtable _ ->
8786            pr "  rv = copy_table (r);\n";
8787            pr "  for (i = 0; r[i] != NULL; ++i) free (r[i]);\n";
8788            pr "  free (r);\n";
8789        | RBufferOut _ ->
8790            pr "  rv = caml_alloc_string (size);\n";
8791            pr "  memcpy (String_val (rv), r, size);\n";
8792       );
8793
8794       pr "  CAMLreturn (rv);\n";
8795       pr "}\n";
8796       pr "\n";
8797
8798       if List.length params > 5 then (
8799         pr "/* Emit prototype to appease gcc's -Wmissing-prototypes. */\n";
8800         pr "CAMLprim value ";
8801         pr "ocaml_guestfs_%s_byte (value *argv, int argn);\n" name;
8802         pr "CAMLprim value\n";
8803         pr "ocaml_guestfs_%s_byte (value *argv, int argn)\n" name;
8804         pr "{\n";
8805         pr "  return ocaml_guestfs_%s (argv[0]" name;
8806         iteri (fun i _ -> pr ", argv[%d]" i) (List.tl params);
8807         pr ");\n";
8808         pr "}\n";
8809         pr "\n"
8810       )
8811   ) all_functions_sorted
8812
8813 and generate_ocaml_structure_decls () =
8814   List.iter (
8815     fun (typ, cols) ->
8816       pr "type %s = {\n" typ;
8817       List.iter (
8818         function
8819         | name, FString -> pr "  %s : string;\n" name
8820         | name, FBuffer -> pr "  %s : string;\n" name
8821         | name, FUUID -> pr "  %s : string;\n" name
8822         | name, (FBytes|FInt64|FUInt64) -> pr "  %s : int64;\n" name
8823         | name, (FInt32|FUInt32) -> pr "  %s : int32;\n" name
8824         | name, FChar -> pr "  %s : char;\n" name
8825         | name, FOptPercent -> pr "  %s : float option;\n" name
8826       ) cols;
8827       pr "}\n";
8828       pr "\n"
8829   ) structs
8830
8831 and generate_ocaml_prototype ?(is_external = false) name style =
8832   if is_external then pr "external " else pr "val ";
8833   pr "%s : t -> " name;
8834   List.iter (
8835     function
8836     | Pathname _ | Device _ | Dev_or_Path _ | String _ | FileIn _ | FileOut _
8837     | BufferIn _ | Key _ -> pr "string -> "
8838     | OptString _ -> pr "string option -> "
8839     | StringList _ | DeviceList _ -> pr "string array -> "
8840     | Bool _ -> pr "bool -> "
8841     | Int _ -> pr "int -> "
8842     | Int64 _ -> pr "int64 -> "
8843   ) (snd style);
8844   (match fst style with
8845    | RErr -> pr "unit" (* all errors are turned into exceptions *)
8846    | RInt _ -> pr "int"
8847    | RInt64 _ -> pr "int64"
8848    | RBool _ -> pr "bool"
8849    | RConstString _ -> pr "string"
8850    | RConstOptString _ -> pr "string option"
8851    | RString _ | RBufferOut _ -> pr "string"
8852    | RStringList _ -> pr "string array"
8853    | RStruct (_, typ) -> pr "%s" typ
8854    | RStructList (_, typ) -> pr "%s array" typ
8855    | RHashtable _ -> pr "(string * string) list"
8856   );
8857   if is_external then (
8858     pr " = ";
8859     if List.length (snd style) + 1 > 5 then
8860       pr "\"ocaml_guestfs_%s_byte\" " name;
8861     pr "\"ocaml_guestfs_%s\"" name
8862   );
8863   pr "\n"
8864
8865 (* Generate Perl xs code, a sort of crazy variation of C with macros. *)
8866 and generate_perl_xs () =
8867   generate_header CStyle LGPLv2plus;
8868
8869   pr "\
8870 #include \"EXTERN.h\"
8871 #include \"perl.h\"
8872 #include \"XSUB.h\"
8873
8874 #include <guestfs.h>
8875
8876 #ifndef PRId64
8877 #define PRId64 \"lld\"
8878 #endif
8879
8880 static SV *
8881 my_newSVll(long long val) {
8882 #ifdef USE_64_BIT_ALL
8883   return newSViv(val);
8884 #else
8885   char buf[100];
8886   int len;
8887   len = snprintf(buf, 100, \"%%\" PRId64, val);
8888   return newSVpv(buf, len);
8889 #endif
8890 }
8891
8892 #ifndef PRIu64
8893 #define PRIu64 \"llu\"
8894 #endif
8895
8896 static SV *
8897 my_newSVull(unsigned long long val) {
8898 #ifdef USE_64_BIT_ALL
8899   return newSVuv(val);
8900 #else
8901   char buf[100];
8902   int len;
8903   len = snprintf(buf, 100, \"%%\" PRIu64, val);
8904   return newSVpv(buf, len);
8905 #endif
8906 }
8907
8908 /* http://www.perlmonks.org/?node_id=680842 */
8909 static char **
8910 XS_unpack_charPtrPtr (SV *arg) {
8911   char **ret;
8912   AV *av;
8913   I32 i;
8914
8915   if (!arg || !SvOK (arg) || !SvROK (arg) || SvTYPE (SvRV (arg)) != SVt_PVAV)
8916     croak (\"array reference expected\");
8917
8918   av = (AV *)SvRV (arg);
8919   ret = malloc ((av_len (av) + 1 + 1) * sizeof (char *));
8920   if (!ret)
8921     croak (\"malloc failed\");
8922
8923   for (i = 0; i <= av_len (av); i++) {
8924     SV **elem = av_fetch (av, i, 0);
8925
8926     if (!elem || !*elem)
8927       croak (\"missing element in list\");
8928
8929     ret[i] = SvPV_nolen (*elem);
8930   }
8931
8932   ret[i] = NULL;
8933
8934   return ret;
8935 }
8936
8937 MODULE = Sys::Guestfs  PACKAGE = Sys::Guestfs
8938
8939 PROTOTYPES: ENABLE
8940
8941 guestfs_h *
8942 _create ()
8943    CODE:
8944       RETVAL = guestfs_create ();
8945       if (!RETVAL)
8946         croak (\"could not create guestfs handle\");
8947       guestfs_set_error_handler (RETVAL, NULL, NULL);
8948  OUTPUT:
8949       RETVAL
8950
8951 void
8952 DESTROY (sv)
8953       SV *sv;
8954  PPCODE:
8955       /* For the 'g' argument above we do the conversion explicitly and
8956        * don't rely on the typemap, because if the handle has been
8957        * explicitly closed we don't want the typemap conversion to
8958        * display an error.
8959        */
8960       HV *hv = (HV *) SvRV (sv);
8961       SV **svp = hv_fetch (hv, \"_g\", 2, 0);
8962       if (svp != NULL) {
8963         guestfs_h *g = (guestfs_h *) SvIV (*svp);
8964         assert (g != NULL);
8965         guestfs_close (g);
8966       }
8967
8968 void
8969 close (g)
8970       guestfs_h *g;
8971  PPCODE:
8972       guestfs_close (g);
8973       /* Avoid double-free in DESTROY method. */
8974       HV *hv = (HV *) SvRV (ST(0));
8975       (void) hv_delete (hv, \"_g\", 2, G_DISCARD);
8976
8977 ";
8978
8979   List.iter (
8980     fun (name, style, _, _, _, _, _) ->
8981       (match fst style with
8982        | RErr -> pr "void\n"
8983        | RInt _ -> pr "SV *\n"
8984        | RInt64 _ -> pr "SV *\n"
8985        | RBool _ -> pr "SV *\n"
8986        | RConstString _ -> pr "SV *\n"
8987        | RConstOptString _ -> pr "SV *\n"
8988        | RString _ -> pr "SV *\n"
8989        | RBufferOut _ -> pr "SV *\n"
8990        | RStringList _
8991        | RStruct _ | RStructList _
8992        | RHashtable _ ->
8993            pr "void\n" (* all lists returned implictly on the stack *)
8994       );
8995       (* Call and arguments. *)
8996       pr "%s (g" name;
8997       List.iter (
8998         fun arg -> pr ", %s" (name_of_argt arg)
8999       ) (snd style);
9000       pr ")\n";
9001       pr "      guestfs_h *g;\n";
9002       iteri (
9003         fun i ->
9004           function
9005           | Pathname n | Device n | Dev_or_Path n | String n
9006           | FileIn n | FileOut n | Key n ->
9007               pr "      char *%s;\n" n
9008           | BufferIn n ->
9009               pr "      char *%s;\n" n;
9010               pr "      size_t %s_size = SvCUR (ST(%d));\n" n (i+1)
9011           | OptString n ->
9012               (* http://www.perlmonks.org/?node_id=554277
9013                * Note that the implicit handle argument means we have
9014                * to add 1 to the ST(x) operator.
9015                *)
9016               pr "      char *%s = SvOK(ST(%d)) ? SvPV_nolen(ST(%d)) : NULL;\n" n (i+1) (i+1)
9017           | StringList n | DeviceList n -> pr "      char **%s;\n" n
9018           | Bool n -> pr "      int %s;\n" n
9019           | Int n -> pr "      int %s;\n" n
9020           | Int64 n -> pr "      int64_t %s;\n" n
9021       ) (snd style);
9022
9023       let do_cleanups () =
9024         List.iter (
9025           function
9026           | Pathname _ | Device _ | Dev_or_Path _ | String _ | OptString _
9027           | Bool _ | Int _ | Int64 _
9028           | FileIn _ | FileOut _
9029           | BufferIn _ | Key _ -> ()
9030           | StringList n | DeviceList n -> pr "      free (%s);\n" n
9031         ) (snd style)
9032       in
9033
9034       (* Code. *)
9035       (match fst style with
9036        | RErr ->
9037            pr "PREINIT:\n";
9038            pr "      int r;\n";
9039            pr " PPCODE:\n";
9040            pr "      r = guestfs_%s " name;
9041            generate_c_call_args ~handle:"g" style;
9042            pr ";\n";
9043            do_cleanups ();
9044            pr "      if (r == -1)\n";
9045            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9046        | RInt n
9047        | RBool n ->
9048            pr "PREINIT:\n";
9049            pr "      int %s;\n" n;
9050            pr "   CODE:\n";
9051            pr "      %s = guestfs_%s " n name;
9052            generate_c_call_args ~handle:"g" style;
9053            pr ";\n";
9054            do_cleanups ();
9055            pr "      if (%s == -1)\n" n;
9056            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9057            pr "      RETVAL = newSViv (%s);\n" n;
9058            pr " OUTPUT:\n";
9059            pr "      RETVAL\n"
9060        | RInt64 n ->
9061            pr "PREINIT:\n";
9062            pr "      int64_t %s;\n" n;
9063            pr "   CODE:\n";
9064            pr "      %s = guestfs_%s " n name;
9065            generate_c_call_args ~handle:"g" style;
9066            pr ";\n";
9067            do_cleanups ();
9068            pr "      if (%s == -1)\n" n;
9069            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9070            pr "      RETVAL = my_newSVll (%s);\n" n;
9071            pr " OUTPUT:\n";
9072            pr "      RETVAL\n"
9073        | RConstString n ->
9074            pr "PREINIT:\n";
9075            pr "      const char *%s;\n" n;
9076            pr "   CODE:\n";
9077            pr "      %s = guestfs_%s " n name;
9078            generate_c_call_args ~handle:"g" style;
9079            pr ";\n";
9080            do_cleanups ();
9081            pr "      if (%s == NULL)\n" n;
9082            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9083            pr "      RETVAL = newSVpv (%s, 0);\n" n;
9084            pr " OUTPUT:\n";
9085            pr "      RETVAL\n"
9086        | RConstOptString n ->
9087            pr "PREINIT:\n";
9088            pr "      const char *%s;\n" n;
9089            pr "   CODE:\n";
9090            pr "      %s = guestfs_%s " n name;
9091            generate_c_call_args ~handle:"g" style;
9092            pr ";\n";
9093            do_cleanups ();
9094            pr "      if (%s == NULL)\n" n;
9095            pr "        RETVAL = &PL_sv_undef;\n";
9096            pr "      else\n";
9097            pr "        RETVAL = newSVpv (%s, 0);\n" n;
9098            pr " OUTPUT:\n";
9099            pr "      RETVAL\n"
9100        | RString n ->
9101            pr "PREINIT:\n";
9102            pr "      char *%s;\n" n;
9103            pr "   CODE:\n";
9104            pr "      %s = guestfs_%s " n name;
9105            generate_c_call_args ~handle:"g" style;
9106            pr ";\n";
9107            do_cleanups ();
9108            pr "      if (%s == NULL)\n" n;
9109            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9110            pr "      RETVAL = newSVpv (%s, 0);\n" n;
9111            pr "      free (%s);\n" n;
9112            pr " OUTPUT:\n";
9113            pr "      RETVAL\n"
9114        | RStringList n | RHashtable n ->
9115            pr "PREINIT:\n";
9116            pr "      char **%s;\n" n;
9117            pr "      size_t i, n;\n";
9118            pr " PPCODE:\n";
9119            pr "      %s = guestfs_%s " n name;
9120            generate_c_call_args ~handle:"g" style;
9121            pr ";\n";
9122            do_cleanups ();
9123            pr "      if (%s == NULL)\n" n;
9124            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9125            pr "      for (n = 0; %s[n] != NULL; ++n) /**/;\n" n;
9126            pr "      EXTEND (SP, n);\n";
9127            pr "      for (i = 0; i < n; ++i) {\n";
9128            pr "        PUSHs (sv_2mortal (newSVpv (%s[i], 0)));\n" n;
9129            pr "        free (%s[i]);\n" n;
9130            pr "      }\n";
9131            pr "      free (%s);\n" n;
9132        | RStruct (n, typ) ->
9133            let cols = cols_of_struct typ in
9134            generate_perl_struct_code typ cols name style n do_cleanups
9135        | RStructList (n, typ) ->
9136            let cols = cols_of_struct typ in
9137            generate_perl_struct_list_code typ cols name style n do_cleanups
9138        | RBufferOut n ->
9139            pr "PREINIT:\n";
9140            pr "      char *%s;\n" n;
9141            pr "      size_t size;\n";
9142            pr "   CODE:\n";
9143            pr "      %s = guestfs_%s " n name;
9144            generate_c_call_args ~handle:"g" style;
9145            pr ";\n";
9146            do_cleanups ();
9147            pr "      if (%s == NULL)\n" n;
9148            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9149            pr "      RETVAL = newSVpvn (%s, size);\n" n;
9150            pr "      free (%s);\n" n;
9151            pr " OUTPUT:\n";
9152            pr "      RETVAL\n"
9153       );
9154
9155       pr "\n"
9156   ) all_functions
9157
9158 and generate_perl_struct_list_code typ cols name style n do_cleanups =
9159   pr "PREINIT:\n";
9160   pr "      struct guestfs_%s_list *%s;\n" typ n;
9161   pr "      size_t i;\n";
9162   pr "      HV *hv;\n";
9163   pr " PPCODE:\n";
9164   pr "      %s = guestfs_%s " n name;
9165   generate_c_call_args ~handle:"g" style;
9166   pr ";\n";
9167   do_cleanups ();
9168   pr "      if (%s == NULL)\n" n;
9169   pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9170   pr "      EXTEND (SP, %s->len);\n" n;
9171   pr "      for (i = 0; i < %s->len; ++i) {\n" n;
9172   pr "        hv = newHV ();\n";
9173   List.iter (
9174     function
9175     | name, FString ->
9176         pr "        (void) hv_store (hv, \"%s\", %d, newSVpv (%s->val[i].%s, 0), 0);\n"
9177           name (String.length name) n name
9178     | name, FUUID ->
9179         pr "        (void) hv_store (hv, \"%s\", %d, newSVpv (%s->val[i].%s, 32), 0);\n"
9180           name (String.length name) n name
9181     | name, FBuffer ->
9182         pr "        (void) hv_store (hv, \"%s\", %d, newSVpvn (%s->val[i].%s, %s->val[i].%s_len), 0);\n"
9183           name (String.length name) n name n name
9184     | name, (FBytes|FUInt64) ->
9185         pr "        (void) hv_store (hv, \"%s\", %d, my_newSVull (%s->val[i].%s), 0);\n"
9186           name (String.length name) n name
9187     | name, FInt64 ->
9188         pr "        (void) hv_store (hv, \"%s\", %d, my_newSVll (%s->val[i].%s), 0);\n"
9189           name (String.length name) n name
9190     | name, (FInt32|FUInt32) ->
9191         pr "        (void) hv_store (hv, \"%s\", %d, newSVnv (%s->val[i].%s), 0);\n"
9192           name (String.length name) n name
9193     | name, FChar ->
9194         pr "        (void) hv_store (hv, \"%s\", %d, newSVpv (&%s->val[i].%s, 1), 0);\n"
9195           name (String.length name) n name
9196     | name, FOptPercent ->
9197         pr "        (void) hv_store (hv, \"%s\", %d, newSVnv (%s->val[i].%s), 0);\n"
9198           name (String.length name) n name
9199   ) cols;
9200   pr "        PUSHs (sv_2mortal (newRV ((SV *) hv)));\n";
9201   pr "      }\n";
9202   pr "      guestfs_free_%s_list (%s);\n" typ n
9203
9204 and generate_perl_struct_code typ cols name style n do_cleanups =
9205   pr "PREINIT:\n";
9206   pr "      struct guestfs_%s *%s;\n" typ n;
9207   pr " PPCODE:\n";
9208   pr "      %s = guestfs_%s " n name;
9209   generate_c_call_args ~handle:"g" style;
9210   pr ";\n";
9211   do_cleanups ();
9212   pr "      if (%s == NULL)\n" n;
9213   pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9214   pr "      EXTEND (SP, 2 * %d);\n" (List.length cols);
9215   List.iter (
9216     fun ((name, _) as col) ->
9217       pr "      PUSHs (sv_2mortal (newSVpv (\"%s\", 0)));\n" name;
9218
9219       match col with
9220       | name, FString ->
9221           pr "      PUSHs (sv_2mortal (newSVpv (%s->%s, 0)));\n"
9222             n name
9223       | name, FBuffer ->
9224           pr "      PUSHs (sv_2mortal (newSVpvn (%s->%s, %s->%s_len)));\n"
9225             n name n name
9226       | name, FUUID ->
9227           pr "      PUSHs (sv_2mortal (newSVpv (%s->%s, 32)));\n"
9228             n name
9229       | name, (FBytes|FUInt64) ->
9230           pr "      PUSHs (sv_2mortal (my_newSVull (%s->%s)));\n"
9231             n name
9232       | name, FInt64 ->
9233           pr "      PUSHs (sv_2mortal (my_newSVll (%s->%s)));\n"
9234             n name
9235       | name, (FInt32|FUInt32) ->
9236           pr "      PUSHs (sv_2mortal (newSVnv (%s->%s)));\n"
9237             n name
9238       | name, FChar ->
9239           pr "      PUSHs (sv_2mortal (newSVpv (&%s->%s, 1)));\n"
9240             n name
9241       | name, FOptPercent ->
9242           pr "      PUSHs (sv_2mortal (newSVnv (%s->%s)));\n"
9243             n name
9244   ) cols;
9245   pr "      free (%s);\n" n
9246
9247 (* Generate Sys/Guestfs.pm. *)
9248 and generate_perl_pm () =
9249   generate_header HashStyle LGPLv2plus;
9250
9251   pr "\
9252 =pod
9253
9254 =head1 NAME
9255
9256 Sys::Guestfs - Perl bindings for libguestfs
9257
9258 =head1 SYNOPSIS
9259
9260  use Sys::Guestfs;
9261
9262  my $h = Sys::Guestfs->new ();
9263  $h->add_drive ('guest.img');
9264  $h->launch ();
9265  $h->mount ('/dev/sda1', '/');
9266  $h->touch ('/hello');
9267  $h->sync ();
9268
9269 =head1 DESCRIPTION
9270
9271 The C<Sys::Guestfs> module provides a Perl XS binding to the
9272 libguestfs API for examining and modifying virtual machine
9273 disk images.
9274
9275 Amongst the things this is good for: making batch configuration
9276 changes to guests, getting disk used/free statistics (see also:
9277 virt-df), migrating between virtualization systems (see also:
9278 virt-p2v), performing partial backups, performing partial guest
9279 clones, cloning guests and changing registry/UUID/hostname info, and
9280 much else besides.
9281
9282 Libguestfs uses Linux kernel and qemu code, and can access any type of
9283 guest filesystem that Linux and qemu can, including but not limited
9284 to: ext2/3/4, btrfs, FAT and NTFS, LVM, many different disk partition
9285 schemes, qcow, qcow2, vmdk.
9286
9287 Libguestfs provides ways to enumerate guest storage (eg. partitions,
9288 LVs, what filesystem is in each LV, etc.).  It can also run commands
9289 in the context of the guest.  Also you can access filesystems over
9290 FUSE.
9291
9292 See also L<Sys::Guestfs::Lib(3)> for a set of useful library
9293 functions for using libguestfs from Perl, including integration
9294 with libvirt.
9295
9296 =head1 ERRORS
9297
9298 All errors turn into calls to C<croak> (see L<Carp(3)>).
9299
9300 =head1 METHODS
9301
9302 =over 4
9303
9304 =cut
9305
9306 package Sys::Guestfs;
9307
9308 use strict;
9309 use warnings;
9310
9311 # This version number changes whenever a new function
9312 # is added to the libguestfs API.  It is not directly
9313 # related to the libguestfs version number.
9314 use vars qw($VERSION);
9315 $VERSION = '0.%d';
9316
9317 require XSLoader;
9318 XSLoader::load ('Sys::Guestfs');
9319
9320 =item $h = Sys::Guestfs->new ();
9321
9322 Create a new guestfs handle.
9323
9324 =cut
9325
9326 sub new {
9327   my $proto = shift;
9328   my $class = ref ($proto) || $proto;
9329
9330   my $g = Sys::Guestfs::_create ();
9331   my $self = { _g => $g };
9332   bless $self, $class;
9333   return $self;
9334 }
9335
9336 =item $h->close ();
9337
9338 Explicitly close the guestfs handle.
9339
9340 B<Note:> You should not usually call this function.  The handle will
9341 be closed implicitly when its reference count goes to zero (eg.
9342 when it goes out of scope or the program ends).  This call is
9343 only required in some exceptional cases, such as where the program
9344 may contain cached references to the handle 'somewhere' and you
9345 really have to have the close happen right away.  After calling
9346 C<close> the program must not call any method (including C<close>)
9347 on the handle (but the implicit call to C<DESTROY> that happens
9348 when the final reference is cleaned up is OK).
9349
9350 =cut
9351
9352 " max_proc_nr;
9353
9354   (* Actions.  We only need to print documentation for these as
9355    * they are pulled in from the XS code automatically.
9356    *)
9357   List.iter (
9358     fun (name, style, _, flags, _, _, longdesc) ->
9359       if not (List.mem NotInDocs flags) then (
9360         let longdesc = replace_str longdesc "C<guestfs_" "C<$h-E<gt>" in
9361         pr "=item ";
9362         generate_perl_prototype name style;
9363         pr "\n\n";
9364         pr "%s\n\n" longdesc;
9365         if List.mem ProtocolLimitWarning flags then
9366           pr "%s\n\n" protocol_limit_warning;
9367         if List.mem DangerWillRobinson flags then
9368           pr "%s\n\n" danger_will_robinson;
9369         match deprecation_notice flags with
9370         | None -> ()
9371         | Some txt -> pr "%s\n\n" txt
9372       )
9373   ) all_functions_sorted;
9374
9375   (* End of file. *)
9376   pr "\
9377 =cut
9378
9379 1;
9380
9381 =back
9382
9383 =head1 COPYRIGHT
9384
9385 Copyright (C) %s Red Hat Inc.
9386
9387 =head1 LICENSE
9388
9389 Please see the file COPYING.LIB for the full license.
9390
9391 =head1 SEE ALSO
9392
9393 L<guestfs(3)>,
9394 L<guestfish(1)>,
9395 L<http://libguestfs.org>,
9396 L<Sys::Guestfs::Lib(3)>.
9397
9398 =cut
9399 " copyright_years
9400
9401 and generate_perl_prototype name style =
9402   (match fst style with
9403    | RErr -> ()
9404    | RBool n
9405    | RInt n
9406    | RInt64 n
9407    | RConstString n
9408    | RConstOptString n
9409    | RString n
9410    | RBufferOut n -> pr "$%s = " n
9411    | RStruct (n,_)
9412    | RHashtable n -> pr "%%%s = " n
9413    | RStringList n
9414    | RStructList (n,_) -> pr "@%s = " n
9415   );
9416   pr "$h->%s (" name;
9417   let comma = ref false in
9418   List.iter (
9419     fun arg ->
9420       if !comma then pr ", ";
9421       comma := true;
9422       match arg with
9423       | Pathname n | Device n | Dev_or_Path n | String n
9424       | OptString n | Bool n | Int n | Int64 n | FileIn n | FileOut n
9425       | BufferIn n | Key n ->
9426           pr "$%s" n
9427       | StringList n | DeviceList n ->
9428           pr "\\@%s" n
9429   ) (snd style);
9430   pr ");"
9431
9432 (* Generate Python C module. *)
9433 and generate_python_c () =
9434   generate_header CStyle LGPLv2plus;
9435
9436   pr "\
9437 #define PY_SSIZE_T_CLEAN 1
9438 #include <Python.h>
9439
9440 #if PY_VERSION_HEX < 0x02050000
9441 typedef int Py_ssize_t;
9442 #define PY_SSIZE_T_MAX INT_MAX
9443 #define PY_SSIZE_T_MIN INT_MIN
9444 #endif
9445
9446 #include <stdio.h>
9447 #include <stdlib.h>
9448 #include <assert.h>
9449
9450 #include \"guestfs.h\"
9451
9452 typedef struct {
9453   PyObject_HEAD
9454   guestfs_h *g;
9455 } Pyguestfs_Object;
9456
9457 static guestfs_h *
9458 get_handle (PyObject *obj)
9459 {
9460   assert (obj);
9461   assert (obj != Py_None);
9462   return ((Pyguestfs_Object *) obj)->g;
9463 }
9464
9465 static PyObject *
9466 put_handle (guestfs_h *g)
9467 {
9468   assert (g);
9469   return
9470     PyCObject_FromVoidPtrAndDesc ((void *) g, (char *) \"guestfs_h\", NULL);
9471 }
9472
9473 /* This list should be freed (but not the strings) after use. */
9474 static char **
9475 get_string_list (PyObject *obj)
9476 {
9477   size_t i, len;
9478   char **r;
9479
9480   assert (obj);
9481
9482   if (!PyList_Check (obj)) {
9483     PyErr_SetString (PyExc_RuntimeError, \"expecting a list parameter\");
9484     return NULL;
9485   }
9486
9487   Py_ssize_t slen = PyList_Size (obj);
9488   if (slen == -1) {
9489     PyErr_SetString (PyExc_RuntimeError, \"get_string_list: PyList_Size failure\");
9490     return NULL;
9491   }
9492   len = (size_t) slen;
9493   r = malloc (sizeof (char *) * (len+1));
9494   if (r == NULL) {
9495     PyErr_SetString (PyExc_RuntimeError, \"get_string_list: out of memory\");
9496     return NULL;
9497   }
9498
9499   for (i = 0; i < len; ++i)
9500     r[i] = PyString_AsString (PyList_GetItem (obj, i));
9501   r[len] = NULL;
9502
9503   return r;
9504 }
9505
9506 static PyObject *
9507 put_string_list (char * const * const argv)
9508 {
9509   PyObject *list;
9510   int argc, i;
9511
9512   for (argc = 0; argv[argc] != NULL; ++argc)
9513     ;
9514
9515   list = PyList_New (argc);
9516   for (i = 0; i < argc; ++i)
9517     PyList_SetItem (list, i, PyString_FromString (argv[i]));
9518
9519   return list;
9520 }
9521
9522 static PyObject *
9523 put_table (char * const * const argv)
9524 {
9525   PyObject *list, *item;
9526   int argc, i;
9527
9528   for (argc = 0; argv[argc] != NULL; ++argc)
9529     ;
9530
9531   list = PyList_New (argc >> 1);
9532   for (i = 0; i < argc; i += 2) {
9533     item = PyTuple_New (2);
9534     PyTuple_SetItem (item, 0, PyString_FromString (argv[i]));
9535     PyTuple_SetItem (item, 1, PyString_FromString (argv[i+1]));
9536     PyList_SetItem (list, i >> 1, item);
9537   }
9538
9539   return list;
9540 }
9541
9542 static void
9543 free_strings (char **argv)
9544 {
9545   int argc;
9546
9547   for (argc = 0; argv[argc] != NULL; ++argc)
9548     free (argv[argc]);
9549   free (argv);
9550 }
9551
9552 static PyObject *
9553 py_guestfs_create (PyObject *self, PyObject *args)
9554 {
9555   guestfs_h *g;
9556
9557   g = guestfs_create ();
9558   if (g == NULL) {
9559     PyErr_SetString (PyExc_RuntimeError,
9560                      \"guestfs.create: failed to allocate handle\");
9561     return NULL;
9562   }
9563   guestfs_set_error_handler (g, NULL, NULL);
9564   return put_handle (g);
9565 }
9566
9567 static PyObject *
9568 py_guestfs_close (PyObject *self, PyObject *args)
9569 {
9570   PyObject *py_g;
9571   guestfs_h *g;
9572
9573   if (!PyArg_ParseTuple (args, (char *) \"O:guestfs_close\", &py_g))
9574     return NULL;
9575   g = get_handle (py_g);
9576
9577   guestfs_close (g);
9578
9579   Py_INCREF (Py_None);
9580   return Py_None;
9581 }
9582
9583 ";
9584
9585   let emit_put_list_function typ =
9586     pr "static PyObject *\n";
9587     pr "put_%s_list (struct guestfs_%s_list *%ss)\n" typ typ typ;
9588     pr "{\n";
9589     pr "  PyObject *list;\n";
9590     pr "  size_t i;\n";
9591     pr "\n";
9592     pr "  list = PyList_New (%ss->len);\n" typ;
9593     pr "  for (i = 0; i < %ss->len; ++i)\n" typ;
9594     pr "    PyList_SetItem (list, i, put_%s (&%ss->val[i]));\n" typ typ;
9595     pr "  return list;\n";
9596     pr "};\n";
9597     pr "\n"
9598   in
9599
9600   (* Structures, turned into Python dictionaries. *)
9601   List.iter (
9602     fun (typ, cols) ->
9603       pr "static PyObject *\n";
9604       pr "put_%s (struct guestfs_%s *%s)\n" typ typ typ;
9605       pr "{\n";
9606       pr "  PyObject *dict;\n";
9607       pr "\n";
9608       pr "  dict = PyDict_New ();\n";
9609       List.iter (
9610         function
9611         | name, FString ->
9612             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
9613             pr "                        PyString_FromString (%s->%s));\n"
9614               typ name
9615         | name, FBuffer ->
9616             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
9617             pr "                        PyString_FromStringAndSize (%s->%s, %s->%s_len));\n"
9618               typ name typ name
9619         | name, FUUID ->
9620             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
9621             pr "                        PyString_FromStringAndSize (%s->%s, 32));\n"
9622               typ name
9623         | name, (FBytes|FUInt64) ->
9624             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
9625             pr "                        PyLong_FromUnsignedLongLong (%s->%s));\n"
9626               typ name
9627         | name, FInt64 ->
9628             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
9629             pr "                        PyLong_FromLongLong (%s->%s));\n"
9630               typ name
9631         | name, FUInt32 ->
9632             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
9633             pr "                        PyLong_FromUnsignedLong (%s->%s));\n"
9634               typ name
9635         | name, FInt32 ->
9636             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
9637             pr "                        PyLong_FromLong (%s->%s));\n"
9638               typ name
9639         | name, FOptPercent ->
9640             pr "  if (%s->%s >= 0)\n" typ name;
9641             pr "    PyDict_SetItemString (dict, \"%s\",\n" name;
9642             pr "                          PyFloat_FromDouble ((double) %s->%s));\n"
9643               typ name;
9644             pr "  else {\n";
9645             pr "    Py_INCREF (Py_None);\n";
9646             pr "    PyDict_SetItemString (dict, \"%s\", Py_None);\n" name;
9647             pr "  }\n"
9648         | name, FChar ->
9649             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
9650             pr "                        PyString_FromStringAndSize (&dirent->%s, 1));\n" name
9651       ) cols;
9652       pr "  return dict;\n";
9653       pr "};\n";
9654       pr "\n";
9655
9656   ) structs;
9657
9658   (* Emit a put_TYPE_list function definition only if that function is used. *)
9659   List.iter (
9660     function
9661     | typ, (RStructListOnly | RStructAndList) ->
9662         (* generate the function for typ *)
9663         emit_put_list_function typ
9664     | typ, _ -> () (* empty *)
9665   ) (rstructs_used_by all_functions);
9666
9667   (* Python wrapper functions. *)
9668   List.iter (
9669     fun (name, style, _, _, _, _, _) ->
9670       pr "static PyObject *\n";
9671       pr "py_guestfs_%s (PyObject *self, PyObject *args)\n" name;
9672       pr "{\n";
9673
9674       pr "  PyObject *py_g;\n";
9675       pr "  guestfs_h *g;\n";
9676       pr "  PyObject *py_r;\n";
9677
9678       let error_code =
9679         match fst style with
9680         | RErr | RInt _ | RBool _ -> pr "  int r;\n"; "-1"
9681         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
9682         | RConstString _ | RConstOptString _ ->
9683             pr "  const char *r;\n"; "NULL"
9684         | RString _ -> pr "  char *r;\n"; "NULL"
9685         | RStringList _ | RHashtable _ -> pr "  char **r;\n"; "NULL"
9686         | RStruct (_, typ) -> pr "  struct guestfs_%s *r;\n" typ; "NULL"
9687         | RStructList (_, typ) ->
9688             pr "  struct guestfs_%s_list *r;\n" typ; "NULL"
9689         | RBufferOut _ ->
9690             pr "  char *r;\n";
9691             pr "  size_t size;\n";
9692             "NULL" in
9693
9694       List.iter (
9695         function
9696         | Pathname n | Device n | Dev_or_Path n | String n | Key n
9697         | FileIn n | FileOut n ->
9698             pr "  const char *%s;\n" n
9699         | OptString n -> pr "  const char *%s;\n" n
9700         | BufferIn n ->
9701             pr "  const char *%s;\n" n;
9702             pr "  Py_ssize_t %s_size;\n" n
9703         | StringList n | DeviceList n ->
9704             pr "  PyObject *py_%s;\n" n;
9705             pr "  char **%s;\n" n
9706         | Bool n -> pr "  int %s;\n" n
9707         | Int n -> pr "  int %s;\n" n
9708         | Int64 n -> pr "  long long %s;\n" n
9709       ) (snd style);
9710
9711       pr "\n";
9712
9713       (* Convert the parameters. *)
9714       pr "  if (!PyArg_ParseTuple (args, (char *) \"O";
9715       List.iter (
9716         function
9717         | Pathname _ | Device _ | Dev_or_Path _ | String _ | Key _
9718         | FileIn _ | FileOut _ -> pr "s"
9719         | OptString _ -> pr "z"
9720         | StringList _ | DeviceList _ -> pr "O"
9721         | Bool _ -> pr "i" (* XXX Python has booleans? *)
9722         | Int _ -> pr "i"
9723         | Int64 _ -> pr "L" (* XXX Whoever thought it was a good idea to
9724                              * emulate C's int/long/long long in Python?
9725                              *)
9726         | BufferIn _ -> pr "s#"
9727       ) (snd style);
9728       pr ":guestfs_%s\",\n" name;
9729       pr "                         &py_g";
9730       List.iter (
9731         function
9732         | Pathname n | Device n | Dev_or_Path n | String n | Key n
9733         | FileIn n | FileOut n -> pr ", &%s" n
9734         | OptString n -> pr ", &%s" n
9735         | StringList n | DeviceList n -> pr ", &py_%s" n
9736         | Bool n -> pr ", &%s" n
9737         | Int n -> pr ", &%s" n
9738         | Int64 n -> pr ", &%s" n
9739         | BufferIn n -> pr ", &%s, &%s_size" n n
9740       ) (snd style);
9741
9742       pr "))\n";
9743       pr "    return NULL;\n";
9744
9745       pr "  g = get_handle (py_g);\n";
9746       List.iter (
9747         function
9748         | Pathname _ | Device _ | Dev_or_Path _ | String _ | Key _
9749         | FileIn _ | FileOut _ | OptString _ | Bool _ | Int _ | Int64 _
9750         | BufferIn _ -> ()
9751         | StringList n | DeviceList n ->
9752             pr "  %s = get_string_list (py_%s);\n" n n;
9753             pr "  if (!%s) return NULL;\n" n
9754       ) (snd style);
9755
9756       pr "\n";
9757
9758       pr "  r = guestfs_%s " name;
9759       generate_c_call_args ~handle:"g" style;
9760       pr ";\n";
9761
9762       List.iter (
9763         function
9764         | Pathname _ | Device _ | Dev_or_Path _ | String _ | Key _
9765         | FileIn _ | FileOut _ | OptString _ | Bool _ | Int _ | Int64 _
9766         | BufferIn _ -> ()
9767         | StringList n | DeviceList n ->
9768             pr "  free (%s);\n" n
9769       ) (snd style);
9770
9771       pr "  if (r == %s) {\n" error_code;
9772       pr "    PyErr_SetString (PyExc_RuntimeError, guestfs_last_error (g));\n";
9773       pr "    return NULL;\n";
9774       pr "  }\n";
9775       pr "\n";
9776
9777       (match fst style with
9778        | RErr ->
9779            pr "  Py_INCREF (Py_None);\n";
9780            pr "  py_r = Py_None;\n"
9781        | RInt _
9782        | RBool _ -> pr "  py_r = PyInt_FromLong ((long) r);\n"
9783        | RInt64 _ -> pr "  py_r = PyLong_FromLongLong (r);\n"
9784        | RConstString _ -> pr "  py_r = PyString_FromString (r);\n"
9785        | RConstOptString _ ->
9786            pr "  if (r)\n";
9787            pr "    py_r = PyString_FromString (r);\n";
9788            pr "  else {\n";
9789            pr "    Py_INCREF (Py_None);\n";
9790            pr "    py_r = Py_None;\n";
9791            pr "  }\n"
9792        | RString _ ->
9793            pr "  py_r = PyString_FromString (r);\n";
9794            pr "  free (r);\n"
9795        | RStringList _ ->
9796            pr "  py_r = put_string_list (r);\n";
9797            pr "  free_strings (r);\n"
9798        | RStruct (_, typ) ->
9799            pr "  py_r = put_%s (r);\n" typ;
9800            pr "  guestfs_free_%s (r);\n" typ
9801        | RStructList (_, typ) ->
9802            pr "  py_r = put_%s_list (r);\n" typ;
9803            pr "  guestfs_free_%s_list (r);\n" typ
9804        | RHashtable n ->
9805            pr "  py_r = put_table (r);\n";
9806            pr "  free_strings (r);\n"
9807        | RBufferOut _ ->
9808            pr "  py_r = PyString_FromStringAndSize (r, size);\n";
9809            pr "  free (r);\n"
9810       );
9811
9812       pr "  return py_r;\n";
9813       pr "}\n";
9814       pr "\n"
9815   ) all_functions;
9816
9817   (* Table of functions. *)
9818   pr "static PyMethodDef methods[] = {\n";
9819   pr "  { (char *) \"create\", py_guestfs_create, METH_VARARGS, NULL },\n";
9820   pr "  { (char *) \"close\", py_guestfs_close, METH_VARARGS, NULL },\n";
9821   List.iter (
9822     fun (name, _, _, _, _, _, _) ->
9823       pr "  { (char *) \"%s\", py_guestfs_%s, METH_VARARGS, NULL },\n"
9824         name name
9825   ) all_functions;
9826   pr "  { NULL, NULL, 0, NULL }\n";
9827   pr "};\n";
9828   pr "\n";
9829
9830   (* Init function. *)
9831   pr "\
9832 void
9833 initlibguestfsmod (void)
9834 {
9835   static int initialized = 0;
9836
9837   if (initialized) return;
9838   Py_InitModule ((char *) \"libguestfsmod\", methods);
9839   initialized = 1;
9840 }
9841 "
9842
9843 (* Generate Python module. *)
9844 and generate_python_py () =
9845   generate_header HashStyle LGPLv2plus;
9846
9847   pr "\
9848 u\"\"\"Python bindings for libguestfs
9849
9850 import guestfs
9851 g = guestfs.GuestFS ()
9852 g.add_drive (\"guest.img\")
9853 g.launch ()
9854 parts = g.list_partitions ()
9855
9856 The guestfs module provides a Python binding to the libguestfs API
9857 for examining and modifying virtual machine disk images.
9858
9859 Amongst the things this is good for: making batch configuration
9860 changes to guests, getting disk used/free statistics (see also:
9861 virt-df), migrating between virtualization systems (see also:
9862 virt-p2v), performing partial backups, performing partial guest
9863 clones, cloning guests and changing registry/UUID/hostname info, and
9864 much else besides.
9865
9866 Libguestfs uses Linux kernel and qemu code, and can access any type of
9867 guest filesystem that Linux and qemu can, including but not limited
9868 to: ext2/3/4, btrfs, FAT and NTFS, LVM, many different disk partition
9869 schemes, qcow, qcow2, vmdk.
9870
9871 Libguestfs provides ways to enumerate guest storage (eg. partitions,
9872 LVs, what filesystem is in each LV, etc.).  It can also run commands
9873 in the context of the guest.  Also you can access filesystems over
9874 FUSE.
9875
9876 Errors which happen while using the API are turned into Python
9877 RuntimeError exceptions.
9878
9879 To create a guestfs handle you usually have to perform the following
9880 sequence of calls:
9881
9882 # Create the handle, call add_drive at least once, and possibly
9883 # several times if the guest has multiple block devices:
9884 g = guestfs.GuestFS ()
9885 g.add_drive (\"guest.img\")
9886
9887 # Launch the qemu subprocess and wait for it to become ready:
9888 g.launch ()
9889
9890 # Now you can issue commands, for example:
9891 logvols = g.lvs ()
9892
9893 \"\"\"
9894
9895 import libguestfsmod
9896
9897 class GuestFS:
9898     \"\"\"Instances of this class are libguestfs API handles.\"\"\"
9899
9900     def __init__ (self):
9901         \"\"\"Create a new libguestfs handle.\"\"\"
9902         self._o = libguestfsmod.create ()
9903
9904     def __del__ (self):
9905         libguestfsmod.close (self._o)
9906
9907 ";
9908
9909   List.iter (
9910     fun (name, style, _, flags, _, _, longdesc) ->
9911       pr "    def %s " name;
9912       generate_py_call_args ~handle:"self" (snd style);
9913       pr ":\n";
9914
9915       if not (List.mem NotInDocs flags) then (
9916         let doc = replace_str longdesc "C<guestfs_" "C<g." in
9917         let doc =
9918           match fst style with
9919           | RErr | RInt _ | RInt64 _ | RBool _
9920           | RConstOptString _ | RConstString _
9921           | RString _ | RBufferOut _ -> doc
9922           | RStringList _ ->
9923               doc ^ "\n\nThis function returns a list of strings."
9924           | RStruct (_, typ) ->
9925               doc ^ sprintf "\n\nThis function returns a dictionary, with keys matching the various fields in the guestfs_%s structure." typ
9926           | RStructList (_, typ) ->
9927               doc ^ sprintf "\n\nThis function returns a list of %ss.  Each %s is represented as a dictionary." typ typ
9928           | RHashtable _ ->
9929               doc ^ "\n\nThis function returns a dictionary." in
9930         let doc =
9931           if List.mem ProtocolLimitWarning flags then
9932             doc ^ "\n\n" ^ protocol_limit_warning
9933           else doc in
9934         let doc =
9935           if List.mem DangerWillRobinson flags then
9936             doc ^ "\n\n" ^ danger_will_robinson
9937           else doc in
9938         let doc =
9939           match deprecation_notice flags with
9940           | None -> doc
9941           | Some txt -> doc ^ "\n\n" ^ txt in
9942         let doc = pod2text ~width:60 name doc in
9943         let doc = List.map (fun line -> replace_str line "\\" "\\\\") doc in
9944         let doc = String.concat "\n        " doc in
9945         pr "        u\"\"\"%s\"\"\"\n" doc;
9946       );
9947       pr "        return libguestfsmod.%s " name;
9948       generate_py_call_args ~handle:"self._o" (snd style);
9949       pr "\n";
9950       pr "\n";
9951   ) all_functions
9952
9953 (* Generate Python call arguments, eg "(handle, foo, bar)" *)
9954 and generate_py_call_args ~handle args =
9955   pr "(%s" handle;
9956   List.iter (fun arg -> pr ", %s" (name_of_argt arg)) args;
9957   pr ")"
9958
9959 (* Useful if you need the longdesc POD text as plain text.  Returns a
9960  * list of lines.
9961  *
9962  * Because this is very slow (the slowest part of autogeneration),
9963  * we memoize the results.
9964  *)
9965 and pod2text ~width name longdesc =
9966   let key = width, name, longdesc in
9967   try Hashtbl.find pod2text_memo key
9968   with Not_found ->
9969     let filename, chan = Filename.open_temp_file "gen" ".tmp" in
9970     fprintf chan "=head1 %s\n\n%s\n" name longdesc;
9971     close_out chan;
9972     let cmd = sprintf "pod2text -w %d %s" width (Filename.quote filename) in
9973     let chan = open_process_in cmd in
9974     let lines = ref [] in
9975     let rec loop i =
9976       let line = input_line chan in
9977       if i = 1 then             (* discard the first line of output *)
9978         loop (i+1)
9979       else (
9980         let line = triml line in
9981         lines := line :: !lines;
9982         loop (i+1)
9983       ) in
9984     let lines = try loop 1 with End_of_file -> List.rev !lines in
9985     unlink filename;
9986     (match close_process_in chan with
9987      | WEXITED 0 -> ()
9988      | WEXITED i ->
9989          failwithf "pod2text: process exited with non-zero status (%d)" i
9990      | WSIGNALED i | WSTOPPED i ->
9991          failwithf "pod2text: process signalled or stopped by signal %d" i
9992     );
9993     Hashtbl.add pod2text_memo key lines;
9994     pod2text_memo_updated ();
9995     lines
9996
9997 (* Generate ruby bindings. *)
9998 and generate_ruby_c () =
9999   generate_header CStyle LGPLv2plus;
10000
10001   pr "\
10002 #include <stdio.h>
10003 #include <stdlib.h>
10004
10005 #include <ruby.h>
10006
10007 #include \"guestfs.h\"
10008
10009 #include \"extconf.h\"
10010
10011 /* For Ruby < 1.9 */
10012 #ifndef RARRAY_LEN
10013 #define RARRAY_LEN(r) (RARRAY((r))->len)
10014 #endif
10015
10016 static VALUE m_guestfs;                 /* guestfs module */
10017 static VALUE c_guestfs;                 /* guestfs_h handle */
10018 static VALUE e_Error;                   /* used for all errors */
10019
10020 static void ruby_guestfs_free (void *p)
10021 {
10022   if (!p) return;
10023   guestfs_close ((guestfs_h *) p);
10024 }
10025
10026 static VALUE ruby_guestfs_create (VALUE m)
10027 {
10028   guestfs_h *g;
10029
10030   g = guestfs_create ();
10031   if (!g)
10032     rb_raise (e_Error, \"failed to create guestfs handle\");
10033
10034   /* Don't print error messages to stderr by default. */
10035   guestfs_set_error_handler (g, NULL, NULL);
10036
10037   /* Wrap it, and make sure the close function is called when the
10038    * handle goes away.
10039    */
10040   return Data_Wrap_Struct (c_guestfs, NULL, ruby_guestfs_free, g);
10041 }
10042
10043 static VALUE ruby_guestfs_close (VALUE gv)
10044 {
10045   guestfs_h *g;
10046   Data_Get_Struct (gv, guestfs_h, g);
10047
10048   ruby_guestfs_free (g);
10049   DATA_PTR (gv) = NULL;
10050
10051   return Qnil;
10052 }
10053
10054 ";
10055
10056   List.iter (
10057     fun (name, style, _, _, _, _, _) ->
10058       pr "static VALUE ruby_guestfs_%s (VALUE gv" name;
10059       List.iter (fun arg -> pr ", VALUE %sv" (name_of_argt arg)) (snd style);
10060       pr ")\n";
10061       pr "{\n";
10062       pr "  guestfs_h *g;\n";
10063       pr "  Data_Get_Struct (gv, guestfs_h, g);\n";
10064       pr "  if (!g)\n";
10065       pr "    rb_raise (rb_eArgError, \"%%s: used handle after closing it\", \"%s\");\n"
10066         name;
10067       pr "\n";
10068
10069       List.iter (
10070         function
10071         | Pathname n | Device n | Dev_or_Path n | String n | Key n
10072         | FileIn n | FileOut n ->
10073             pr "  Check_Type (%sv, T_STRING);\n" n;
10074             pr "  const char *%s = StringValueCStr (%sv);\n" n n;
10075             pr "  if (!%s)\n" n;
10076             pr "    rb_raise (rb_eTypeError, \"expected string for parameter %%s of %%s\",\n";
10077             pr "              \"%s\", \"%s\");\n" n name
10078         | BufferIn n ->
10079             pr "  Check_Type (%sv, T_STRING);\n" n;
10080             pr "  const char *%s = RSTRING (%sv)->ptr;\n" n n;
10081             pr "  if (!%s)\n" n;
10082             pr "    rb_raise (rb_eTypeError, \"expected string for parameter %%s of %%s\",\n";
10083             pr "              \"%s\", \"%s\");\n" n name;
10084             pr "  size_t %s_size = RSTRING (%sv)->len;\n" n n
10085         | OptString n ->
10086             pr "  const char *%s = !NIL_P (%sv) ? StringValueCStr (%sv) : NULL;\n" n n n
10087         | StringList n | DeviceList n ->
10088             pr "  char **%s;\n" n;
10089             pr "  Check_Type (%sv, T_ARRAY);\n" n;
10090             pr "  {\n";
10091             pr "    size_t i, len;\n";
10092             pr "    len = RARRAY_LEN (%sv);\n" n;
10093             pr "    %s = guestfs_safe_malloc (g, sizeof (char *) * (len+1));\n"
10094               n;
10095             pr "    for (i = 0; i < len; ++i) {\n";
10096             pr "      VALUE v = rb_ary_entry (%sv, i);\n" n;
10097             pr "      %s[i] = StringValueCStr (v);\n" n;
10098             pr "    }\n";
10099             pr "    %s[len] = NULL;\n" n;
10100             pr "  }\n";
10101         | Bool n ->
10102             pr "  int %s = RTEST (%sv);\n" n n
10103         | Int n ->
10104             pr "  int %s = NUM2INT (%sv);\n" n n
10105         | Int64 n ->
10106             pr "  long long %s = NUM2LL (%sv);\n" n n
10107       ) (snd style);
10108       pr "\n";
10109
10110       let error_code =
10111         match fst style with
10112         | RErr | RInt _ | RBool _ -> pr "  int r;\n"; "-1"
10113         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
10114         | RConstString _ | RConstOptString _ ->
10115             pr "  const char *r;\n"; "NULL"
10116         | RString _ -> pr "  char *r;\n"; "NULL"
10117         | RStringList _ | RHashtable _ -> pr "  char **r;\n"; "NULL"
10118         | RStruct (_, typ) -> pr "  struct guestfs_%s *r;\n" typ; "NULL"
10119         | RStructList (_, typ) ->
10120             pr "  struct guestfs_%s_list *r;\n" typ; "NULL"
10121         | RBufferOut _ ->
10122             pr "  char *r;\n";
10123             pr "  size_t size;\n";
10124             "NULL" in
10125       pr "\n";
10126
10127       pr "  r = guestfs_%s " name;
10128       generate_c_call_args ~handle:"g" style;
10129       pr ";\n";
10130
10131       List.iter (
10132         function
10133         | Pathname _ | Device _ | Dev_or_Path _ | String _ | Key _
10134         | FileIn _ | FileOut _ | OptString _ | Bool _ | Int _ | Int64 _
10135         | BufferIn _ -> ()
10136         | StringList n | DeviceList n ->
10137             pr "  free (%s);\n" n
10138       ) (snd style);
10139
10140       pr "  if (r == %s)\n" error_code;
10141       pr "    rb_raise (e_Error, \"%%s\", guestfs_last_error (g));\n";
10142       pr "\n";
10143
10144       (match fst style with
10145        | RErr ->
10146            pr "  return Qnil;\n"
10147        | RInt _ | RBool _ ->
10148            pr "  return INT2NUM (r);\n"
10149        | RInt64 _ ->
10150            pr "  return ULL2NUM (r);\n"
10151        | RConstString _ ->
10152            pr "  return rb_str_new2 (r);\n";
10153        | RConstOptString _ ->
10154            pr "  if (r)\n";
10155            pr "    return rb_str_new2 (r);\n";
10156            pr "  else\n";
10157            pr "    return Qnil;\n";
10158        | RString _ ->
10159            pr "  VALUE rv = rb_str_new2 (r);\n";
10160            pr "  free (r);\n";
10161            pr "  return rv;\n";
10162        | RStringList _ ->
10163            pr "  size_t i, len = 0;\n";
10164            pr "  for (i = 0; r[i] != NULL; ++i) len++;\n";
10165            pr "  VALUE rv = rb_ary_new2 (len);\n";
10166            pr "  for (i = 0; r[i] != NULL; ++i) {\n";
10167            pr "    rb_ary_push (rv, rb_str_new2 (r[i]));\n";
10168            pr "    free (r[i]);\n";
10169            pr "  }\n";
10170            pr "  free (r);\n";
10171            pr "  return rv;\n"
10172        | RStruct (_, typ) ->
10173            let cols = cols_of_struct typ in
10174            generate_ruby_struct_code typ cols
10175        | RStructList (_, typ) ->
10176            let cols = cols_of_struct typ in
10177            generate_ruby_struct_list_code typ cols
10178        | RHashtable _ ->
10179            pr "  VALUE rv = rb_hash_new ();\n";
10180            pr "  size_t i;\n";
10181            pr "  for (i = 0; r[i] != NULL; i+=2) {\n";
10182            pr "    rb_hash_aset (rv, rb_str_new2 (r[i]), rb_str_new2 (r[i+1]));\n";
10183            pr "    free (r[i]);\n";
10184            pr "    free (r[i+1]);\n";
10185            pr "  }\n";
10186            pr "  free (r);\n";
10187            pr "  return rv;\n"
10188        | RBufferOut _ ->
10189            pr "  VALUE rv = rb_str_new (r, size);\n";
10190            pr "  free (r);\n";
10191            pr "  return rv;\n";
10192       );
10193
10194       pr "}\n";
10195       pr "\n"
10196   ) all_functions;
10197
10198   pr "\
10199 /* Initialize the module. */
10200 void Init__guestfs ()
10201 {
10202   m_guestfs = rb_define_module (\"Guestfs\");
10203   c_guestfs = rb_define_class_under (m_guestfs, \"Guestfs\", rb_cObject);
10204   e_Error = rb_define_class_under (m_guestfs, \"Error\", rb_eStandardError);
10205
10206   rb_define_module_function (m_guestfs, \"create\", ruby_guestfs_create, 0);
10207   rb_define_method (c_guestfs, \"close\", ruby_guestfs_close, 0);
10208
10209 ";
10210   (* Define the rest of the methods. *)
10211   List.iter (
10212     fun (name, style, _, _, _, _, _) ->
10213       pr "  rb_define_method (c_guestfs, \"%s\",\n" name;
10214       pr "        ruby_guestfs_%s, %d);\n" name (List.length (snd style))
10215   ) all_functions;
10216
10217   pr "}\n"
10218
10219 (* Ruby code to return a struct. *)
10220 and generate_ruby_struct_code typ cols =
10221   pr "  VALUE rv = rb_hash_new ();\n";
10222   List.iter (
10223     function
10224     | name, FString ->
10225         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_str_new2 (r->%s));\n" name name
10226     | name, FBuffer ->
10227         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_str_new (r->%s, r->%s_len));\n" name name name
10228     | name, FUUID ->
10229         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_str_new (r->%s, 32));\n" name name
10230     | name, (FBytes|FUInt64) ->
10231         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), ULL2NUM (r->%s));\n" name name
10232     | name, FInt64 ->
10233         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), LL2NUM (r->%s));\n" name name
10234     | name, FUInt32 ->
10235         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), UINT2NUM (r->%s));\n" name name
10236     | name, FInt32 ->
10237         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), INT2NUM (r->%s));\n" name name
10238     | name, FOptPercent ->
10239         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_dbl2big (r->%s));\n" name name
10240     | name, FChar -> (* XXX wrong? *)
10241         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), ULL2NUM (r->%s));\n" name name
10242   ) cols;
10243   pr "  guestfs_free_%s (r);\n" typ;
10244   pr "  return rv;\n"
10245
10246 (* Ruby code to return a struct list. *)
10247 and generate_ruby_struct_list_code typ cols =
10248   pr "  VALUE rv = rb_ary_new2 (r->len);\n";
10249   pr "  size_t i;\n";
10250   pr "  for (i = 0; i < r->len; ++i) {\n";
10251   pr "    VALUE hv = rb_hash_new ();\n";
10252   List.iter (
10253     function
10254     | name, FString ->
10255         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_str_new2 (r->val[i].%s));\n" name name
10256     | name, FBuffer ->
10257         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_str_new (r->val[i].%s, r->val[i].%s_len));\n" name name name
10258     | name, FUUID ->
10259         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_str_new (r->val[i].%s, 32));\n" name name
10260     | name, (FBytes|FUInt64) ->
10261         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), ULL2NUM (r->val[i].%s));\n" name name
10262     | name, FInt64 ->
10263         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), LL2NUM (r->val[i].%s));\n" name name
10264     | name, FUInt32 ->
10265         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), UINT2NUM (r->val[i].%s));\n" name name
10266     | name, FInt32 ->
10267         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), INT2NUM (r->val[i].%s));\n" name name
10268     | name, FOptPercent ->
10269         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_dbl2big (r->val[i].%s));\n" name name
10270     | name, FChar -> (* XXX wrong? *)
10271         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), ULL2NUM (r->val[i].%s));\n" name name
10272   ) cols;
10273   pr "    rb_ary_push (rv, hv);\n";
10274   pr "  }\n";
10275   pr "  guestfs_free_%s_list (r);\n" typ;
10276   pr "  return rv;\n"
10277
10278 (* Generate Java bindings GuestFS.java file. *)
10279 and generate_java_java () =
10280   generate_header CStyle LGPLv2plus;
10281
10282   pr "\
10283 package com.redhat.et.libguestfs;
10284
10285 import java.util.HashMap;
10286 import com.redhat.et.libguestfs.LibGuestFSException;
10287 import com.redhat.et.libguestfs.PV;
10288 import com.redhat.et.libguestfs.VG;
10289 import com.redhat.et.libguestfs.LV;
10290 import com.redhat.et.libguestfs.Stat;
10291 import com.redhat.et.libguestfs.StatVFS;
10292 import com.redhat.et.libguestfs.IntBool;
10293 import com.redhat.et.libguestfs.Dirent;
10294
10295 /**
10296  * The GuestFS object is a libguestfs handle.
10297  *
10298  * @author rjones
10299  */
10300 public class GuestFS {
10301   // Load the native code.
10302   static {
10303     System.loadLibrary (\"guestfs_jni\");
10304   }
10305
10306   /**
10307    * The native guestfs_h pointer.
10308    */
10309   long g;
10310
10311   /**
10312    * Create a libguestfs handle.
10313    *
10314    * @throws LibGuestFSException
10315    */
10316   public GuestFS () throws LibGuestFSException
10317   {
10318     g = _create ();
10319   }
10320   private native long _create () throws LibGuestFSException;
10321
10322   /**
10323    * Close a libguestfs handle.
10324    *
10325    * You can also leave handles to be collected by the garbage
10326    * collector, but this method ensures that the resources used
10327    * by the handle are freed up immediately.  If you call any
10328    * other methods after closing the handle, you will get an
10329    * exception.
10330    *
10331    * @throws LibGuestFSException
10332    */
10333   public void close () throws LibGuestFSException
10334   {
10335     if (g != 0)
10336       _close (g);
10337     g = 0;
10338   }
10339   private native void _close (long g) throws LibGuestFSException;
10340
10341   public void finalize () throws LibGuestFSException
10342   {
10343     close ();
10344   }
10345
10346 ";
10347
10348   List.iter (
10349     fun (name, style, _, flags, _, shortdesc, longdesc) ->
10350       if not (List.mem NotInDocs flags); then (
10351         let doc = replace_str longdesc "C<guestfs_" "C<g." in
10352         let doc =
10353           if List.mem ProtocolLimitWarning flags then
10354             doc ^ "\n\n" ^ protocol_limit_warning
10355           else doc in
10356         let doc =
10357           if List.mem DangerWillRobinson flags then
10358             doc ^ "\n\n" ^ danger_will_robinson
10359           else doc in
10360         let doc =
10361           match deprecation_notice flags with
10362           | None -> doc
10363           | Some txt -> doc ^ "\n\n" ^ txt in
10364         let doc = pod2text ~width:60 name doc in
10365         let doc = List.map (            (* RHBZ#501883 *)
10366           function
10367           | "" -> "<p>"
10368           | nonempty -> nonempty
10369         ) doc in
10370         let doc = String.concat "\n   * " doc in
10371
10372         pr "  /**\n";
10373         pr "   * %s\n" shortdesc;
10374         pr "   * <p>\n";
10375         pr "   * %s\n" doc;
10376         pr "   * @throws LibGuestFSException\n";
10377         pr "   */\n";
10378         pr "  ";
10379       );
10380       generate_java_prototype ~public:true ~semicolon:false name style;
10381       pr "\n";
10382       pr "  {\n";
10383       pr "    if (g == 0)\n";
10384       pr "      throw new LibGuestFSException (\"%s: handle is closed\");\n"
10385         name;
10386       pr "    ";
10387       if fst style <> RErr then pr "return ";
10388       pr "_%s " name;
10389       generate_java_call_args ~handle:"g" (snd style);
10390       pr ";\n";
10391       pr "  }\n";
10392       pr "  ";
10393       generate_java_prototype ~privat:true ~native:true name style;
10394       pr "\n";
10395       pr "\n";
10396   ) all_functions;
10397
10398   pr "}\n"
10399
10400 (* Generate Java call arguments, eg "(handle, foo, bar)" *)
10401 and generate_java_call_args ~handle args =
10402   pr "(%s" handle;
10403   List.iter (fun arg -> pr ", %s" (name_of_argt arg)) args;
10404   pr ")"
10405
10406 and generate_java_prototype ?(public=false) ?(privat=false) ?(native=false)
10407     ?(semicolon=true) name style =
10408   if privat then pr "private ";
10409   if public then pr "public ";
10410   if native then pr "native ";
10411
10412   (* return type *)
10413   (match fst style with
10414    | RErr -> pr "void ";
10415    | RInt _ -> pr "int ";
10416    | RInt64 _ -> pr "long ";
10417    | RBool _ -> pr "boolean ";
10418    | RConstString _ | RConstOptString _ | RString _
10419    | RBufferOut _ -> pr "String ";
10420    | RStringList _ -> pr "String[] ";
10421    | RStruct (_, typ) ->
10422        let name = java_name_of_struct typ in
10423        pr "%s " name;
10424    | RStructList (_, typ) ->
10425        let name = java_name_of_struct typ in
10426        pr "%s[] " name;
10427    | RHashtable _ -> pr "HashMap<String,String> ";
10428   );
10429
10430   if native then pr "_%s " name else pr "%s " name;
10431   pr "(";
10432   let needs_comma = ref false in
10433   if native then (
10434     pr "long g";
10435     needs_comma := true
10436   );
10437
10438   (* args *)
10439   List.iter (
10440     fun arg ->
10441       if !needs_comma then pr ", ";
10442       needs_comma := true;
10443
10444       match arg with
10445       | Pathname n
10446       | Device n | Dev_or_Path n
10447       | String n
10448       | OptString n
10449       | FileIn n
10450       | FileOut n
10451       | Key n ->
10452           pr "String %s" n
10453       | BufferIn n ->
10454           pr "byte[] %s" n
10455       | StringList n | DeviceList n ->
10456           pr "String[] %s" n
10457       | Bool n ->
10458           pr "boolean %s" n
10459       | Int n ->
10460           pr "int %s" n
10461       | Int64 n ->
10462           pr "long %s" n
10463   ) (snd style);
10464
10465   pr ")\n";
10466   pr "    throws LibGuestFSException";
10467   if semicolon then pr ";"
10468
10469 and generate_java_struct jtyp cols () =
10470   generate_header CStyle LGPLv2plus;
10471
10472   pr "\
10473 package com.redhat.et.libguestfs;
10474
10475 /**
10476  * Libguestfs %s structure.
10477  *
10478  * @author rjones
10479  * @see GuestFS
10480  */
10481 public class %s {
10482 " jtyp jtyp;
10483
10484   List.iter (
10485     function
10486     | name, FString
10487     | name, FUUID
10488     | name, FBuffer -> pr "  public String %s;\n" name
10489     | name, (FBytes|FUInt64|FInt64) -> pr "  public long %s;\n" name
10490     | name, (FUInt32|FInt32) -> pr "  public int %s;\n" name
10491     | name, FChar -> pr "  public char %s;\n" name
10492     | name, FOptPercent ->
10493         pr "  /* The next field is [0..100] or -1 meaning 'not present': */\n";
10494         pr "  public float %s;\n" name
10495   ) cols;
10496
10497   pr "}\n"
10498
10499 and generate_java_c () =
10500   generate_header CStyle LGPLv2plus;
10501
10502   pr "\
10503 #include <stdio.h>
10504 #include <stdlib.h>
10505 #include <string.h>
10506
10507 #include \"com_redhat_et_libguestfs_GuestFS.h\"
10508 #include \"guestfs.h\"
10509
10510 /* Note that this function returns.  The exception is not thrown
10511  * until after the wrapper function returns.
10512  */
10513 static void
10514 throw_exception (JNIEnv *env, const char *msg)
10515 {
10516   jclass cl;
10517   cl = (*env)->FindClass (env,
10518                           \"com/redhat/et/libguestfs/LibGuestFSException\");
10519   (*env)->ThrowNew (env, cl, msg);
10520 }
10521
10522 JNIEXPORT jlong JNICALL
10523 Java_com_redhat_et_libguestfs_GuestFS__1create
10524   (JNIEnv *env, jobject obj)
10525 {
10526   guestfs_h *g;
10527
10528   g = guestfs_create ();
10529   if (g == NULL) {
10530     throw_exception (env, \"GuestFS.create: failed to allocate handle\");
10531     return 0;
10532   }
10533   guestfs_set_error_handler (g, NULL, NULL);
10534   return (jlong) (long) g;
10535 }
10536
10537 JNIEXPORT void JNICALL
10538 Java_com_redhat_et_libguestfs_GuestFS__1close
10539   (JNIEnv *env, jobject obj, jlong jg)
10540 {
10541   guestfs_h *g = (guestfs_h *) (long) jg;
10542   guestfs_close (g);
10543 }
10544
10545 ";
10546
10547   List.iter (
10548     fun (name, style, _, _, _, _, _) ->
10549       pr "JNIEXPORT ";
10550       (match fst style with
10551        | RErr -> pr "void ";
10552        | RInt _ -> pr "jint ";
10553        | RInt64 _ -> pr "jlong ";
10554        | RBool _ -> pr "jboolean ";
10555        | RConstString _ | RConstOptString _ | RString _
10556        | RBufferOut _ -> pr "jstring ";
10557        | RStruct _ | RHashtable _ ->
10558            pr "jobject ";
10559        | RStringList _ | RStructList _ ->
10560            pr "jobjectArray ";
10561       );
10562       pr "JNICALL\n";
10563       pr "Java_com_redhat_et_libguestfs_GuestFS_";
10564       pr "%s" (replace_str ("_" ^ name) "_" "_1");
10565       pr "\n";
10566       pr "  (JNIEnv *env, jobject obj, jlong jg";
10567       List.iter (
10568         function
10569         | Pathname n
10570         | Device n | Dev_or_Path n
10571         | String n
10572         | OptString n
10573         | FileIn n
10574         | FileOut n
10575         | Key n ->
10576             pr ", jstring j%s" n
10577         | BufferIn n ->
10578             pr ", jbyteArray j%s" n
10579         | StringList n | DeviceList n ->
10580             pr ", jobjectArray j%s" n
10581         | Bool n ->
10582             pr ", jboolean j%s" n
10583         | Int n ->
10584             pr ", jint j%s" n
10585         | Int64 n ->
10586             pr ", jlong j%s" n
10587       ) (snd style);
10588       pr ")\n";
10589       pr "{\n";
10590       pr "  guestfs_h *g = (guestfs_h *) (long) jg;\n";
10591       let error_code, no_ret =
10592         match fst style with
10593         | RErr -> pr "  int r;\n"; "-1", ""
10594         | RBool _
10595         | RInt _ -> pr "  int r;\n"; "-1", "0"
10596         | RInt64 _ -> pr "  int64_t r;\n"; "-1", "0"
10597         | RConstString _ -> pr "  const char *r;\n"; "NULL", "NULL"
10598         | RConstOptString _ -> pr "  const char *r;\n"; "NULL", "NULL"
10599         | RString _ ->
10600             pr "  jstring jr;\n";
10601             pr "  char *r;\n"; "NULL", "NULL"
10602         | RStringList _ ->
10603             pr "  jobjectArray jr;\n";
10604             pr "  int r_len;\n";
10605             pr "  jclass cl;\n";
10606             pr "  jstring jstr;\n";
10607             pr "  char **r;\n"; "NULL", "NULL"
10608         | RStruct (_, typ) ->
10609             pr "  jobject jr;\n";
10610             pr "  jclass cl;\n";
10611             pr "  jfieldID fl;\n";
10612             pr "  struct guestfs_%s *r;\n" typ; "NULL", "NULL"
10613         | RStructList (_, typ) ->
10614             pr "  jobjectArray jr;\n";
10615             pr "  jclass cl;\n";
10616             pr "  jfieldID fl;\n";
10617             pr "  jobject jfl;\n";
10618             pr "  struct guestfs_%s_list *r;\n" typ; "NULL", "NULL"
10619         | RHashtable _ -> pr "  char **r;\n"; "NULL", "NULL"
10620         | RBufferOut _ ->
10621             pr "  jstring jr;\n";
10622             pr "  char *r;\n";
10623             pr "  size_t size;\n";
10624             "NULL", "NULL" in
10625       List.iter (
10626         function
10627         | Pathname n
10628         | Device n | Dev_or_Path n
10629         | String n
10630         | OptString n
10631         | FileIn n
10632         | FileOut n
10633         | Key n ->
10634             pr "  const char *%s;\n" n
10635         | BufferIn n ->
10636             pr "  jbyte *%s;\n" n;
10637             pr "  size_t %s_size;\n" n
10638         | StringList n | DeviceList n ->
10639             pr "  int %s_len;\n" n;
10640             pr "  const char **%s;\n" n
10641         | Bool n
10642         | Int n ->
10643             pr "  int %s;\n" n
10644         | Int64 n ->
10645             pr "  int64_t %s;\n" n
10646       ) (snd style);
10647
10648       let needs_i =
10649         (match fst style with
10650          | RStringList _ | RStructList _ -> true
10651          | RErr | RBool _ | RInt _ | RInt64 _ | RConstString _
10652          | RConstOptString _
10653          | RString _ | RBufferOut _ | RStruct _ | RHashtable _ -> false) ||
10654           List.exists (function
10655                        | StringList _ -> true
10656                        | DeviceList _ -> true
10657                        | _ -> false) (snd style) in
10658       if needs_i then
10659         pr "  size_t i;\n";
10660
10661       pr "\n";
10662
10663       (* Get the parameters. *)
10664       List.iter (
10665         function
10666         | Pathname n
10667         | Device n | Dev_or_Path n
10668         | String n
10669         | FileIn n
10670         | FileOut n
10671         | Key n ->
10672             pr "  %s = (*env)->GetStringUTFChars (env, j%s, NULL);\n" n n
10673         | OptString n ->
10674             (* This is completely undocumented, but Java null becomes
10675              * a NULL parameter.
10676              *)
10677             pr "  %s = j%s ? (*env)->GetStringUTFChars (env, j%s, NULL) : NULL;\n" n n n
10678         | BufferIn n ->
10679             pr "  %s = (*env)->GetByteArrayElements (env, j%s, NULL);\n" n n;
10680             pr "  %s_size = (*env)->GetArrayLength (env, j%s);\n" n n
10681         | StringList n | DeviceList n ->
10682             pr "  %s_len = (*env)->GetArrayLength (env, j%s);\n" n n;
10683             pr "  %s = guestfs_safe_malloc (g, sizeof (char *) * (%s_len+1));\n" n n;
10684             pr "  for (i = 0; i < %s_len; ++i) {\n" n;
10685             pr "    jobject o = (*env)->GetObjectArrayElement (env, j%s, i);\n"
10686               n;
10687             pr "    %s[i] = (*env)->GetStringUTFChars (env, o, NULL);\n" n;
10688             pr "  }\n";
10689             pr "  %s[%s_len] = NULL;\n" n n;
10690         | Bool n
10691         | Int n
10692         | Int64 n ->
10693             pr "  %s = j%s;\n" n n
10694       ) (snd style);
10695
10696       (* Make the call. *)
10697       pr "  r = guestfs_%s " name;
10698       generate_c_call_args ~handle:"g" style;
10699       pr ";\n";
10700
10701       (* Release the parameters. *)
10702       List.iter (
10703         function
10704         | Pathname n
10705         | Device n | Dev_or_Path n
10706         | String n
10707         | FileIn n
10708         | FileOut n
10709         | Key n ->
10710             pr "  (*env)->ReleaseStringUTFChars (env, j%s, %s);\n" n n
10711         | OptString n ->
10712             pr "  if (j%s)\n" n;
10713             pr "    (*env)->ReleaseStringUTFChars (env, j%s, %s);\n" n n
10714         | BufferIn n ->
10715             pr "  (*env)->ReleaseByteArrayElements (env, j%s, %s, 0);\n" n n
10716         | StringList n | DeviceList n ->
10717             pr "  for (i = 0; i < %s_len; ++i) {\n" n;
10718             pr "    jobject o = (*env)->GetObjectArrayElement (env, j%s, i);\n"
10719               n;
10720             pr "    (*env)->ReleaseStringUTFChars (env, o, %s[i]);\n" n;
10721             pr "  }\n";
10722             pr "  free (%s);\n" n
10723         | Bool n
10724         | Int n
10725         | Int64 n -> ()
10726       ) (snd style);
10727
10728       (* Check for errors. *)
10729       pr "  if (r == %s) {\n" error_code;
10730       pr "    throw_exception (env, guestfs_last_error (g));\n";
10731       pr "    return %s;\n" no_ret;
10732       pr "  }\n";
10733
10734       (* Return value. *)
10735       (match fst style with
10736        | RErr -> ()
10737        | RInt _ -> pr "  return (jint) r;\n"
10738        | RBool _ -> pr "  return (jboolean) r;\n"
10739        | RInt64 _ -> pr "  return (jlong) r;\n"
10740        | RConstString _ -> pr "  return (*env)->NewStringUTF (env, r);\n"
10741        | RConstOptString _ ->
10742            pr "  return (*env)->NewStringUTF (env, r); /* XXX r NULL? */\n"
10743        | RString _ ->
10744            pr "  jr = (*env)->NewStringUTF (env, r);\n";
10745            pr "  free (r);\n";
10746            pr "  return jr;\n"
10747        | RStringList _ ->
10748            pr "  for (r_len = 0; r[r_len] != NULL; ++r_len) ;\n";
10749            pr "  cl = (*env)->FindClass (env, \"java/lang/String\");\n";
10750            pr "  jstr = (*env)->NewStringUTF (env, \"\");\n";
10751            pr "  jr = (*env)->NewObjectArray (env, r_len, cl, jstr);\n";
10752            pr "  for (i = 0; i < r_len; ++i) {\n";
10753            pr "    jstr = (*env)->NewStringUTF (env, r[i]);\n";
10754            pr "    (*env)->SetObjectArrayElement (env, jr, i, jstr);\n";
10755            pr "    free (r[i]);\n";
10756            pr "  }\n";
10757            pr "  free (r);\n";
10758            pr "  return jr;\n"
10759        | RStruct (_, typ) ->
10760            let jtyp = java_name_of_struct typ in
10761            let cols = cols_of_struct typ in
10762            generate_java_struct_return typ jtyp cols
10763        | RStructList (_, typ) ->
10764            let jtyp = java_name_of_struct typ in
10765            let cols = cols_of_struct typ in
10766            generate_java_struct_list_return typ jtyp cols
10767        | RHashtable _ ->
10768            (* XXX *)
10769            pr "  throw_exception (env, \"%s: internal error: please let us know how to make a Java HashMap from JNI bindings!\");\n" name;
10770            pr "  return NULL;\n"
10771        | RBufferOut _ ->
10772            pr "  jr = (*env)->NewStringUTF (env, r); /* XXX size */\n";
10773            pr "  free (r);\n";
10774            pr "  return jr;\n"
10775       );
10776
10777       pr "}\n";
10778       pr "\n"
10779   ) all_functions
10780
10781 and generate_java_struct_return typ jtyp cols =
10782   pr "  cl = (*env)->FindClass (env, \"com/redhat/et/libguestfs/%s\");\n" jtyp;
10783   pr "  jr = (*env)->AllocObject (env, cl);\n";
10784   List.iter (
10785     function
10786     | name, FString ->
10787         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
10788         pr "  (*env)->SetObjectField (env, jr, fl, (*env)->NewStringUTF (env, r->%s));\n" name;
10789     | name, FUUID ->
10790         pr "  {\n";
10791         pr "    char s[33];\n";
10792         pr "    memcpy (s, r->%s, 32);\n" name;
10793         pr "    s[32] = 0;\n";
10794         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
10795         pr "    (*env)->SetObjectField (env, jr, fl, (*env)->NewStringUTF (env, s));\n";
10796         pr "  }\n";
10797     | name, FBuffer ->
10798         pr "  {\n";
10799         pr "    int len = r->%s_len;\n" name;
10800         pr "    char s[len+1];\n";
10801         pr "    memcpy (s, r->%s, len);\n" name;
10802         pr "    s[len] = 0;\n";
10803         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
10804         pr "    (*env)->SetObjectField (env, jr, fl, (*env)->NewStringUTF (env, s));\n";
10805         pr "  }\n";
10806     | name, (FBytes|FUInt64|FInt64) ->
10807         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"J\");\n" name;
10808         pr "  (*env)->SetLongField (env, jr, fl, r->%s);\n" name;
10809     | name, (FUInt32|FInt32) ->
10810         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"I\");\n" name;
10811         pr "  (*env)->SetLongField (env, jr, fl, r->%s);\n" name;
10812     | name, FOptPercent ->
10813         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"F\");\n" name;
10814         pr "  (*env)->SetFloatField (env, jr, fl, r->%s);\n" name;
10815     | name, FChar ->
10816         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"C\");\n" name;
10817         pr "  (*env)->SetLongField (env, jr, fl, r->%s);\n" name;
10818   ) cols;
10819   pr "  free (r);\n";
10820   pr "  return jr;\n"
10821
10822 and generate_java_struct_list_return typ jtyp cols =
10823   pr "  cl = (*env)->FindClass (env, \"com/redhat/et/libguestfs/%s\");\n" jtyp;
10824   pr "  jr = (*env)->NewObjectArray (env, r->len, cl, NULL);\n";
10825   pr "  for (i = 0; i < r->len; ++i) {\n";
10826   pr "    jfl = (*env)->AllocObject (env, cl);\n";
10827   List.iter (
10828     function
10829     | name, FString ->
10830         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
10831         pr "    (*env)->SetObjectField (env, jfl, fl, (*env)->NewStringUTF (env, r->val[i].%s));\n" name;
10832     | name, FUUID ->
10833         pr "    {\n";
10834         pr "      char s[33];\n";
10835         pr "      memcpy (s, r->val[i].%s, 32);\n" name;
10836         pr "      s[32] = 0;\n";
10837         pr "      fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
10838         pr "      (*env)->SetObjectField (env, jfl, fl, (*env)->NewStringUTF (env, s));\n";
10839         pr "    }\n";
10840     | name, FBuffer ->
10841         pr "    {\n";
10842         pr "      int len = r->val[i].%s_len;\n" name;
10843         pr "      char s[len+1];\n";
10844         pr "      memcpy (s, r->val[i].%s, len);\n" name;
10845         pr "      s[len] = 0;\n";
10846         pr "      fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
10847         pr "      (*env)->SetObjectField (env, jfl, fl, (*env)->NewStringUTF (env, s));\n";
10848         pr "    }\n";
10849     | name, (FBytes|FUInt64|FInt64) ->
10850         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"J\");\n" name;
10851         pr "    (*env)->SetLongField (env, jfl, fl, r->val[i].%s);\n" name;
10852     | name, (FUInt32|FInt32) ->
10853         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"I\");\n" name;
10854         pr "    (*env)->SetLongField (env, jfl, fl, r->val[i].%s);\n" name;
10855     | name, FOptPercent ->
10856         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"F\");\n" name;
10857         pr "    (*env)->SetFloatField (env, jfl, fl, r->val[i].%s);\n" name;
10858     | name, FChar ->
10859         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"C\");\n" name;
10860         pr "    (*env)->SetLongField (env, jfl, fl, r->val[i].%s);\n" name;
10861   ) cols;
10862   pr "    (*env)->SetObjectArrayElement (env, jfl, i, jfl);\n";
10863   pr "  }\n";
10864   pr "  guestfs_free_%s_list (r);\n" typ;
10865   pr "  return jr;\n"
10866
10867 and generate_java_makefile_inc () =
10868   generate_header HashStyle GPLv2plus;
10869
10870   pr "java_built_sources = \\\n";
10871   List.iter (
10872     fun (typ, jtyp) ->
10873         pr "\tcom/redhat/et/libguestfs/%s.java \\\n" jtyp;
10874   ) java_structs;
10875   pr "\tcom/redhat/et/libguestfs/GuestFS.java\n"
10876
10877 and generate_haskell_hs () =
10878   generate_header HaskellStyle LGPLv2plus;
10879
10880   (* XXX We only know how to generate partial FFI for Haskell
10881    * at the moment.  Please help out!
10882    *)
10883   let can_generate style =
10884     match style with
10885     | RErr, _
10886     | RInt _, _
10887     | RInt64 _, _ -> true
10888     | RBool _, _
10889     | RConstString _, _
10890     | RConstOptString _, _
10891     | RString _, _
10892     | RStringList _, _
10893     | RStruct _, _
10894     | RStructList _, _
10895     | RHashtable _, _
10896     | RBufferOut _, _ -> false in
10897
10898   pr "\
10899 {-# INCLUDE <guestfs.h> #-}
10900 {-# LANGUAGE ForeignFunctionInterface #-}
10901
10902 module Guestfs (
10903   create";
10904
10905   (* List out the names of the actions we want to export. *)
10906   List.iter (
10907     fun (name, style, _, _, _, _, _) ->
10908       if can_generate style then pr ",\n  %s" name
10909   ) all_functions;
10910
10911   pr "
10912   ) where
10913
10914 -- Unfortunately some symbols duplicate ones already present
10915 -- in Prelude.  We don't know which, so we hard-code a list
10916 -- here.
10917 import Prelude hiding (truncate)
10918
10919 import Foreign
10920 import Foreign.C
10921 import Foreign.C.Types
10922 import IO
10923 import Control.Exception
10924 import Data.Typeable
10925
10926 data GuestfsS = GuestfsS            -- represents the opaque C struct
10927 type GuestfsP = Ptr GuestfsS        -- guestfs_h *
10928 type GuestfsH = ForeignPtr GuestfsS -- guestfs_h * with attached finalizer
10929
10930 -- XXX define properly later XXX
10931 data PV = PV
10932 data VG = VG
10933 data LV = LV
10934 data IntBool = IntBool
10935 data Stat = Stat
10936 data StatVFS = StatVFS
10937 data Hashtable = Hashtable
10938
10939 foreign import ccall unsafe \"guestfs_create\" c_create
10940   :: IO GuestfsP
10941 foreign import ccall unsafe \"&guestfs_close\" c_close
10942   :: FunPtr (GuestfsP -> IO ())
10943 foreign import ccall unsafe \"guestfs_set_error_handler\" c_set_error_handler
10944   :: GuestfsP -> Ptr CInt -> Ptr CInt -> IO ()
10945
10946 create :: IO GuestfsH
10947 create = do
10948   p <- c_create
10949   c_set_error_handler p nullPtr nullPtr
10950   h <- newForeignPtr c_close p
10951   return h
10952
10953 foreign import ccall unsafe \"guestfs_last_error\" c_last_error
10954   :: GuestfsP -> IO CString
10955
10956 -- last_error :: GuestfsH -> IO (Maybe String)
10957 -- last_error h = do
10958 --   str <- withForeignPtr h (\\p -> c_last_error p)
10959 --   maybePeek peekCString str
10960
10961 last_error :: GuestfsH -> IO (String)
10962 last_error h = do
10963   str <- withForeignPtr h (\\p -> c_last_error p)
10964   if (str == nullPtr)
10965     then return \"no error\"
10966     else peekCString str
10967
10968 ";
10969
10970   (* Generate wrappers for each foreign function. *)
10971   List.iter (
10972     fun (name, style, _, _, _, _, _) ->
10973       if can_generate style then (
10974         pr "foreign import ccall unsafe \"guestfs_%s\" c_%s\n" name name;
10975         pr "  :: ";
10976         generate_haskell_prototype ~handle:"GuestfsP" style;
10977         pr "\n";
10978         pr "\n";
10979         pr "%s :: " name;
10980         generate_haskell_prototype ~handle:"GuestfsH" ~hs:true style;
10981         pr "\n";
10982         pr "%s %s = do\n" name
10983           (String.concat " " ("h" :: List.map name_of_argt (snd style)));
10984         pr "  r <- ";
10985         (* Convert pointer arguments using with* functions. *)
10986         List.iter (
10987           function
10988           | FileIn n
10989           | FileOut n
10990           | Pathname n | Device n | Dev_or_Path n | String n | Key n ->
10991               pr "withCString %s $ \\%s -> " n n
10992           | BufferIn n ->
10993               pr "withCStringLen %s $ \\(%s, %s_size) -> " n n n
10994           | OptString n -> pr "maybeWith withCString %s $ \\%s -> " n n
10995           | StringList n | DeviceList n -> pr "withMany withCString %s $ \\%s -> withArray0 nullPtr %s $ \\%s -> " n n n n
10996           | Bool _ | Int _ | Int64 _ -> ()
10997         ) (snd style);
10998         (* Convert integer arguments. *)
10999         let args =
11000           List.map (
11001             function
11002             | Bool n -> sprintf "(fromBool %s)" n
11003             | Int n -> sprintf "(fromIntegral %s)" n
11004             | Int64 n -> sprintf "(fromIntegral %s)" n
11005             | FileIn n | FileOut n
11006             | Pathname n | Device n | Dev_or_Path n
11007             | String n | OptString n
11008             | StringList n | DeviceList n
11009             | Key n -> n
11010             | BufferIn n -> sprintf "%s (fromIntegral %s_size)" n n
11011           ) (snd style) in
11012         pr "withForeignPtr h (\\p -> c_%s %s)\n" name
11013           (String.concat " " ("p" :: args));
11014         (match fst style with
11015          | RErr | RInt _ | RInt64 _ | RBool _ ->
11016              pr "  if (r == -1)\n";
11017              pr "    then do\n";
11018              pr "      err <- last_error h\n";
11019              pr "      fail err\n";
11020          | RConstString _ | RConstOptString _ | RString _
11021          | RStringList _ | RStruct _
11022          | RStructList _ | RHashtable _ | RBufferOut _ ->
11023              pr "  if (r == nullPtr)\n";
11024              pr "    then do\n";
11025              pr "      err <- last_error h\n";
11026              pr "      fail err\n";
11027         );
11028         (match fst style with
11029          | RErr ->
11030              pr "    else return ()\n"
11031          | RInt _ ->
11032              pr "    else return (fromIntegral r)\n"
11033          | RInt64 _ ->
11034              pr "    else return (fromIntegral r)\n"
11035          | RBool _ ->
11036              pr "    else return (toBool r)\n"
11037          | RConstString _
11038          | RConstOptString _
11039          | RString _
11040          | RStringList _
11041          | RStruct _
11042          | RStructList _
11043          | RHashtable _
11044          | RBufferOut _ ->
11045              pr "    else return ()\n" (* XXXXXXXXXXXXXXXXXXXX *)
11046         );
11047         pr "\n";
11048       )
11049   ) all_functions
11050
11051 and generate_haskell_prototype ~handle ?(hs = false) style =
11052   pr "%s -> " handle;
11053   let string = if hs then "String" else "CString" in
11054   let int = if hs then "Int" else "CInt" in
11055   let bool = if hs then "Bool" else "CInt" in
11056   let int64 = if hs then "Integer" else "Int64" in
11057   List.iter (
11058     fun arg ->
11059       (match arg with
11060        | Pathname _ | Device _ | Dev_or_Path _ | String _ | Key _ ->
11061            pr "%s" string
11062        | BufferIn _ ->
11063            if hs then pr "String"
11064            else pr "CString -> CInt"
11065        | OptString _ -> if hs then pr "Maybe String" else pr "CString"
11066        | StringList _ | DeviceList _ -> if hs then pr "[String]" else pr "Ptr CString"
11067        | Bool _ -> pr "%s" bool
11068        | Int _ -> pr "%s" int
11069        | Int64 _ -> pr "%s" int
11070        | FileIn _ -> pr "%s" string
11071        | FileOut _ -> pr "%s" string
11072       );
11073       pr " -> ";
11074   ) (snd style);
11075   pr "IO (";
11076   (match fst style with
11077    | RErr -> if not hs then pr "CInt"
11078    | RInt _ -> pr "%s" int
11079    | RInt64 _ -> pr "%s" int64
11080    | RBool _ -> pr "%s" bool
11081    | RConstString _ -> pr "%s" string
11082    | RConstOptString _ -> pr "Maybe %s" string
11083    | RString _ -> pr "%s" string
11084    | RStringList _ -> pr "[%s]" string
11085    | RStruct (_, typ) ->
11086        let name = java_name_of_struct typ in
11087        pr "%s" name
11088    | RStructList (_, typ) ->
11089        let name = java_name_of_struct typ in
11090        pr "[%s]" name
11091    | RHashtable _ -> pr "Hashtable"
11092    | RBufferOut _ -> pr "%s" string
11093   );
11094   pr ")"
11095
11096 and generate_csharp () =
11097   generate_header CPlusPlusStyle LGPLv2plus;
11098
11099   (* XXX Make this configurable by the C# assembly users. *)
11100   let library = "libguestfs.so.0" in
11101
11102   pr "\
11103 // These C# bindings are highly experimental at present.
11104 //
11105 // Firstly they only work on Linux (ie. Mono).  In order to get them
11106 // to work on Windows (ie. .Net) you would need to port the library
11107 // itself to Windows first.
11108 //
11109 // The second issue is that some calls are known to be incorrect and
11110 // can cause Mono to segfault.  Particularly: calls which pass or
11111 // return string[], or return any structure value.  This is because
11112 // we haven't worked out the correct way to do this from C#.
11113 //
11114 // The third issue is that when compiling you get a lot of warnings.
11115 // We are not sure whether the warnings are important or not.
11116 //
11117 // Fourthly we do not routinely build or test these bindings as part
11118 // of the make && make check cycle, which means that regressions might
11119 // go unnoticed.
11120 //
11121 // Suggestions and patches are welcome.
11122
11123 // To compile:
11124 //
11125 // gmcs Libguestfs.cs
11126 // mono Libguestfs.exe
11127 //
11128 // (You'll probably want to add a Test class / static main function
11129 // otherwise this won't do anything useful).
11130
11131 using System;
11132 using System.IO;
11133 using System.Runtime.InteropServices;
11134 using System.Runtime.Serialization;
11135 using System.Collections;
11136
11137 namespace Guestfs
11138 {
11139   class Error : System.ApplicationException
11140   {
11141     public Error (string message) : base (message) {}
11142     protected Error (SerializationInfo info, StreamingContext context) {}
11143   }
11144
11145   class Guestfs
11146   {
11147     IntPtr _handle;
11148
11149     [DllImport (\"%s\")]
11150     static extern IntPtr guestfs_create ();
11151
11152     public Guestfs ()
11153     {
11154       _handle = guestfs_create ();
11155       if (_handle == IntPtr.Zero)
11156         throw new Error (\"could not create guestfs handle\");
11157     }
11158
11159     [DllImport (\"%s\")]
11160     static extern void guestfs_close (IntPtr h);
11161
11162     ~Guestfs ()
11163     {
11164       guestfs_close (_handle);
11165     }
11166
11167     [DllImport (\"%s\")]
11168     static extern string guestfs_last_error (IntPtr h);
11169
11170 " library library library;
11171
11172   (* Generate C# structure bindings.  We prefix struct names with
11173    * underscore because C# cannot have conflicting struct names and
11174    * method names (eg. "class stat" and "stat").
11175    *)
11176   List.iter (
11177     fun (typ, cols) ->
11178       pr "    [StructLayout (LayoutKind.Sequential)]\n";
11179       pr "    public class _%s {\n" typ;
11180       List.iter (
11181         function
11182         | name, FChar -> pr "      char %s;\n" name
11183         | name, FString -> pr "      string %s;\n" name
11184         | name, FBuffer ->
11185             pr "      uint %s_len;\n" name;
11186             pr "      string %s;\n" name
11187         | name, FUUID ->
11188             pr "      [MarshalAs (UnmanagedType.ByValTStr, SizeConst=16)]\n";
11189             pr "      string %s;\n" name
11190         | name, FUInt32 -> pr "      uint %s;\n" name
11191         | name, FInt32 -> pr "      int %s;\n" name
11192         | name, (FUInt64|FBytes) -> pr "      ulong %s;\n" name
11193         | name, FInt64 -> pr "      long %s;\n" name
11194         | name, FOptPercent -> pr "      float %s; /* [0..100] or -1 */\n" name
11195       ) cols;
11196       pr "    }\n";
11197       pr "\n"
11198   ) structs;
11199
11200   (* Generate C# function bindings. *)
11201   List.iter (
11202     fun (name, style, _, _, _, shortdesc, _) ->
11203       let rec csharp_return_type () =
11204         match fst style with
11205         | RErr -> "void"
11206         | RBool n -> "bool"
11207         | RInt n -> "int"
11208         | RInt64 n -> "long"
11209         | RConstString n
11210         | RConstOptString n
11211         | RString n
11212         | RBufferOut n -> "string"
11213         | RStruct (_,n) -> "_" ^ n
11214         | RHashtable n -> "Hashtable"
11215         | RStringList n -> "string[]"
11216         | RStructList (_,n) -> sprintf "_%s[]" n
11217
11218       and c_return_type () =
11219         match fst style with
11220         | RErr
11221         | RBool _
11222         | RInt _ -> "int"
11223         | RInt64 _ -> "long"
11224         | RConstString _
11225         | RConstOptString _
11226         | RString _
11227         | RBufferOut _ -> "string"
11228         | RStruct (_,n) -> "_" ^ n
11229         | RHashtable _
11230         | RStringList _ -> "string[]"
11231         | RStructList (_,n) -> sprintf "_%s[]" n
11232
11233       and c_error_comparison () =
11234         match fst style with
11235         | RErr
11236         | RBool _
11237         | RInt _
11238         | RInt64 _ -> "== -1"
11239         | RConstString _
11240         | RConstOptString _
11241         | RString _
11242         | RBufferOut _
11243         | RStruct (_,_)
11244         | RHashtable _
11245         | RStringList _
11246         | RStructList (_,_) -> "== null"
11247
11248       and generate_extern_prototype () =
11249         pr "    static extern %s guestfs_%s (IntPtr h"
11250           (c_return_type ()) name;
11251         List.iter (
11252           function
11253           | Pathname n | Device n | Dev_or_Path n | String n | OptString n
11254           | FileIn n | FileOut n
11255           | Key n
11256           | BufferIn n ->
11257               pr ", [In] string %s" n
11258           | StringList n | DeviceList n ->
11259               pr ", [In] string[] %s" n
11260           | Bool n ->
11261               pr ", bool %s" n
11262           | Int n ->
11263               pr ", int %s" n
11264           | Int64 n ->
11265               pr ", long %s" n
11266         ) (snd style);
11267         pr ");\n"
11268
11269       and generate_public_prototype () =
11270         pr "    public %s %s (" (csharp_return_type ()) name;
11271         let comma = ref false in
11272         let next () =
11273           if !comma then pr ", ";
11274           comma := true
11275         in
11276         List.iter (
11277           function
11278           | Pathname n | Device n | Dev_or_Path n | String n | OptString n
11279           | FileIn n | FileOut n
11280           | Key n
11281           | BufferIn n ->
11282               next (); pr "string %s" n
11283           | StringList n | DeviceList n ->
11284               next (); pr "string[] %s" n
11285           | Bool n ->
11286               next (); pr "bool %s" n
11287           | Int n ->
11288               next (); pr "int %s" n
11289           | Int64 n ->
11290               next (); pr "long %s" n
11291         ) (snd style);
11292         pr ")\n"
11293
11294       and generate_call () =
11295         pr "guestfs_%s (_handle" name;
11296         List.iter (fun arg -> pr ", %s" (name_of_argt arg)) (snd style);
11297         pr ");\n";
11298       in
11299
11300       pr "    [DllImport (\"%s\")]\n" library;
11301       generate_extern_prototype ();
11302       pr "\n";
11303       pr "    /// <summary>\n";
11304       pr "    /// %s\n" shortdesc;
11305       pr "    /// </summary>\n";
11306       generate_public_prototype ();
11307       pr "    {\n";
11308       pr "      %s r;\n" (c_return_type ());
11309       pr "      r = ";
11310       generate_call ();
11311       pr "      if (r %s)\n" (c_error_comparison ());
11312       pr "        throw new Error (guestfs_last_error (_handle));\n";
11313       (match fst style with
11314        | RErr -> ()
11315        | RBool _ ->
11316            pr "      return r != 0 ? true : false;\n"
11317        | RHashtable _ ->
11318            pr "      Hashtable rr = new Hashtable ();\n";
11319            pr "      for (size_t i = 0; i < r.Length; i += 2)\n";
11320            pr "        rr.Add (r[i], r[i+1]);\n";
11321            pr "      return rr;\n"
11322        | RInt _ | RInt64 _ | RConstString _ | RConstOptString _
11323        | RString _ | RBufferOut _ | RStruct _ | RStringList _
11324        | RStructList _ ->
11325            pr "      return r;\n"
11326       );
11327       pr "    }\n";
11328       pr "\n";
11329   ) all_functions_sorted;
11330
11331   pr "  }
11332 }
11333 "
11334
11335 and generate_bindtests () =
11336   generate_header CStyle LGPLv2plus;
11337
11338   pr "\
11339 #include <stdio.h>
11340 #include <stdlib.h>
11341 #include <inttypes.h>
11342 #include <string.h>
11343
11344 #include \"guestfs.h\"
11345 #include \"guestfs-internal.h\"
11346 #include \"guestfs-internal-actions.h\"
11347 #include \"guestfs_protocol.h\"
11348
11349 #define error guestfs_error
11350 #define safe_calloc guestfs_safe_calloc
11351 #define safe_malloc guestfs_safe_malloc
11352
11353 static void
11354 print_strings (char *const *argv)
11355 {
11356   size_t argc;
11357
11358   printf (\"[\");
11359   for (argc = 0; argv[argc] != NULL; ++argc) {
11360     if (argc > 0) printf (\", \");
11361     printf (\"\\\"%%s\\\"\", argv[argc]);
11362   }
11363   printf (\"]\\n\");
11364 }
11365
11366 /* The test0 function prints its parameters to stdout. */
11367 ";
11368
11369   let test0, tests =
11370     match test_functions with
11371     | [] -> assert false
11372     | test0 :: tests -> test0, tests in
11373
11374   let () =
11375     let (name, style, _, _, _, _, _) = test0 in
11376     generate_prototype ~extern:false ~semicolon:false ~newline:true
11377       ~handle:"g" ~prefix:"guestfs__" name style;
11378     pr "{\n";
11379     List.iter (
11380       function
11381       | Pathname n
11382       | Device n | Dev_or_Path n
11383       | String n
11384       | FileIn n
11385       | FileOut n
11386       | Key n -> pr "  printf (\"%%s\\n\", %s);\n" n
11387       | BufferIn n ->
11388           pr "  {\n";
11389           pr "    size_t i;\n";
11390           pr "    for (i = 0; i < %s_size; ++i)\n" n;
11391           pr "      printf (\"<%%02x>\", %s[i]);\n" n;
11392           pr "    printf (\"\\n\");\n";
11393           pr "  }\n";
11394       | OptString n -> pr "  printf (\"%%s\\n\", %s ? %s : \"null\");\n" n n
11395       | StringList n | DeviceList n -> pr "  print_strings (%s);\n" n
11396       | Bool n -> pr "  printf (\"%%s\\n\", %s ? \"true\" : \"false\");\n" n
11397       | Int n -> pr "  printf (\"%%d\\n\", %s);\n" n
11398       | Int64 n -> pr "  printf (\"%%\" PRIi64 \"\\n\", %s);\n" n
11399     ) (snd style);
11400     pr "  /* Java changes stdout line buffering so we need this: */\n";
11401     pr "  fflush (stdout);\n";
11402     pr "  return 0;\n";
11403     pr "}\n";
11404     pr "\n" in
11405
11406   List.iter (
11407     fun (name, style, _, _, _, _, _) ->
11408       if String.sub name (String.length name - 3) 3 <> "err" then (
11409         pr "/* Test normal return. */\n";
11410         generate_prototype ~extern:false ~semicolon:false ~newline:true
11411           ~handle:"g" ~prefix:"guestfs__" name style;
11412         pr "{\n";
11413         (match fst style with
11414          | RErr ->
11415              pr "  return 0;\n"
11416          | RInt _ ->
11417              pr "  int r;\n";
11418              pr "  sscanf (val, \"%%d\", &r);\n";
11419              pr "  return r;\n"
11420          | RInt64 _ ->
11421              pr "  int64_t r;\n";
11422              pr "  sscanf (val, \"%%\" SCNi64, &r);\n";
11423              pr "  return r;\n"
11424          | RBool _ ->
11425              pr "  return STREQ (val, \"true\");\n"
11426          | RConstString _
11427          | RConstOptString _ ->
11428              (* Can't return the input string here.  Return a static
11429               * string so we ensure we get a segfault if the caller
11430               * tries to free it.
11431               *)
11432              pr "  return \"static string\";\n"
11433          | RString _ ->
11434              pr "  return strdup (val);\n"
11435          | RStringList _ ->
11436              pr "  char **strs;\n";
11437              pr "  int n, i;\n";
11438              pr "  sscanf (val, \"%%d\", &n);\n";
11439              pr "  strs = safe_malloc (g, (n+1) * sizeof (char *));\n";
11440              pr "  for (i = 0; i < n; ++i) {\n";
11441              pr "    strs[i] = safe_malloc (g, 16);\n";
11442              pr "    snprintf (strs[i], 16, \"%%d\", i);\n";
11443              pr "  }\n";
11444              pr "  strs[n] = NULL;\n";
11445              pr "  return strs;\n"
11446          | RStruct (_, typ) ->
11447              pr "  struct guestfs_%s *r;\n" typ;
11448              pr "  r = safe_calloc (g, sizeof *r, 1);\n";
11449              pr "  return r;\n"
11450          | RStructList (_, typ) ->
11451              pr "  struct guestfs_%s_list *r;\n" typ;
11452              pr "  r = safe_calloc (g, sizeof *r, 1);\n";
11453              pr "  sscanf (val, \"%%d\", &r->len);\n";
11454              pr "  r->val = safe_calloc (g, r->len, sizeof *r->val);\n";
11455              pr "  return r;\n"
11456          | RHashtable _ ->
11457              pr "  char **strs;\n";
11458              pr "  int n, i;\n";
11459              pr "  sscanf (val, \"%%d\", &n);\n";
11460              pr "  strs = safe_malloc (g, (n*2+1) * sizeof (*strs));\n";
11461              pr "  for (i = 0; i < n; ++i) {\n";
11462              pr "    strs[i*2] = safe_malloc (g, 16);\n";
11463              pr "    strs[i*2+1] = safe_malloc (g, 16);\n";
11464              pr "    snprintf (strs[i*2], 16, \"%%d\", i);\n";
11465              pr "    snprintf (strs[i*2+1], 16, \"%%d\", i);\n";
11466              pr "  }\n";
11467              pr "  strs[n*2] = NULL;\n";
11468              pr "  return strs;\n"
11469          | RBufferOut _ ->
11470              pr "  return strdup (val);\n"
11471         );
11472         pr "}\n";
11473         pr "\n"
11474       ) else (
11475         pr "/* Test error return. */\n";
11476         generate_prototype ~extern:false ~semicolon:false ~newline:true
11477           ~handle:"g" ~prefix:"guestfs__" name style;
11478         pr "{\n";
11479         pr "  error (g, \"error\");\n";
11480         (match fst style with
11481          | RErr | RInt _ | RInt64 _ | RBool _ ->
11482              pr "  return -1;\n"
11483          | RConstString _ | RConstOptString _
11484          | RString _ | RStringList _ | RStruct _
11485          | RStructList _
11486          | RHashtable _
11487          | RBufferOut _ ->
11488              pr "  return NULL;\n"
11489         );
11490         pr "}\n";
11491         pr "\n"
11492       )
11493   ) tests
11494
11495 and generate_ocaml_bindtests () =
11496   generate_header OCamlStyle GPLv2plus;
11497
11498   pr "\
11499 let () =
11500   let g = Guestfs.create () in
11501 ";
11502
11503   let mkargs args =
11504     String.concat " " (
11505       List.map (
11506         function
11507         | CallString s -> "\"" ^ s ^ "\""
11508         | CallOptString None -> "None"
11509         | CallOptString (Some s) -> sprintf "(Some \"%s\")" s
11510         | CallStringList xs ->
11511             "[|" ^ String.concat ";" (List.map (sprintf "\"%s\"") xs) ^ "|]"
11512         | CallInt i when i >= 0 -> string_of_int i
11513         | CallInt i (* when i < 0 *) -> "(" ^ string_of_int i ^ ")"
11514         | CallInt64 i when i >= 0L -> Int64.to_string i ^ "L"
11515         | CallInt64 i (* when i < 0L *) -> "(" ^ Int64.to_string i ^ "L)"
11516         | CallBool b -> string_of_bool b
11517         | CallBuffer s -> sprintf "%S" s
11518       ) args
11519     )
11520   in
11521
11522   generate_lang_bindtests (
11523     fun f args -> pr "  Guestfs.%s g %s;\n" f (mkargs args)
11524   );
11525
11526   pr "print_endline \"EOF\"\n"
11527
11528 and generate_perl_bindtests () =
11529   pr "#!/usr/bin/perl -w\n";
11530   generate_header HashStyle GPLv2plus;
11531
11532   pr "\
11533 use strict;
11534
11535 use Sys::Guestfs;
11536
11537 my $g = Sys::Guestfs->new ();
11538 ";
11539
11540   let mkargs args =
11541     String.concat ", " (
11542       List.map (
11543         function
11544         | CallString s -> "\"" ^ s ^ "\""
11545         | CallOptString None -> "undef"
11546         | CallOptString (Some s) -> sprintf "\"%s\"" s
11547         | CallStringList xs ->
11548             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
11549         | CallInt i -> string_of_int i
11550         | CallInt64 i -> Int64.to_string i
11551         | CallBool b -> if b then "1" else "0"
11552         | CallBuffer s -> "\"" ^ c_quote s ^ "\""
11553       ) args
11554     )
11555   in
11556
11557   generate_lang_bindtests (
11558     fun f args -> pr "$g->%s (%s);\n" f (mkargs args)
11559   );
11560
11561   pr "print \"EOF\\n\"\n"
11562
11563 and generate_python_bindtests () =
11564   generate_header HashStyle GPLv2plus;
11565
11566   pr "\
11567 import guestfs
11568
11569 g = guestfs.GuestFS ()
11570 ";
11571
11572   let mkargs args =
11573     String.concat ", " (
11574       List.map (
11575         function
11576         | CallString s -> "\"" ^ s ^ "\""
11577         | CallOptString None -> "None"
11578         | CallOptString (Some s) -> sprintf "\"%s\"" s
11579         | CallStringList xs ->
11580             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
11581         | CallInt i -> string_of_int i
11582         | CallInt64 i -> Int64.to_string i
11583         | CallBool b -> if b then "1" else "0"
11584         | CallBuffer s -> "\"" ^ c_quote s ^ "\""
11585       ) args
11586     )
11587   in
11588
11589   generate_lang_bindtests (
11590     fun f args -> pr "g.%s (%s)\n" f (mkargs args)
11591   );
11592
11593   pr "print \"EOF\"\n"
11594
11595 and generate_ruby_bindtests () =
11596   generate_header HashStyle GPLv2plus;
11597
11598   pr "\
11599 require 'guestfs'
11600
11601 g = Guestfs::create()
11602 ";
11603
11604   let mkargs args =
11605     String.concat ", " (
11606       List.map (
11607         function
11608         | CallString s -> "\"" ^ s ^ "\""
11609         | CallOptString None -> "nil"
11610         | CallOptString (Some s) -> sprintf "\"%s\"" s
11611         | CallStringList xs ->
11612             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
11613         | CallInt i -> string_of_int i
11614         | CallInt64 i -> Int64.to_string i
11615         | CallBool b -> string_of_bool b
11616         | CallBuffer s -> "\"" ^ c_quote s ^ "\""
11617       ) args
11618     )
11619   in
11620
11621   generate_lang_bindtests (
11622     fun f args -> pr "g.%s(%s)\n" f (mkargs args)
11623   );
11624
11625   pr "print \"EOF\\n\"\n"
11626
11627 and generate_java_bindtests () =
11628   generate_header CStyle GPLv2plus;
11629
11630   pr "\
11631 import com.redhat.et.libguestfs.*;
11632
11633 public class Bindtests {
11634     public static void main (String[] argv)
11635     {
11636         try {
11637             GuestFS g = new GuestFS ();
11638 ";
11639
11640   let mkargs args =
11641     String.concat ", " (
11642       List.map (
11643         function
11644         | CallString s -> "\"" ^ s ^ "\""
11645         | CallOptString None -> "null"
11646         | CallOptString (Some s) -> sprintf "\"%s\"" s
11647         | CallStringList xs ->
11648             "new String[]{" ^
11649               String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "}"
11650         | CallInt i -> string_of_int i
11651         | CallInt64 i -> Int64.to_string i
11652         | CallBool b -> string_of_bool b
11653         | CallBuffer s ->
11654             "new byte[] { " ^ String.concat "," (
11655               map_chars (fun c -> string_of_int (Char.code c)) s
11656             ) ^ " }"
11657       ) args
11658     )
11659   in
11660
11661   generate_lang_bindtests (
11662     fun f args -> pr "            g.%s (%s);\n" f (mkargs args)
11663   );
11664
11665   pr "
11666             System.out.println (\"EOF\");
11667         }
11668         catch (Exception exn) {
11669             System.err.println (exn);
11670             System.exit (1);
11671         }
11672     }
11673 }
11674 "
11675
11676 and generate_haskell_bindtests () =
11677   generate_header HaskellStyle GPLv2plus;
11678
11679   pr "\
11680 module Bindtests where
11681 import qualified Guestfs
11682
11683 main = do
11684   g <- Guestfs.create
11685 ";
11686
11687   let mkargs args =
11688     String.concat " " (
11689       List.map (
11690         function
11691         | CallString s -> "\"" ^ s ^ "\""
11692         | CallOptString None -> "Nothing"
11693         | CallOptString (Some s) -> sprintf "(Just \"%s\")" s
11694         | CallStringList xs ->
11695             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
11696         | CallInt i when i < 0 -> "(" ^ string_of_int i ^ ")"
11697         | CallInt i -> string_of_int i
11698         | CallInt64 i when i < 0L -> "(" ^ Int64.to_string i ^ ")"
11699         | CallInt64 i -> Int64.to_string i
11700         | CallBool true -> "True"
11701         | CallBool false -> "False"
11702         | CallBuffer s -> "\"" ^ c_quote s ^ "\""
11703       ) args
11704     )
11705   in
11706
11707   generate_lang_bindtests (
11708     fun f args -> pr "  Guestfs.%s g %s\n" f (mkargs args)
11709   );
11710
11711   pr "  putStrLn \"EOF\"\n"
11712
11713 (* Language-independent bindings tests - we do it this way to
11714  * ensure there is parity in testing bindings across all languages.
11715  *)
11716 and generate_lang_bindtests call =
11717   call "test0" [CallString "abc"; CallOptString (Some "def");
11718                 CallStringList []; CallBool false;
11719                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
11720                 CallBuffer "abc\000abc"];
11721   call "test0" [CallString "abc"; CallOptString None;
11722                 CallStringList []; CallBool false;
11723                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
11724                 CallBuffer "abc\000abc"];
11725   call "test0" [CallString ""; CallOptString (Some "def");
11726                 CallStringList []; CallBool false;
11727                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
11728                 CallBuffer "abc\000abc"];
11729   call "test0" [CallString ""; CallOptString (Some "");
11730                 CallStringList []; CallBool false;
11731                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
11732                 CallBuffer "abc\000abc"];
11733   call "test0" [CallString "abc"; CallOptString (Some "def");
11734                 CallStringList ["1"]; CallBool false;
11735                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
11736                 CallBuffer "abc\000abc"];
11737   call "test0" [CallString "abc"; CallOptString (Some "def");
11738                 CallStringList ["1"; "2"]; CallBool false;
11739                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
11740                 CallBuffer "abc\000abc"];
11741   call "test0" [CallString "abc"; CallOptString (Some "def");
11742                 CallStringList ["1"]; CallBool true;
11743                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
11744                 CallBuffer "abc\000abc"];
11745   call "test0" [CallString "abc"; CallOptString (Some "def");
11746                 CallStringList ["1"]; CallBool false;
11747                 CallInt (-1); CallInt64 (-1L); CallString "123"; CallString "456";
11748                 CallBuffer "abc\000abc"];
11749   call "test0" [CallString "abc"; CallOptString (Some "def");
11750                 CallStringList ["1"]; CallBool false;
11751                 CallInt (-2); CallInt64 (-2L); CallString "123"; CallString "456";
11752                 CallBuffer "abc\000abc"];
11753   call "test0" [CallString "abc"; CallOptString (Some "def");
11754                 CallStringList ["1"]; CallBool false;
11755                 CallInt 1; CallInt64 1L; CallString "123"; CallString "456";
11756                 CallBuffer "abc\000abc"];
11757   call "test0" [CallString "abc"; CallOptString (Some "def");
11758                 CallStringList ["1"]; CallBool false;
11759                 CallInt 2; CallInt64 2L; CallString "123"; CallString "456";
11760                 CallBuffer "abc\000abc"];
11761   call "test0" [CallString "abc"; CallOptString (Some "def");
11762                 CallStringList ["1"]; CallBool false;
11763                 CallInt 4095; CallInt64 4095L; CallString "123"; CallString "456";
11764                 CallBuffer "abc\000abc"];
11765   call "test0" [CallString "abc"; CallOptString (Some "def");
11766                 CallStringList ["1"]; CallBool false;
11767                 CallInt 0; CallInt64 0L; CallString ""; CallString "";
11768                 CallBuffer "abc\000abc"]
11769
11770 (* XXX Add here tests of the return and error functions. *)
11771
11772 (* Code to generator bindings for virt-inspector.  Currently only
11773  * implemented for OCaml code (for virt-p2v 2.0).
11774  *)
11775 let rng_input = "inspector/virt-inspector.rng"
11776
11777 (* Read the input file and parse it into internal structures.  This is
11778  * by no means a complete RELAX NG parser, but is just enough to be
11779  * able to parse the specific input file.
11780  *)
11781 type rng =
11782   | Element of string * rng list        (* <element name=name/> *)
11783   | Attribute of string * rng list        (* <attribute name=name/> *)
11784   | Interleave of rng list                (* <interleave/> *)
11785   | ZeroOrMore of rng                        (* <zeroOrMore/> *)
11786   | OneOrMore of rng                        (* <oneOrMore/> *)
11787   | Optional of rng                        (* <optional/> *)
11788   | Choice of string list                (* <choice><value/>*</choice> *)
11789   | Value of string                        (* <value>str</value> *)
11790   | Text                                (* <text/> *)
11791
11792 let rec string_of_rng = function
11793   | Element (name, xs) ->
11794       "Element (\"" ^ name ^ "\", (" ^ string_of_rng_list xs ^ "))"
11795   | Attribute (name, xs) ->
11796       "Attribute (\"" ^ name ^ "\", (" ^ string_of_rng_list xs ^ "))"
11797   | Interleave xs -> "Interleave (" ^ string_of_rng_list xs ^ ")"
11798   | ZeroOrMore rng -> "ZeroOrMore (" ^ string_of_rng rng ^ ")"
11799   | OneOrMore rng -> "OneOrMore (" ^ string_of_rng rng ^ ")"
11800   | Optional rng -> "Optional (" ^ string_of_rng rng ^ ")"
11801   | Choice values -> "Choice [" ^ String.concat ", " values ^ "]"
11802   | Value value -> "Value \"" ^ value ^ "\""
11803   | Text -> "Text"
11804
11805 and string_of_rng_list xs =
11806   String.concat ", " (List.map string_of_rng xs)
11807
11808 let rec parse_rng ?defines context = function
11809   | [] -> []
11810   | Xml.Element ("element", ["name", name], children) :: rest ->
11811       Element (name, parse_rng ?defines context children)
11812       :: parse_rng ?defines context rest
11813   | Xml.Element ("attribute", ["name", name], children) :: rest ->
11814       Attribute (name, parse_rng ?defines context children)
11815       :: parse_rng ?defines context rest
11816   | Xml.Element ("interleave", [], children) :: rest ->
11817       Interleave (parse_rng ?defines context children)
11818       :: parse_rng ?defines context rest
11819   | Xml.Element ("zeroOrMore", [], [child]) :: rest ->
11820       let rng = parse_rng ?defines context [child] in
11821       (match rng with
11822        | [child] -> ZeroOrMore child :: parse_rng ?defines context rest
11823        | _ ->
11824            failwithf "%s: <zeroOrMore> contains more than one child element"
11825              context
11826       )
11827   | Xml.Element ("oneOrMore", [], [child]) :: rest ->
11828       let rng = parse_rng ?defines context [child] in
11829       (match rng with
11830        | [child] -> OneOrMore child :: parse_rng ?defines context rest
11831        | _ ->
11832            failwithf "%s: <oneOrMore> contains more than one child element"
11833              context
11834       )
11835   | Xml.Element ("optional", [], [child]) :: rest ->
11836       let rng = parse_rng ?defines context [child] in
11837       (match rng with
11838        | [child] -> Optional child :: parse_rng ?defines context rest
11839        | _ ->
11840            failwithf "%s: <optional> contains more than one child element"
11841              context
11842       )
11843   | Xml.Element ("choice", [], children) :: rest ->
11844       let values = List.map (
11845         function Xml.Element ("value", [], [Xml.PCData value]) -> value
11846         | _ ->
11847             failwithf "%s: can't handle anything except <value> in <choice>"
11848               context
11849       ) children in
11850       Choice values
11851       :: parse_rng ?defines context rest
11852   | Xml.Element ("value", [], [Xml.PCData value]) :: rest ->
11853       Value value :: parse_rng ?defines context rest
11854   | Xml.Element ("text", [], []) :: rest ->
11855       Text :: parse_rng ?defines context rest
11856   | Xml.Element ("ref", ["name", name], []) :: rest ->
11857       (* Look up the reference.  Because of limitations in this parser,
11858        * we can't handle arbitrarily nested <ref> yet.  You can only
11859        * use <ref> from inside <start>.
11860        *)
11861       (match defines with
11862        | None ->
11863            failwithf "%s: contains <ref>, but no refs are defined yet" context
11864        | Some map ->
11865            let rng = StringMap.find name map in
11866            rng @ parse_rng ?defines context rest
11867       )
11868   | x :: _ ->
11869       failwithf "%s: can't handle '%s' in schema" context (Xml.to_string x)
11870
11871 let grammar =
11872   let xml = Xml.parse_file rng_input in
11873   match xml with
11874   | Xml.Element ("grammar", _,
11875                  Xml.Element ("start", _, gram) :: defines) ->
11876       (* The <define/> elements are referenced in the <start> section,
11877        * so build a map of those first.
11878        *)
11879       let defines = List.fold_left (
11880         fun map ->
11881           function Xml.Element ("define", ["name", name], defn) ->
11882             StringMap.add name defn map
11883           | _ ->
11884               failwithf "%s: expected <define name=name/>" rng_input
11885       ) StringMap.empty defines in
11886       let defines = StringMap.mapi parse_rng defines in
11887
11888       (* Parse the <start> clause, passing the defines. *)
11889       parse_rng ~defines "<start>" gram
11890   | _ ->
11891       failwithf "%s: input is not <grammar><start/><define>*</grammar>"
11892         rng_input
11893
11894 let name_of_field = function
11895   | Element (name, _) | Attribute (name, _)
11896   | ZeroOrMore (Element (name, _))
11897   | OneOrMore (Element (name, _))
11898   | Optional (Element (name, _)) -> name
11899   | Optional (Attribute (name, _)) -> name
11900   | Text -> (* an unnamed field in an element *)
11901       "data"
11902   | rng ->
11903       failwithf "name_of_field failed at: %s" (string_of_rng rng)
11904
11905 (* At the moment this function only generates OCaml types.  However we
11906  * should parameterize it later so it can generate types/structs in a
11907  * variety of languages.
11908  *)
11909 let generate_types xs =
11910   (* A simple type is one that can be printed out directly, eg.
11911    * "string option".  A complex type is one which has a name and has
11912    * to be defined via another toplevel definition, eg. a struct.
11913    *
11914    * generate_type generates code for either simple or complex types.
11915    * In the simple case, it returns the string ("string option").  In
11916    * the complex case, it returns the name ("mountpoint").  In the
11917    * complex case it has to print out the definition before returning,
11918    * so it should only be called when we are at the beginning of a
11919    * new line (BOL context).
11920    *)
11921   let rec generate_type = function
11922     | Text ->                                (* string *)
11923         "string", true
11924     | Choice values ->                        (* [`val1|`val2|...] *)
11925         "[" ^ String.concat "|" (List.map ((^)"`") values) ^ "]", true
11926     | ZeroOrMore rng ->                        (* <rng> list *)
11927         let t, is_simple = generate_type rng in
11928         t ^ " list (* 0 or more *)", is_simple
11929     | OneOrMore rng ->                        (* <rng> list *)
11930         let t, is_simple = generate_type rng in
11931         t ^ " list (* 1 or more *)", is_simple
11932                                         (* virt-inspector hack: bool *)
11933     | Optional (Attribute (name, [Value "1"])) ->
11934         "bool", true
11935     | Optional rng ->                        (* <rng> list *)
11936         let t, is_simple = generate_type rng in
11937         t ^ " option", is_simple
11938                                         (* type name = { fields ... } *)
11939     | Element (name, fields) when is_attrs_interleave fields ->
11940         generate_type_struct name (get_attrs_interleave fields)
11941     | Element (name, [field])                (* type name = field *)
11942     | Attribute (name, [field]) ->
11943         let t, is_simple = generate_type field in
11944         if is_simple then (t, true)
11945         else (
11946           pr "type %s = %s\n" name t;
11947           name, false
11948         )
11949     | Element (name, fields) ->              (* type name = { fields ... } *)
11950         generate_type_struct name fields
11951     | rng ->
11952         failwithf "generate_type failed at: %s" (string_of_rng rng)
11953
11954   and is_attrs_interleave = function
11955     | [Interleave _] -> true
11956     | Attribute _ :: fields -> is_attrs_interleave fields
11957     | Optional (Attribute _) :: fields -> is_attrs_interleave fields
11958     | _ -> false
11959
11960   and get_attrs_interleave = function
11961     | [Interleave fields] -> fields
11962     | ((Attribute _) as field) :: fields
11963     | ((Optional (Attribute _)) as field) :: fields ->
11964         field :: get_attrs_interleave fields
11965     | _ -> assert false
11966
11967   and generate_types xs =
11968     List.iter (fun x -> ignore (generate_type x)) xs
11969
11970   and generate_type_struct name fields =
11971     (* Calculate the types of the fields first.  We have to do this
11972      * before printing anything so we are still in BOL context.
11973      *)
11974     let types = List.map fst (List.map generate_type fields) in
11975
11976     (* Special case of a struct containing just a string and another
11977      * field.  Turn it into an assoc list.
11978      *)
11979     match types with
11980     | ["string"; other] ->
11981         let fname1, fname2 =
11982           match fields with
11983           | [f1; f2] -> name_of_field f1, name_of_field f2
11984           | _ -> assert false in
11985         pr "type %s = string * %s (* %s -> %s *)\n" name other fname1 fname2;
11986         name, false
11987
11988     | types ->
11989         pr "type %s = {\n" name;
11990         List.iter (
11991           fun (field, ftype) ->
11992             let fname = name_of_field field in
11993             pr "  %s_%s : %s;\n" name fname ftype
11994         ) (List.combine fields types);
11995         pr "}\n";
11996         (* Return the name of this type, and
11997          * false because it's not a simple type.
11998          *)
11999         name, false
12000   in
12001
12002   generate_types xs
12003
12004 let generate_parsers xs =
12005   (* As for generate_type above, generate_parser makes a parser for
12006    * some type, and returns the name of the parser it has generated.
12007    * Because it (may) need to print something, it should always be
12008    * called in BOL context.
12009    *)
12010   let rec generate_parser = function
12011     | Text ->                                (* string *)
12012         "string_child_or_empty"
12013     | Choice values ->                        (* [`val1|`val2|...] *)
12014         sprintf "(fun x -> match Xml.pcdata (first_child x) with %s | str -> failwith (\"unexpected field value: \" ^ str))"
12015           (String.concat "|"
12016              (List.map (fun v -> sprintf "%S -> `%s" v v) values))
12017     | ZeroOrMore rng ->                        (* <rng> list *)
12018         let pa = generate_parser rng in
12019         sprintf "(fun x -> List.map %s (Xml.children x))" pa
12020     | OneOrMore rng ->                        (* <rng> list *)
12021         let pa = generate_parser rng in
12022         sprintf "(fun x -> List.map %s (Xml.children x))" pa
12023                                         (* virt-inspector hack: bool *)
12024     | Optional (Attribute (name, [Value "1"])) ->
12025         sprintf "(fun x -> try ignore (Xml.attrib x %S); true with Xml.No_attribute _ -> false)" name
12026     | Optional rng ->                        (* <rng> list *)
12027         let pa = generate_parser rng in
12028         sprintf "(function None -> None | Some x -> Some (%s x))" pa
12029                                         (* type name = { fields ... } *)
12030     | Element (name, fields) when is_attrs_interleave fields ->
12031         generate_parser_struct name (get_attrs_interleave fields)
12032     | Element (name, [field]) ->        (* type name = field *)
12033         let pa = generate_parser field in
12034         let parser_name = sprintf "parse_%s_%d" name (unique ()) in
12035         pr "let %s =\n" parser_name;
12036         pr "  %s\n" pa;
12037         pr "let parse_%s = %s\n" name parser_name;
12038         parser_name
12039     | Attribute (name, [field]) ->
12040         let pa = generate_parser field in
12041         let parser_name = sprintf "parse_%s_%d" name (unique ()) in
12042         pr "let %s =\n" parser_name;
12043         pr "  %s\n" pa;
12044         pr "let parse_%s = %s\n" name parser_name;
12045         parser_name
12046     | Element (name, fields) ->              (* type name = { fields ... } *)
12047         generate_parser_struct name ([], fields)
12048     | rng ->
12049         failwithf "generate_parser failed at: %s" (string_of_rng rng)
12050
12051   and is_attrs_interleave = function
12052     | [Interleave _] -> true
12053     | Attribute _ :: fields -> is_attrs_interleave fields
12054     | Optional (Attribute _) :: fields -> is_attrs_interleave fields
12055     | _ -> false
12056
12057   and get_attrs_interleave = function
12058     | [Interleave fields] -> [], fields
12059     | ((Attribute _) as field) :: fields
12060     | ((Optional (Attribute _)) as field) :: fields ->
12061         let attrs, interleaves = get_attrs_interleave fields in
12062         (field :: attrs), interleaves
12063     | _ -> assert false
12064
12065   and generate_parsers xs =
12066     List.iter (fun x -> ignore (generate_parser x)) xs
12067
12068   and generate_parser_struct name (attrs, interleaves) =
12069     (* Generate parsers for the fields first.  We have to do this
12070      * before printing anything so we are still in BOL context.
12071      *)
12072     let fields = attrs @ interleaves in
12073     let pas = List.map generate_parser fields in
12074
12075     (* Generate an intermediate tuple from all the fields first.
12076      * If the type is just a string + another field, then we will
12077      * return this directly, otherwise it is turned into a record.
12078      *
12079      * RELAX NG note: This code treats <interleave> and plain lists of
12080      * fields the same.  In other words, it doesn't bother enforcing
12081      * any ordering of fields in the XML.
12082      *)
12083     pr "let parse_%s x =\n" name;
12084     pr "  let t = (\n    ";
12085     let comma = ref false in
12086     List.iter (
12087       fun x ->
12088         if !comma then pr ",\n    ";
12089         comma := true;
12090         match x with
12091         | Optional (Attribute (fname, [field])), pa ->
12092             pr "%s x" pa
12093         | Optional (Element (fname, [field])), pa ->
12094             pr "%s (optional_child %S x)" pa fname
12095         | Attribute (fname, [Text]), _ ->
12096             pr "attribute %S x" fname
12097         | (ZeroOrMore _ | OneOrMore _), pa ->
12098             pr "%s x" pa
12099         | Text, pa ->
12100             pr "%s x" pa
12101         | (field, pa) ->
12102             let fname = name_of_field field in
12103             pr "%s (child %S x)" pa fname
12104     ) (List.combine fields pas);
12105     pr "\n  ) in\n";
12106
12107     (match fields with
12108      | [Element (_, [Text]) | Attribute (_, [Text]); _] ->
12109          pr "  t\n"
12110
12111      | _ ->
12112          pr "  (Obj.magic t : %s)\n" name
12113 (*
12114          List.iter (
12115            function
12116            | (Optional (Attribute (fname, [field])), pa) ->
12117                pr "  %s_%s =\n" name fname;
12118                pr "    %s x;\n" pa
12119            | (Optional (Element (fname, [field])), pa) ->
12120                pr "  %s_%s =\n" name fname;
12121                pr "    (let x = optional_child %S x in\n" fname;
12122                pr "     %s x);\n" pa
12123            | (field, pa) ->
12124                let fname = name_of_field field in
12125                pr "  %s_%s =\n" name fname;
12126                pr "    (let x = child %S x in\n" fname;
12127                pr "     %s x);\n" pa
12128          ) (List.combine fields pas);
12129          pr "}\n"
12130 *)
12131     );
12132     sprintf "parse_%s" name
12133   in
12134
12135   generate_parsers xs
12136
12137 (* Generate ocaml/guestfs_inspector.mli. *)
12138 let generate_ocaml_inspector_mli () =
12139   generate_header ~extra_inputs:[rng_input] OCamlStyle LGPLv2plus;
12140
12141   pr "\
12142 (** This is an OCaml language binding to the external [virt-inspector]
12143     program.
12144
12145     For more information, please read the man page [virt-inspector(1)].
12146 *)
12147
12148 ";
12149
12150   generate_types grammar;
12151   pr "(** The nested information returned from the {!inspect} function. *)\n";
12152   pr "\n";
12153
12154   pr "\
12155 val inspect : ?connect:string -> ?xml:string -> string list -> operatingsystems
12156 (** To inspect a libvirt domain called [name], pass a singleton
12157     list: [inspect [name]].  When using libvirt only, you may
12158     optionally pass a libvirt URI using [inspect ~connect:uri ...].
12159
12160     To inspect a disk image or images, pass a list of the filenames
12161     of the disk images: [inspect filenames]
12162
12163     This function inspects the given guest or disk images and
12164     returns a list of operating system(s) found and a large amount
12165     of information about them.  In the vast majority of cases,
12166     a virtual machine only contains a single operating system.
12167
12168     If the optional [~xml] parameter is given, then this function
12169     skips running the external virt-inspector program and just
12170     parses the given XML directly (which is expected to be XML
12171     produced from a previous run of virt-inspector).  The list of
12172     names and connect URI are ignored in this case.
12173
12174     This function can throw a wide variety of exceptions, for example
12175     if the external virt-inspector program cannot be found, or if
12176     it doesn't generate valid XML.
12177 *)
12178 "
12179
12180 (* Generate ocaml/guestfs_inspector.ml. *)
12181 let generate_ocaml_inspector_ml () =
12182   generate_header ~extra_inputs:[rng_input] OCamlStyle LGPLv2plus;
12183
12184   pr "open Unix\n";
12185   pr "\n";
12186
12187   generate_types grammar;
12188   pr "\n";
12189
12190   pr "\
12191 (* Misc functions which are used by the parser code below. *)
12192 let first_child = function
12193   | Xml.Element (_, _, c::_) -> c
12194   | Xml.Element (name, _, []) ->
12195       failwith (\"expected <\" ^ name ^ \"/> to have a child node\")
12196   | Xml.PCData str ->
12197       failwith (\"expected XML tag, but read PCDATA '\" ^ str ^ \"' instead\")
12198
12199 let string_child_or_empty = function
12200   | Xml.Element (_, _, [Xml.PCData s]) -> s
12201   | Xml.Element (_, _, []) -> \"\"
12202   | Xml.Element (x, _, _) ->
12203       failwith (\"expected XML tag with a single PCDATA child, but got \" ^
12204                 x ^ \" instead\")
12205   | Xml.PCData str ->
12206       failwith (\"expected XML tag, but read PCDATA '\" ^ str ^ \"' instead\")
12207
12208 let optional_child name xml =
12209   let children = Xml.children xml in
12210   try
12211     Some (List.find (function
12212                      | Xml.Element (n, _, _) when n = name -> true
12213                      | _ -> false) children)
12214   with
12215     Not_found -> None
12216
12217 let child name xml =
12218   match optional_child name xml with
12219   | Some c -> c
12220   | None ->
12221       failwith (\"mandatory field <\" ^ name ^ \"/> missing in XML output\")
12222
12223 let attribute name xml =
12224   try Xml.attrib xml name
12225   with Xml.No_attribute _ ->
12226     failwith (\"mandatory attribute \" ^ name ^ \" missing in XML output\")
12227
12228 ";
12229
12230   generate_parsers grammar;
12231   pr "\n";
12232
12233   pr "\
12234 (* Run external virt-inspector, then use parser to parse the XML. *)
12235 let inspect ?connect ?xml names =
12236   let xml =
12237     match xml with
12238     | None ->
12239         if names = [] then invalid_arg \"inspect: no names given\";
12240         let cmd = [ \"virt-inspector\"; \"--xml\" ] @
12241           (match connect with None -> [] | Some uri -> [ \"--connect\"; uri ]) @
12242           names in
12243         let cmd = List.map Filename.quote cmd in
12244         let cmd = String.concat \" \" cmd in
12245         let chan = open_process_in cmd in
12246         let xml = Xml.parse_in chan in
12247         (match close_process_in chan with
12248          | WEXITED 0 -> ()
12249          | WEXITED _ -> failwith \"external virt-inspector command failed\"
12250          | WSIGNALED i | WSTOPPED i ->
12251              failwith (\"external virt-inspector command died or stopped on sig \" ^
12252                        string_of_int i)
12253         );
12254         xml
12255     | Some doc ->
12256         Xml.parse_string doc in
12257   parse_operatingsystems xml
12258 "
12259
12260 and generate_max_proc_nr () =
12261   pr "%d\n" max_proc_nr
12262
12263 let output_to filename k =
12264   let filename_new = filename ^ ".new" in
12265   chan := open_out filename_new;
12266   k ();
12267   close_out !chan;
12268   chan := Pervasives.stdout;
12269
12270   (* Is the new file different from the current file? *)
12271   if Sys.file_exists filename && files_equal filename filename_new then
12272     unlink filename_new                 (* same, so skip it *)
12273   else (
12274     (* different, overwrite old one *)
12275     (try chmod filename 0o644 with Unix_error _ -> ());
12276     rename filename_new filename;
12277     chmod filename 0o444;
12278     printf "written %s\n%!" filename;
12279   )
12280
12281 let perror msg = function
12282   | Unix_error (err, _, _) ->
12283       eprintf "%s: %s\n" msg (error_message err)
12284   | exn ->
12285       eprintf "%s: %s\n" msg (Printexc.to_string exn)
12286
12287 (* Main program. *)
12288 let () =
12289   let lock_fd =
12290     try openfile "HACKING" [O_RDWR] 0
12291     with
12292     | Unix_error (ENOENT, _, _) ->
12293         eprintf "\
12294 You are probably running this from the wrong directory.
12295 Run it from the top source directory using the command
12296   src/generator.ml
12297 ";
12298         exit 1
12299     | exn ->
12300         perror "open: HACKING" exn;
12301         exit 1 in
12302
12303   (* Acquire a lock so parallel builds won't try to run the generator
12304    * twice at the same time.  Subsequent builds will wait for the first
12305    * one to finish.  Note the lock is released implicitly when the
12306    * program exits.
12307    *)
12308   (try lockf lock_fd F_LOCK 1
12309    with exn ->
12310      perror "lock: HACKING" exn;
12311      exit 1);
12312
12313   check_functions ();
12314
12315   output_to "src/guestfs_protocol.x" generate_xdr;
12316   output_to "src/guestfs-structs.h" generate_structs_h;
12317   output_to "src/guestfs-actions.h" generate_actions_h;
12318   output_to "src/guestfs-internal-actions.h" generate_internal_actions_h;
12319   output_to "src/guestfs-actions.c" generate_client_actions;
12320   output_to "src/guestfs-bindtests.c" generate_bindtests;
12321   output_to "src/guestfs-structs.pod" generate_structs_pod;
12322   output_to "src/guestfs-actions.pod" generate_actions_pod;
12323   output_to "src/guestfs-availability.pod" generate_availability_pod;
12324   output_to "src/MAX_PROC_NR" generate_max_proc_nr;
12325   output_to "src/libguestfs.syms" generate_linker_script;
12326   output_to "daemon/actions.h" generate_daemon_actions_h;
12327   output_to "daemon/stubs.c" generate_daemon_actions;
12328   output_to "daemon/names.c" generate_daemon_names;
12329   output_to "daemon/optgroups.c" generate_daemon_optgroups_c;
12330   output_to "daemon/optgroups.h" generate_daemon_optgroups_h;
12331   output_to "capitests/tests.c" generate_tests;
12332   output_to "fish/cmds.c" generate_fish_cmds;
12333   output_to "fish/completion.c" generate_fish_completion;
12334   output_to "fish/guestfish-actions.pod" generate_fish_actions_pod;
12335   output_to "ocaml/guestfs.mli" generate_ocaml_mli;
12336   output_to "ocaml/guestfs.ml" generate_ocaml_ml;
12337   output_to "ocaml/guestfs_c_actions.c" generate_ocaml_c;
12338   output_to "ocaml/bindtests.ml" generate_ocaml_bindtests;
12339   output_to "ocaml/guestfs_inspector.mli" generate_ocaml_inspector_mli;
12340   output_to "ocaml/guestfs_inspector.ml" generate_ocaml_inspector_ml;
12341   output_to "perl/Guestfs.xs" generate_perl_xs;
12342   output_to "perl/lib/Sys/Guestfs.pm" generate_perl_pm;
12343   output_to "perl/bindtests.pl" generate_perl_bindtests;
12344   output_to "python/guestfs-py.c" generate_python_c;
12345   output_to "python/guestfs.py" generate_python_py;
12346   output_to "python/bindtests.py" generate_python_bindtests;
12347   output_to "ruby/ext/guestfs/_guestfs.c" generate_ruby_c;
12348   output_to "ruby/bindtests.rb" generate_ruby_bindtests;
12349   output_to "java/com/redhat/et/libguestfs/GuestFS.java" generate_java_java;
12350
12351   List.iter (
12352     fun (typ, jtyp) ->
12353       let cols = cols_of_struct typ in
12354       let filename = sprintf "java/com/redhat/et/libguestfs/%s.java" jtyp in
12355       output_to filename (generate_java_struct jtyp cols);
12356   ) java_structs;
12357
12358   output_to "java/Makefile.inc" generate_java_makefile_inc;
12359   output_to "java/com_redhat_et_libguestfs_GuestFS.c" generate_java_c;
12360   output_to "java/Bindtests.java" generate_java_bindtests;
12361   output_to "haskell/Guestfs.hs" generate_haskell_hs;
12362   output_to "haskell/Bindtests.hs" generate_haskell_bindtests;
12363   output_to "csharp/Libguestfs.cs" generate_csharp;
12364
12365   (* Always generate this file last, and unconditionally.  It's used
12366    * by the Makefile to know when we must re-run the generator.
12367    *)
12368   let chan = open_out "src/stamp-generator" in
12369   fprintf chan "1\n";
12370   close_out chan;
12371
12372   printf "generated %d lines of code\n" !lines