88698420ca8fe28038911ae41e9d58d71039f17e
[libguestfs.git] / src / generator.ml
1 #!/usr/bin/env ocaml
2 (* libguestfs
3  * Copyright (C) 2009-2010 Red Hat Inc.
4  *
5  * This program is free software; you can redistribute it and/or modify
6  * it under the terms of the GNU General Public License as published by
7  * the Free Software Foundation; either version 2 of the License, or
8  * (at your option) any later version.
9  *
10  * This program is distributed in the hope that it will be useful,
11  * but WITHOUT ANY WARRANTY; without even the implied warranty of
12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
13  * GNU General Public License for more details.
14  *
15  * You should have received a copy of the GNU General Public License
16  * along with this program; if not, write to the Free Software
17  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
18  *)
19
20 (* This script generates a large amount of code and documentation for
21  * all the daemon actions.
22  *
23  * To add a new action there are only two files you need to change,
24  * this one to describe the interface (see the big table of
25  * 'daemon_functions' below), and daemon/<somefile>.c to write the
26  * implementation.
27  *
28  * After editing this file, run it (./src/generator.ml) to regenerate
29  * all the output files.  'make' will rerun this automatically when
30  * necessary.  Note that if you are using a separate build directory
31  * you must run generator.ml from the _source_ directory.
32  *
33  * IMPORTANT: This script should NOT print any warnings.  If it prints
34  * warnings, you should treat them as errors.
35  *
36  * OCaml tips:
37  * (1) In emacs, install tuareg-mode to display and format OCaml code
38  * correctly.  'vim' comes with a good OCaml editing mode by default.
39  * (2) Read the resources at http://ocaml-tutorial.org/
40  *)
41
42 #load "unix.cma";;
43 #load "str.cma";;
44 #directory "+xml-light";;
45 #directory "+../pkg-lib/xml-light";; (* for GODI users *)
46 #load "xml-light.cma";;
47
48 open Unix
49 open Printf
50
51 type style = ret * args
52 and ret =
53     (* "RErr" as a return value means an int used as a simple error
54      * indication, ie. 0 or -1.
55      *)
56   | RErr
57
58     (* "RInt" as a return value means an int which is -1 for error
59      * or any value >= 0 on success.  Only use this for smallish
60      * positive ints (0 <= i < 2^30).
61      *)
62   | RInt of string
63
64     (* "RInt64" is the same as RInt, but is guaranteed to be able
65      * to return a full 64 bit value, _except_ that -1 means error
66      * (so -1 cannot be a valid, non-error return value).
67      *)
68   | RInt64 of string
69
70     (* "RBool" is a bool return value which can be true/false or
71      * -1 for error.
72      *)
73   | RBool of string
74
75     (* "RConstString" is a string that refers to a constant value.
76      * The return value must NOT be NULL (since NULL indicates
77      * an error).
78      *
79      * Try to avoid using this.  In particular you cannot use this
80      * for values returned from the daemon, because there is no
81      * thread-safe way to return them in the C API.
82      *)
83   | RConstString of string
84
85     (* "RConstOptString" is an even more broken version of
86      * "RConstString".  The returned string may be NULL and there
87      * is no way to return an error indication.  Avoid using this!
88      *)
89   | RConstOptString of string
90
91     (* "RString" is a returned string.  It must NOT be NULL, since
92      * a NULL return indicates an error.  The caller frees this.
93      *)
94   | RString of string
95
96     (* "RStringList" is a list of strings.  No string in the list
97      * can be NULL.  The caller frees the strings and the array.
98      *)
99   | RStringList of string
100
101     (* "RStruct" is a function which returns a single named structure
102      * or an error indication (in C, a struct, and in other languages
103      * with varying representations, but usually very efficient).  See
104      * after the function list below for the structures.
105      *)
106   | RStruct of string * string          (* name of retval, name of struct *)
107
108     (* "RStructList" is a function which returns either a list/array
109      * of structures (could be zero-length), or an error indication.
110      *)
111   | RStructList of string * string      (* name of retval, name of struct *)
112
113     (* Key-value pairs of untyped strings.  Turns into a hashtable or
114      * dictionary in languages which support it.  DON'T use this as a
115      * general "bucket" for results.  Prefer a stronger typed return
116      * value if one is available, or write a custom struct.  Don't use
117      * this if the list could potentially be very long, since it is
118      * inefficient.  Keys should be unique.  NULLs are not permitted.
119      *)
120   | RHashtable of string
121
122     (* "RBufferOut" is handled almost exactly like RString, but
123      * it allows the string to contain arbitrary 8 bit data including
124      * ASCII NUL.  In the C API this causes an implicit extra parameter
125      * to be added of type <size_t *size_r>.  The extra parameter
126      * returns the actual size of the return buffer in bytes.
127      *
128      * Other programming languages support strings with arbitrary 8 bit
129      * data.
130      *
131      * At the RPC layer we have to use the opaque<> type instead of
132      * string<>.  Returned data is still limited to the max message
133      * size (ie. ~ 2 MB).
134      *)
135   | RBufferOut of string
136
137 and args = argt list    (* Function parameters, guestfs handle is implicit. *)
138
139     (* Note in future we should allow a "variable args" parameter as
140      * the final parameter, to allow commands like
141      *   chmod mode file [file(s)...]
142      * This is not implemented yet, but many commands (such as chmod)
143      * are currently defined with the argument order keeping this future
144      * possibility in mind.
145      *)
146 and argt =
147   | String of string    (* const char *name, cannot be NULL *)
148   | Device of string    (* /dev device name, cannot be NULL *)
149   | Pathname of string  (* file name, cannot be NULL *)
150   | Dev_or_Path of string (* /dev device name or Pathname, cannot be NULL *)
151   | OptString of string (* const char *name, may be NULL *)
152   | StringList of string(* list of strings (each string cannot be NULL) *)
153   | DeviceList of string(* list of Device names (each cannot be NULL) *)
154   | Bool of string      (* boolean *)
155   | Int of string       (* int (smallish ints, signed, <= 31 bits) *)
156   | Int64 of string     (* any 64 bit int *)
157     (* These are treated as filenames (simple string parameters) in
158      * the C API and bindings.  But in the RPC protocol, we transfer
159      * the actual file content up to or down from the daemon.
160      * FileIn: local machine -> daemon (in request)
161      * FileOut: daemon -> local machine (in reply)
162      * In guestfish (only), the special name "-" means read from
163      * stdin or write to stdout.
164      *)
165   | FileIn of string
166   | FileOut of string
167 (* Not implemented:
168     (* Opaque buffer which can contain arbitrary 8 bit data.
169      * In the C API, this is expressed as <char *, int> pair.
170      * Most other languages have a string type which can contain
171      * ASCII NUL.  We use whatever type is appropriate for each
172      * language.
173      * Buffers are limited by the total message size.  To transfer
174      * large blocks of data, use FileIn/FileOut parameters instead.
175      * To return an arbitrary buffer, use RBufferOut.
176      *)
177   | BufferIn of string
178 *)
179
180 type flags =
181   | ProtocolLimitWarning  (* display warning about protocol size limits *)
182   | DangerWillRobinson    (* flags particularly dangerous commands *)
183   | FishAlias of string   (* provide an alias for this cmd in guestfish *)
184   | FishAction of string  (* call this function in guestfish *)
185   | FishOutput of fish_output_t (* how to display output in guestfish *)
186   | NotInFish             (* do not export via guestfish *)
187   | NotInDocs             (* do not add this function to documentation *)
188   | DeprecatedBy of string (* function is deprecated, use .. instead *)
189   | Optional of string    (* function is part of an optional group *)
190
191 and fish_output_t =
192   | FishOutputOctal       (* for int return, print in octal *)
193   | FishOutputHexadecimal (* for int return, print in hex *)
194
195 (* You can supply zero or as many tests as you want per API call.
196  *
197  * Note that the test environment has 3 block devices, of size 500MB,
198  * 50MB and 10MB (respectively /dev/sda, /dev/sdb, /dev/sdc), and
199  * a fourth ISO block device with some known files on it (/dev/sdd).
200  *
201  * Note for partitioning purposes, the 500MB device has 1015 cylinders.
202  * Number of cylinders was 63 for IDE emulated disks with precisely
203  * the same size.  How exactly this is calculated is a mystery.
204  *
205  * The ISO block device (/dev/sdd) comes from images/test.iso.
206  *
207  * To be able to run the tests in a reasonable amount of time,
208  * the virtual machine and block devices are reused between tests.
209  * So don't try testing kill_subprocess :-x
210  *
211  * Between each test we blockdev-setrw, umount-all, lvm-remove-all.
212  *
213  * Don't assume anything about the previous contents of the block
214  * devices.  Use 'Init*' to create some initial scenarios.
215  *
216  * You can add a prerequisite clause to any individual test.  This
217  * is a run-time check, which, if it fails, causes the test to be
218  * skipped.  Useful if testing a command which might not work on
219  * all variations of libguestfs builds.  A test that has prerequisite
220  * of 'Always' is run unconditionally.
221  *
222  * In addition, packagers can skip individual tests by setting the
223  * environment variables:     eg:
224  *   SKIP_TEST_<CMD>_<NUM>=1  SKIP_TEST_COMMAND_3=1  (skips test #3 of command)
225  *   SKIP_TEST_<CMD>=1        SKIP_TEST_ZEROFREE=1   (skips all zerofree tests)
226  *)
227 type tests = (test_init * test_prereq * test) list
228 and test =
229     (* Run the command sequence and just expect nothing to fail. *)
230   | TestRun of seq
231
232     (* Run the command sequence and expect the output of the final
233      * command to be the string.
234      *)
235   | TestOutput of seq * string
236
237     (* Run the command sequence and expect the output of the final
238      * command to be the list of strings.
239      *)
240   | TestOutputList of seq * string list
241
242     (* Run the command sequence and expect the output of the final
243      * command to be the list of block devices (could be either
244      * "/dev/sd.." or "/dev/hd.." form - we don't check the 5th
245      * character of each string).
246      *)
247   | TestOutputListOfDevices of seq * string list
248
249     (* Run the command sequence and expect the output of the final
250      * command to be the integer.
251      *)
252   | TestOutputInt of seq * int
253
254     (* Run the command sequence and expect the output of the final
255      * command to be <op> <int>, eg. ">=", "1".
256      *)
257   | TestOutputIntOp of seq * string * int
258
259     (* Run the command sequence and expect the output of the final
260      * command to be a true value (!= 0 or != NULL).
261      *)
262   | TestOutputTrue of seq
263
264     (* Run the command sequence and expect the output of the final
265      * command to be a false value (== 0 or == NULL, but not an error).
266      *)
267   | TestOutputFalse of seq
268
269     (* Run the command sequence and expect the output of the final
270      * command to be a list of the given length (but don't care about
271      * content).
272      *)
273   | TestOutputLength of seq * int
274
275     (* Run the command sequence and expect the output of the final
276      * command to be a buffer (RBufferOut), ie. string + size.
277      *)
278   | TestOutputBuffer of seq * string
279
280     (* Run the command sequence and expect the output of the final
281      * command to be a structure.
282      *)
283   | TestOutputStruct of seq * test_field_compare list
284
285     (* Run the command sequence and expect the final command (only)
286      * to fail.
287      *)
288   | TestLastFail of seq
289
290 and test_field_compare =
291   | CompareWithInt of string * int
292   | CompareWithIntOp of string * string * int
293   | CompareWithString of string * string
294   | CompareFieldsIntEq of string * string
295   | CompareFieldsStrEq of string * string
296
297 (* Test prerequisites. *)
298 and test_prereq =
299     (* Test always runs. *)
300   | Always
301
302     (* Test is currently disabled - eg. it fails, or it tests some
303      * unimplemented feature.
304      *)
305   | Disabled
306
307     (* 'string' is some C code (a function body) that should return
308      * true or false.  The test will run if the code returns true.
309      *)
310   | If of string
311
312     (* As for 'If' but the test runs _unless_ the code returns true. *)
313   | Unless of string
314
315 (* Some initial scenarios for testing. *)
316 and test_init =
317     (* Do nothing, block devices could contain random stuff including
318      * LVM PVs, and some filesystems might be mounted.  This is usually
319      * a bad idea.
320      *)
321   | InitNone
322
323     (* Block devices are empty and no filesystems are mounted. *)
324   | InitEmpty
325
326     (* /dev/sda contains a single partition /dev/sda1, with random
327      * content.  /dev/sdb and /dev/sdc may have random content.
328      * No LVM.
329      *)
330   | InitPartition
331
332     (* /dev/sda contains a single partition /dev/sda1, which is formatted
333      * as ext2, empty [except for lost+found] and mounted on /.
334      * /dev/sdb and /dev/sdc may have random content.
335      * No LVM.
336      *)
337   | InitBasicFS
338
339     (* /dev/sda:
340      *   /dev/sda1 (is a PV):
341      *     /dev/VG/LV (size 8MB):
342      *       formatted as ext2, empty [except for lost+found], mounted on /
343      * /dev/sdb and /dev/sdc may have random content.
344      *)
345   | InitBasicFSonLVM
346
347     (* /dev/sdd (the ISO, see images/ directory in source)
348      * is mounted on /
349      *)
350   | InitISOFS
351
352 (* Sequence of commands for testing. *)
353 and seq = cmd list
354 and cmd = string list
355
356 (* Note about long descriptions: When referring to another
357  * action, use the format C<guestfs_other> (ie. the full name of
358  * the C function).  This will be replaced as appropriate in other
359  * language bindings.
360  *
361  * Apart from that, long descriptions are just perldoc paragraphs.
362  *)
363
364 (* Generate a random UUID (used in tests). *)
365 let uuidgen () =
366   let chan = open_process_in "uuidgen" in
367   let uuid = input_line chan in
368   (match close_process_in chan with
369    | WEXITED 0 -> ()
370    | WEXITED _ ->
371        failwith "uuidgen: process exited with non-zero status"
372    | WSIGNALED _ | WSTOPPED _ ->
373        failwith "uuidgen: process signalled or stopped by signal"
374   );
375   uuid
376
377 (* These test functions are used in the language binding tests. *)
378
379 let test_all_args = [
380   String "str";
381   OptString "optstr";
382   StringList "strlist";
383   Bool "b";
384   Int "integer";
385   Int64 "integer64";
386   FileIn "filein";
387   FileOut "fileout";
388 ]
389
390 let test_all_rets = [
391   (* except for RErr, which is tested thoroughly elsewhere *)
392   "test0rint",         RInt "valout";
393   "test0rint64",       RInt64 "valout";
394   "test0rbool",        RBool "valout";
395   "test0rconststring", RConstString "valout";
396   "test0rconstoptstring", RConstOptString "valout";
397   "test0rstring",      RString "valout";
398   "test0rstringlist",  RStringList "valout";
399   "test0rstruct",      RStruct ("valout", "lvm_pv");
400   "test0rstructlist",  RStructList ("valout", "lvm_pv");
401   "test0rhashtable",   RHashtable "valout";
402 ]
403
404 let test_functions = [
405   ("test0", (RErr, test_all_args), -1, [NotInFish; NotInDocs],
406    [],
407    "internal test function - do not use",
408    "\
409 This is an internal test function which is used to test whether
410 the automatically generated bindings can handle every possible
411 parameter type correctly.
412
413 It echos the contents of each parameter to stdout.
414
415 You probably don't want to call this function.");
416 ] @ List.flatten (
417   List.map (
418     fun (name, ret) ->
419       [(name, (ret, [String "val"]), -1, [NotInFish; NotInDocs],
420         [],
421         "internal test function - do not use",
422         "\
423 This is an internal test function which is used to test whether
424 the automatically generated bindings can handle every possible
425 return type correctly.
426
427 It converts string C<val> to the return type.
428
429 You probably don't want to call this function.");
430        (name ^ "err", (ret, []), -1, [NotInFish; NotInDocs],
431         [],
432         "internal test function - do not use",
433         "\
434 This is an internal test function which is used to test whether
435 the automatically generated bindings can handle every possible
436 return type correctly.
437
438 This function always returns an error.
439
440 You probably don't want to call this function.")]
441   ) test_all_rets
442 )
443
444 (* non_daemon_functions are any functions which don't get processed
445  * in the daemon, eg. functions for setting and getting local
446  * configuration values.
447  *)
448
449 let non_daemon_functions = test_functions @ [
450   ("launch", (RErr, []), -1, [FishAlias "run"; FishAction "launch"],
451    [],
452    "launch the qemu subprocess",
453    "\
454 Internally libguestfs is implemented by running a virtual machine
455 using L<qemu(1)>.
456
457 You should call this after configuring the handle
458 (eg. adding drives) but before performing any actions.");
459
460   ("wait_ready", (RErr, []), -1, [NotInFish],
461    [],
462    "wait until the qemu subprocess launches (no op)",
463    "\
464 This function is a no op.
465
466 In versions of the API E<lt> 1.0.71 you had to call this function
467 just after calling C<guestfs_launch> to wait for the launch
468 to complete.  However this is no longer necessary because
469 C<guestfs_launch> now does the waiting.
470
471 If you see any calls to this function in code then you can just
472 remove them, unless you want to retain compatibility with older
473 versions of the API.");
474
475   ("kill_subprocess", (RErr, []), -1, [],
476    [],
477    "kill the qemu subprocess",
478    "\
479 This kills the qemu subprocess.  You should never need to call this.");
480
481   ("add_drive", (RErr, [String "filename"]), -1, [FishAlias "add"],
482    [],
483    "add an image to examine or modify",
484    "\
485 This function adds a virtual machine disk image C<filename> to the
486 guest.  The first time you call this function, the disk appears as IDE
487 disk 0 (C</dev/sda>) in the guest, the second time as C</dev/sdb>, and
488 so on.
489
490 You don't necessarily need to be root when using libguestfs.  However
491 you obviously do need sufficient permissions to access the filename
492 for whatever operations you want to perform (ie. read access if you
493 just want to read the image or write access if you want to modify the
494 image).
495
496 This is equivalent to the qemu parameter
497 C<-drive file=filename,cache=off,if=...>.
498
499 C<cache=off> is omitted in cases where it is not supported by
500 the underlying filesystem.
501
502 C<if=...> is set at compile time by the configuration option
503 C<./configure --with-drive-if=...>.  In the rare case where you
504 might need to change this at run time, use C<guestfs_add_drive_with_if>
505 or C<guestfs_add_drive_ro_with_if>.
506
507 Note that this call checks for the existence of C<filename>.  This
508 stops you from specifying other types of drive which are supported
509 by qemu such as C<nbd:> and C<http:> URLs.  To specify those, use
510 the general C<guestfs_config> call instead.");
511
512   ("add_cdrom", (RErr, [String "filename"]), -1, [FishAlias "cdrom"],
513    [],
514    "add a CD-ROM disk image to examine",
515    "\
516 This function adds a virtual CD-ROM disk image to the guest.
517
518 This is equivalent to the qemu parameter C<-cdrom filename>.
519
520 Notes:
521
522 =over 4
523
524 =item *
525
526 This call checks for the existence of C<filename>.  This
527 stops you from specifying other types of drive which are supported
528 by qemu such as C<nbd:> and C<http:> URLs.  To specify those, use
529 the general C<guestfs_config> call instead.
530
531 =item *
532
533 If you just want to add an ISO file (often you use this as an
534 efficient way to transfer large files into the guest), then you
535 should probably use C<guestfs_add_drive_ro> instead.
536
537 =back");
538
539   ("add_drive_ro", (RErr, [String "filename"]), -1, [FishAlias "add-ro"],
540    [],
541    "add a drive in snapshot mode (read-only)",
542    "\
543 This adds a drive in snapshot mode, making it effectively
544 read-only.
545
546 Note that writes to the device are allowed, and will be seen for
547 the duration of the guestfs handle, but they are written
548 to a temporary file which is discarded as soon as the guestfs
549 handle is closed.  We don't currently have any method to enable
550 changes to be committed, although qemu can support this.
551
552 This is equivalent to the qemu parameter
553 C<-drive file=filename,snapshot=on,readonly=on,if=...>.
554
555 C<if=...> is set at compile time by the configuration option
556 C<./configure --with-drive-if=...>.  In the rare case where you
557 might need to change this at run time, use C<guestfs_add_drive_with_if>
558 or C<guestfs_add_drive_ro_with_if>.
559
560 C<readonly=on> is only added where qemu supports this option.
561
562 Note that this call checks for the existence of C<filename>.  This
563 stops you from specifying other types of drive which are supported
564 by qemu such as C<nbd:> and C<http:> URLs.  To specify those, use
565 the general C<guestfs_config> call instead.");
566
567   ("config", (RErr, [String "qemuparam"; OptString "qemuvalue"]), -1, [],
568    [],
569    "add qemu parameters",
570    "\
571 This can be used to add arbitrary qemu command line parameters
572 of the form C<-param value>.  Actually it's not quite arbitrary - we
573 prevent you from setting some parameters which would interfere with
574 parameters that we use.
575
576 The first character of C<param> string must be a C<-> (dash).
577
578 C<value> can be NULL.");
579
580   ("set_qemu", (RErr, [String "qemu"]), -1, [FishAlias "qemu"],
581    [],
582    "set the qemu binary",
583    "\
584 Set the qemu binary that we will use.
585
586 The default is chosen when the library was compiled by the
587 configure script.
588
589 You can also override this by setting the C<LIBGUESTFS_QEMU>
590 environment variable.
591
592 Setting C<qemu> to C<NULL> restores the default qemu binary.
593
594 Note that you should call this function as early as possible
595 after creating the handle.  This is because some pre-launch
596 operations depend on testing qemu features (by running C<qemu -help>).
597 If the qemu binary changes, we don't retest features, and
598 so you might see inconsistent results.  Using the environment
599 variable C<LIBGUESTFS_QEMU> is safest of all since that picks
600 the qemu binary at the same time as the handle is created.");
601
602   ("get_qemu", (RConstString "qemu", []), -1, [],
603    [InitNone, Always, TestRun (
604       [["get_qemu"]])],
605    "get the qemu binary",
606    "\
607 Return the current qemu binary.
608
609 This is always non-NULL.  If it wasn't set already, then this will
610 return the default qemu binary name.");
611
612   ("set_path", (RErr, [String "searchpath"]), -1, [FishAlias "path"],
613    [],
614    "set the search path",
615    "\
616 Set the path that libguestfs searches for kernel and initrd.img.
617
618 The default is C<$libdir/guestfs> unless overridden by setting
619 C<LIBGUESTFS_PATH> environment variable.
620
621 Setting C<path> to C<NULL> restores the default path.");
622
623   ("get_path", (RConstString "path", []), -1, [],
624    [InitNone, Always, TestRun (
625       [["get_path"]])],
626    "get the search path",
627    "\
628 Return the current search path.
629
630 This is always non-NULL.  If it wasn't set already, then this will
631 return the default path.");
632
633   ("set_append", (RErr, [OptString "append"]), -1, [FishAlias "append"],
634    [],
635    "add options to kernel command line",
636    "\
637 This function is used to add additional options to the
638 guest kernel command line.
639
640 The default is C<NULL> unless overridden by setting
641 C<LIBGUESTFS_APPEND> environment variable.
642
643 Setting C<append> to C<NULL> means I<no> additional options
644 are passed (libguestfs always adds a few of its own).");
645
646   ("get_append", (RConstOptString "append", []), -1, [],
647    (* This cannot be tested with the current framework.  The
648     * function can return NULL in normal operations, which the
649     * test framework interprets as an error.
650     *)
651    [],
652    "get the additional kernel options",
653    "\
654 Return the additional kernel options which are added to the
655 guest kernel command line.
656
657 If C<NULL> then no options are added.");
658
659   ("set_autosync", (RErr, [Bool "autosync"]), -1, [FishAlias "autosync"],
660    [],
661    "set autosync mode",
662    "\
663 If C<autosync> is true, this enables autosync.  Libguestfs will make a
664 best effort attempt to run C<guestfs_umount_all> followed by
665 C<guestfs_sync> when the handle is closed
666 (also if the program exits without closing handles).
667
668 This is disabled by default (except in guestfish where it is
669 enabled by default).");
670
671   ("get_autosync", (RBool "autosync", []), -1, [],
672    [InitNone, Always, TestRun (
673       [["get_autosync"]])],
674    "get autosync mode",
675    "\
676 Get the autosync flag.");
677
678   ("set_verbose", (RErr, [Bool "verbose"]), -1, [FishAlias "verbose"],
679    [],
680    "set verbose mode",
681    "\
682 If C<verbose> is true, this turns on verbose messages (to C<stderr>).
683
684 Verbose messages are disabled unless the environment variable
685 C<LIBGUESTFS_DEBUG> is defined and set to C<1>.");
686
687   ("get_verbose", (RBool "verbose", []), -1, [],
688    [],
689    "get verbose mode",
690    "\
691 This returns the verbose messages flag.");
692
693   ("is_ready", (RBool "ready", []), -1, [],
694    [InitNone, Always, TestOutputTrue (
695       [["is_ready"]])],
696    "is ready to accept commands",
697    "\
698 This returns true iff this handle is ready to accept commands
699 (in the C<READY> state).
700
701 For more information on states, see L<guestfs(3)>.");
702
703   ("is_config", (RBool "config", []), -1, [],
704    [InitNone, Always, TestOutputFalse (
705       [["is_config"]])],
706    "is in configuration state",
707    "\
708 This returns true iff this handle is being configured
709 (in the C<CONFIG> state).
710
711 For more information on states, see L<guestfs(3)>.");
712
713   ("is_launching", (RBool "launching", []), -1, [],
714    [InitNone, Always, TestOutputFalse (
715       [["is_launching"]])],
716    "is launching subprocess",
717    "\
718 This returns true iff this handle is launching the subprocess
719 (in the C<LAUNCHING> state).
720
721 For more information on states, see L<guestfs(3)>.");
722
723   ("is_busy", (RBool "busy", []), -1, [],
724    [InitNone, Always, TestOutputFalse (
725       [["is_busy"]])],
726    "is busy processing a command",
727    "\
728 This returns true iff this handle is busy processing a command
729 (in the C<BUSY> state).
730
731 For more information on states, see L<guestfs(3)>.");
732
733   ("get_state", (RInt "state", []), -1, [],
734    [],
735    "get the current state",
736    "\
737 This returns the current state as an opaque integer.  This is
738 only useful for printing debug and internal error messages.
739
740 For more information on states, see L<guestfs(3)>.");
741
742   ("set_memsize", (RErr, [Int "memsize"]), -1, [FishAlias "memsize"],
743    [InitNone, Always, TestOutputInt (
744       [["set_memsize"; "500"];
745        ["get_memsize"]], 500)],
746    "set memory allocated to the qemu subprocess",
747    "\
748 This sets the memory size in megabytes allocated to the
749 qemu subprocess.  This only has any effect if called before
750 C<guestfs_launch>.
751
752 You can also change this by setting the environment
753 variable C<LIBGUESTFS_MEMSIZE> before the handle is
754 created.
755
756 For more information on the architecture of libguestfs,
757 see L<guestfs(3)>.");
758
759   ("get_memsize", (RInt "memsize", []), -1, [],
760    [InitNone, Always, TestOutputIntOp (
761       [["get_memsize"]], ">=", 256)],
762    "get memory allocated to the qemu subprocess",
763    "\
764 This gets the memory size in megabytes allocated to the
765 qemu subprocess.
766
767 If C<guestfs_set_memsize> was not called
768 on this handle, and if C<LIBGUESTFS_MEMSIZE> was not set,
769 then this returns the compiled-in default value for memsize.
770
771 For more information on the architecture of libguestfs,
772 see L<guestfs(3)>.");
773
774   ("get_pid", (RInt "pid", []), -1, [FishAlias "pid"],
775    [InitNone, Always, TestOutputIntOp (
776       [["get_pid"]], ">=", 1)],
777    "get PID of qemu subprocess",
778    "\
779 Return the process ID of the qemu subprocess.  If there is no
780 qemu subprocess, then this will return an error.
781
782 This is an internal call used for debugging and testing.");
783
784   ("version", (RStruct ("version", "version"), []), -1, [],
785    [InitNone, Always, TestOutputStruct (
786       [["version"]], [CompareWithInt ("major", 1)])],
787    "get the library version number",
788    "\
789 Return the libguestfs version number that the program is linked
790 against.
791
792 Note that because of dynamic linking this is not necessarily
793 the version of libguestfs that you compiled against.  You can
794 compile the program, and then at runtime dynamically link
795 against a completely different C<libguestfs.so> library.
796
797 This call was added in version C<1.0.58>.  In previous
798 versions of libguestfs there was no way to get the version
799 number.  From C code you can use ELF weak linking tricks to find out if
800 this symbol exists (if it doesn't, then it's an earlier version).
801
802 The call returns a structure with four elements.  The first
803 three (C<major>, C<minor> and C<release>) are numbers and
804 correspond to the usual version triplet.  The fourth element
805 (C<extra>) is a string and is normally empty, but may be
806 used for distro-specific information.
807
808 To construct the original version string:
809 C<$major.$minor.$release$extra>
810
811 I<Note:> Don't use this call to test for availability
812 of features.  Distro backports makes this unreliable.  Use
813 C<guestfs_available> instead.");
814
815   ("set_selinux", (RErr, [Bool "selinux"]), -1, [FishAlias "selinux"],
816    [InitNone, Always, TestOutputTrue (
817       [["set_selinux"; "true"];
818        ["get_selinux"]])],
819    "set SELinux enabled or disabled at appliance boot",
820    "\
821 This sets the selinux flag that is passed to the appliance
822 at boot time.  The default is C<selinux=0> (disabled).
823
824 Note that if SELinux is enabled, it is always in
825 Permissive mode (C<enforcing=0>).
826
827 For more information on the architecture of libguestfs,
828 see L<guestfs(3)>.");
829
830   ("get_selinux", (RBool "selinux", []), -1, [],
831    [],
832    "get SELinux enabled flag",
833    "\
834 This returns the current setting of the selinux flag which
835 is passed to the appliance at boot time.  See C<guestfs_set_selinux>.
836
837 For more information on the architecture of libguestfs,
838 see L<guestfs(3)>.");
839
840   ("set_trace", (RErr, [Bool "trace"]), -1, [FishAlias "trace"],
841    [InitNone, Always, TestOutputFalse (
842       [["set_trace"; "false"];
843        ["get_trace"]])],
844    "enable or disable command traces",
845    "\
846 If the command trace flag is set to 1, then commands are
847 printed on stdout before they are executed in a format
848 which is very similar to the one used by guestfish.  In
849 other words, you can run a program with this enabled, and
850 you will get out a script which you can feed to guestfish
851 to perform the same set of actions.
852
853 If you want to trace C API calls into libguestfs (and
854 other libraries) then possibly a better way is to use
855 the external ltrace(1) command.
856
857 Command traces are disabled unless the environment variable
858 C<LIBGUESTFS_TRACE> is defined and set to C<1>.");
859
860   ("get_trace", (RBool "trace", []), -1, [],
861    [],
862    "get command trace enabled flag",
863    "\
864 Return the command trace flag.");
865
866   ("set_direct", (RErr, [Bool "direct"]), -1, [FishAlias "direct"],
867    [InitNone, Always, TestOutputFalse (
868       [["set_direct"; "false"];
869        ["get_direct"]])],
870    "enable or disable direct appliance mode",
871    "\
872 If the direct appliance mode flag is enabled, then stdin and
873 stdout are passed directly through to the appliance once it
874 is launched.
875
876 One consequence of this is that log messages aren't caught
877 by the library and handled by C<guestfs_set_log_message_callback>,
878 but go straight to stdout.
879
880 You probably don't want to use this unless you know what you
881 are doing.
882
883 The default is disabled.");
884
885   ("get_direct", (RBool "direct", []), -1, [],
886    [],
887    "get direct appliance mode flag",
888    "\
889 Return the direct appliance mode flag.");
890
891   ("set_recovery_proc", (RErr, [Bool "recoveryproc"]), -1, [FishAlias "recovery-proc"],
892    [InitNone, Always, TestOutputTrue (
893       [["set_recovery_proc"; "true"];
894        ["get_recovery_proc"]])],
895    "enable or disable the recovery process",
896    "\
897 If this is called with the parameter C<false> then
898 C<guestfs_launch> does not create a recovery process.  The
899 purpose of the recovery process is to stop runaway qemu
900 processes in the case where the main program aborts abruptly.
901
902 This only has any effect if called before C<guestfs_launch>,
903 and the default is true.
904
905 About the only time when you would want to disable this is
906 if the main process will fork itself into the background
907 (\"daemonize\" itself).  In this case the recovery process
908 thinks that the main program has disappeared and so kills
909 qemu, which is not very helpful.");
910
911   ("get_recovery_proc", (RBool "recoveryproc", []), -1, [],
912    [],
913    "get recovery process enabled flag",
914    "\
915 Return the recovery process enabled flag.");
916
917   ("add_drive_with_if", (RErr, [String "filename"; String "iface"]), -1, [],
918    [],
919    "add a drive specifying the QEMU block emulation to use",
920    "\
921 This is the same as C<guestfs_add_drive> but it allows you
922 to specify the QEMU interface emulation to use at run time.");
923
924   ("add_drive_ro_with_if", (RErr, [String "filename"; String "iface"]), -1, [],
925    [],
926    "add a drive read-only specifying the QEMU block emulation to use",
927    "\
928 This is the same as C<guestfs_add_drive_ro> but it allows you
929 to specify the QEMU interface emulation to use at run time.");
930
931 ]
932
933 (* daemon_functions are any functions which cause some action
934  * to take place in the daemon.
935  *)
936
937 let daemon_functions = [
938   ("mount", (RErr, [Device "device"; String "mountpoint"]), 1, [],
939    [InitEmpty, Always, TestOutput (
940       [["part_disk"; "/dev/sda"; "mbr"];
941        ["mkfs"; "ext2"; "/dev/sda1"];
942        ["mount"; "/dev/sda1"; "/"];
943        ["write_file"; "/new"; "new file contents"; "0"];
944        ["cat"; "/new"]], "new file contents")],
945    "mount a guest disk at a position in the filesystem",
946    "\
947 Mount a guest disk at a position in the filesystem.  Block devices
948 are named C</dev/sda>, C</dev/sdb> and so on, as they were added to
949 the guest.  If those block devices contain partitions, they will have
950 the usual names (eg. C</dev/sda1>).  Also LVM C</dev/VG/LV>-style
951 names can be used.
952
953 The rules are the same as for L<mount(2)>:  A filesystem must
954 first be mounted on C</> before others can be mounted.  Other
955 filesystems can only be mounted on directories which already
956 exist.
957
958 The mounted filesystem is writable, if we have sufficient permissions
959 on the underlying device.
960
961 The filesystem options C<sync> and C<noatime> are set with this
962 call, in order to improve reliability.");
963
964   ("sync", (RErr, []), 2, [],
965    [ InitEmpty, Always, TestRun [["sync"]]],
966    "sync disks, writes are flushed through to the disk image",
967    "\
968 This syncs the disk, so that any writes are flushed through to the
969 underlying disk image.
970
971 You should always call this if you have modified a disk image, before
972 closing the handle.");
973
974   ("touch", (RErr, [Pathname "path"]), 3, [],
975    [InitBasicFS, Always, TestOutputTrue (
976       [["touch"; "/new"];
977        ["exists"; "/new"]])],
978    "update file timestamps or create a new file",
979    "\
980 Touch acts like the L<touch(1)> command.  It can be used to
981 update the timestamps on a file, or, if the file does not exist,
982 to create a new zero-length file.");
983
984   ("cat", (RString "content", [Pathname "path"]), 4, [ProtocolLimitWarning],
985    [InitISOFS, Always, TestOutput (
986       [["cat"; "/known-2"]], "abcdef\n")],
987    "list the contents of a file",
988    "\
989 Return the contents of the file named C<path>.
990
991 Note that this function cannot correctly handle binary files
992 (specifically, files containing C<\\0> character which is treated
993 as end of string).  For those you need to use the C<guestfs_read_file>
994 or C<guestfs_download> functions which have a more complex interface.");
995
996   ("ll", (RString "listing", [Pathname "directory"]), 5, [],
997    [], (* XXX Tricky to test because it depends on the exact format
998         * of the 'ls -l' command, which changes between F10 and F11.
999         *)
1000    "list the files in a directory (long format)",
1001    "\
1002 List the files in C<directory> (relative to the root directory,
1003 there is no cwd) in the format of 'ls -la'.
1004
1005 This command is mostly useful for interactive sessions.  It
1006 is I<not> intended that you try to parse the output string.");
1007
1008   ("ls", (RStringList "listing", [Pathname "directory"]), 6, [],
1009    [InitBasicFS, Always, TestOutputList (
1010       [["touch"; "/new"];
1011        ["touch"; "/newer"];
1012        ["touch"; "/newest"];
1013        ["ls"; "/"]], ["lost+found"; "new"; "newer"; "newest"])],
1014    "list the files in a directory",
1015    "\
1016 List the files in C<directory> (relative to the root directory,
1017 there is no cwd).  The '.' and '..' entries are not returned, but
1018 hidden files are shown.
1019
1020 This command is mostly useful for interactive sessions.  Programs
1021 should probably use C<guestfs_readdir> instead.");
1022
1023   ("list_devices", (RStringList "devices", []), 7, [],
1024    [InitEmpty, Always, TestOutputListOfDevices (
1025       [["list_devices"]], ["/dev/sda"; "/dev/sdb"; "/dev/sdc"; "/dev/sdd"])],
1026    "list the block devices",
1027    "\
1028 List all the block devices.
1029
1030 The full block device names are returned, eg. C</dev/sda>");
1031
1032   ("list_partitions", (RStringList "partitions", []), 8, [],
1033    [InitBasicFS, Always, TestOutputListOfDevices (
1034       [["list_partitions"]], ["/dev/sda1"]);
1035     InitEmpty, Always, TestOutputListOfDevices (
1036       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1037        ["list_partitions"]], ["/dev/sda1"; "/dev/sda2"; "/dev/sda3"])],
1038    "list the partitions",
1039    "\
1040 List all the partitions detected on all block devices.
1041
1042 The full partition device names are returned, eg. C</dev/sda1>
1043
1044 This does not return logical volumes.  For that you will need to
1045 call C<guestfs_lvs>.");
1046
1047   ("pvs", (RStringList "physvols", []), 9, [Optional "lvm2"],
1048    [InitBasicFSonLVM, Always, TestOutputListOfDevices (
1049       [["pvs"]], ["/dev/sda1"]);
1050     InitEmpty, Always, TestOutputListOfDevices (
1051       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1052        ["pvcreate"; "/dev/sda1"];
1053        ["pvcreate"; "/dev/sda2"];
1054        ["pvcreate"; "/dev/sda3"];
1055        ["pvs"]], ["/dev/sda1"; "/dev/sda2"; "/dev/sda3"])],
1056    "list the LVM physical volumes (PVs)",
1057    "\
1058 List all the physical volumes detected.  This is the equivalent
1059 of the L<pvs(8)> command.
1060
1061 This returns a list of just the device names that contain
1062 PVs (eg. C</dev/sda2>).
1063
1064 See also C<guestfs_pvs_full>.");
1065
1066   ("vgs", (RStringList "volgroups", []), 10, [Optional "lvm2"],
1067    [InitBasicFSonLVM, Always, TestOutputList (
1068       [["vgs"]], ["VG"]);
1069     InitEmpty, Always, TestOutputList (
1070       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1071        ["pvcreate"; "/dev/sda1"];
1072        ["pvcreate"; "/dev/sda2"];
1073        ["pvcreate"; "/dev/sda3"];
1074        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1075        ["vgcreate"; "VG2"; "/dev/sda3"];
1076        ["vgs"]], ["VG1"; "VG2"])],
1077    "list the LVM volume groups (VGs)",
1078    "\
1079 List all the volumes groups detected.  This is the equivalent
1080 of the L<vgs(8)> command.
1081
1082 This returns a list of just the volume group names that were
1083 detected (eg. C<VolGroup00>).
1084
1085 See also C<guestfs_vgs_full>.");
1086
1087   ("lvs", (RStringList "logvols", []), 11, [Optional "lvm2"],
1088    [InitBasicFSonLVM, Always, TestOutputList (
1089       [["lvs"]], ["/dev/VG/LV"]);
1090     InitEmpty, Always, TestOutputList (
1091       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1092        ["pvcreate"; "/dev/sda1"];
1093        ["pvcreate"; "/dev/sda2"];
1094        ["pvcreate"; "/dev/sda3"];
1095        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1096        ["vgcreate"; "VG2"; "/dev/sda3"];
1097        ["lvcreate"; "LV1"; "VG1"; "50"];
1098        ["lvcreate"; "LV2"; "VG1"; "50"];
1099        ["lvcreate"; "LV3"; "VG2"; "50"];
1100        ["lvs"]], ["/dev/VG1/LV1"; "/dev/VG1/LV2"; "/dev/VG2/LV3"])],
1101    "list the LVM logical volumes (LVs)",
1102    "\
1103 List all the logical volumes detected.  This is the equivalent
1104 of the L<lvs(8)> command.
1105
1106 This returns a list of the logical volume device names
1107 (eg. C</dev/VolGroup00/LogVol00>).
1108
1109 See also C<guestfs_lvs_full>.");
1110
1111   ("pvs_full", (RStructList ("physvols", "lvm_pv"), []), 12, [Optional "lvm2"],
1112    [], (* XXX how to test? *)
1113    "list the LVM physical volumes (PVs)",
1114    "\
1115 List all the physical volumes detected.  This is the equivalent
1116 of the L<pvs(8)> command.  The \"full\" version includes all fields.");
1117
1118   ("vgs_full", (RStructList ("volgroups", "lvm_vg"), []), 13, [Optional "lvm2"],
1119    [], (* XXX how to test? *)
1120    "list the LVM volume groups (VGs)",
1121    "\
1122 List all the volumes groups detected.  This is the equivalent
1123 of the L<vgs(8)> command.  The \"full\" version includes all fields.");
1124
1125   ("lvs_full", (RStructList ("logvols", "lvm_lv"), []), 14, [Optional "lvm2"],
1126    [], (* XXX how to test? *)
1127    "list the LVM logical volumes (LVs)",
1128    "\
1129 List all the logical volumes detected.  This is the equivalent
1130 of the L<lvs(8)> command.  The \"full\" version includes all fields.");
1131
1132   ("read_lines", (RStringList "lines", [Pathname "path"]), 15, [],
1133    [InitISOFS, Always, TestOutputList (
1134       [["read_lines"; "/known-4"]], ["abc"; "def"; "ghi"]);
1135     InitISOFS, Always, TestOutputList (
1136       [["read_lines"; "/empty"]], [])],
1137    "read file as lines",
1138    "\
1139 Return the contents of the file named C<path>.
1140
1141 The file contents are returned as a list of lines.  Trailing
1142 C<LF> and C<CRLF> character sequences are I<not> returned.
1143
1144 Note that this function cannot correctly handle binary files
1145 (specifically, files containing C<\\0> character which is treated
1146 as end of line).  For those you need to use the C<guestfs_read_file>
1147 function which has a more complex interface.");
1148
1149   ("aug_init", (RErr, [Pathname "root"; Int "flags"]), 16, [Optional "augeas"],
1150    [], (* XXX Augeas code needs tests. *)
1151    "create a new Augeas handle",
1152    "\
1153 Create a new Augeas handle for editing configuration files.
1154 If there was any previous Augeas handle associated with this
1155 guestfs session, then it is closed.
1156
1157 You must call this before using any other C<guestfs_aug_*>
1158 commands.
1159
1160 C<root> is the filesystem root.  C<root> must not be NULL,
1161 use C</> instead.
1162
1163 The flags are the same as the flags defined in
1164 E<lt>augeas.hE<gt>, the logical I<or> of the following
1165 integers:
1166
1167 =over 4
1168
1169 =item C<AUG_SAVE_BACKUP> = 1
1170
1171 Keep the original file with a C<.augsave> extension.
1172
1173 =item C<AUG_SAVE_NEWFILE> = 2
1174
1175 Save changes into a file with extension C<.augnew>, and
1176 do not overwrite original.  Overrides C<AUG_SAVE_BACKUP>.
1177
1178 =item C<AUG_TYPE_CHECK> = 4
1179
1180 Typecheck lenses (can be expensive).
1181
1182 =item C<AUG_NO_STDINC> = 8
1183
1184 Do not use standard load path for modules.
1185
1186 =item C<AUG_SAVE_NOOP> = 16
1187
1188 Make save a no-op, just record what would have been changed.
1189
1190 =item C<AUG_NO_LOAD> = 32
1191
1192 Do not load the tree in C<guestfs_aug_init>.
1193
1194 =back
1195
1196 To close the handle, you can call C<guestfs_aug_close>.
1197
1198 To find out more about Augeas, see L<http://augeas.net/>.");
1199
1200   ("aug_close", (RErr, []), 26, [Optional "augeas"],
1201    [], (* XXX Augeas code needs tests. *)
1202    "close the current Augeas handle",
1203    "\
1204 Close the current Augeas handle and free up any resources
1205 used by it.  After calling this, you have to call
1206 C<guestfs_aug_init> again before you can use any other
1207 Augeas functions.");
1208
1209   ("aug_defvar", (RInt "nrnodes", [String "name"; OptString "expr"]), 17, [Optional "augeas"],
1210    [], (* XXX Augeas code needs tests. *)
1211    "define an Augeas variable",
1212    "\
1213 Defines an Augeas variable C<name> whose value is the result
1214 of evaluating C<expr>.  If C<expr> is NULL, then C<name> is
1215 undefined.
1216
1217 On success this returns the number of nodes in C<expr>, or
1218 C<0> if C<expr> evaluates to something which is not a nodeset.");
1219
1220   ("aug_defnode", (RStruct ("nrnodescreated", "int_bool"), [String "name"; String "expr"; String "val"]), 18, [Optional "augeas"],
1221    [], (* XXX Augeas code needs tests. *)
1222    "define an Augeas node",
1223    "\
1224 Defines a variable C<name> whose value is the result of
1225 evaluating C<expr>.
1226
1227 If C<expr> evaluates to an empty nodeset, a node is created,
1228 equivalent to calling C<guestfs_aug_set> C<expr>, C<value>.
1229 C<name> will be the nodeset containing that single node.
1230
1231 On success this returns a pair containing the
1232 number of nodes in the nodeset, and a boolean flag
1233 if a node was created.");
1234
1235   ("aug_get", (RString "val", [String "augpath"]), 19, [Optional "augeas"],
1236    [], (* XXX Augeas code needs tests. *)
1237    "look up the value of an Augeas path",
1238    "\
1239 Look up the value associated with C<path>.  If C<path>
1240 matches exactly one node, the C<value> is returned.");
1241
1242   ("aug_set", (RErr, [String "augpath"; String "val"]), 20, [Optional "augeas"],
1243    [], (* XXX Augeas code needs tests. *)
1244    "set Augeas path to value",
1245    "\
1246 Set the value associated with C<path> to C<val>.
1247
1248 In the Augeas API, it is possible to clear a node by setting
1249 the value to NULL.  Due to an oversight in the libguestfs API
1250 you cannot do that with this call.  Instead you must use the
1251 C<guestfs_aug_clear> call.");
1252
1253   ("aug_insert", (RErr, [String "augpath"; String "label"; Bool "before"]), 21, [Optional "augeas"],
1254    [], (* XXX Augeas code needs tests. *)
1255    "insert a sibling Augeas node",
1256    "\
1257 Create a new sibling C<label> for C<path>, inserting it into
1258 the tree before or after C<path> (depending on the boolean
1259 flag C<before>).
1260
1261 C<path> must match exactly one existing node in the tree, and
1262 C<label> must be a label, ie. not contain C</>, C<*> or end
1263 with a bracketed index C<[N]>.");
1264
1265   ("aug_rm", (RInt "nrnodes", [String "augpath"]), 22, [Optional "augeas"],
1266    [], (* XXX Augeas code needs tests. *)
1267    "remove an Augeas path",
1268    "\
1269 Remove C<path> and all of its children.
1270
1271 On success this returns the number of entries which were removed.");
1272
1273   ("aug_mv", (RErr, [String "src"; String "dest"]), 23, [Optional "augeas"],
1274    [], (* XXX Augeas code needs tests. *)
1275    "move Augeas node",
1276    "\
1277 Move the node C<src> to C<dest>.  C<src> must match exactly
1278 one node.  C<dest> is overwritten if it exists.");
1279
1280   ("aug_match", (RStringList "matches", [String "augpath"]), 24, [Optional "augeas"],
1281    [], (* XXX Augeas code needs tests. *)
1282    "return Augeas nodes which match augpath",
1283    "\
1284 Returns a list of paths which match the path expression C<path>.
1285 The returned paths are sufficiently qualified so that they match
1286 exactly one node in the current tree.");
1287
1288   ("aug_save", (RErr, []), 25, [Optional "augeas"],
1289    [], (* XXX Augeas code needs tests. *)
1290    "write all pending Augeas changes to disk",
1291    "\
1292 This writes all pending changes to disk.
1293
1294 The flags which were passed to C<guestfs_aug_init> affect exactly
1295 how files are saved.");
1296
1297   ("aug_load", (RErr, []), 27, [Optional "augeas"],
1298    [], (* XXX Augeas code needs tests. *)
1299    "load files into the tree",
1300    "\
1301 Load files into the tree.
1302
1303 See C<aug_load> in the Augeas documentation for the full gory
1304 details.");
1305
1306   ("aug_ls", (RStringList "matches", [String "augpath"]), 28, [Optional "augeas"],
1307    [], (* XXX Augeas code needs tests. *)
1308    "list Augeas nodes under augpath",
1309    "\
1310 This is just a shortcut for listing C<guestfs_aug_match>
1311 C<path/*> and sorting the resulting nodes into alphabetical order.");
1312
1313   ("rm", (RErr, [Pathname "path"]), 29, [],
1314    [InitBasicFS, Always, TestRun
1315       [["touch"; "/new"];
1316        ["rm"; "/new"]];
1317     InitBasicFS, Always, TestLastFail
1318       [["rm"; "/new"]];
1319     InitBasicFS, Always, TestLastFail
1320       [["mkdir"; "/new"];
1321        ["rm"; "/new"]]],
1322    "remove a file",
1323    "\
1324 Remove the single file C<path>.");
1325
1326   ("rmdir", (RErr, [Pathname "path"]), 30, [],
1327    [InitBasicFS, Always, TestRun
1328       [["mkdir"; "/new"];
1329        ["rmdir"; "/new"]];
1330     InitBasicFS, Always, TestLastFail
1331       [["rmdir"; "/new"]];
1332     InitBasicFS, Always, TestLastFail
1333       [["touch"; "/new"];
1334        ["rmdir"; "/new"]]],
1335    "remove a directory",
1336    "\
1337 Remove the single directory C<path>.");
1338
1339   ("rm_rf", (RErr, [Pathname "path"]), 31, [],
1340    [InitBasicFS, Always, TestOutputFalse
1341       [["mkdir"; "/new"];
1342        ["mkdir"; "/new/foo"];
1343        ["touch"; "/new/foo/bar"];
1344        ["rm_rf"; "/new"];
1345        ["exists"; "/new"]]],
1346    "remove a file or directory recursively",
1347    "\
1348 Remove the file or directory C<path>, recursively removing the
1349 contents if its a directory.  This is like the C<rm -rf> shell
1350 command.");
1351
1352   ("mkdir", (RErr, [Pathname "path"]), 32, [],
1353    [InitBasicFS, Always, TestOutputTrue
1354       [["mkdir"; "/new"];
1355        ["is_dir"; "/new"]];
1356     InitBasicFS, Always, TestLastFail
1357       [["mkdir"; "/new/foo/bar"]]],
1358    "create a directory",
1359    "\
1360 Create a directory named C<path>.");
1361
1362   ("mkdir_p", (RErr, [Pathname "path"]), 33, [],
1363    [InitBasicFS, Always, TestOutputTrue
1364       [["mkdir_p"; "/new/foo/bar"];
1365        ["is_dir"; "/new/foo/bar"]];
1366     InitBasicFS, Always, TestOutputTrue
1367       [["mkdir_p"; "/new/foo/bar"];
1368        ["is_dir"; "/new/foo"]];
1369     InitBasicFS, Always, TestOutputTrue
1370       [["mkdir_p"; "/new/foo/bar"];
1371        ["is_dir"; "/new"]];
1372     (* Regression tests for RHBZ#503133: *)
1373     InitBasicFS, Always, TestRun
1374       [["mkdir"; "/new"];
1375        ["mkdir_p"; "/new"]];
1376     InitBasicFS, Always, TestLastFail
1377       [["touch"; "/new"];
1378        ["mkdir_p"; "/new"]]],
1379    "create a directory and parents",
1380    "\
1381 Create a directory named C<path>, creating any parent directories
1382 as necessary.  This is like the C<mkdir -p> shell command.");
1383
1384   ("chmod", (RErr, [Int "mode"; Pathname "path"]), 34, [],
1385    [], (* XXX Need stat command to test *)
1386    "change file mode",
1387    "\
1388 Change the mode (permissions) of C<path> to C<mode>.  Only
1389 numeric modes are supported.
1390
1391 I<Note>: When using this command from guestfish, C<mode>
1392 by default would be decimal, unless you prefix it with
1393 C<0> to get octal, ie. use C<0700> not C<700>.
1394
1395 The mode actually set is affected by the umask.");
1396
1397   ("chown", (RErr, [Int "owner"; Int "group"; Pathname "path"]), 35, [],
1398    [], (* XXX Need stat command to test *)
1399    "change file owner and group",
1400    "\
1401 Change the file owner to C<owner> and group to C<group>.
1402
1403 Only numeric uid and gid are supported.  If you want to use
1404 names, you will need to locate and parse the password file
1405 yourself (Augeas support makes this relatively easy).");
1406
1407   ("exists", (RBool "existsflag", [Pathname "path"]), 36, [],
1408    [InitISOFS, Always, TestOutputTrue (
1409       [["exists"; "/empty"]]);
1410     InitISOFS, Always, TestOutputTrue (
1411       [["exists"; "/directory"]])],
1412    "test if file or directory exists",
1413    "\
1414 This returns C<true> if and only if there is a file, directory
1415 (or anything) with the given C<path> name.
1416
1417 See also C<guestfs_is_file>, C<guestfs_is_dir>, C<guestfs_stat>.");
1418
1419   ("is_file", (RBool "fileflag", [Pathname "path"]), 37, [],
1420    [InitISOFS, Always, TestOutputTrue (
1421       [["is_file"; "/known-1"]]);
1422     InitISOFS, Always, TestOutputFalse (
1423       [["is_file"; "/directory"]])],
1424    "test if file exists",
1425    "\
1426 This returns C<true> if and only if there is a file
1427 with the given C<path> name.  Note that it returns false for
1428 other objects like directories.
1429
1430 See also C<guestfs_stat>.");
1431
1432   ("is_dir", (RBool "dirflag", [Pathname "path"]), 38, [],
1433    [InitISOFS, Always, TestOutputFalse (
1434       [["is_dir"; "/known-3"]]);
1435     InitISOFS, Always, TestOutputTrue (
1436       [["is_dir"; "/directory"]])],
1437    "test if file exists",
1438    "\
1439 This returns C<true> if and only if there is a directory
1440 with the given C<path> name.  Note that it returns false for
1441 other objects like files.
1442
1443 See also C<guestfs_stat>.");
1444
1445   ("pvcreate", (RErr, [Device "device"]), 39, [Optional "lvm2"],
1446    [InitEmpty, Always, TestOutputListOfDevices (
1447       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1448        ["pvcreate"; "/dev/sda1"];
1449        ["pvcreate"; "/dev/sda2"];
1450        ["pvcreate"; "/dev/sda3"];
1451        ["pvs"]], ["/dev/sda1"; "/dev/sda2"; "/dev/sda3"])],
1452    "create an LVM physical volume",
1453    "\
1454 This creates an LVM physical volume on the named C<device>,
1455 where C<device> should usually be a partition name such
1456 as C</dev/sda1>.");
1457
1458   ("vgcreate", (RErr, [String "volgroup"; DeviceList "physvols"]), 40, [Optional "lvm2"],
1459    [InitEmpty, Always, TestOutputList (
1460       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1461        ["pvcreate"; "/dev/sda1"];
1462        ["pvcreate"; "/dev/sda2"];
1463        ["pvcreate"; "/dev/sda3"];
1464        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1465        ["vgcreate"; "VG2"; "/dev/sda3"];
1466        ["vgs"]], ["VG1"; "VG2"])],
1467    "create an LVM volume group",
1468    "\
1469 This creates an LVM volume group called C<volgroup>
1470 from the non-empty list of physical volumes C<physvols>.");
1471
1472   ("lvcreate", (RErr, [String "logvol"; String "volgroup"; Int "mbytes"]), 41, [Optional "lvm2"],
1473    [InitEmpty, Always, TestOutputList (
1474       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1475        ["pvcreate"; "/dev/sda1"];
1476        ["pvcreate"; "/dev/sda2"];
1477        ["pvcreate"; "/dev/sda3"];
1478        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1479        ["vgcreate"; "VG2"; "/dev/sda3"];
1480        ["lvcreate"; "LV1"; "VG1"; "50"];
1481        ["lvcreate"; "LV2"; "VG1"; "50"];
1482        ["lvcreate"; "LV3"; "VG2"; "50"];
1483        ["lvcreate"; "LV4"; "VG2"; "50"];
1484        ["lvcreate"; "LV5"; "VG2"; "50"];
1485        ["lvs"]],
1486       ["/dev/VG1/LV1"; "/dev/VG1/LV2";
1487        "/dev/VG2/LV3"; "/dev/VG2/LV4"; "/dev/VG2/LV5"])],
1488    "create an LVM logical volume",
1489    "\
1490 This creates an LVM logical volume called C<logvol>
1491 on the volume group C<volgroup>, with C<size> megabytes.");
1492
1493   ("mkfs", (RErr, [String "fstype"; Device "device"]), 42, [],
1494    [InitEmpty, Always, TestOutput (
1495       [["part_disk"; "/dev/sda"; "mbr"];
1496        ["mkfs"; "ext2"; "/dev/sda1"];
1497        ["mount_options"; ""; "/dev/sda1"; "/"];
1498        ["write_file"; "/new"; "new file contents"; "0"];
1499        ["cat"; "/new"]], "new file contents")],
1500    "make a filesystem",
1501    "\
1502 This creates a filesystem on C<device> (usually a partition
1503 or LVM logical volume).  The filesystem type is C<fstype>, for
1504 example C<ext3>.");
1505
1506   ("sfdisk", (RErr, [Device "device";
1507                      Int "cyls"; Int "heads"; Int "sectors";
1508                      StringList "lines"]), 43, [DangerWillRobinson],
1509    [],
1510    "create partitions on a block device",
1511    "\
1512 This is a direct interface to the L<sfdisk(8)> program for creating
1513 partitions on block devices.
1514
1515 C<device> should be a block device, for example C</dev/sda>.
1516
1517 C<cyls>, C<heads> and C<sectors> are the number of cylinders, heads
1518 and sectors on the device, which are passed directly to sfdisk as
1519 the I<-C>, I<-H> and I<-S> parameters.  If you pass C<0> for any
1520 of these, then the corresponding parameter is omitted.  Usually for
1521 'large' disks, you can just pass C<0> for these, but for small
1522 (floppy-sized) disks, sfdisk (or rather, the kernel) cannot work
1523 out the right geometry and you will need to tell it.
1524
1525 C<lines> is a list of lines that we feed to C<sfdisk>.  For more
1526 information refer to the L<sfdisk(8)> manpage.
1527
1528 To create a single partition occupying the whole disk, you would
1529 pass C<lines> as a single element list, when the single element being
1530 the string C<,> (comma).
1531
1532 See also: C<guestfs_sfdisk_l>, C<guestfs_sfdisk_N>,
1533 C<guestfs_part_init>");
1534
1535   ("write_file", (RErr, [Pathname "path"; String "content"; Int "size"]), 44, [ProtocolLimitWarning],
1536    [InitBasicFS, Always, TestOutput (
1537       [["write_file"; "/new"; "new file contents"; "0"];
1538        ["cat"; "/new"]], "new file contents");
1539     InitBasicFS, Always, TestOutput (
1540       [["write_file"; "/new"; "\nnew file contents\n"; "0"];
1541        ["cat"; "/new"]], "\nnew file contents\n");
1542     InitBasicFS, Always, TestOutput (
1543       [["write_file"; "/new"; "\n\n"; "0"];
1544        ["cat"; "/new"]], "\n\n");
1545     InitBasicFS, Always, TestOutput (
1546       [["write_file"; "/new"; ""; "0"];
1547        ["cat"; "/new"]], "");
1548     InitBasicFS, Always, TestOutput (
1549       [["write_file"; "/new"; "\n\n\n"; "0"];
1550        ["cat"; "/new"]], "\n\n\n");
1551     InitBasicFS, Always, TestOutput (
1552       [["write_file"; "/new"; "\n"; "0"];
1553        ["cat"; "/new"]], "\n")],
1554    "create a file",
1555    "\
1556 This call creates a file called C<path>.  The contents of the
1557 file is the string C<content> (which can contain any 8 bit data),
1558 with length C<size>.
1559
1560 As a special case, if C<size> is C<0>
1561 then the length is calculated using C<strlen> (so in this case
1562 the content cannot contain embedded ASCII NULs).
1563
1564 I<NB.> Owing to a bug, writing content containing ASCII NUL
1565 characters does I<not> work, even if the length is specified.
1566 We hope to resolve this bug in a future version.  In the meantime
1567 use C<guestfs_upload>.");
1568
1569   ("umount", (RErr, [String "pathordevice"]), 45, [FishAlias "unmount"],
1570    [InitEmpty, Always, TestOutputListOfDevices (
1571       [["part_disk"; "/dev/sda"; "mbr"];
1572        ["mkfs"; "ext2"; "/dev/sda1"];
1573        ["mount_options"; ""; "/dev/sda1"; "/"];
1574        ["mounts"]], ["/dev/sda1"]);
1575     InitEmpty, Always, TestOutputList (
1576       [["part_disk"; "/dev/sda"; "mbr"];
1577        ["mkfs"; "ext2"; "/dev/sda1"];
1578        ["mount_options"; ""; "/dev/sda1"; "/"];
1579        ["umount"; "/"];
1580        ["mounts"]], [])],
1581    "unmount a filesystem",
1582    "\
1583 This unmounts the given filesystem.  The filesystem may be
1584 specified either by its mountpoint (path) or the device which
1585 contains the filesystem.");
1586
1587   ("mounts", (RStringList "devices", []), 46, [],
1588    [InitBasicFS, Always, TestOutputListOfDevices (
1589       [["mounts"]], ["/dev/sda1"])],
1590    "show mounted filesystems",
1591    "\
1592 This returns the list of currently mounted filesystems.  It returns
1593 the list of devices (eg. C</dev/sda1>, C</dev/VG/LV>).
1594
1595 Some internal mounts are not shown.
1596
1597 See also: C<guestfs_mountpoints>");
1598
1599   ("umount_all", (RErr, []), 47, [FishAlias "unmount-all"],
1600    [InitBasicFS, Always, TestOutputList (
1601       [["umount_all"];
1602        ["mounts"]], []);
1603     (* check that umount_all can unmount nested mounts correctly: *)
1604     InitEmpty, Always, TestOutputList (
1605       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1606        ["mkfs"; "ext2"; "/dev/sda1"];
1607        ["mkfs"; "ext2"; "/dev/sda2"];
1608        ["mkfs"; "ext2"; "/dev/sda3"];
1609        ["mount_options"; ""; "/dev/sda1"; "/"];
1610        ["mkdir"; "/mp1"];
1611        ["mount_options"; ""; "/dev/sda2"; "/mp1"];
1612        ["mkdir"; "/mp1/mp2"];
1613        ["mount_options"; ""; "/dev/sda3"; "/mp1/mp2"];
1614        ["mkdir"; "/mp1/mp2/mp3"];
1615        ["umount_all"];
1616        ["mounts"]], [])],
1617    "unmount all filesystems",
1618    "\
1619 This unmounts all mounted filesystems.
1620
1621 Some internal mounts are not unmounted by this call.");
1622
1623   ("lvm_remove_all", (RErr, []), 48, [DangerWillRobinson; Optional "lvm2"],
1624    [],
1625    "remove all LVM LVs, VGs and PVs",
1626    "\
1627 This command removes all LVM logical volumes, volume groups
1628 and physical volumes.");
1629
1630   ("file", (RString "description", [Dev_or_Path "path"]), 49, [],
1631    [InitISOFS, Always, TestOutput (
1632       [["file"; "/empty"]], "empty");
1633     InitISOFS, Always, TestOutput (
1634       [["file"; "/known-1"]], "ASCII text");
1635     InitISOFS, Always, TestLastFail (
1636       [["file"; "/notexists"]])],
1637    "determine file type",
1638    "\
1639 This call uses the standard L<file(1)> command to determine
1640 the type or contents of the file.  This also works on devices,
1641 for example to find out whether a partition contains a filesystem.
1642
1643 This call will also transparently look inside various types
1644 of compressed file.
1645
1646 The exact command which runs is C<file -zbsL path>.  Note in
1647 particular that the filename is not prepended to the output
1648 (the C<-b> option).");
1649
1650   ("command", (RString "output", [StringList "arguments"]), 50, [ProtocolLimitWarning],
1651    [InitBasicFS, Always, TestOutput (
1652       [["upload"; "test-command"; "/test-command"];
1653        ["chmod"; "0o755"; "/test-command"];
1654        ["command"; "/test-command 1"]], "Result1");
1655     InitBasicFS, Always, TestOutput (
1656       [["upload"; "test-command"; "/test-command"];
1657        ["chmod"; "0o755"; "/test-command"];
1658        ["command"; "/test-command 2"]], "Result2\n");
1659     InitBasicFS, Always, TestOutput (
1660       [["upload"; "test-command"; "/test-command"];
1661        ["chmod"; "0o755"; "/test-command"];
1662        ["command"; "/test-command 3"]], "\nResult3");
1663     InitBasicFS, Always, TestOutput (
1664       [["upload"; "test-command"; "/test-command"];
1665        ["chmod"; "0o755"; "/test-command"];
1666        ["command"; "/test-command 4"]], "\nResult4\n");
1667     InitBasicFS, Always, TestOutput (
1668       [["upload"; "test-command"; "/test-command"];
1669        ["chmod"; "0o755"; "/test-command"];
1670        ["command"; "/test-command 5"]], "\nResult5\n\n");
1671     InitBasicFS, Always, TestOutput (
1672       [["upload"; "test-command"; "/test-command"];
1673        ["chmod"; "0o755"; "/test-command"];
1674        ["command"; "/test-command 6"]], "\n\nResult6\n\n");
1675     InitBasicFS, Always, TestOutput (
1676       [["upload"; "test-command"; "/test-command"];
1677        ["chmod"; "0o755"; "/test-command"];
1678        ["command"; "/test-command 7"]], "");
1679     InitBasicFS, Always, TestOutput (
1680       [["upload"; "test-command"; "/test-command"];
1681        ["chmod"; "0o755"; "/test-command"];
1682        ["command"; "/test-command 8"]], "\n");
1683     InitBasicFS, Always, TestOutput (
1684       [["upload"; "test-command"; "/test-command"];
1685        ["chmod"; "0o755"; "/test-command"];
1686        ["command"; "/test-command 9"]], "\n\n");
1687     InitBasicFS, Always, TestOutput (
1688       [["upload"; "test-command"; "/test-command"];
1689        ["chmod"; "0o755"; "/test-command"];
1690        ["command"; "/test-command 10"]], "Result10-1\nResult10-2\n");
1691     InitBasicFS, Always, TestOutput (
1692       [["upload"; "test-command"; "/test-command"];
1693        ["chmod"; "0o755"; "/test-command"];
1694        ["command"; "/test-command 11"]], "Result11-1\nResult11-2");
1695     InitBasicFS, Always, TestLastFail (
1696       [["upload"; "test-command"; "/test-command"];
1697        ["chmod"; "0o755"; "/test-command"];
1698        ["command"; "/test-command"]])],
1699    "run a command from the guest filesystem",
1700    "\
1701 This call runs a command from the guest filesystem.  The
1702 filesystem must be mounted, and must contain a compatible
1703 operating system (ie. something Linux, with the same
1704 or compatible processor architecture).
1705
1706 The single parameter is an argv-style list of arguments.
1707 The first element is the name of the program to run.
1708 Subsequent elements are parameters.  The list must be
1709 non-empty (ie. must contain a program name).  Note that
1710 the command runs directly, and is I<not> invoked via
1711 the shell (see C<guestfs_sh>).
1712
1713 The return value is anything printed to I<stdout> by
1714 the command.
1715
1716 If the command returns a non-zero exit status, then
1717 this function returns an error message.  The error message
1718 string is the content of I<stderr> from the command.
1719
1720 The C<$PATH> environment variable will contain at least
1721 C</usr/bin> and C</bin>.  If you require a program from
1722 another location, you should provide the full path in the
1723 first parameter.
1724
1725 Shared libraries and data files required by the program
1726 must be available on filesystems which are mounted in the
1727 correct places.  It is the caller's responsibility to ensure
1728 all filesystems that are needed are mounted at the right
1729 locations.");
1730
1731   ("command_lines", (RStringList "lines", [StringList "arguments"]), 51, [ProtocolLimitWarning],
1732    [InitBasicFS, Always, TestOutputList (
1733       [["upload"; "test-command"; "/test-command"];
1734        ["chmod"; "0o755"; "/test-command"];
1735        ["command_lines"; "/test-command 1"]], ["Result1"]);
1736     InitBasicFS, Always, TestOutputList (
1737       [["upload"; "test-command"; "/test-command"];
1738        ["chmod"; "0o755"; "/test-command"];
1739        ["command_lines"; "/test-command 2"]], ["Result2"]);
1740     InitBasicFS, Always, TestOutputList (
1741       [["upload"; "test-command"; "/test-command"];
1742        ["chmod"; "0o755"; "/test-command"];
1743        ["command_lines"; "/test-command 3"]], ["";"Result3"]);
1744     InitBasicFS, Always, TestOutputList (
1745       [["upload"; "test-command"; "/test-command"];
1746        ["chmod"; "0o755"; "/test-command"];
1747        ["command_lines"; "/test-command 4"]], ["";"Result4"]);
1748     InitBasicFS, Always, TestOutputList (
1749       [["upload"; "test-command"; "/test-command"];
1750        ["chmod"; "0o755"; "/test-command"];
1751        ["command_lines"; "/test-command 5"]], ["";"Result5";""]);
1752     InitBasicFS, Always, TestOutputList (
1753       [["upload"; "test-command"; "/test-command"];
1754        ["chmod"; "0o755"; "/test-command"];
1755        ["command_lines"; "/test-command 6"]], ["";"";"Result6";""]);
1756     InitBasicFS, Always, TestOutputList (
1757       [["upload"; "test-command"; "/test-command"];
1758        ["chmod"; "0o755"; "/test-command"];
1759        ["command_lines"; "/test-command 7"]], []);
1760     InitBasicFS, Always, TestOutputList (
1761       [["upload"; "test-command"; "/test-command"];
1762        ["chmod"; "0o755"; "/test-command"];
1763        ["command_lines"; "/test-command 8"]], [""]);
1764     InitBasicFS, Always, TestOutputList (
1765       [["upload"; "test-command"; "/test-command"];
1766        ["chmod"; "0o755"; "/test-command"];
1767        ["command_lines"; "/test-command 9"]], ["";""]);
1768     InitBasicFS, Always, TestOutputList (
1769       [["upload"; "test-command"; "/test-command"];
1770        ["chmod"; "0o755"; "/test-command"];
1771        ["command_lines"; "/test-command 10"]], ["Result10-1";"Result10-2"]);
1772     InitBasicFS, Always, TestOutputList (
1773       [["upload"; "test-command"; "/test-command"];
1774        ["chmod"; "0o755"; "/test-command"];
1775        ["command_lines"; "/test-command 11"]], ["Result11-1";"Result11-2"])],
1776    "run a command, returning lines",
1777    "\
1778 This is the same as C<guestfs_command>, but splits the
1779 result into a list of lines.
1780
1781 See also: C<guestfs_sh_lines>");
1782
1783   ("stat", (RStruct ("statbuf", "stat"), [Pathname "path"]), 52, [],
1784    [InitISOFS, Always, TestOutputStruct (
1785       [["stat"; "/empty"]], [CompareWithInt ("size", 0)])],
1786    "get file information",
1787    "\
1788 Returns file information for the given C<path>.
1789
1790 This is the same as the C<stat(2)> system call.");
1791
1792   ("lstat", (RStruct ("statbuf", "stat"), [Pathname "path"]), 53, [],
1793    [InitISOFS, Always, TestOutputStruct (
1794       [["lstat"; "/empty"]], [CompareWithInt ("size", 0)])],
1795    "get file information for a symbolic link",
1796    "\
1797 Returns file information for the given C<path>.
1798
1799 This is the same as C<guestfs_stat> except that if C<path>
1800 is a symbolic link, then the link is stat-ed, not the file it
1801 refers to.
1802
1803 This is the same as the C<lstat(2)> system call.");
1804
1805   ("statvfs", (RStruct ("statbuf", "statvfs"), [Pathname "path"]), 54, [],
1806    [InitISOFS, Always, TestOutputStruct (
1807       [["statvfs"; "/"]], [CompareWithInt ("namemax", 255)])],
1808    "get file system statistics",
1809    "\
1810 Returns file system statistics for any mounted file system.
1811 C<path> should be a file or directory in the mounted file system
1812 (typically it is the mount point itself, but it doesn't need to be).
1813
1814 This is the same as the C<statvfs(2)> system call.");
1815
1816   ("tune2fs_l", (RHashtable "superblock", [Device "device"]), 55, [],
1817    [], (* XXX test *)
1818    "get ext2/ext3/ext4 superblock details",
1819    "\
1820 This returns the contents of the ext2, ext3 or ext4 filesystem
1821 superblock on C<device>.
1822
1823 It is the same as running C<tune2fs -l device>.  See L<tune2fs(8)>
1824 manpage for more details.  The list of fields returned isn't
1825 clearly defined, and depends on both the version of C<tune2fs>
1826 that libguestfs was built against, and the filesystem itself.");
1827
1828   ("blockdev_setro", (RErr, [Device "device"]), 56, [],
1829    [InitEmpty, Always, TestOutputTrue (
1830       [["blockdev_setro"; "/dev/sda"];
1831        ["blockdev_getro"; "/dev/sda"]])],
1832    "set block device to read-only",
1833    "\
1834 Sets the block device named C<device> to read-only.
1835
1836 This uses the L<blockdev(8)> command.");
1837
1838   ("blockdev_setrw", (RErr, [Device "device"]), 57, [],
1839    [InitEmpty, Always, TestOutputFalse (
1840       [["blockdev_setrw"; "/dev/sda"];
1841        ["blockdev_getro"; "/dev/sda"]])],
1842    "set block device to read-write",
1843    "\
1844 Sets the block device named C<device> to read-write.
1845
1846 This uses the L<blockdev(8)> command.");
1847
1848   ("blockdev_getro", (RBool "ro", [Device "device"]), 58, [],
1849    [InitEmpty, Always, TestOutputTrue (
1850       [["blockdev_setro"; "/dev/sda"];
1851        ["blockdev_getro"; "/dev/sda"]])],
1852    "is block device set to read-only",
1853    "\
1854 Returns a boolean indicating if the block device is read-only
1855 (true if read-only, false if not).
1856
1857 This uses the L<blockdev(8)> command.");
1858
1859   ("blockdev_getss", (RInt "sectorsize", [Device "device"]), 59, [],
1860    [InitEmpty, Always, TestOutputInt (
1861       [["blockdev_getss"; "/dev/sda"]], 512)],
1862    "get sectorsize of block device",
1863    "\
1864 This returns the size of sectors on a block device.
1865 Usually 512, but can be larger for modern devices.
1866
1867 (Note, this is not the size in sectors, use C<guestfs_blockdev_getsz>
1868 for that).
1869
1870 This uses the L<blockdev(8)> command.");
1871
1872   ("blockdev_getbsz", (RInt "blocksize", [Device "device"]), 60, [],
1873    [InitEmpty, Always, TestOutputInt (
1874       [["blockdev_getbsz"; "/dev/sda"]], 4096)],
1875    "get blocksize of block device",
1876    "\
1877 This returns the block size of a device.
1878
1879 (Note this is different from both I<size in blocks> and
1880 I<filesystem block size>).
1881
1882 This uses the L<blockdev(8)> command.");
1883
1884   ("blockdev_setbsz", (RErr, [Device "device"; Int "blocksize"]), 61, [],
1885    [], (* XXX test *)
1886    "set blocksize of block device",
1887    "\
1888 This sets the block size of a device.
1889
1890 (Note this is different from both I<size in blocks> and
1891 I<filesystem block size>).
1892
1893 This uses the L<blockdev(8)> command.");
1894
1895   ("blockdev_getsz", (RInt64 "sizeinsectors", [Device "device"]), 62, [],
1896    [InitEmpty, Always, TestOutputInt (
1897       [["blockdev_getsz"; "/dev/sda"]], 1024000)],
1898    "get total size of device in 512-byte sectors",
1899    "\
1900 This returns the size of the device in units of 512-byte sectors
1901 (even if the sectorsize isn't 512 bytes ... weird).
1902
1903 See also C<guestfs_blockdev_getss> for the real sector size of
1904 the device, and C<guestfs_blockdev_getsize64> for the more
1905 useful I<size in bytes>.
1906
1907 This uses the L<blockdev(8)> command.");
1908
1909   ("blockdev_getsize64", (RInt64 "sizeinbytes", [Device "device"]), 63, [],
1910    [InitEmpty, Always, TestOutputInt (
1911       [["blockdev_getsize64"; "/dev/sda"]], 524288000)],
1912    "get total size of device in bytes",
1913    "\
1914 This returns the size of the device in bytes.
1915
1916 See also C<guestfs_blockdev_getsz>.
1917
1918 This uses the L<blockdev(8)> command.");
1919
1920   ("blockdev_flushbufs", (RErr, [Device "device"]), 64, [],
1921    [InitEmpty, Always, TestRun
1922       [["blockdev_flushbufs"; "/dev/sda"]]],
1923    "flush device buffers",
1924    "\
1925 This tells the kernel to flush internal buffers associated
1926 with C<device>.
1927
1928 This uses the L<blockdev(8)> command.");
1929
1930   ("blockdev_rereadpt", (RErr, [Device "device"]), 65, [],
1931    [InitEmpty, Always, TestRun
1932       [["blockdev_rereadpt"; "/dev/sda"]]],
1933    "reread partition table",
1934    "\
1935 Reread the partition table on C<device>.
1936
1937 This uses the L<blockdev(8)> command.");
1938
1939   ("upload", (RErr, [FileIn "filename"; Dev_or_Path "remotefilename"]), 66, [],
1940    [InitBasicFS, Always, TestOutput (
1941       (* Pick a file from cwd which isn't likely to change. *)
1942       [["upload"; "../COPYING.LIB"; "/COPYING.LIB"];
1943        ["checksum"; "md5"; "/COPYING.LIB"]],
1944       Digest.to_hex (Digest.file "COPYING.LIB"))],
1945    "upload a file from the local machine",
1946    "\
1947 Upload local file C<filename> to C<remotefilename> on the
1948 filesystem.
1949
1950 C<filename> can also be a named pipe.
1951
1952 See also C<guestfs_download>.");
1953
1954   ("download", (RErr, [Dev_or_Path "remotefilename"; FileOut "filename"]), 67, [],
1955    [InitBasicFS, Always, TestOutput (
1956       (* Pick a file from cwd which isn't likely to change. *)
1957       [["upload"; "../COPYING.LIB"; "/COPYING.LIB"];
1958        ["download"; "/COPYING.LIB"; "testdownload.tmp"];
1959        ["upload"; "testdownload.tmp"; "/upload"];
1960        ["checksum"; "md5"; "/upload"]],
1961       Digest.to_hex (Digest.file "COPYING.LIB"))],
1962    "download a file to the local machine",
1963    "\
1964 Download file C<remotefilename> and save it as C<filename>
1965 on the local machine.
1966
1967 C<filename> can also be a named pipe.
1968
1969 See also C<guestfs_upload>, C<guestfs_cat>.");
1970
1971   ("checksum", (RString "checksum", [String "csumtype"; Pathname "path"]), 68, [],
1972    [InitISOFS, Always, TestOutput (
1973       [["checksum"; "crc"; "/known-3"]], "2891671662");
1974     InitISOFS, Always, TestLastFail (
1975       [["checksum"; "crc"; "/notexists"]]);
1976     InitISOFS, Always, TestOutput (
1977       [["checksum"; "md5"; "/known-3"]], "46d6ca27ee07cdc6fa99c2e138cc522c");
1978     InitISOFS, Always, TestOutput (
1979       [["checksum"; "sha1"; "/known-3"]], "b7ebccc3ee418311091c3eda0a45b83c0a770f15");
1980     InitISOFS, Always, TestOutput (
1981       [["checksum"; "sha224"; "/known-3"]], "d2cd1774b28f3659c14116be0a6dc2bb5c4b350ce9cd5defac707741");
1982     InitISOFS, Always, TestOutput (
1983       [["checksum"; "sha256"; "/known-3"]], "75bb71b90cd20cb13f86d2bea8dad63ac7194e7517c3b52b8d06ff52d3487d30");
1984     InitISOFS, Always, TestOutput (
1985       [["checksum"; "sha384"; "/known-3"]], "5fa7883430f357b5d7b7271d3a1d2872b51d73cba72731de6863d3dea55f30646af2799bef44d5ea776a5ec7941ac640");
1986     InitISOFS, Always, TestOutput (
1987       [["checksum"; "sha512"; "/known-3"]], "2794062c328c6b216dca90443b7f7134c5f40e56bd0ed7853123275a09982a6f992e6ca682f9d2fba34a4c5e870d8fe077694ff831e3032a004ee077e00603f6")],
1988    "compute MD5, SHAx or CRC checksum of file",
1989    "\
1990 This call computes the MD5, SHAx or CRC checksum of the
1991 file named C<path>.
1992
1993 The type of checksum to compute is given by the C<csumtype>
1994 parameter which must have one of the following values:
1995
1996 =over 4
1997
1998 =item C<crc>
1999
2000 Compute the cyclic redundancy check (CRC) specified by POSIX
2001 for the C<cksum> command.
2002
2003 =item C<md5>
2004
2005 Compute the MD5 hash (using the C<md5sum> program).
2006
2007 =item C<sha1>
2008
2009 Compute the SHA1 hash (using the C<sha1sum> program).
2010
2011 =item C<sha224>
2012
2013 Compute the SHA224 hash (using the C<sha224sum> program).
2014
2015 =item C<sha256>
2016
2017 Compute the SHA256 hash (using the C<sha256sum> program).
2018
2019 =item C<sha384>
2020
2021 Compute the SHA384 hash (using the C<sha384sum> program).
2022
2023 =item C<sha512>
2024
2025 Compute the SHA512 hash (using the C<sha512sum> program).
2026
2027 =back
2028
2029 The checksum is returned as a printable string.");
2030
2031   ("tar_in", (RErr, [FileIn "tarfile"; String "directory"]), 69, [],
2032    [InitBasicFS, Always, TestOutput (
2033       [["tar_in"; "../images/helloworld.tar"; "/"];
2034        ["cat"; "/hello"]], "hello\n")],
2035    "unpack tarfile to directory",
2036    "\
2037 This command uploads and unpacks local file C<tarfile> (an
2038 I<uncompressed> tar file) into C<directory>.
2039
2040 To upload a compressed tarball, use C<guestfs_tgz_in>
2041 or C<guestfs_txz_in>.");
2042
2043   ("tar_out", (RErr, [String "directory"; FileOut "tarfile"]), 70, [],
2044    [],
2045    "pack directory into tarfile",
2046    "\
2047 This command packs the contents of C<directory> and downloads
2048 it to local file C<tarfile>.
2049
2050 To download a compressed tarball, use C<guestfs_tgz_out>
2051 or C<guestfs_txz_out>.");
2052
2053   ("tgz_in", (RErr, [FileIn "tarball"; String "directory"]), 71, [],
2054    [InitBasicFS, Always, TestOutput (
2055       [["tgz_in"; "../images/helloworld.tar.gz"; "/"];
2056        ["cat"; "/hello"]], "hello\n")],
2057    "unpack compressed tarball to directory",
2058    "\
2059 This command uploads and unpacks local file C<tarball> (a
2060 I<gzip compressed> tar file) into C<directory>.
2061
2062 To upload an uncompressed tarball, use C<guestfs_tar_in>.");
2063
2064   ("tgz_out", (RErr, [Pathname "directory"; FileOut "tarball"]), 72, [],
2065    [],
2066    "pack directory into compressed tarball",
2067    "\
2068 This command packs the contents of C<directory> and downloads
2069 it to local file C<tarball>.
2070
2071 To download an uncompressed tarball, use C<guestfs_tar_out>.");
2072
2073   ("mount_ro", (RErr, [Device "device"; String "mountpoint"]), 73, [],
2074    [InitBasicFS, Always, TestLastFail (
2075       [["umount"; "/"];
2076        ["mount_ro"; "/dev/sda1"; "/"];
2077        ["touch"; "/new"]]);
2078     InitBasicFS, Always, TestOutput (
2079       [["write_file"; "/new"; "data"; "0"];
2080        ["umount"; "/"];
2081        ["mount_ro"; "/dev/sda1"; "/"];
2082        ["cat"; "/new"]], "data")],
2083    "mount a guest disk, read-only",
2084    "\
2085 This is the same as the C<guestfs_mount> command, but it
2086 mounts the filesystem with the read-only (I<-o ro>) flag.");
2087
2088   ("mount_options", (RErr, [String "options"; Device "device"; String "mountpoint"]), 74, [],
2089    [],
2090    "mount a guest disk with mount options",
2091    "\
2092 This is the same as the C<guestfs_mount> command, but it
2093 allows you to set the mount options as for the
2094 L<mount(8)> I<-o> flag.");
2095
2096   ("mount_vfs", (RErr, [String "options"; String "vfstype"; Device "device"; String "mountpoint"]), 75, [],
2097    [],
2098    "mount a guest disk with mount options and vfstype",
2099    "\
2100 This is the same as the C<guestfs_mount> command, but it
2101 allows you to set both the mount options and the vfstype
2102 as for the L<mount(8)> I<-o> and I<-t> flags.");
2103
2104   ("debug", (RString "result", [String "subcmd"; StringList "extraargs"]), 76, [],
2105    [],
2106    "debugging and internals",
2107    "\
2108 The C<guestfs_debug> command exposes some internals of
2109 C<guestfsd> (the guestfs daemon) that runs inside the
2110 qemu subprocess.
2111
2112 There is no comprehensive help for this command.  You have
2113 to look at the file C<daemon/debug.c> in the libguestfs source
2114 to find out what you can do.");
2115
2116   ("lvremove", (RErr, [Device "device"]), 77, [Optional "lvm2"],
2117    [InitEmpty, Always, TestOutputList (
2118       [["part_disk"; "/dev/sda"; "mbr"];
2119        ["pvcreate"; "/dev/sda1"];
2120        ["vgcreate"; "VG"; "/dev/sda1"];
2121        ["lvcreate"; "LV1"; "VG"; "50"];
2122        ["lvcreate"; "LV2"; "VG"; "50"];
2123        ["lvremove"; "/dev/VG/LV1"];
2124        ["lvs"]], ["/dev/VG/LV2"]);
2125     InitEmpty, Always, TestOutputList (
2126       [["part_disk"; "/dev/sda"; "mbr"];
2127        ["pvcreate"; "/dev/sda1"];
2128        ["vgcreate"; "VG"; "/dev/sda1"];
2129        ["lvcreate"; "LV1"; "VG"; "50"];
2130        ["lvcreate"; "LV2"; "VG"; "50"];
2131        ["lvremove"; "/dev/VG"];
2132        ["lvs"]], []);
2133     InitEmpty, Always, TestOutputList (
2134       [["part_disk"; "/dev/sda"; "mbr"];
2135        ["pvcreate"; "/dev/sda1"];
2136        ["vgcreate"; "VG"; "/dev/sda1"];
2137        ["lvcreate"; "LV1"; "VG"; "50"];
2138        ["lvcreate"; "LV2"; "VG"; "50"];
2139        ["lvremove"; "/dev/VG"];
2140        ["vgs"]], ["VG"])],
2141    "remove an LVM logical volume",
2142    "\
2143 Remove an LVM logical volume C<device>, where C<device> is
2144 the path to the LV, such as C</dev/VG/LV>.
2145
2146 You can also remove all LVs in a volume group by specifying
2147 the VG name, C</dev/VG>.");
2148
2149   ("vgremove", (RErr, [String "vgname"]), 78, [Optional "lvm2"],
2150    [InitEmpty, Always, TestOutputList (
2151       [["part_disk"; "/dev/sda"; "mbr"];
2152        ["pvcreate"; "/dev/sda1"];
2153        ["vgcreate"; "VG"; "/dev/sda1"];
2154        ["lvcreate"; "LV1"; "VG"; "50"];
2155        ["lvcreate"; "LV2"; "VG"; "50"];
2156        ["vgremove"; "VG"];
2157        ["lvs"]], []);
2158     InitEmpty, Always, TestOutputList (
2159       [["part_disk"; "/dev/sda"; "mbr"];
2160        ["pvcreate"; "/dev/sda1"];
2161        ["vgcreate"; "VG"; "/dev/sda1"];
2162        ["lvcreate"; "LV1"; "VG"; "50"];
2163        ["lvcreate"; "LV2"; "VG"; "50"];
2164        ["vgremove"; "VG"];
2165        ["vgs"]], [])],
2166    "remove an LVM volume group",
2167    "\
2168 Remove an LVM volume group C<vgname>, (for example C<VG>).
2169
2170 This also forcibly removes all logical volumes in the volume
2171 group (if any).");
2172
2173   ("pvremove", (RErr, [Device "device"]), 79, [Optional "lvm2"],
2174    [InitEmpty, Always, TestOutputListOfDevices (
2175       [["part_disk"; "/dev/sda"; "mbr"];
2176        ["pvcreate"; "/dev/sda1"];
2177        ["vgcreate"; "VG"; "/dev/sda1"];
2178        ["lvcreate"; "LV1"; "VG"; "50"];
2179        ["lvcreate"; "LV2"; "VG"; "50"];
2180        ["vgremove"; "VG"];
2181        ["pvremove"; "/dev/sda1"];
2182        ["lvs"]], []);
2183     InitEmpty, Always, TestOutputListOfDevices (
2184       [["part_disk"; "/dev/sda"; "mbr"];
2185        ["pvcreate"; "/dev/sda1"];
2186        ["vgcreate"; "VG"; "/dev/sda1"];
2187        ["lvcreate"; "LV1"; "VG"; "50"];
2188        ["lvcreate"; "LV2"; "VG"; "50"];
2189        ["vgremove"; "VG"];
2190        ["pvremove"; "/dev/sda1"];
2191        ["vgs"]], []);
2192     InitEmpty, Always, TestOutputListOfDevices (
2193       [["part_disk"; "/dev/sda"; "mbr"];
2194        ["pvcreate"; "/dev/sda1"];
2195        ["vgcreate"; "VG"; "/dev/sda1"];
2196        ["lvcreate"; "LV1"; "VG"; "50"];
2197        ["lvcreate"; "LV2"; "VG"; "50"];
2198        ["vgremove"; "VG"];
2199        ["pvremove"; "/dev/sda1"];
2200        ["pvs"]], [])],
2201    "remove an LVM physical volume",
2202    "\
2203 This wipes a physical volume C<device> so that LVM will no longer
2204 recognise it.
2205
2206 The implementation uses the C<pvremove> command which refuses to
2207 wipe physical volumes that contain any volume groups, so you have
2208 to remove those first.");
2209
2210   ("set_e2label", (RErr, [Device "device"; String "label"]), 80, [],
2211    [InitBasicFS, Always, TestOutput (
2212       [["set_e2label"; "/dev/sda1"; "testlabel"];
2213        ["get_e2label"; "/dev/sda1"]], "testlabel")],
2214    "set the ext2/3/4 filesystem label",
2215    "\
2216 This sets the ext2/3/4 filesystem label of the filesystem on
2217 C<device> to C<label>.  Filesystem labels are limited to
2218 16 characters.
2219
2220 You can use either C<guestfs_tune2fs_l> or C<guestfs_get_e2label>
2221 to return the existing label on a filesystem.");
2222
2223   ("get_e2label", (RString "label", [Device "device"]), 81, [],
2224    [],
2225    "get the ext2/3/4 filesystem label",
2226    "\
2227 This returns the ext2/3/4 filesystem label of the filesystem on
2228 C<device>.");
2229
2230   ("set_e2uuid", (RErr, [Device "device"; String "uuid"]), 82, [],
2231    (let uuid = uuidgen () in
2232     [InitBasicFS, Always, TestOutput (
2233        [["set_e2uuid"; "/dev/sda1"; uuid];
2234         ["get_e2uuid"; "/dev/sda1"]], uuid);
2235      InitBasicFS, Always, TestOutput (
2236        [["set_e2uuid"; "/dev/sda1"; "clear"];
2237         ["get_e2uuid"; "/dev/sda1"]], "");
2238      (* We can't predict what UUIDs will be, so just check the commands run. *)
2239      InitBasicFS, Always, TestRun (
2240        [["set_e2uuid"; "/dev/sda1"; "random"]]);
2241      InitBasicFS, Always, TestRun (
2242        [["set_e2uuid"; "/dev/sda1"; "time"]])]),
2243    "set the ext2/3/4 filesystem UUID",
2244    "\
2245 This sets the ext2/3/4 filesystem UUID of the filesystem on
2246 C<device> to C<uuid>.  The format of the UUID and alternatives
2247 such as C<clear>, C<random> and C<time> are described in the
2248 L<tune2fs(8)> manpage.
2249
2250 You can use either C<guestfs_tune2fs_l> or C<guestfs_get_e2uuid>
2251 to return the existing UUID of a filesystem.");
2252
2253   ("get_e2uuid", (RString "uuid", [Device "device"]), 83, [],
2254    [],
2255    "get the ext2/3/4 filesystem UUID",
2256    "\
2257 This returns the ext2/3/4 filesystem UUID of the filesystem on
2258 C<device>.");
2259
2260   ("fsck", (RInt "status", [String "fstype"; Device "device"]), 84, [FishOutput FishOutputHexadecimal],
2261    [InitBasicFS, Always, TestOutputInt (
2262       [["umount"; "/dev/sda1"];
2263        ["fsck"; "ext2"; "/dev/sda1"]], 0);
2264     InitBasicFS, Always, TestOutputInt (
2265       [["umount"; "/dev/sda1"];
2266        ["zero"; "/dev/sda1"];
2267        ["fsck"; "ext2"; "/dev/sda1"]], 8)],
2268    "run the filesystem checker",
2269    "\
2270 This runs the filesystem checker (fsck) on C<device> which
2271 should have filesystem type C<fstype>.
2272
2273 The returned integer is the status.  See L<fsck(8)> for the
2274 list of status codes from C<fsck>.
2275
2276 Notes:
2277
2278 =over 4
2279
2280 =item *
2281
2282 Multiple status codes can be summed together.
2283
2284 =item *
2285
2286 A non-zero return code can mean \"success\", for example if
2287 errors have been corrected on the filesystem.
2288
2289 =item *
2290
2291 Checking or repairing NTFS volumes is not supported
2292 (by linux-ntfs).
2293
2294 =back
2295
2296 This command is entirely equivalent to running C<fsck -a -t fstype device>.");
2297
2298   ("zero", (RErr, [Device "device"]), 85, [],
2299    [InitBasicFS, Always, TestOutput (
2300       [["umount"; "/dev/sda1"];
2301        ["zero"; "/dev/sda1"];
2302        ["file"; "/dev/sda1"]], "data")],
2303    "write zeroes to the device",
2304    "\
2305 This command writes zeroes over the first few blocks of C<device>.
2306
2307 How many blocks are zeroed isn't specified (but it's I<not> enough
2308 to securely wipe the device).  It should be sufficient to remove
2309 any partition tables, filesystem superblocks and so on.
2310
2311 See also: C<guestfs_zero_device>, C<guestfs_scrub_device>.");
2312
2313   ("grub_install", (RErr, [Pathname "root"; Device "device"]), 86, [],
2314    (* Test disabled because grub-install incompatible with virtio-blk driver.
2315     * See also: https://bugzilla.redhat.com/show_bug.cgi?id=479760
2316     *)
2317    [InitBasicFS, Disabled, TestOutputTrue (
2318       [["grub_install"; "/"; "/dev/sda1"];
2319        ["is_dir"; "/boot"]])],
2320    "install GRUB",
2321    "\
2322 This command installs GRUB (the Grand Unified Bootloader) on
2323 C<device>, with the root directory being C<root>.");
2324
2325   ("cp", (RErr, [Pathname "src"; Pathname "dest"]), 87, [],
2326    [InitBasicFS, Always, TestOutput (
2327       [["write_file"; "/old"; "file content"; "0"];
2328        ["cp"; "/old"; "/new"];
2329        ["cat"; "/new"]], "file content");
2330     InitBasicFS, Always, TestOutputTrue (
2331       [["write_file"; "/old"; "file content"; "0"];
2332        ["cp"; "/old"; "/new"];
2333        ["is_file"; "/old"]]);
2334     InitBasicFS, Always, TestOutput (
2335       [["write_file"; "/old"; "file content"; "0"];
2336        ["mkdir"; "/dir"];
2337        ["cp"; "/old"; "/dir/new"];
2338        ["cat"; "/dir/new"]], "file content")],
2339    "copy a file",
2340    "\
2341 This copies a file from C<src> to C<dest> where C<dest> is
2342 either a destination filename or destination directory.");
2343
2344   ("cp_a", (RErr, [Pathname "src"; Pathname "dest"]), 88, [],
2345    [InitBasicFS, Always, TestOutput (
2346       [["mkdir"; "/olddir"];
2347        ["mkdir"; "/newdir"];
2348        ["write_file"; "/olddir/file"; "file content"; "0"];
2349        ["cp_a"; "/olddir"; "/newdir"];
2350        ["cat"; "/newdir/olddir/file"]], "file content")],
2351    "copy a file or directory recursively",
2352    "\
2353 This copies a file or directory from C<src> to C<dest>
2354 recursively using the C<cp -a> command.");
2355
2356   ("mv", (RErr, [Pathname "src"; Pathname "dest"]), 89, [],
2357    [InitBasicFS, Always, TestOutput (
2358       [["write_file"; "/old"; "file content"; "0"];
2359        ["mv"; "/old"; "/new"];
2360        ["cat"; "/new"]], "file content");
2361     InitBasicFS, Always, TestOutputFalse (
2362       [["write_file"; "/old"; "file content"; "0"];
2363        ["mv"; "/old"; "/new"];
2364        ["is_file"; "/old"]])],
2365    "move a file",
2366    "\
2367 This moves a file from C<src> to C<dest> where C<dest> is
2368 either a destination filename or destination directory.");
2369
2370   ("drop_caches", (RErr, [Int "whattodrop"]), 90, [],
2371    [InitEmpty, Always, TestRun (
2372       [["drop_caches"; "3"]])],
2373    "drop kernel page cache, dentries and inodes",
2374    "\
2375 This instructs the guest kernel to drop its page cache,
2376 and/or dentries and inode caches.  The parameter C<whattodrop>
2377 tells the kernel what precisely to drop, see
2378 L<http://linux-mm.org/Drop_Caches>
2379
2380 Setting C<whattodrop> to 3 should drop everything.
2381
2382 This automatically calls L<sync(2)> before the operation,
2383 so that the maximum guest memory is freed.");
2384
2385   ("dmesg", (RString "kmsgs", []), 91, [],
2386    [InitEmpty, Always, TestRun (
2387       [["dmesg"]])],
2388    "return kernel messages",
2389    "\
2390 This returns the kernel messages (C<dmesg> output) from
2391 the guest kernel.  This is sometimes useful for extended
2392 debugging of problems.
2393
2394 Another way to get the same information is to enable
2395 verbose messages with C<guestfs_set_verbose> or by setting
2396 the environment variable C<LIBGUESTFS_DEBUG=1> before
2397 running the program.");
2398
2399   ("ping_daemon", (RErr, []), 92, [],
2400    [InitEmpty, Always, TestRun (
2401       [["ping_daemon"]])],
2402    "ping the guest daemon",
2403    "\
2404 This is a test probe into the guestfs daemon running inside
2405 the qemu subprocess.  Calling this function checks that the
2406 daemon responds to the ping message, without affecting the daemon
2407 or attached block device(s) in any other way.");
2408
2409   ("equal", (RBool "equality", [Pathname "file1"; Pathname "file2"]), 93, [],
2410    [InitBasicFS, Always, TestOutputTrue (
2411       [["write_file"; "/file1"; "contents of a file"; "0"];
2412        ["cp"; "/file1"; "/file2"];
2413        ["equal"; "/file1"; "/file2"]]);
2414     InitBasicFS, Always, TestOutputFalse (
2415       [["write_file"; "/file1"; "contents of a file"; "0"];
2416        ["write_file"; "/file2"; "contents of another file"; "0"];
2417        ["equal"; "/file1"; "/file2"]]);
2418     InitBasicFS, Always, TestLastFail (
2419       [["equal"; "/file1"; "/file2"]])],
2420    "test if two files have equal contents",
2421    "\
2422 This compares the two files C<file1> and C<file2> and returns
2423 true if their content is exactly equal, or false otherwise.
2424
2425 The external L<cmp(1)> program is used for the comparison.");
2426
2427   ("strings", (RStringList "stringsout", [Pathname "path"]), 94, [ProtocolLimitWarning],
2428    [InitISOFS, Always, TestOutputList (
2429       [["strings"; "/known-5"]], ["abcdefghi"; "jklmnopqr"]);
2430     InitISOFS, Always, TestOutputList (
2431       [["strings"; "/empty"]], [])],
2432    "print the printable strings in a file",
2433    "\
2434 This runs the L<strings(1)> command on a file and returns
2435 the list of printable strings found.");
2436
2437   ("strings_e", (RStringList "stringsout", [String "encoding"; Pathname "path"]), 95, [ProtocolLimitWarning],
2438    [InitISOFS, Always, TestOutputList (
2439       [["strings_e"; "b"; "/known-5"]], []);
2440     InitBasicFS, Disabled, TestOutputList (
2441       [["write_file"; "/new"; "\000h\000e\000l\000l\000o\000\n\000w\000o\000r\000l\000d\000\n"; "24"];
2442        ["strings_e"; "b"; "/new"]], ["hello"; "world"])],
2443    "print the printable strings in a file",
2444    "\
2445 This is like the C<guestfs_strings> command, but allows you to
2446 specify the encoding.
2447
2448 See the L<strings(1)> manpage for the full list of encodings.
2449
2450 Commonly useful encodings are C<l> (lower case L) which will
2451 show strings inside Windows/x86 files.
2452
2453 The returned strings are transcoded to UTF-8.");
2454
2455   ("hexdump", (RString "dump", [Pathname "path"]), 96, [ProtocolLimitWarning],
2456    [InitISOFS, Always, TestOutput (
2457       [["hexdump"; "/known-4"]], "00000000  61 62 63 0a 64 65 66 0a  67 68 69                 |abc.def.ghi|\n0000000b\n");
2458     (* Test for RHBZ#501888c2 regression which caused large hexdump
2459      * commands to segfault.
2460      *)
2461     InitISOFS, Always, TestRun (
2462       [["hexdump"; "/100krandom"]])],
2463    "dump a file in hexadecimal",
2464    "\
2465 This runs C<hexdump -C> on the given C<path>.  The result is
2466 the human-readable, canonical hex dump of the file.");
2467
2468   ("zerofree", (RErr, [Device "device"]), 97, [Optional "zerofree"],
2469    [InitNone, Always, TestOutput (
2470       [["part_disk"; "/dev/sda"; "mbr"];
2471        ["mkfs"; "ext3"; "/dev/sda1"];
2472        ["mount_options"; ""; "/dev/sda1"; "/"];
2473        ["write_file"; "/new"; "test file"; "0"];
2474        ["umount"; "/dev/sda1"];
2475        ["zerofree"; "/dev/sda1"];
2476        ["mount_options"; ""; "/dev/sda1"; "/"];
2477        ["cat"; "/new"]], "test file")],
2478    "zero unused inodes and disk blocks on ext2/3 filesystem",
2479    "\
2480 This runs the I<zerofree> program on C<device>.  This program
2481 claims to zero unused inodes and disk blocks on an ext2/3
2482 filesystem, thus making it possible to compress the filesystem
2483 more effectively.
2484
2485 You should B<not> run this program if the filesystem is
2486 mounted.
2487
2488 It is possible that using this program can damage the filesystem
2489 or data on the filesystem.");
2490
2491   ("pvresize", (RErr, [Device "device"]), 98, [Optional "lvm2"],
2492    [],
2493    "resize an LVM physical volume",
2494    "\
2495 This resizes (expands or shrinks) an existing LVM physical
2496 volume to match the new size of the underlying device.");
2497
2498   ("sfdisk_N", (RErr, [Device "device"; Int "partnum";
2499                        Int "cyls"; Int "heads"; Int "sectors";
2500                        String "line"]), 99, [DangerWillRobinson],
2501    [],
2502    "modify a single partition on a block device",
2503    "\
2504 This runs L<sfdisk(8)> option to modify just the single
2505 partition C<n> (note: C<n> counts from 1).
2506
2507 For other parameters, see C<guestfs_sfdisk>.  You should usually
2508 pass C<0> for the cyls/heads/sectors parameters.
2509
2510 See also: C<guestfs_part_add>");
2511
2512   ("sfdisk_l", (RString "partitions", [Device "device"]), 100, [],
2513    [],
2514    "display the partition table",
2515    "\
2516 This displays the partition table on C<device>, in the
2517 human-readable output of the L<sfdisk(8)> command.  It is
2518 not intended to be parsed.
2519
2520 See also: C<guestfs_part_list>");
2521
2522   ("sfdisk_kernel_geometry", (RString "partitions", [Device "device"]), 101, [],
2523    [],
2524    "display the kernel geometry",
2525    "\
2526 This displays the kernel's idea of the geometry of C<device>.
2527
2528 The result is in human-readable format, and not designed to
2529 be parsed.");
2530
2531   ("sfdisk_disk_geometry", (RString "partitions", [Device "device"]), 102, [],
2532    [],
2533    "display the disk geometry from the partition table",
2534    "\
2535 This displays the disk geometry of C<device> read from the
2536 partition table.  Especially in the case where the underlying
2537 block device has been resized, this can be different from the
2538 kernel's idea of the geometry (see C<guestfs_sfdisk_kernel_geometry>).
2539
2540 The result is in human-readable format, and not designed to
2541 be parsed.");
2542
2543   ("vg_activate_all", (RErr, [Bool "activate"]), 103, [Optional "lvm2"],
2544    [],
2545    "activate or deactivate all volume groups",
2546    "\
2547 This command activates or (if C<activate> is false) deactivates
2548 all logical volumes in all volume groups.
2549 If activated, then they are made known to the
2550 kernel, ie. they appear as C</dev/mapper> devices.  If deactivated,
2551 then those devices disappear.
2552
2553 This command is the same as running C<vgchange -a y|n>");
2554
2555   ("vg_activate", (RErr, [Bool "activate"; StringList "volgroups"]), 104, [Optional "lvm2"],
2556    [],
2557    "activate or deactivate some volume groups",
2558    "\
2559 This command activates or (if C<activate> is false) deactivates
2560 all logical volumes in the listed volume groups C<volgroups>.
2561 If activated, then they are made known to the
2562 kernel, ie. they appear as C</dev/mapper> devices.  If deactivated,
2563 then those devices disappear.
2564
2565 This command is the same as running C<vgchange -a y|n volgroups...>
2566
2567 Note that if C<volgroups> is an empty list then B<all> volume groups
2568 are activated or deactivated.");
2569
2570   ("lvresize", (RErr, [Device "device"; Int "mbytes"]), 105, [Optional "lvm2"],
2571    [InitNone, Always, TestOutput (
2572       [["part_disk"; "/dev/sda"; "mbr"];
2573        ["pvcreate"; "/dev/sda1"];
2574        ["vgcreate"; "VG"; "/dev/sda1"];
2575        ["lvcreate"; "LV"; "VG"; "10"];
2576        ["mkfs"; "ext2"; "/dev/VG/LV"];
2577        ["mount_options"; ""; "/dev/VG/LV"; "/"];
2578        ["write_file"; "/new"; "test content"; "0"];
2579        ["umount"; "/"];
2580        ["lvresize"; "/dev/VG/LV"; "20"];
2581        ["e2fsck_f"; "/dev/VG/LV"];
2582        ["resize2fs"; "/dev/VG/LV"];
2583        ["mount_options"; ""; "/dev/VG/LV"; "/"];
2584        ["cat"; "/new"]], "test content")],
2585    "resize an LVM logical volume",
2586    "\
2587 This resizes (expands or shrinks) an existing LVM logical
2588 volume to C<mbytes>.  When reducing, data in the reduced part
2589 is lost.");
2590
2591   ("resize2fs", (RErr, [Device "device"]), 106, [],
2592    [], (* lvresize tests this *)
2593    "resize an ext2/ext3 filesystem",
2594    "\
2595 This resizes an ext2 or ext3 filesystem to match the size of
2596 the underlying device.
2597
2598 I<Note:> It is sometimes required that you run C<guestfs_e2fsck_f>
2599 on the C<device> before calling this command.  For unknown reasons
2600 C<resize2fs> sometimes gives an error about this and sometimes not.
2601 In any case, it is always safe to call C<guestfs_e2fsck_f> before
2602 calling this function.");
2603
2604   ("find", (RStringList "names", [Pathname "directory"]), 107, [ProtocolLimitWarning],
2605    [InitBasicFS, Always, TestOutputList (
2606       [["find"; "/"]], ["lost+found"]);
2607     InitBasicFS, Always, TestOutputList (
2608       [["touch"; "/a"];
2609        ["mkdir"; "/b"];
2610        ["touch"; "/b/c"];
2611        ["find"; "/"]], ["a"; "b"; "b/c"; "lost+found"]);
2612     InitBasicFS, Always, TestOutputList (
2613       [["mkdir_p"; "/a/b/c"];
2614        ["touch"; "/a/b/c/d"];
2615        ["find"; "/a/b/"]], ["c"; "c/d"])],
2616    "find all files and directories",
2617    "\
2618 This command lists out all files and directories, recursively,
2619 starting at C<directory>.  It is essentially equivalent to
2620 running the shell command C<find directory -print> but some
2621 post-processing happens on the output, described below.
2622
2623 This returns a list of strings I<without any prefix>.  Thus
2624 if the directory structure was:
2625
2626  /tmp/a
2627  /tmp/b
2628  /tmp/c/d
2629
2630 then the returned list from C<guestfs_find> C</tmp> would be
2631 4 elements:
2632
2633  a
2634  b
2635  c
2636  c/d
2637
2638 If C<directory> is not a directory, then this command returns
2639 an error.
2640
2641 The returned list is sorted.
2642
2643 See also C<guestfs_find0>.");
2644
2645   ("e2fsck_f", (RErr, [Device "device"]), 108, [],
2646    [], (* lvresize tests this *)
2647    "check an ext2/ext3 filesystem",
2648    "\
2649 This runs C<e2fsck -p -f device>, ie. runs the ext2/ext3
2650 filesystem checker on C<device>, noninteractively (C<-p>),
2651 even if the filesystem appears to be clean (C<-f>).
2652
2653 This command is only needed because of C<guestfs_resize2fs>
2654 (q.v.).  Normally you should use C<guestfs_fsck>.");
2655
2656   ("sleep", (RErr, [Int "secs"]), 109, [],
2657    [InitNone, Always, TestRun (
2658       [["sleep"; "1"]])],
2659    "sleep for some seconds",
2660    "\
2661 Sleep for C<secs> seconds.");
2662
2663   ("ntfs_3g_probe", (RInt "status", [Bool "rw"; Device "device"]), 110, [Optional "ntfs3g"],
2664    [InitNone, Always, TestOutputInt (
2665       [["part_disk"; "/dev/sda"; "mbr"];
2666        ["mkfs"; "ntfs"; "/dev/sda1"];
2667        ["ntfs_3g_probe"; "true"; "/dev/sda1"]], 0);
2668     InitNone, Always, TestOutputInt (
2669       [["part_disk"; "/dev/sda"; "mbr"];
2670        ["mkfs"; "ext2"; "/dev/sda1"];
2671        ["ntfs_3g_probe"; "true"; "/dev/sda1"]], 12)],
2672    "probe NTFS volume",
2673    "\
2674 This command runs the L<ntfs-3g.probe(8)> command which probes
2675 an NTFS C<device> for mountability.  (Not all NTFS volumes can
2676 be mounted read-write, and some cannot be mounted at all).
2677
2678 C<rw> is a boolean flag.  Set it to true if you want to test
2679 if the volume can be mounted read-write.  Set it to false if
2680 you want to test if the volume can be mounted read-only.
2681
2682 The return value is an integer which C<0> if the operation
2683 would succeed, or some non-zero value documented in the
2684 L<ntfs-3g.probe(8)> manual page.");
2685
2686   ("sh", (RString "output", [String "command"]), 111, [],
2687    [], (* XXX needs tests *)
2688    "run a command via the shell",
2689    "\
2690 This call runs a command from the guest filesystem via the
2691 guest's C</bin/sh>.
2692
2693 This is like C<guestfs_command>, but passes the command to:
2694
2695  /bin/sh -c \"command\"
2696
2697 Depending on the guest's shell, this usually results in
2698 wildcards being expanded, shell expressions being interpolated
2699 and so on.
2700
2701 All the provisos about C<guestfs_command> apply to this call.");
2702
2703   ("sh_lines", (RStringList "lines", [String "command"]), 112, [],
2704    [], (* XXX needs tests *)
2705    "run a command via the shell returning lines",
2706    "\
2707 This is the same as C<guestfs_sh>, but splits the result
2708 into a list of lines.
2709
2710 See also: C<guestfs_command_lines>");
2711
2712   ("glob_expand", (RStringList "paths", [Pathname "pattern"]), 113, [],
2713    (* Use Pathname here, and hence ABS_PATH (pattern,... in generated
2714     * code in stubs.c, since all valid glob patterns must start with "/".
2715     * There is no concept of "cwd" in libguestfs, hence no "."-relative names.
2716     *)
2717    [InitBasicFS, Always, TestOutputList (
2718       [["mkdir_p"; "/a/b/c"];
2719        ["touch"; "/a/b/c/d"];
2720        ["touch"; "/a/b/c/e"];
2721        ["glob_expand"; "/a/b/c/*"]], ["/a/b/c/d"; "/a/b/c/e"]);
2722     InitBasicFS, Always, TestOutputList (
2723       [["mkdir_p"; "/a/b/c"];
2724        ["touch"; "/a/b/c/d"];
2725        ["touch"; "/a/b/c/e"];
2726        ["glob_expand"; "/a/*/c/*"]], ["/a/b/c/d"; "/a/b/c/e"]);
2727     InitBasicFS, Always, TestOutputList (
2728       [["mkdir_p"; "/a/b/c"];
2729        ["touch"; "/a/b/c/d"];
2730        ["touch"; "/a/b/c/e"];
2731        ["glob_expand"; "/a/*/x/*"]], [])],
2732    "expand a wildcard path",
2733    "\
2734 This command searches for all the pathnames matching
2735 C<pattern> according to the wildcard expansion rules
2736 used by the shell.
2737
2738 If no paths match, then this returns an empty list
2739 (note: not an error).
2740
2741 It is just a wrapper around the C L<glob(3)> function
2742 with flags C<GLOB_MARK|GLOB_BRACE>.
2743 See that manual page for more details.");
2744
2745   ("scrub_device", (RErr, [Device "device"]), 114, [DangerWillRobinson; Optional "scrub"],
2746    [InitNone, Always, TestRun ( (* use /dev/sdc because it's smaller *)
2747       [["scrub_device"; "/dev/sdc"]])],
2748    "scrub (securely wipe) a device",
2749    "\
2750 This command writes patterns over C<device> to make data retrieval
2751 more difficult.
2752
2753 It is an interface to the L<scrub(1)> program.  See that
2754 manual page for more details.");
2755
2756   ("scrub_file", (RErr, [Pathname "file"]), 115, [Optional "scrub"],
2757    [InitBasicFS, Always, TestRun (
2758       [["write_file"; "/file"; "content"; "0"];
2759        ["scrub_file"; "/file"]])],
2760    "scrub (securely wipe) a file",
2761    "\
2762 This command writes patterns over a file to make data retrieval
2763 more difficult.
2764
2765 The file is I<removed> after scrubbing.
2766
2767 It is an interface to the L<scrub(1)> program.  See that
2768 manual page for more details.");
2769
2770   ("scrub_freespace", (RErr, [Pathname "dir"]), 116, [Optional "scrub"],
2771    [], (* XXX needs testing *)
2772    "scrub (securely wipe) free space",
2773    "\
2774 This command creates the directory C<dir> and then fills it
2775 with files until the filesystem is full, and scrubs the files
2776 as for C<guestfs_scrub_file>, and deletes them.
2777 The intention is to scrub any free space on the partition
2778 containing C<dir>.
2779
2780 It is an interface to the L<scrub(1)> program.  See that
2781 manual page for more details.");
2782
2783   ("mkdtemp", (RString "dir", [Pathname "template"]), 117, [],
2784    [InitBasicFS, Always, TestRun (
2785       [["mkdir"; "/tmp"];
2786        ["mkdtemp"; "/tmp/tmpXXXXXX"]])],
2787    "create a temporary directory",
2788    "\
2789 This command creates a temporary directory.  The
2790 C<template> parameter should be a full pathname for the
2791 temporary directory name with the final six characters being
2792 \"XXXXXX\".
2793
2794 For example: \"/tmp/myprogXXXXXX\" or \"/Temp/myprogXXXXXX\",
2795 the second one being suitable for Windows filesystems.
2796
2797 The name of the temporary directory that was created
2798 is returned.
2799
2800 The temporary directory is created with mode 0700
2801 and is owned by root.
2802
2803 The caller is responsible for deleting the temporary
2804 directory and its contents after use.
2805
2806 See also: L<mkdtemp(3)>");
2807
2808   ("wc_l", (RInt "lines", [Pathname "path"]), 118, [],
2809    [InitISOFS, Always, TestOutputInt (
2810       [["wc_l"; "/10klines"]], 10000)],
2811    "count lines in a file",
2812    "\
2813 This command counts the lines in a file, using the
2814 C<wc -l> external command.");
2815
2816   ("wc_w", (RInt "words", [Pathname "path"]), 119, [],
2817    [InitISOFS, Always, TestOutputInt (
2818       [["wc_w"; "/10klines"]], 10000)],
2819    "count words in a file",
2820    "\
2821 This command counts the words in a file, using the
2822 C<wc -w> external command.");
2823
2824   ("wc_c", (RInt "chars", [Pathname "path"]), 120, [],
2825    [InitISOFS, Always, TestOutputInt (
2826       [["wc_c"; "/100kallspaces"]], 102400)],
2827    "count characters in a file",
2828    "\
2829 This command counts the characters in a file, using the
2830 C<wc -c> external command.");
2831
2832   ("head", (RStringList "lines", [Pathname "path"]), 121, [ProtocolLimitWarning],
2833    [InitISOFS, Always, TestOutputList (
2834       [["head"; "/10klines"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz";"3abcdefghijklmnopqrstuvwxyz";"4abcdefghijklmnopqrstuvwxyz";"5abcdefghijklmnopqrstuvwxyz";"6abcdefghijklmnopqrstuvwxyz";"7abcdefghijklmnopqrstuvwxyz";"8abcdefghijklmnopqrstuvwxyz";"9abcdefghijklmnopqrstuvwxyz"])],
2835    "return first 10 lines of a file",
2836    "\
2837 This command returns up to the first 10 lines of a file as
2838 a list of strings.");
2839
2840   ("head_n", (RStringList "lines", [Int "nrlines"; Pathname "path"]), 122, [ProtocolLimitWarning],
2841    [InitISOFS, Always, TestOutputList (
2842       [["head_n"; "3"; "/10klines"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz"]);
2843     InitISOFS, Always, TestOutputList (
2844       [["head_n"; "-9997"; "/10klines"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz"]);
2845     InitISOFS, Always, TestOutputList (
2846       [["head_n"; "0"; "/10klines"]], [])],
2847    "return first N lines of a file",
2848    "\
2849 If the parameter C<nrlines> is a positive number, this returns the first
2850 C<nrlines> lines of the file C<path>.
2851
2852 If the parameter C<nrlines> is a negative number, this returns lines
2853 from the file C<path>, excluding the last C<nrlines> lines.
2854
2855 If the parameter C<nrlines> is zero, this returns an empty list.");
2856
2857   ("tail", (RStringList "lines", [Pathname "path"]), 123, [ProtocolLimitWarning],
2858    [InitISOFS, Always, TestOutputList (
2859       [["tail"; "/10klines"]], ["9990abcdefghijklmnopqrstuvwxyz";"9991abcdefghijklmnopqrstuvwxyz";"9992abcdefghijklmnopqrstuvwxyz";"9993abcdefghijklmnopqrstuvwxyz";"9994abcdefghijklmnopqrstuvwxyz";"9995abcdefghijklmnopqrstuvwxyz";"9996abcdefghijklmnopqrstuvwxyz";"9997abcdefghijklmnopqrstuvwxyz";"9998abcdefghijklmnopqrstuvwxyz";"9999abcdefghijklmnopqrstuvwxyz"])],
2860    "return last 10 lines of a file",
2861    "\
2862 This command returns up to the last 10 lines of a file as
2863 a list of strings.");
2864
2865   ("tail_n", (RStringList "lines", [Int "nrlines"; Pathname "path"]), 124, [ProtocolLimitWarning],
2866    [InitISOFS, Always, TestOutputList (
2867       [["tail_n"; "3"; "/10klines"]], ["9997abcdefghijklmnopqrstuvwxyz";"9998abcdefghijklmnopqrstuvwxyz";"9999abcdefghijklmnopqrstuvwxyz"]);
2868     InitISOFS, Always, TestOutputList (
2869       [["tail_n"; "-9998"; "/10klines"]], ["9997abcdefghijklmnopqrstuvwxyz";"9998abcdefghijklmnopqrstuvwxyz";"9999abcdefghijklmnopqrstuvwxyz"]);
2870     InitISOFS, Always, TestOutputList (
2871       [["tail_n"; "0"; "/10klines"]], [])],
2872    "return last N lines of a file",
2873    "\
2874 If the parameter C<nrlines> is a positive number, this returns the last
2875 C<nrlines> lines of the file C<path>.
2876
2877 If the parameter C<nrlines> is a negative number, this returns lines
2878 from the file C<path>, starting with the C<-nrlines>th line.
2879
2880 If the parameter C<nrlines> is zero, this returns an empty list.");
2881
2882   ("df", (RString "output", []), 125, [],
2883    [], (* XXX Tricky to test because it depends on the exact format
2884         * of the 'df' command and other imponderables.
2885         *)
2886    "report file system disk space usage",
2887    "\
2888 This command runs the C<df> command to report disk space used.
2889
2890 This command is mostly useful for interactive sessions.  It
2891 is I<not> intended that you try to parse the output string.
2892 Use C<statvfs> from programs.");
2893
2894   ("df_h", (RString "output", []), 126, [],
2895    [], (* XXX Tricky to test because it depends on the exact format
2896         * of the 'df' command and other imponderables.
2897         *)
2898    "report file system disk space usage (human readable)",
2899    "\
2900 This command runs the C<df -h> command to report disk space used
2901 in human-readable format.
2902
2903 This command is mostly useful for interactive sessions.  It
2904 is I<not> intended that you try to parse the output string.
2905 Use C<statvfs> from programs.");
2906
2907   ("du", (RInt64 "sizekb", [Pathname "path"]), 127, [],
2908    [InitISOFS, Always, TestOutputInt (
2909       [["du"; "/directory"]], 2 (* ISO fs blocksize is 2K *))],
2910    "estimate file space usage",
2911    "\
2912 This command runs the C<du -s> command to estimate file space
2913 usage for C<path>.
2914
2915 C<path> can be a file or a directory.  If C<path> is a directory
2916 then the estimate includes the contents of the directory and all
2917 subdirectories (recursively).
2918
2919 The result is the estimated size in I<kilobytes>
2920 (ie. units of 1024 bytes).");
2921
2922   ("initrd_list", (RStringList "filenames", [Pathname "path"]), 128, [],
2923    [InitISOFS, Always, TestOutputList (
2924       [["initrd_list"; "/initrd"]], ["empty";"known-1";"known-2";"known-3";"known-4"; "known-5"])],
2925    "list files in an initrd",
2926    "\
2927 This command lists out files contained in an initrd.
2928
2929 The files are listed without any initial C</> character.  The
2930 files are listed in the order they appear (not necessarily
2931 alphabetical).  Directory names are listed as separate items.
2932
2933 Old Linux kernels (2.4 and earlier) used a compressed ext2
2934 filesystem as initrd.  We I<only> support the newer initramfs
2935 format (compressed cpio files).");
2936
2937   ("mount_loop", (RErr, [Pathname "file"; Pathname "mountpoint"]), 129, [],
2938    [],
2939    "mount a file using the loop device",
2940    "\
2941 This command lets you mount C<file> (a filesystem image
2942 in a file) on a mount point.  It is entirely equivalent to
2943 the command C<mount -o loop file mountpoint>.");
2944
2945   ("mkswap", (RErr, [Device "device"]), 130, [],
2946    [InitEmpty, Always, TestRun (
2947       [["part_disk"; "/dev/sda"; "mbr"];
2948        ["mkswap"; "/dev/sda1"]])],
2949    "create a swap partition",
2950    "\
2951 Create a swap partition on C<device>.");
2952
2953   ("mkswap_L", (RErr, [String "label"; Device "device"]), 131, [],
2954    [InitEmpty, Always, TestRun (
2955       [["part_disk"; "/dev/sda"; "mbr"];
2956        ["mkswap_L"; "hello"; "/dev/sda1"]])],
2957    "create a swap partition with a label",
2958    "\
2959 Create a swap partition on C<device> with label C<label>.
2960
2961 Note that you cannot attach a swap label to a block device
2962 (eg. C</dev/sda>), just to a partition.  This appears to be
2963 a limitation of the kernel or swap tools.");
2964
2965   ("mkswap_U", (RErr, [String "uuid"; Device "device"]), 132, [Optional "linuxfsuuid"],
2966    (let uuid = uuidgen () in
2967     [InitEmpty, Always, TestRun (
2968        [["part_disk"; "/dev/sda"; "mbr"];
2969         ["mkswap_U"; uuid; "/dev/sda1"]])]),
2970    "create a swap partition with an explicit UUID",
2971    "\
2972 Create a swap partition on C<device> with UUID C<uuid>.");
2973
2974   ("mknod", (RErr, [Int "mode"; Int "devmajor"; Int "devminor"; Pathname "path"]), 133, [Optional "mknod"],
2975    [InitBasicFS, Always, TestOutputStruct (
2976       [["mknod"; "0o10777"; "0"; "0"; "/node"];
2977        (* NB: default umask 022 means 0777 -> 0755 in these tests *)
2978        ["stat"; "/node"]], [CompareWithInt ("mode", 0o10755)]);
2979     InitBasicFS, Always, TestOutputStruct (
2980       [["mknod"; "0o60777"; "66"; "99"; "/node"];
2981        ["stat"; "/node"]], [CompareWithInt ("mode", 0o60755)])],
2982    "make block, character or FIFO devices",
2983    "\
2984 This call creates block or character special devices, or
2985 named pipes (FIFOs).
2986
2987 The C<mode> parameter should be the mode, using the standard
2988 constants.  C<devmajor> and C<devminor> are the
2989 device major and minor numbers, only used when creating block
2990 and character special devices.
2991
2992 The mode actually set is affected by the umask.");
2993
2994   ("mkfifo", (RErr, [Int "mode"; Pathname "path"]), 134, [Optional "mknod"],
2995    [InitBasicFS, Always, TestOutputStruct (
2996       [["mkfifo"; "0o777"; "/node"];
2997        ["stat"; "/node"]], [CompareWithInt ("mode", 0o10755)])],
2998    "make FIFO (named pipe)",
2999    "\
3000 This call creates a FIFO (named pipe) called C<path> with
3001 mode C<mode>.  It is just a convenient wrapper around
3002 C<guestfs_mknod>.
3003
3004 The mode actually set is affected by the umask.");
3005
3006   ("mknod_b", (RErr, [Int "mode"; Int "devmajor"; Int "devminor"; Pathname "path"]), 135, [Optional "mknod"],
3007    [InitBasicFS, Always, TestOutputStruct (
3008       [["mknod_b"; "0o777"; "99"; "66"; "/node"];
3009        ["stat"; "/node"]], [CompareWithInt ("mode", 0o60755)])],
3010    "make block device node",
3011    "\
3012 This call creates a block device node called C<path> with
3013 mode C<mode> and device major/minor C<devmajor> and C<devminor>.
3014 It is just a convenient wrapper around C<guestfs_mknod>.
3015
3016 The mode actually set is affected by the umask.");
3017
3018   ("mknod_c", (RErr, [Int "mode"; Int "devmajor"; Int "devminor"; Pathname "path"]), 136, [Optional "mknod"],
3019    [InitBasicFS, Always, TestOutputStruct (
3020       [["mknod_c"; "0o777"; "99"; "66"; "/node"];
3021        ["stat"; "/node"]], [CompareWithInt ("mode", 0o20755)])],
3022    "make char device node",
3023    "\
3024 This call creates a char device node called C<path> with
3025 mode C<mode> and device major/minor C<devmajor> and C<devminor>.
3026 It is just a convenient wrapper around C<guestfs_mknod>.
3027
3028 The mode actually set is affected by the umask.");
3029
3030   ("umask", (RInt "oldmask", [Int "mask"]), 137, [FishOutput FishOutputOctal],
3031    [InitEmpty, Always, TestOutputInt (
3032       [["umask"; "0o22"]], 0o22)],
3033    "set file mode creation mask (umask)",
3034    "\
3035 This function sets the mask used for creating new files and
3036 device nodes to C<mask & 0777>.
3037
3038 Typical umask values would be C<022> which creates new files
3039 with permissions like \"-rw-r--r--\" or \"-rwxr-xr-x\", and
3040 C<002> which creates new files with permissions like
3041 \"-rw-rw-r--\" or \"-rwxrwxr-x\".
3042
3043 The default umask is C<022>.  This is important because it
3044 means that directories and device nodes will be created with
3045 C<0644> or C<0755> mode even if you specify C<0777>.
3046
3047 See also C<guestfs_get_umask>,
3048 L<umask(2)>, C<guestfs_mknod>, C<guestfs_mkdir>.
3049
3050 This call returns the previous umask.");
3051
3052   ("readdir", (RStructList ("entries", "dirent"), [Pathname "dir"]), 138, [],
3053    [],
3054    "read directories entries",
3055    "\
3056 This returns the list of directory entries in directory C<dir>.
3057
3058 All entries in the directory are returned, including C<.> and
3059 C<..>.  The entries are I<not> sorted, but returned in the same
3060 order as the underlying filesystem.
3061
3062 Also this call returns basic file type information about each
3063 file.  The C<ftyp> field will contain one of the following characters:
3064
3065 =over 4
3066
3067 =item 'b'
3068
3069 Block special
3070
3071 =item 'c'
3072
3073 Char special
3074
3075 =item 'd'
3076
3077 Directory
3078
3079 =item 'f'
3080
3081 FIFO (named pipe)
3082
3083 =item 'l'
3084
3085 Symbolic link
3086
3087 =item 'r'
3088
3089 Regular file
3090
3091 =item 's'
3092
3093 Socket
3094
3095 =item 'u'
3096
3097 Unknown file type
3098
3099 =item '?'
3100
3101 The L<readdir(3)> returned a C<d_type> field with an
3102 unexpected value
3103
3104 =back
3105
3106 This function is primarily intended for use by programs.  To
3107 get a simple list of names, use C<guestfs_ls>.  To get a printable
3108 directory for human consumption, use C<guestfs_ll>.");
3109
3110   ("sfdiskM", (RErr, [Device "device"; StringList "lines"]), 139, [DangerWillRobinson],
3111    [],
3112    "create partitions on a block device",
3113    "\
3114 This is a simplified interface to the C<guestfs_sfdisk>
3115 command, where partition sizes are specified in megabytes
3116 only (rounded to the nearest cylinder) and you don't need
3117 to specify the cyls, heads and sectors parameters which
3118 were rarely if ever used anyway.
3119
3120 See also: C<guestfs_sfdisk>, the L<sfdisk(8)> manpage
3121 and C<guestfs_part_disk>");
3122
3123   ("zfile", (RString "description", [String "meth"; Pathname "path"]), 140, [DeprecatedBy "file"],
3124    [],
3125    "determine file type inside a compressed file",
3126    "\
3127 This command runs C<file> after first decompressing C<path>
3128 using C<method>.
3129
3130 C<method> must be one of C<gzip>, C<compress> or C<bzip2>.
3131
3132 Since 1.0.63, use C<guestfs_file> instead which can now
3133 process compressed files.");
3134
3135   ("getxattrs", (RStructList ("xattrs", "xattr"), [Pathname "path"]), 141, [Optional "linuxxattrs"],
3136    [],
3137    "list extended attributes of a file or directory",
3138    "\
3139 This call lists the extended attributes of the file or directory
3140 C<path>.
3141
3142 At the system call level, this is a combination of the
3143 L<listxattr(2)> and L<getxattr(2)> calls.
3144
3145 See also: C<guestfs_lgetxattrs>, L<attr(5)>.");
3146
3147   ("lgetxattrs", (RStructList ("xattrs", "xattr"), [Pathname "path"]), 142, [Optional "linuxxattrs"],
3148    [],
3149    "list extended attributes of a file or directory",
3150    "\
3151 This is the same as C<guestfs_getxattrs>, but if C<path>
3152 is a symbolic link, then it returns the extended attributes
3153 of the link itself.");
3154
3155   ("setxattr", (RErr, [String "xattr";
3156                        String "val"; Int "vallen"; (* will be BufferIn *)
3157                        Pathname "path"]), 143, [Optional "linuxxattrs"],
3158    [],
3159    "set extended attribute of a file or directory",
3160    "\
3161 This call sets the extended attribute named C<xattr>
3162 of the file C<path> to the value C<val> (of length C<vallen>).
3163 The value is arbitrary 8 bit data.
3164
3165 See also: C<guestfs_lsetxattr>, L<attr(5)>.");
3166
3167   ("lsetxattr", (RErr, [String "xattr";
3168                         String "val"; Int "vallen"; (* will be BufferIn *)
3169                         Pathname "path"]), 144, [Optional "linuxxattrs"],
3170    [],
3171    "set extended attribute of a file or directory",
3172    "\
3173 This is the same as C<guestfs_setxattr>, but if C<path>
3174 is a symbolic link, then it sets an extended attribute
3175 of the link itself.");
3176
3177   ("removexattr", (RErr, [String "xattr"; Pathname "path"]), 145, [Optional "linuxxattrs"],
3178    [],
3179    "remove extended attribute of a file or directory",
3180    "\
3181 This call removes the extended attribute named C<xattr>
3182 of the file C<path>.
3183
3184 See also: C<guestfs_lremovexattr>, L<attr(5)>.");
3185
3186   ("lremovexattr", (RErr, [String "xattr"; Pathname "path"]), 146, [Optional "linuxxattrs"],
3187    [],
3188    "remove extended attribute of a file or directory",
3189    "\
3190 This is the same as C<guestfs_removexattr>, but if C<path>
3191 is a symbolic link, then it removes an extended attribute
3192 of the link itself.");
3193
3194   ("mountpoints", (RHashtable "mps", []), 147, [],
3195    [],
3196    "show mountpoints",
3197    "\
3198 This call is similar to C<guestfs_mounts>.  That call returns
3199 a list of devices.  This one returns a hash table (map) of
3200 device name to directory where the device is mounted.");
3201
3202   ("mkmountpoint", (RErr, [String "exemptpath"]), 148, [],
3203    (* This is a special case: while you would expect a parameter
3204     * of type "Pathname", that doesn't work, because it implies
3205     * NEED_ROOT in the generated calling code in stubs.c, and
3206     * this function cannot use NEED_ROOT.
3207     *)
3208    [],
3209    "create a mountpoint",
3210    "\
3211 C<guestfs_mkmountpoint> and C<guestfs_rmmountpoint> are
3212 specialized calls that can be used to create extra mountpoints
3213 before mounting the first filesystem.
3214
3215 These calls are I<only> necessary in some very limited circumstances,
3216 mainly the case where you want to mount a mix of unrelated and/or
3217 read-only filesystems together.
3218
3219 For example, live CDs often contain a \"Russian doll\" nest of
3220 filesystems, an ISO outer layer, with a squashfs image inside, with
3221 an ext2/3 image inside that.  You can unpack this as follows
3222 in guestfish:
3223
3224  add-ro Fedora-11-i686-Live.iso
3225  run
3226  mkmountpoint /cd
3227  mkmountpoint /squash
3228  mkmountpoint /ext3
3229  mount /dev/sda /cd
3230  mount-loop /cd/LiveOS/squashfs.img /squash
3231  mount-loop /squash/LiveOS/ext3fs.img /ext3
3232
3233 The inner filesystem is now unpacked under the /ext3 mountpoint.");
3234
3235   ("rmmountpoint", (RErr, [String "exemptpath"]), 149, [],
3236    [],
3237    "remove a mountpoint",
3238    "\
3239 This calls removes a mountpoint that was previously created
3240 with C<guestfs_mkmountpoint>.  See C<guestfs_mkmountpoint>
3241 for full details.");
3242
3243   ("read_file", (RBufferOut "content", [Pathname "path"]), 150, [ProtocolLimitWarning],
3244    [InitISOFS, Always, TestOutputBuffer (
3245       [["read_file"; "/known-4"]], "abc\ndef\nghi")],
3246    "read a file",
3247    "\
3248 This calls returns the contents of the file C<path> as a
3249 buffer.
3250
3251 Unlike C<guestfs_cat>, this function can correctly
3252 handle files that contain embedded ASCII NUL characters.
3253 However unlike C<guestfs_download>, this function is limited
3254 in the total size of file that can be handled.");
3255
3256   ("grep", (RStringList "lines", [String "regex"; Pathname "path"]), 151, [ProtocolLimitWarning],
3257    [InitISOFS, Always, TestOutputList (
3258       [["grep"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"]);
3259     InitISOFS, Always, TestOutputList (
3260       [["grep"; "nomatch"; "/test-grep.txt"]], [])],
3261    "return lines matching a pattern",
3262    "\
3263 This calls the external C<grep> program and returns the
3264 matching lines.");
3265
3266   ("egrep", (RStringList "lines", [String "regex"; Pathname "path"]), 152, [ProtocolLimitWarning],
3267    [InitISOFS, Always, TestOutputList (
3268       [["egrep"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"])],
3269    "return lines matching a pattern",
3270    "\
3271 This calls the external C<egrep> program and returns the
3272 matching lines.");
3273
3274   ("fgrep", (RStringList "lines", [String "pattern"; Pathname "path"]), 153, [ProtocolLimitWarning],
3275    [InitISOFS, Always, TestOutputList (
3276       [["fgrep"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"])],
3277    "return lines matching a pattern",
3278    "\
3279 This calls the external C<fgrep> program and returns the
3280 matching lines.");
3281
3282   ("grepi", (RStringList "lines", [String "regex"; Pathname "path"]), 154, [ProtocolLimitWarning],
3283    [InitISOFS, Always, TestOutputList (
3284       [["grepi"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"; "ABC"])],
3285    "return lines matching a pattern",
3286    "\
3287 This calls the external C<grep -i> program and returns the
3288 matching lines.");
3289
3290   ("egrepi", (RStringList "lines", [String "regex"; Pathname "path"]), 155, [ProtocolLimitWarning],
3291    [InitISOFS, Always, TestOutputList (
3292       [["egrepi"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"; "ABC"])],
3293    "return lines matching a pattern",
3294    "\
3295 This calls the external C<egrep -i> program and returns the
3296 matching lines.");
3297
3298   ("fgrepi", (RStringList "lines", [String "pattern"; Pathname "path"]), 156, [ProtocolLimitWarning],
3299    [InitISOFS, Always, TestOutputList (
3300       [["fgrepi"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"; "ABC"])],
3301    "return lines matching a pattern",
3302    "\
3303 This calls the external C<fgrep -i> program and returns the
3304 matching lines.");
3305
3306   ("zgrep", (RStringList "lines", [String "regex"; Pathname "path"]), 157, [ProtocolLimitWarning],
3307    [InitISOFS, Always, TestOutputList (
3308       [["zgrep"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"])],
3309    "return lines matching a pattern",
3310    "\
3311 This calls the external C<zgrep> program and returns the
3312 matching lines.");
3313
3314   ("zegrep", (RStringList "lines", [String "regex"; Pathname "path"]), 158, [ProtocolLimitWarning],
3315    [InitISOFS, Always, TestOutputList (
3316       [["zegrep"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"])],
3317    "return lines matching a pattern",
3318    "\
3319 This calls the external C<zegrep> program and returns the
3320 matching lines.");
3321
3322   ("zfgrep", (RStringList "lines", [String "pattern"; Pathname "path"]), 159, [ProtocolLimitWarning],
3323    [InitISOFS, Always, TestOutputList (
3324       [["zfgrep"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"])],
3325    "return lines matching a pattern",
3326    "\
3327 This calls the external C<zfgrep> program and returns the
3328 matching lines.");
3329
3330   ("zgrepi", (RStringList "lines", [String "regex"; Pathname "path"]), 160, [ProtocolLimitWarning],
3331    [InitISOFS, Always, TestOutputList (
3332       [["zgrepi"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"; "ABC"])],
3333    "return lines matching a pattern",
3334    "\
3335 This calls the external C<zgrep -i> program and returns the
3336 matching lines.");
3337
3338   ("zegrepi", (RStringList "lines", [String "regex"; Pathname "path"]), 161, [ProtocolLimitWarning],
3339    [InitISOFS, Always, TestOutputList (
3340       [["zegrepi"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"; "ABC"])],
3341    "return lines matching a pattern",
3342    "\
3343 This calls the external C<zegrep -i> program and returns the
3344 matching lines.");
3345
3346   ("zfgrepi", (RStringList "lines", [String "pattern"; Pathname "path"]), 162, [ProtocolLimitWarning],
3347    [InitISOFS, Always, TestOutputList (
3348       [["zfgrepi"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"; "ABC"])],
3349    "return lines matching a pattern",
3350    "\
3351 This calls the external C<zfgrep -i> program and returns the
3352 matching lines.");
3353
3354   ("realpath", (RString "rpath", [Pathname "path"]), 163, [Optional "realpath"],
3355    [InitISOFS, Always, TestOutput (
3356       [["realpath"; "/../directory"]], "/directory")],
3357    "canonicalized absolute pathname",
3358    "\
3359 Return the canonicalized absolute pathname of C<path>.  The
3360 returned path has no C<.>, C<..> or symbolic link path elements.");
3361
3362   ("ln", (RErr, [String "target"; Pathname "linkname"]), 164, [],
3363    [InitBasicFS, Always, TestOutputStruct (
3364       [["touch"; "/a"];
3365        ["ln"; "/a"; "/b"];
3366        ["stat"; "/b"]], [CompareWithInt ("nlink", 2)])],
3367    "create a hard link",
3368    "\
3369 This command creates a hard link using the C<ln> command.");
3370
3371   ("ln_f", (RErr, [String "target"; Pathname "linkname"]), 165, [],
3372    [InitBasicFS, Always, TestOutputStruct (
3373       [["touch"; "/a"];
3374        ["touch"; "/b"];
3375        ["ln_f"; "/a"; "/b"];
3376        ["stat"; "/b"]], [CompareWithInt ("nlink", 2)])],
3377    "create a hard link",
3378    "\
3379 This command creates a hard link using the C<ln -f> command.
3380 The C<-f> option removes the link (C<linkname>) if it exists already.");
3381
3382   ("ln_s", (RErr, [String "target"; Pathname "linkname"]), 166, [],
3383    [InitBasicFS, Always, TestOutputStruct (
3384       [["touch"; "/a"];
3385        ["ln_s"; "a"; "/b"];
3386        ["lstat"; "/b"]], [CompareWithInt ("mode", 0o120777)])],
3387    "create a symbolic link",
3388    "\
3389 This command creates a symbolic link using the C<ln -s> command.");
3390
3391   ("ln_sf", (RErr, [String "target"; Pathname "linkname"]), 167, [],
3392    [InitBasicFS, Always, TestOutput (
3393       [["mkdir_p"; "/a/b"];
3394        ["touch"; "/a/b/c"];
3395        ["ln_sf"; "../d"; "/a/b/c"];
3396        ["readlink"; "/a/b/c"]], "../d")],
3397    "create a symbolic link",
3398    "\
3399 This command creates a symbolic link using the C<ln -sf> command,
3400 The C<-f> option removes the link (C<linkname>) if it exists already.");
3401
3402   ("readlink", (RString "link", [Pathname "path"]), 168, [],
3403    [] (* XXX tested above *),
3404    "read the target of a symbolic link",
3405    "\
3406 This command reads the target of a symbolic link.");
3407
3408   ("fallocate", (RErr, [Pathname "path"; Int "len"]), 169, [],
3409    [InitBasicFS, Always, TestOutputStruct (
3410       [["fallocate"; "/a"; "1000000"];
3411        ["stat"; "/a"]], [CompareWithInt ("size", 1_000_000)])],
3412    "preallocate a file in the guest filesystem",
3413    "\
3414 This command preallocates a file (containing zero bytes) named
3415 C<path> of size C<len> bytes.  If the file exists already, it
3416 is overwritten.
3417
3418 Do not confuse this with the guestfish-specific
3419 C<alloc> command which allocates a file in the host and
3420 attaches it as a device.");
3421
3422   ("swapon_device", (RErr, [Device "device"]), 170, [],
3423    [InitPartition, Always, TestRun (
3424       [["mkswap"; "/dev/sda1"];
3425        ["swapon_device"; "/dev/sda1"];
3426        ["swapoff_device"; "/dev/sda1"]])],
3427    "enable swap on device",
3428    "\
3429 This command enables the libguestfs appliance to use the
3430 swap device or partition named C<device>.  The increased
3431 memory is made available for all commands, for example
3432 those run using C<guestfs_command> or C<guestfs_sh>.
3433
3434 Note that you should not swap to existing guest swap
3435 partitions unless you know what you are doing.  They may
3436 contain hibernation information, or other information that
3437 the guest doesn't want you to trash.  You also risk leaking
3438 information about the host to the guest this way.  Instead,
3439 attach a new host device to the guest and swap on that.");
3440
3441   ("swapoff_device", (RErr, [Device "device"]), 171, [],
3442    [], (* XXX tested by swapon_device *)
3443    "disable swap on device",
3444    "\
3445 This command disables the libguestfs appliance swap
3446 device or partition named C<device>.
3447 See C<guestfs_swapon_device>.");
3448
3449   ("swapon_file", (RErr, [Pathname "file"]), 172, [],
3450    [InitBasicFS, Always, TestRun (
3451       [["fallocate"; "/swap"; "8388608"];
3452        ["mkswap_file"; "/swap"];
3453        ["swapon_file"; "/swap"];
3454        ["swapoff_file"; "/swap"]])],
3455    "enable swap on file",
3456    "\
3457 This command enables swap to a file.
3458 See C<guestfs_swapon_device> for other notes.");
3459
3460   ("swapoff_file", (RErr, [Pathname "file"]), 173, [],
3461    [], (* XXX tested by swapon_file *)
3462    "disable swap on file",
3463    "\
3464 This command disables the libguestfs appliance swap on file.");
3465
3466   ("swapon_label", (RErr, [String "label"]), 174, [],
3467    [InitEmpty, Always, TestRun (
3468       [["part_disk"; "/dev/sdb"; "mbr"];
3469        ["mkswap_L"; "swapit"; "/dev/sdb1"];
3470        ["swapon_label"; "swapit"];
3471        ["swapoff_label"; "swapit"];
3472        ["zero"; "/dev/sdb"];
3473        ["blockdev_rereadpt"; "/dev/sdb"]])],
3474    "enable swap on labeled swap partition",
3475    "\
3476 This command enables swap to a labeled swap partition.
3477 See C<guestfs_swapon_device> for other notes.");
3478
3479   ("swapoff_label", (RErr, [String "label"]), 175, [],
3480    [], (* XXX tested by swapon_label *)
3481    "disable swap on labeled swap partition",
3482    "\
3483 This command disables the libguestfs appliance swap on
3484 labeled swap partition.");
3485
3486   ("swapon_uuid", (RErr, [String "uuid"]), 176, [Optional "linuxfsuuid"],
3487    (let uuid = uuidgen () in
3488     [InitEmpty, Always, TestRun (
3489        [["mkswap_U"; uuid; "/dev/sdb"];
3490         ["swapon_uuid"; uuid];
3491         ["swapoff_uuid"; uuid]])]),
3492    "enable swap on swap partition by UUID",
3493    "\
3494 This command enables swap to a swap partition with the given UUID.
3495 See C<guestfs_swapon_device> for other notes.");
3496
3497   ("swapoff_uuid", (RErr, [String "uuid"]), 177, [Optional "linuxfsuuid"],
3498    [], (* XXX tested by swapon_uuid *)
3499    "disable swap on swap partition by UUID",
3500    "\
3501 This command disables the libguestfs appliance swap partition
3502 with the given UUID.");
3503
3504   ("mkswap_file", (RErr, [Pathname "path"]), 178, [],
3505    [InitBasicFS, Always, TestRun (
3506       [["fallocate"; "/swap"; "8388608"];
3507        ["mkswap_file"; "/swap"]])],
3508    "create a swap file",
3509    "\
3510 Create a swap file.
3511
3512 This command just writes a swap file signature to an existing
3513 file.  To create the file itself, use something like C<guestfs_fallocate>.");
3514
3515   ("inotify_init", (RErr, [Int "maxevents"]), 179, [Optional "inotify"],
3516    [InitISOFS, Always, TestRun (
3517       [["inotify_init"; "0"]])],
3518    "create an inotify handle",
3519    "\
3520 This command creates a new inotify handle.
3521 The inotify subsystem can be used to notify events which happen to
3522 objects in the guest filesystem.
3523
3524 C<maxevents> is the maximum number of events which will be
3525 queued up between calls to C<guestfs_inotify_read> or
3526 C<guestfs_inotify_files>.
3527 If this is passed as C<0>, then the kernel (or previously set)
3528 default is used.  For Linux 2.6.29 the default was 16384 events.
3529 Beyond this limit, the kernel throws away events, but records
3530 the fact that it threw them away by setting a flag
3531 C<IN_Q_OVERFLOW> in the returned structure list (see
3532 C<guestfs_inotify_read>).
3533
3534 Before any events are generated, you have to add some
3535 watches to the internal watch list.  See:
3536 C<guestfs_inotify_add_watch>,
3537 C<guestfs_inotify_rm_watch> and
3538 C<guestfs_inotify_watch_all>.
3539
3540 Queued up events should be read periodically by calling
3541 C<guestfs_inotify_read>
3542 (or C<guestfs_inotify_files> which is just a helpful
3543 wrapper around C<guestfs_inotify_read>).  If you don't
3544 read the events out often enough then you risk the internal
3545 queue overflowing.
3546
3547 The handle should be closed after use by calling
3548 C<guestfs_inotify_close>.  This also removes any
3549 watches automatically.
3550
3551 See also L<inotify(7)> for an overview of the inotify interface
3552 as exposed by the Linux kernel, which is roughly what we expose
3553 via libguestfs.  Note that there is one global inotify handle
3554 per libguestfs instance.");
3555
3556   ("inotify_add_watch", (RInt64 "wd", [Pathname "path"; Int "mask"]), 180, [Optional "inotify"],
3557    [InitBasicFS, Always, TestOutputList (
3558       [["inotify_init"; "0"];
3559        ["inotify_add_watch"; "/"; "1073741823"];
3560        ["touch"; "/a"];
3561        ["touch"; "/b"];
3562        ["inotify_files"]], ["a"; "b"])],
3563    "add an inotify watch",
3564    "\
3565 Watch C<path> for the events listed in C<mask>.
3566
3567 Note that if C<path> is a directory then events within that
3568 directory are watched, but this does I<not> happen recursively
3569 (in subdirectories).
3570
3571 Note for non-C or non-Linux callers: the inotify events are
3572 defined by the Linux kernel ABI and are listed in
3573 C</usr/include/sys/inotify.h>.");
3574
3575   ("inotify_rm_watch", (RErr, [Int(*XXX64*) "wd"]), 181, [Optional "inotify"],
3576    [],
3577    "remove an inotify watch",
3578    "\
3579 Remove a previously defined inotify watch.
3580 See C<guestfs_inotify_add_watch>.");
3581
3582   ("inotify_read", (RStructList ("events", "inotify_event"), []), 182, [Optional "inotify"],
3583    [],
3584    "return list of inotify events",
3585    "\
3586 Return the complete queue of events that have happened
3587 since the previous read call.
3588
3589 If no events have happened, this returns an empty list.
3590
3591 I<Note>: In order to make sure that all events have been
3592 read, you must call this function repeatedly until it
3593 returns an empty list.  The reason is that the call will
3594 read events up to the maximum appliance-to-host message
3595 size and leave remaining events in the queue.");
3596
3597   ("inotify_files", (RStringList "paths", []), 183, [Optional "inotify"],
3598    [],
3599    "return list of watched files that had events",
3600    "\
3601 This function is a helpful wrapper around C<guestfs_inotify_read>
3602 which just returns a list of pathnames of objects that were
3603 touched.  The returned pathnames are sorted and deduplicated.");
3604
3605   ("inotify_close", (RErr, []), 184, [Optional "inotify"],
3606    [],
3607    "close the inotify handle",
3608    "\
3609 This closes the inotify handle which was previously
3610 opened by inotify_init.  It removes all watches, throws
3611 away any pending events, and deallocates all resources.");
3612
3613   ("setcon", (RErr, [String "context"]), 185, [Optional "selinux"],
3614    [],
3615    "set SELinux security context",
3616    "\
3617 This sets the SELinux security context of the daemon
3618 to the string C<context>.
3619
3620 See the documentation about SELINUX in L<guestfs(3)>.");
3621
3622   ("getcon", (RString "context", []), 186, [Optional "selinux"],
3623    [],
3624    "get SELinux security context",
3625    "\
3626 This gets the SELinux security context of the daemon.
3627
3628 See the documentation about SELINUX in L<guestfs(3)>,
3629 and C<guestfs_setcon>");
3630
3631   ("mkfs_b", (RErr, [String "fstype"; Int "blocksize"; Device "device"]), 187, [],
3632    [InitEmpty, Always, TestOutput (
3633       [["part_disk"; "/dev/sda"; "mbr"];
3634        ["mkfs_b"; "ext2"; "4096"; "/dev/sda1"];
3635        ["mount_options"; ""; "/dev/sda1"; "/"];
3636        ["write_file"; "/new"; "new file contents"; "0"];
3637        ["cat"; "/new"]], "new file contents")],
3638    "make a filesystem with block size",
3639    "\
3640 This call is similar to C<guestfs_mkfs>, but it allows you to
3641 control the block size of the resulting filesystem.  Supported
3642 block sizes depend on the filesystem type, but typically they
3643 are C<1024>, C<2048> or C<4096> only.");
3644
3645   ("mke2journal", (RErr, [Int "blocksize"; Device "device"]), 188, [],
3646    [InitEmpty, Always, TestOutput (
3647       [["sfdiskM"; "/dev/sda"; ",100 ,"];
3648        ["mke2journal"; "4096"; "/dev/sda1"];
3649        ["mke2fs_J"; "ext2"; "4096"; "/dev/sda2"; "/dev/sda1"];
3650        ["mount_options"; ""; "/dev/sda2"; "/"];
3651        ["write_file"; "/new"; "new file contents"; "0"];
3652        ["cat"; "/new"]], "new file contents")],
3653    "make ext2/3/4 external journal",
3654    "\
3655 This creates an ext2 external journal on C<device>.  It is equivalent
3656 to the command:
3657
3658  mke2fs -O journal_dev -b blocksize device");
3659
3660   ("mke2journal_L", (RErr, [Int "blocksize"; String "label"; Device "device"]), 189, [],
3661    [InitEmpty, Always, TestOutput (
3662       [["sfdiskM"; "/dev/sda"; ",100 ,"];
3663        ["mke2journal_L"; "4096"; "JOURNAL"; "/dev/sda1"];
3664        ["mke2fs_JL"; "ext2"; "4096"; "/dev/sda2"; "JOURNAL"];
3665        ["mount_options"; ""; "/dev/sda2"; "/"];
3666        ["write_file"; "/new"; "new file contents"; "0"];
3667        ["cat"; "/new"]], "new file contents")],
3668    "make ext2/3/4 external journal with label",
3669    "\
3670 This creates an ext2 external journal on C<device> with label C<label>.");
3671
3672   ("mke2journal_U", (RErr, [Int "blocksize"; String "uuid"; Device "device"]), 190, [Optional "linuxfsuuid"],
3673    (let uuid = uuidgen () in
3674     [InitEmpty, Always, TestOutput (
3675        [["sfdiskM"; "/dev/sda"; ",100 ,"];
3676         ["mke2journal_U"; "4096"; uuid; "/dev/sda1"];
3677         ["mke2fs_JU"; "ext2"; "4096"; "/dev/sda2"; uuid];
3678         ["mount_options"; ""; "/dev/sda2"; "/"];
3679         ["write_file"; "/new"; "new file contents"; "0"];
3680         ["cat"; "/new"]], "new file contents")]),
3681    "make ext2/3/4 external journal with UUID",
3682    "\
3683 This creates an ext2 external journal on C<device> with UUID C<uuid>.");
3684
3685   ("mke2fs_J", (RErr, [String "fstype"; Int "blocksize"; Device "device"; Device "journal"]), 191, [],
3686    [],
3687    "make ext2/3/4 filesystem with external journal",
3688    "\
3689 This creates an ext2/3/4 filesystem on C<device> with
3690 an external journal on C<journal>.  It is equivalent
3691 to the command:
3692
3693  mke2fs -t fstype -b blocksize -J device=<journal> <device>
3694
3695 See also C<guestfs_mke2journal>.");
3696
3697   ("mke2fs_JL", (RErr, [String "fstype"; Int "blocksize"; Device "device"; String "label"]), 192, [],
3698    [],
3699    "make ext2/3/4 filesystem with external journal",
3700    "\
3701 This creates an ext2/3/4 filesystem on C<device> with
3702 an external journal on the journal labeled C<label>.
3703
3704 See also C<guestfs_mke2journal_L>.");
3705
3706   ("mke2fs_JU", (RErr, [String "fstype"; Int "blocksize"; Device "device"; String "uuid"]), 193, [Optional "linuxfsuuid"],
3707    [],
3708    "make ext2/3/4 filesystem with external journal",
3709    "\
3710 This creates an ext2/3/4 filesystem on C<device> with
3711 an external journal on the journal with UUID C<uuid>.
3712
3713 See also C<guestfs_mke2journal_U>.");
3714
3715   ("modprobe", (RErr, [String "modulename"]), 194, [Optional "linuxmodules"],
3716    [InitNone, Always, TestRun [["modprobe"; "fat"]]],
3717    "load a kernel module",
3718    "\
3719 This loads a kernel module in the appliance.
3720
3721 The kernel module must have been whitelisted when libguestfs
3722 was built (see C<appliance/kmod.whitelist.in> in the source).");
3723
3724   ("echo_daemon", (RString "output", [StringList "words"]), 195, [],
3725    [InitNone, Always, TestOutput (
3726       [["echo_daemon"; "This is a test"]], "This is a test"
3727     )],
3728    "echo arguments back to the client",
3729    "\
3730 This command concatenate the list of C<words> passed with single spaces between
3731 them and returns the resulting string.
3732
3733 You can use this command to test the connection through to the daemon.
3734
3735 See also C<guestfs_ping_daemon>.");
3736
3737   ("find0", (RErr, [Pathname "directory"; FileOut "files"]), 196, [],
3738    [], (* There is a regression test for this. *)
3739    "find all files and directories, returning NUL-separated list",
3740    "\
3741 This command lists out all files and directories, recursively,
3742 starting at C<directory>, placing the resulting list in the
3743 external file called C<files>.
3744
3745 This command works the same way as C<guestfs_find> with the
3746 following exceptions:
3747
3748 =over 4
3749
3750 =item *
3751
3752 The resulting list is written to an external file.
3753
3754 =item *
3755
3756 Items (filenames) in the result are separated
3757 by C<\\0> characters.  See L<find(1)> option I<-print0>.
3758
3759 =item *
3760
3761 This command is not limited in the number of names that it
3762 can return.
3763
3764 =item *
3765
3766 The result list is not sorted.
3767
3768 =back");
3769
3770   ("case_sensitive_path", (RString "rpath", [Pathname "path"]), 197, [],
3771    [InitISOFS, Always, TestOutput (
3772       [["case_sensitive_path"; "/DIRECTORY"]], "/directory");
3773     InitISOFS, Always, TestOutput (
3774       [["case_sensitive_path"; "/DIRECTORY/"]], "/directory");
3775     InitISOFS, Always, TestOutput (
3776       [["case_sensitive_path"; "/Known-1"]], "/known-1");
3777     InitISOFS, Always, TestLastFail (
3778       [["case_sensitive_path"; "/Known-1/"]]);
3779     InitBasicFS, Always, TestOutput (
3780       [["mkdir"; "/a"];
3781        ["mkdir"; "/a/bbb"];
3782        ["touch"; "/a/bbb/c"];
3783        ["case_sensitive_path"; "/A/bbB/C"]], "/a/bbb/c");
3784     InitBasicFS, Always, TestOutput (
3785       [["mkdir"; "/a"];
3786        ["mkdir"; "/a/bbb"];
3787        ["touch"; "/a/bbb/c"];
3788        ["case_sensitive_path"; "/A////bbB/C"]], "/a/bbb/c");
3789     InitBasicFS, Always, TestLastFail (
3790       [["mkdir"; "/a"];
3791        ["mkdir"; "/a/bbb"];
3792        ["touch"; "/a/bbb/c"];
3793        ["case_sensitive_path"; "/A/bbb/../bbb/C"]])],
3794    "return true path on case-insensitive filesystem",
3795    "\
3796 This can be used to resolve case insensitive paths on
3797 a filesystem which is case sensitive.  The use case is
3798 to resolve paths which you have read from Windows configuration
3799 files or the Windows Registry, to the true path.
3800
3801 The command handles a peculiarity of the Linux ntfs-3g
3802 filesystem driver (and probably others), which is that although
3803 the underlying filesystem is case-insensitive, the driver
3804 exports the filesystem to Linux as case-sensitive.
3805
3806 One consequence of this is that special directories such
3807 as C<c:\\windows> may appear as C</WINDOWS> or C</windows>
3808 (or other things) depending on the precise details of how
3809 they were created.  In Windows itself this would not be
3810 a problem.
3811
3812 Bug or feature?  You decide:
3813 L<http://www.tuxera.com/community/ntfs-3g-faq/#posixfilenames1>
3814
3815 This function resolves the true case of each element in the
3816 path and returns the case-sensitive path.
3817
3818 Thus C<guestfs_case_sensitive_path> (\"/Windows/System32\")
3819 might return C<\"/WINDOWS/system32\"> (the exact return value
3820 would depend on details of how the directories were originally
3821 created under Windows).
3822
3823 I<Note>:
3824 This function does not handle drive names, backslashes etc.
3825
3826 See also C<guestfs_realpath>.");
3827
3828   ("vfs_type", (RString "fstype", [Device "device"]), 198, [],
3829    [InitBasicFS, Always, TestOutput (
3830       [["vfs_type"; "/dev/sda1"]], "ext2")],
3831    "get the Linux VFS type corresponding to a mounted device",
3832    "\
3833 This command gets the block device type corresponding to
3834 a mounted device called C<device>.
3835
3836 Usually the result is the name of the Linux VFS module that
3837 is used to mount this device (probably determined automatically
3838 if you used the C<guestfs_mount> call).");
3839
3840   ("truncate", (RErr, [Pathname "path"]), 199, [],
3841    [InitBasicFS, Always, TestOutputStruct (
3842       [["write_file"; "/test"; "some stuff so size is not zero"; "0"];
3843        ["truncate"; "/test"];
3844        ["stat"; "/test"]], [CompareWithInt ("size", 0)])],
3845    "truncate a file to zero size",
3846    "\
3847 This command truncates C<path> to a zero-length file.  The
3848 file must exist already.");
3849
3850   ("truncate_size", (RErr, [Pathname "path"; Int64 "size"]), 200, [],
3851    [InitBasicFS, Always, TestOutputStruct (
3852       [["touch"; "/test"];
3853        ["truncate_size"; "/test"; "1000"];
3854        ["stat"; "/test"]], [CompareWithInt ("size", 1000)])],
3855    "truncate a file to a particular size",
3856    "\
3857 This command truncates C<path> to size C<size> bytes.  The file
3858 must exist already.  If the file is smaller than C<size> then
3859 the file is extended to the required size with null bytes.");
3860
3861   ("utimens", (RErr, [Pathname "path"; Int64 "atsecs"; Int64 "atnsecs"; Int64 "mtsecs"; Int64 "mtnsecs"]), 201, [],
3862    [InitBasicFS, Always, TestOutputStruct (
3863       [["touch"; "/test"];
3864        ["utimens"; "/test"; "12345"; "67890"; "9876"; "5432"];
3865        ["stat"; "/test"]], [CompareWithInt ("mtime", 9876)])],
3866    "set timestamp of a file with nanosecond precision",
3867    "\
3868 This command sets the timestamps of a file with nanosecond
3869 precision.
3870
3871 C<atsecs, atnsecs> are the last access time (atime) in secs and
3872 nanoseconds from the epoch.
3873
3874 C<mtsecs, mtnsecs> are the last modification time (mtime) in
3875 secs and nanoseconds from the epoch.
3876
3877 If the C<*nsecs> field contains the special value C<-1> then
3878 the corresponding timestamp is set to the current time.  (The
3879 C<*secs> field is ignored in this case).
3880
3881 If the C<*nsecs> field contains the special value C<-2> then
3882 the corresponding timestamp is left unchanged.  (The
3883 C<*secs> field is ignored in this case).");
3884
3885   ("mkdir_mode", (RErr, [Pathname "path"; Int "mode"]), 202, [],
3886    [InitBasicFS, Always, TestOutputStruct (
3887       [["mkdir_mode"; "/test"; "0o111"];
3888        ["stat"; "/test"]], [CompareWithInt ("mode", 0o40111)])],
3889    "create a directory with a particular mode",
3890    "\
3891 This command creates a directory, setting the initial permissions
3892 of the directory to C<mode>.
3893
3894 For common Linux filesystems, the actual mode which is set will
3895 be C<mode & ~umask & 01777>.  Non-native-Linux filesystems may
3896 interpret the mode in other ways.
3897
3898 See also C<guestfs_mkdir>, C<guestfs_umask>");
3899
3900   ("lchown", (RErr, [Int "owner"; Int "group"; Pathname "path"]), 203, [],
3901    [], (* XXX *)
3902    "change file owner and group",
3903    "\
3904 Change the file owner to C<owner> and group to C<group>.
3905 This is like C<guestfs_chown> but if C<path> is a symlink then
3906 the link itself is changed, not the target.
3907
3908 Only numeric uid and gid are supported.  If you want to use
3909 names, you will need to locate and parse the password file
3910 yourself (Augeas support makes this relatively easy).");
3911
3912   ("lstatlist", (RStructList ("statbufs", "stat"), [Pathname "path"; StringList "names"]), 204, [],
3913    [], (* XXX *)
3914    "lstat on multiple files",
3915    "\
3916 This call allows you to perform the C<guestfs_lstat> operation
3917 on multiple files, where all files are in the directory C<path>.
3918 C<names> is the list of files from this directory.
3919
3920 On return you get a list of stat structs, with a one-to-one
3921 correspondence to the C<names> list.  If any name did not exist
3922 or could not be lstat'd, then the C<ino> field of that structure
3923 is set to C<-1>.
3924
3925 This call is intended for programs that want to efficiently
3926 list a directory contents without making many round-trips.
3927 See also C<guestfs_lxattrlist> for a similarly efficient call
3928 for getting extended attributes.  Very long directory listings
3929 might cause the protocol message size to be exceeded, causing
3930 this call to fail.  The caller must split up such requests
3931 into smaller groups of names.");
3932
3933   ("lxattrlist", (RStructList ("xattrs", "xattr"), [Pathname "path"; StringList "names"]), 205, [Optional "linuxxattrs"],
3934    [], (* XXX *)
3935    "lgetxattr on multiple files",
3936    "\
3937 This call allows you to get the extended attributes
3938 of multiple files, where all files are in the directory C<path>.
3939 C<names> is the list of files from this directory.
3940
3941 On return you get a flat list of xattr structs which must be
3942 interpreted sequentially.  The first xattr struct always has a zero-length
3943 C<attrname>.  C<attrval> in this struct is zero-length
3944 to indicate there was an error doing C<lgetxattr> for this
3945 file, I<or> is a C string which is a decimal number
3946 (the number of following attributes for this file, which could
3947 be C<\"0\">).  Then after the first xattr struct are the
3948 zero or more attributes for the first named file.
3949 This repeats for the second and subsequent files.
3950
3951 This call is intended for programs that want to efficiently
3952 list a directory contents without making many round-trips.
3953 See also C<guestfs_lstatlist> for a similarly efficient call
3954 for getting standard stats.  Very long directory listings
3955 might cause the protocol message size to be exceeded, causing
3956 this call to fail.  The caller must split up such requests
3957 into smaller groups of names.");
3958
3959   ("readlinklist", (RStringList "links", [Pathname "path"; StringList "names"]), 206, [],
3960    [], (* XXX *)
3961    "readlink on multiple files",
3962    "\
3963 This call allows you to do a C<readlink> operation
3964 on multiple files, where all files are in the directory C<path>.
3965 C<names> is the list of files from this directory.
3966
3967 On return you get a list of strings, with a one-to-one
3968 correspondence to the C<names> list.  Each string is the
3969 value of the symbol link.
3970
3971 If the C<readlink(2)> operation fails on any name, then
3972 the corresponding result string is the empty string C<\"\">.
3973 However the whole operation is completed even if there
3974 were C<readlink(2)> errors, and so you can call this
3975 function with names where you don't know if they are
3976 symbolic links already (albeit slightly less efficient).
3977
3978 This call is intended for programs that want to efficiently
3979 list a directory contents without making many round-trips.
3980 Very long directory listings might cause the protocol
3981 message size to be exceeded, causing
3982 this call to fail.  The caller must split up such requests
3983 into smaller groups of names.");
3984
3985   ("pread", (RBufferOut "content", [Pathname "path"; Int "count"; Int64 "offset"]), 207, [ProtocolLimitWarning],
3986    [InitISOFS, Always, TestOutputBuffer (
3987       [["pread"; "/known-4"; "1"; "3"]], "\n");
3988     InitISOFS, Always, TestOutputBuffer (
3989       [["pread"; "/empty"; "0"; "100"]], "")],
3990    "read part of a file",
3991    "\
3992 This command lets you read part of a file.  It reads C<count>
3993 bytes of the file, starting at C<offset>, from file C<path>.
3994
3995 This may read fewer bytes than requested.  For further details
3996 see the L<pread(2)> system call.");
3997
3998   ("part_init", (RErr, [Device "device"; String "parttype"]), 208, [],
3999    [InitEmpty, Always, TestRun (
4000       [["part_init"; "/dev/sda"; "gpt"]])],
4001    "create an empty partition table",
4002    "\
4003 This creates an empty partition table on C<device> of one of the
4004 partition types listed below.  Usually C<parttype> should be
4005 either C<msdos> or C<gpt> (for large disks).
4006
4007 Initially there are no partitions.  Following this, you should
4008 call C<guestfs_part_add> for each partition required.
4009
4010 Possible values for C<parttype> are:
4011
4012 =over 4
4013
4014 =item B<efi> | B<gpt>
4015
4016 Intel EFI / GPT partition table.
4017
4018 This is recommended for >= 2 TB partitions that will be accessed
4019 from Linux and Intel-based Mac OS X.  It also has limited backwards
4020 compatibility with the C<mbr> format.
4021
4022 =item B<mbr> | B<msdos>
4023
4024 The standard PC \"Master Boot Record\" (MBR) format used
4025 by MS-DOS and Windows.  This partition type will B<only> work
4026 for device sizes up to 2 TB.  For large disks we recommend
4027 using C<gpt>.
4028
4029 =back
4030
4031 Other partition table types that may work but are not
4032 supported include:
4033
4034 =over 4
4035
4036 =item B<aix>
4037
4038 AIX disk labels.
4039
4040 =item B<amiga> | B<rdb>
4041
4042 Amiga \"Rigid Disk Block\" format.
4043
4044 =item B<bsd>
4045
4046 BSD disk labels.
4047
4048 =item B<dasd>
4049
4050 DASD, used on IBM mainframes.
4051
4052 =item B<dvh>
4053
4054 MIPS/SGI volumes.
4055
4056 =item B<mac>
4057
4058 Old Mac partition format.  Modern Macs use C<gpt>.
4059
4060 =item B<pc98>
4061
4062 NEC PC-98 format, common in Japan apparently.
4063
4064 =item B<sun>
4065
4066 Sun disk labels.
4067
4068 =back");
4069
4070   ("part_add", (RErr, [Device "device"; String "prlogex"; Int64 "startsect"; Int64 "endsect"]), 209, [],
4071    [InitEmpty, Always, TestRun (
4072       [["part_init"; "/dev/sda"; "mbr"];
4073        ["part_add"; "/dev/sda"; "primary"; "1"; "-1"]]);
4074     InitEmpty, Always, TestRun (
4075       [["part_init"; "/dev/sda"; "gpt"];
4076        ["part_add"; "/dev/sda"; "primary"; "34"; "127"];
4077        ["part_add"; "/dev/sda"; "primary"; "128"; "-34"]]);
4078     InitEmpty, Always, TestRun (
4079       [["part_init"; "/dev/sda"; "mbr"];
4080        ["part_add"; "/dev/sda"; "primary"; "32"; "127"];
4081        ["part_add"; "/dev/sda"; "primary"; "128"; "255"];
4082        ["part_add"; "/dev/sda"; "primary"; "256"; "511"];
4083        ["part_add"; "/dev/sda"; "primary"; "512"; "-1"]])],
4084    "add a partition to the device",
4085    "\
4086 This command adds a partition to C<device>.  If there is no partition
4087 table on the device, call C<guestfs_part_init> first.
4088
4089 The C<prlogex> parameter is the type of partition.  Normally you
4090 should pass C<p> or C<primary> here, but MBR partition tables also
4091 support C<l> (or C<logical>) and C<e> (or C<extended>) partition
4092 types.
4093
4094 C<startsect> and C<endsect> are the start and end of the partition
4095 in I<sectors>.  C<endsect> may be negative, which means it counts
4096 backwards from the end of the disk (C<-1> is the last sector).
4097
4098 Creating a partition which covers the whole disk is not so easy.
4099 Use C<guestfs_part_disk> to do that.");
4100
4101   ("part_disk", (RErr, [Device "device"; String "parttype"]), 210, [DangerWillRobinson],
4102    [InitEmpty, Always, TestRun (
4103       [["part_disk"; "/dev/sda"; "mbr"]]);
4104     InitEmpty, Always, TestRun (
4105       [["part_disk"; "/dev/sda"; "gpt"]])],
4106    "partition whole disk with a single primary partition",
4107    "\
4108 This command is simply a combination of C<guestfs_part_init>
4109 followed by C<guestfs_part_add> to create a single primary partition
4110 covering the whole disk.
4111
4112 C<parttype> is the partition table type, usually C<mbr> or C<gpt>,
4113 but other possible values are described in C<guestfs_part_init>.");
4114
4115   ("part_set_bootable", (RErr, [Device "device"; Int "partnum"; Bool "bootable"]), 211, [],
4116    [InitEmpty, Always, TestRun (
4117       [["part_disk"; "/dev/sda"; "mbr"];
4118        ["part_set_bootable"; "/dev/sda"; "1"; "true"]])],
4119    "make a partition bootable",
4120    "\
4121 This sets the bootable flag on partition numbered C<partnum> on
4122 device C<device>.  Note that partitions are numbered from 1.
4123
4124 The bootable flag is used by some operating systems (notably
4125 Windows) to determine which partition to boot from.  It is by
4126 no means universally recognized.");
4127
4128   ("part_set_name", (RErr, [Device "device"; Int "partnum"; String "name"]), 212, [],
4129    [InitEmpty, Always, TestRun (
4130       [["part_disk"; "/dev/sda"; "gpt"];
4131        ["part_set_name"; "/dev/sda"; "1"; "thepartname"]])],
4132    "set partition name",
4133    "\
4134 This sets the partition name on partition numbered C<partnum> on
4135 device C<device>.  Note that partitions are numbered from 1.
4136
4137 The partition name can only be set on certain types of partition
4138 table.  This works on C<gpt> but not on C<mbr> partitions.");
4139
4140   ("part_list", (RStructList ("partitions", "partition"), [Device "device"]), 213, [],
4141    [], (* XXX Add a regression test for this. *)
4142    "list partitions on a device",
4143    "\
4144 This command parses the partition table on C<device> and
4145 returns the list of partitions found.
4146
4147 The fields in the returned structure are:
4148
4149 =over 4
4150
4151 =item B<part_num>
4152
4153 Partition number, counting from 1.
4154
4155 =item B<part_start>
4156
4157 Start of the partition I<in bytes>.  To get sectors you have to
4158 divide by the device's sector size, see C<guestfs_blockdev_getss>.
4159
4160 =item B<part_end>
4161
4162 End of the partition in bytes.
4163
4164 =item B<part_size>
4165
4166 Size of the partition in bytes.
4167
4168 =back");
4169
4170   ("part_get_parttype", (RString "parttype", [Device "device"]), 214, [],
4171    [InitEmpty, Always, TestOutput (
4172       [["part_disk"; "/dev/sda"; "gpt"];
4173        ["part_get_parttype"; "/dev/sda"]], "gpt")],
4174    "get the partition table type",
4175    "\
4176 This command examines the partition table on C<device> and
4177 returns the partition table type (format) being used.
4178
4179 Common return values include: C<msdos> (a DOS/Windows style MBR
4180 partition table), C<gpt> (a GPT/EFI-style partition table).  Other
4181 values are possible, although unusual.  See C<guestfs_part_init>
4182 for a full list.");
4183
4184   ("fill", (RErr, [Int "c"; Int "len"; Pathname "path"]), 215, [],
4185    [InitBasicFS, Always, TestOutputBuffer (
4186       [["fill"; "0x63"; "10"; "/test"];
4187        ["read_file"; "/test"]], "cccccccccc")],
4188    "fill a file with octets",
4189    "\
4190 This command creates a new file called C<path>.  The initial
4191 content of the file is C<len> octets of C<c>, where C<c>
4192 must be a number in the range C<[0..255]>.
4193
4194 To fill a file with zero bytes (sparsely), it is
4195 much more efficient to use C<guestfs_truncate_size>.");
4196
4197   ("available", (RErr, [StringList "groups"]), 216, [],
4198    [InitNone, Always, TestRun [["available"; ""]]],
4199    "test availability of some parts of the API",
4200    "\
4201 This command is used to check the availability of some
4202 groups of functionality in the appliance, which not all builds of
4203 the libguestfs appliance will be able to provide.
4204
4205 The libguestfs groups, and the functions that those
4206 groups correspond to, are listed in L<guestfs(3)/AVAILABILITY>.
4207
4208 The argument C<groups> is a list of group names, eg:
4209 C<[\"inotify\", \"augeas\"]> would check for the availability of
4210 the Linux inotify functions and Augeas (configuration file
4211 editing) functions.
4212
4213 The command returns no error if I<all> requested groups are available.
4214
4215 It fails with an error if one or more of the requested
4216 groups is unavailable in the appliance.
4217
4218 If an unknown group name is included in the
4219 list of groups then an error is always returned.
4220
4221 I<Notes:>
4222
4223 =over 4
4224
4225 =item *
4226
4227 You must call C<guestfs_launch> before calling this function.
4228
4229 The reason is because we don't know what groups are
4230 supported by the appliance/daemon until it is running and can
4231 be queried.
4232
4233 =item *
4234
4235 If a group of functions is available, this does not necessarily
4236 mean that they will work.  You still have to check for errors
4237 when calling individual API functions even if they are
4238 available.
4239
4240 =item *
4241
4242 It is usually the job of distro packagers to build
4243 complete functionality into the libguestfs appliance.
4244 Upstream libguestfs, if built from source with all
4245 requirements satisfied, will support everything.
4246
4247 =item *
4248
4249 This call was added in version C<1.0.80>.  In previous
4250 versions of libguestfs all you could do would be to speculatively
4251 execute a command to find out if the daemon implemented it.
4252 See also C<guestfs_version>.
4253
4254 =back");
4255
4256   ("dd", (RErr, [Dev_or_Path "src"; Dev_or_Path "dest"]), 217, [],
4257    [InitBasicFS, Always, TestOutputBuffer (
4258       [["write_file"; "/src"; "hello, world"; "0"];
4259        ["dd"; "/src"; "/dest"];
4260        ["read_file"; "/dest"]], "hello, world")],
4261    "copy from source to destination using dd",
4262    "\
4263 This command copies from one source device or file C<src>
4264 to another destination device or file C<dest>.  Normally you
4265 would use this to copy to or from a device or partition, for
4266 example to duplicate a filesystem.
4267
4268 If the destination is a device, it must be as large or larger
4269 than the source file or device, otherwise the copy will fail.
4270 This command cannot do partial copies (see C<guestfs_copy_size>).");
4271
4272   ("filesize", (RInt64 "size", [Pathname "file"]), 218, [],
4273    [InitBasicFS, Always, TestOutputInt (
4274       [["write_file"; "/file"; "hello, world"; "0"];
4275        ["filesize"; "/file"]], 12)],
4276    "return the size of the file in bytes",
4277    "\
4278 This command returns the size of C<file> in bytes.
4279
4280 To get other stats about a file, use C<guestfs_stat>, C<guestfs_lstat>,
4281 C<guestfs_is_dir>, C<guestfs_is_file> etc.
4282 To get the size of block devices, use C<guestfs_blockdev_getsize64>.");
4283
4284   ("lvrename", (RErr, [String "logvol"; String "newlogvol"]), 219, [],
4285    [InitBasicFSonLVM, Always, TestOutputList (
4286       [["lvrename"; "/dev/VG/LV"; "/dev/VG/LV2"];
4287        ["lvs"]], ["/dev/VG/LV2"])],
4288    "rename an LVM logical volume",
4289    "\
4290 Rename a logical volume C<logvol> with the new name C<newlogvol>.");
4291
4292   ("vgrename", (RErr, [String "volgroup"; String "newvolgroup"]), 220, [],
4293    [InitBasicFSonLVM, Always, TestOutputList (
4294       [["umount"; "/"];
4295        ["vg_activate"; "false"; "VG"];
4296        ["vgrename"; "VG"; "VG2"];
4297        ["vg_activate"; "true"; "VG2"];
4298        ["mount_options"; ""; "/dev/VG2/LV"; "/"];
4299        ["vgs"]], ["VG2"])],
4300    "rename an LVM volume group",
4301    "\
4302 Rename a volume group C<volgroup> with the new name C<newvolgroup>.");
4303
4304   ("initrd_cat", (RBufferOut "content", [Pathname "initrdpath"; String "filename"]), 221, [ProtocolLimitWarning],
4305    [InitISOFS, Always, TestOutputBuffer (
4306       [["initrd_cat"; "/initrd"; "known-4"]], "abc\ndef\nghi")],
4307    "list the contents of a single file in an initrd",
4308    "\
4309 This command unpacks the file C<filename> from the initrd file
4310 called C<initrdpath>.  The filename must be given I<without> the
4311 initial C</> character.
4312
4313 For example, in guestfish you could use the following command
4314 to examine the boot script (usually called C</init>)
4315 contained in a Linux initrd or initramfs image:
4316
4317  initrd-cat /boot/initrd-<version>.img init
4318
4319 See also C<guestfs_initrd_list>.");
4320
4321   ("pvuuid", (RString "uuid", [Device "device"]), 222, [],
4322    [],
4323    "get the UUID of a physical volume",
4324    "\
4325 This command returns the UUID of the LVM PV C<device>.");
4326
4327   ("vguuid", (RString "uuid", [String "vgname"]), 223, [],
4328    [],
4329    "get the UUID of a volume group",
4330    "\
4331 This command returns the UUID of the LVM VG named C<vgname>.");
4332
4333   ("lvuuid", (RString "uuid", [Device "device"]), 224, [],
4334    [],
4335    "get the UUID of a logical volume",
4336    "\
4337 This command returns the UUID of the LVM LV C<device>.");
4338
4339   ("vgpvuuids", (RStringList "uuids", [String "vgname"]), 225, [],
4340    [],
4341    "get the PV UUIDs containing the volume group",
4342    "\
4343 Given a VG called C<vgname>, this returns the UUIDs of all
4344 the physical volumes that this volume group resides on.
4345
4346 You can use this along with C<guestfs_pvs> and C<guestfs_pvuuid>
4347 calls to associate physical volumes and volume groups.
4348
4349 See also C<guestfs_vglvuuids>.");
4350
4351   ("vglvuuids", (RStringList "uuids", [String "vgname"]), 226, [],
4352    [],
4353    "get the LV UUIDs of all LVs in the volume group",
4354    "\
4355 Given a VG called C<vgname>, this returns the UUIDs of all
4356 the logical volumes created in this volume group.
4357
4358 You can use this along with C<guestfs_lvs> and C<guestfs_lvuuid>
4359 calls to associate logical volumes and volume groups.
4360
4361 See also C<guestfs_vgpvuuids>.");
4362
4363   ("copy_size", (RErr, [Dev_or_Path "src"; Dev_or_Path "dest"; Int64 "size"]), 227, [],
4364    [InitBasicFS, Always, TestOutputBuffer (
4365       [["write_file"; "/src"; "hello, world"; "0"];
4366        ["copy_size"; "/src"; "/dest"; "5"];
4367        ["read_file"; "/dest"]], "hello")],
4368    "copy size bytes from source to destination using dd",
4369    "\
4370 This command copies exactly C<size> bytes from one source device
4371 or file C<src> to another destination device or file C<dest>.
4372
4373 Note this will fail if the source is too short or if the destination
4374 is not large enough.");
4375
4376   ("zero_device", (RErr, [Device "device"]), 228, [DangerWillRobinson],
4377    [InitBasicFSonLVM, Always, TestRun (
4378       [["zero_device"; "/dev/VG/LV"]])],
4379    "write zeroes to an entire device",
4380    "\
4381 This command writes zeroes over the entire C<device>.  Compare
4382 with C<guestfs_zero> which just zeroes the first few blocks of
4383 a device.");
4384
4385   ("txz_in", (RErr, [FileIn "tarball"; String "directory"]), 229, [],
4386    [InitBasicFS, Always, TestOutput (
4387       [["txz_in"; "../images/helloworld.tar.xz"; "/"];
4388        ["cat"; "/hello"]], "hello\n")],
4389    "unpack compressed tarball to directory",
4390    "\
4391 This command uploads and unpacks local file C<tarball> (an
4392 I<xz compressed> tar file) into C<directory>.");
4393
4394   ("txz_out", (RErr, [Pathname "directory"; FileOut "tarball"]), 230, [],
4395    [],
4396    "pack directory into compressed tarball",
4397    "\
4398 This command packs the contents of C<directory> and downloads
4399 it to local file C<tarball> (as an xz compressed tar archive).");
4400
4401   ("ntfsresize", (RErr, [Device "device"]), 231, [Optional "ntfsprogs"],
4402    [],
4403    "resize an NTFS filesystem",
4404    "\
4405 This command resizes an NTFS filesystem, expanding or
4406 shrinking it to the size of the underlying device.
4407 See also L<ntfsresize(8)>.");
4408
4409   ("vgscan", (RErr, []), 232, [],
4410    [InitEmpty, Always, TestRun (
4411       [["vgscan"]])],
4412    "rescan for LVM physical volumes, volume groups and logical volumes",
4413    "\
4414 This rescans all block devices and rebuilds the list of LVM
4415 physical volumes, volume groups and logical volumes.");
4416
4417   ("part_del", (RErr, [Device "device"; Int "partnum"]), 233, [],
4418    [InitEmpty, Always, TestRun (
4419       [["part_init"; "/dev/sda"; "mbr"];
4420        ["part_add"; "/dev/sda"; "primary"; "1"; "-1"];
4421        ["part_del"; "/dev/sda"; "1"]])],
4422    "delete a partition",
4423    "\
4424 This command deletes the partition numbered C<partnum> on C<device>.
4425
4426 Note that in the case of MBR partitioning, deleting an
4427 extended partition also deletes any logical partitions
4428 it contains.");
4429
4430   ("part_get_bootable", (RBool "bootable", [Device "device"; Int "partnum"]), 234, [],
4431    [InitEmpty, Always, TestOutputTrue (
4432       [["part_init"; "/dev/sda"; "mbr"];
4433        ["part_add"; "/dev/sda"; "primary"; "1"; "-1"];
4434        ["part_set_bootable"; "/dev/sda"; "1"; "true"];
4435        ["part_get_bootable"; "/dev/sda"; "1"]])],
4436    "return true if a partition is bootable",
4437    "\
4438 This command returns true if the partition C<partnum> on
4439 C<device> has the bootable flag set.
4440
4441 See also C<guestfs_part_set_bootable>.");
4442
4443   ("part_get_mbr_id", (RInt "idbyte", [Device "device"; Int "partnum"]), 235, [FishOutput FishOutputHexadecimal],
4444    [InitEmpty, Always, TestOutputInt (
4445       [["part_init"; "/dev/sda"; "mbr"];
4446        ["part_add"; "/dev/sda"; "primary"; "1"; "-1"];
4447        ["part_set_mbr_id"; "/dev/sda"; "1"; "0x7f"];
4448        ["part_get_mbr_id"; "/dev/sda"; "1"]], 0x7f)],
4449    "get the MBR type byte (ID byte) from a partition",
4450    "\
4451 Returns the MBR type byte (also known as the ID byte) from
4452 the numbered partition C<partnum>.
4453
4454 Note that only MBR (old DOS-style) partitions have type bytes.
4455 You will get undefined results for other partition table
4456 types (see C<guestfs_part_get_parttype>).");
4457
4458   ("part_set_mbr_id", (RErr, [Device "device"; Int "partnum"; Int "idbyte"]), 236, [],
4459    [], (* tested by part_get_mbr_id *)
4460    "set the MBR type byte (ID byte) of a partition",
4461    "\
4462 Sets the MBR type byte (also known as the ID byte) of
4463 the numbered partition C<partnum> to C<idbyte>.  Note
4464 that the type bytes quoted in most documentation are
4465 in fact hexadecimal numbers, but usually documented
4466 without any leading \"0x\" which might be confusing.
4467
4468 Note that only MBR (old DOS-style) partitions have type bytes.
4469 You will get undefined results for other partition table
4470 types (see C<guestfs_part_get_parttype>).");
4471
4472   ("checksum_device", (RString "checksum", [String "csumtype"; Device "device"]), 237, [],
4473    [InitISOFS, Always, TestOutput (
4474       [["checksum_device"; "md5"; "/dev/sdd"]],
4475       (Digest.to_hex (Digest.file "images/test.iso")))],
4476    "compute MD5, SHAx or CRC checksum of the contents of a device",
4477    "\
4478 This call computes the MD5, SHAx or CRC checksum of the
4479 contents of the device named C<device>.  For the types of
4480 checksums supported see the C<guestfs_checksum> command.");
4481
4482   ("lvresize_free", (RErr, [Device "lv"; Int "percent"]), 238, [Optional "lvm2"],
4483    [InitNone, Always, TestRun (
4484       [["part_disk"; "/dev/sda"; "mbr"];
4485        ["pvcreate"; "/dev/sda1"];
4486        ["vgcreate"; "VG"; "/dev/sda1"];
4487        ["lvcreate"; "LV"; "VG"; "10"];
4488        ["lvresize_free"; "/dev/VG/LV"; "100"]])],
4489    "expand an LV to fill free space",
4490    "\
4491 This expands an existing logical volume C<lv> so that it fills
4492 C<pc>% of the remaining free space in the volume group.  Commonly
4493 you would call this with pc = 100 which expands the logical volume
4494 as much as possible, using all remaining free space in the volume
4495 group.");
4496
4497   ("aug_clear", (RErr, [String "augpath"]), 239, [Optional "augeas"],
4498    [], (* XXX Augeas code needs tests. *)
4499    "clear Augeas path",
4500    "\
4501 Set the value associated with C<path> to C<NULL>.  This
4502 is the same as the L<augtool(1)> C<clear> command.");
4503
4504   ("get_umask", (RInt "mask", []), 240, [FishOutput FishOutputOctal],
4505    [InitEmpty, Always, TestOutputInt (
4506       [["get_umask"]], 0o22)],
4507    "get the current umask",
4508    "\
4509 Return the current umask.  By default the umask is C<022>
4510 unless it has been set by calling C<guestfs_umask>.");
4511
4512 ]
4513
4514 let all_functions = non_daemon_functions @ daemon_functions
4515
4516 (* In some places we want the functions to be displayed sorted
4517  * alphabetically, so this is useful:
4518  *)
4519 let all_functions_sorted =
4520   List.sort (fun (n1,_,_,_,_,_,_) (n2,_,_,_,_,_,_) ->
4521                compare n1 n2) all_functions
4522
4523 (* Field types for structures. *)
4524 type field =
4525   | FChar                       (* C 'char' (really, a 7 bit byte). *)
4526   | FString                     (* nul-terminated ASCII string, NOT NULL. *)
4527   | FBuffer                     (* opaque buffer of bytes, (char *, int) pair *)
4528   | FUInt32
4529   | FInt32
4530   | FUInt64
4531   | FInt64
4532   | FBytes                      (* Any int measure that counts bytes. *)
4533   | FUUID                       (* 32 bytes long, NOT nul-terminated. *)
4534   | FOptPercent                 (* [0..100], or -1 meaning "not present". *)
4535
4536 (* Because we generate extra parsing code for LVM command line tools,
4537  * we have to pull out the LVM columns separately here.
4538  *)
4539 let lvm_pv_cols = [
4540   "pv_name", FString;
4541   "pv_uuid", FUUID;
4542   "pv_fmt", FString;
4543   "pv_size", FBytes;
4544   "dev_size", FBytes;
4545   "pv_free", FBytes;
4546   "pv_used", FBytes;
4547   "pv_attr", FString (* XXX *);
4548   "pv_pe_count", FInt64;
4549   "pv_pe_alloc_count", FInt64;
4550   "pv_tags", FString;
4551   "pe_start", FBytes;
4552   "pv_mda_count", FInt64;
4553   "pv_mda_free", FBytes;
4554   (* Not in Fedora 10:
4555      "pv_mda_size", FBytes;
4556   *)
4557 ]
4558 let lvm_vg_cols = [
4559   "vg_name", FString;
4560   "vg_uuid", FUUID;
4561   "vg_fmt", FString;
4562   "vg_attr", FString (* XXX *);
4563   "vg_size", FBytes;
4564   "vg_free", FBytes;
4565   "vg_sysid", FString;
4566   "vg_extent_size", FBytes;
4567   "vg_extent_count", FInt64;
4568   "vg_free_count", FInt64;
4569   "max_lv", FInt64;
4570   "max_pv", FInt64;
4571   "pv_count", FInt64;
4572   "lv_count", FInt64;
4573   "snap_count", FInt64;
4574   "vg_seqno", FInt64;
4575   "vg_tags", FString;
4576   "vg_mda_count", FInt64;
4577   "vg_mda_free", FBytes;
4578   (* Not in Fedora 10:
4579      "vg_mda_size", FBytes;
4580   *)
4581 ]
4582 let lvm_lv_cols = [
4583   "lv_name", FString;
4584   "lv_uuid", FUUID;
4585   "lv_attr", FString (* XXX *);
4586   "lv_major", FInt64;
4587   "lv_minor", FInt64;
4588   "lv_kernel_major", FInt64;
4589   "lv_kernel_minor", FInt64;
4590   "lv_size", FBytes;
4591   "seg_count", FInt64;
4592   "origin", FString;
4593   "snap_percent", FOptPercent;
4594   "copy_percent", FOptPercent;
4595   "move_pv", FString;
4596   "lv_tags", FString;
4597   "mirror_log", FString;
4598   "modules", FString;
4599 ]
4600
4601 (* Names and fields in all structures (in RStruct and RStructList)
4602  * that we support.
4603  *)
4604 let structs = [
4605   (* The old RIntBool return type, only ever used for aug_defnode.  Do
4606    * not use this struct in any new code.
4607    *)
4608   "int_bool", [
4609     "i", FInt32;                (* for historical compatibility *)
4610     "b", FInt32;                (* for historical compatibility *)
4611   ];
4612
4613   (* LVM PVs, VGs, LVs. *)
4614   "lvm_pv", lvm_pv_cols;
4615   "lvm_vg", lvm_vg_cols;
4616   "lvm_lv", lvm_lv_cols;
4617
4618   (* Column names and types from stat structures.
4619    * NB. Can't use things like 'st_atime' because glibc header files
4620    * define some of these as macros.  Ugh.
4621    *)
4622   "stat", [
4623     "dev", FInt64;
4624     "ino", FInt64;
4625     "mode", FInt64;
4626     "nlink", FInt64;
4627     "uid", FInt64;
4628     "gid", FInt64;
4629     "rdev", FInt64;
4630     "size", FInt64;
4631     "blksize", FInt64;
4632     "blocks", FInt64;
4633     "atime", FInt64;
4634     "mtime", FInt64;
4635     "ctime", FInt64;
4636   ];
4637   "statvfs", [
4638     "bsize", FInt64;
4639     "frsize", FInt64;
4640     "blocks", FInt64;
4641     "bfree", FInt64;
4642     "bavail", FInt64;
4643     "files", FInt64;
4644     "ffree", FInt64;
4645     "favail", FInt64;
4646     "fsid", FInt64;
4647     "flag", FInt64;
4648     "namemax", FInt64;
4649   ];
4650
4651   (* Column names in dirent structure. *)
4652   "dirent", [
4653     "ino", FInt64;
4654     (* 'b' 'c' 'd' 'f' (FIFO) 'l' 'r' (regular file) 's' 'u' '?' *)
4655     "ftyp", FChar;
4656     "name", FString;
4657   ];
4658
4659   (* Version numbers. *)
4660   "version", [
4661     "major", FInt64;
4662     "minor", FInt64;
4663     "release", FInt64;
4664     "extra", FString;
4665   ];
4666
4667   (* Extended attribute. *)
4668   "xattr", [
4669     "attrname", FString;
4670     "attrval", FBuffer;
4671   ];
4672
4673   (* Inotify events. *)
4674   "inotify_event", [
4675     "in_wd", FInt64;
4676     "in_mask", FUInt32;
4677     "in_cookie", FUInt32;
4678     "in_name", FString;
4679   ];
4680
4681   (* Partition table entry. *)
4682   "partition", [
4683     "part_num", FInt32;
4684     "part_start", FBytes;
4685     "part_end", FBytes;
4686     "part_size", FBytes;
4687   ];
4688 ] (* end of structs *)
4689
4690 (* Ugh, Java has to be different ..
4691  * These names are also used by the Haskell bindings.
4692  *)
4693 let java_structs = [
4694   "int_bool", "IntBool";
4695   "lvm_pv", "PV";
4696   "lvm_vg", "VG";
4697   "lvm_lv", "LV";
4698   "stat", "Stat";
4699   "statvfs", "StatVFS";
4700   "dirent", "Dirent";
4701   "version", "Version";
4702   "xattr", "XAttr";
4703   "inotify_event", "INotifyEvent";
4704   "partition", "Partition";
4705 ]
4706
4707 (* What structs are actually returned. *)
4708 type rstructs_used_t = RStructOnly | RStructListOnly | RStructAndList
4709
4710 (* Returns a list of RStruct/RStructList structs that are returned
4711  * by any function.  Each element of returned list is a pair:
4712  *
4713  * (structname, RStructOnly)
4714  *    == there exists function which returns RStruct (_, structname)
4715  * (structname, RStructListOnly)
4716  *    == there exists function which returns RStructList (_, structname)
4717  * (structname, RStructAndList)
4718  *    == there are functions returning both RStruct (_, structname)
4719  *                                      and RStructList (_, structname)
4720  *)
4721 let rstructs_used_by functions =
4722   (* ||| is a "logical OR" for rstructs_used_t *)
4723   let (|||) a b =
4724     match a, b with
4725     | RStructAndList, _
4726     | _, RStructAndList -> RStructAndList
4727     | RStructOnly, RStructListOnly
4728     | RStructListOnly, RStructOnly -> RStructAndList
4729     | RStructOnly, RStructOnly -> RStructOnly
4730     | RStructListOnly, RStructListOnly -> RStructListOnly
4731   in
4732
4733   let h = Hashtbl.create 13 in
4734
4735   (* if elem->oldv exists, update entry using ||| operator,
4736    * else just add elem->newv to the hash
4737    *)
4738   let update elem newv =
4739     try  let oldv = Hashtbl.find h elem in
4740          Hashtbl.replace h elem (newv ||| oldv)
4741     with Not_found -> Hashtbl.add h elem newv
4742   in
4743
4744   List.iter (
4745     fun (_, style, _, _, _, _, _) ->
4746       match fst style with
4747       | RStruct (_, structname) -> update structname RStructOnly
4748       | RStructList (_, structname) -> update structname RStructListOnly
4749       | _ -> ()
4750   ) functions;
4751
4752   (* return key->values as a list of (key,value) *)
4753   Hashtbl.fold (fun key value xs -> (key, value) :: xs) h []
4754
4755 (* Used for testing language bindings. *)
4756 type callt =
4757   | CallString of string
4758   | CallOptString of string option
4759   | CallStringList of string list
4760   | CallInt of int
4761   | CallInt64 of int64
4762   | CallBool of bool
4763
4764 (* Used to memoize the result of pod2text. *)
4765 let pod2text_memo_filename = "src/.pod2text.data"
4766 let pod2text_memo : ((int * string * string), string list) Hashtbl.t =
4767   try
4768     let chan = open_in pod2text_memo_filename in
4769     let v = input_value chan in
4770     close_in chan;
4771     v
4772   with
4773     _ -> Hashtbl.create 13
4774 let pod2text_memo_updated () =
4775   let chan = open_out pod2text_memo_filename in
4776   output_value chan pod2text_memo;
4777   close_out chan
4778
4779 (* Useful functions.
4780  * Note we don't want to use any external OCaml libraries which
4781  * makes this a bit harder than it should be.
4782  *)
4783 module StringMap = Map.Make (String)
4784
4785 let failwithf fs = ksprintf failwith fs
4786
4787 let unique = let i = ref 0 in fun () -> incr i; !i
4788
4789 let replace_char s c1 c2 =
4790   let s2 = String.copy s in
4791   let r = ref false in
4792   for i = 0 to String.length s2 - 1 do
4793     if String.unsafe_get s2 i = c1 then (
4794       String.unsafe_set s2 i c2;
4795       r := true
4796     )
4797   done;
4798   if not !r then s else s2
4799
4800 let isspace c =
4801   c = ' '
4802   (* || c = '\f' *) || c = '\n' || c = '\r' || c = '\t' (* || c = '\v' *)
4803
4804 let triml ?(test = isspace) str =
4805   let i = ref 0 in
4806   let n = ref (String.length str) in
4807   while !n > 0 && test str.[!i]; do
4808     decr n;
4809     incr i
4810   done;
4811   if !i = 0 then str
4812   else String.sub str !i !n
4813
4814 let trimr ?(test = isspace) str =
4815   let n = ref (String.length str) in
4816   while !n > 0 && test str.[!n-1]; do
4817     decr n
4818   done;
4819   if !n = String.length str then str
4820   else String.sub str 0 !n
4821
4822 let trim ?(test = isspace) str =
4823   trimr ~test (triml ~test str)
4824
4825 let rec find s sub =
4826   let len = String.length s in
4827   let sublen = String.length sub in
4828   let rec loop i =
4829     if i <= len-sublen then (
4830       let rec loop2 j =
4831         if j < sublen then (
4832           if s.[i+j] = sub.[j] then loop2 (j+1)
4833           else -1
4834         ) else
4835           i (* found *)
4836       in
4837       let r = loop2 0 in
4838       if r = -1 then loop (i+1) else r
4839     ) else
4840       -1 (* not found *)
4841   in
4842   loop 0
4843
4844 let rec replace_str s s1 s2 =
4845   let len = String.length s in
4846   let sublen = String.length s1 in
4847   let i = find s s1 in
4848   if i = -1 then s
4849   else (
4850     let s' = String.sub s 0 i in
4851     let s'' = String.sub s (i+sublen) (len-i-sublen) in
4852     s' ^ s2 ^ replace_str s'' s1 s2
4853   )
4854
4855 let rec string_split sep str =
4856   let len = String.length str in
4857   let seplen = String.length sep in
4858   let i = find str sep in
4859   if i = -1 then [str]
4860   else (
4861     let s' = String.sub str 0 i in
4862     let s'' = String.sub str (i+seplen) (len-i-seplen) in
4863     s' :: string_split sep s''
4864   )
4865
4866 let files_equal n1 n2 =
4867   let cmd = sprintf "cmp -s %s %s" (Filename.quote n1) (Filename.quote n2) in
4868   match Sys.command cmd with
4869   | 0 -> true
4870   | 1 -> false
4871   | i -> failwithf "%s: failed with error code %d" cmd i
4872
4873 let rec filter_map f = function
4874   | [] -> []
4875   | x :: xs ->
4876       match f x with
4877       | Some y -> y :: filter_map f xs
4878       | None -> filter_map f xs
4879
4880 let rec find_map f = function
4881   | [] -> raise Not_found
4882   | x :: xs ->
4883       match f x with
4884       | Some y -> y
4885       | None -> find_map f xs
4886
4887 let iteri f xs =
4888   let rec loop i = function
4889     | [] -> ()
4890     | x :: xs -> f i x; loop (i+1) xs
4891   in
4892   loop 0 xs
4893
4894 let mapi f xs =
4895   let rec loop i = function
4896     | [] -> []
4897     | x :: xs -> let r = f i x in r :: loop (i+1) xs
4898   in
4899   loop 0 xs
4900
4901 let count_chars c str =
4902   let count = ref 0 in
4903   for i = 0 to String.length str - 1 do
4904     if c = String.unsafe_get str i then incr count
4905   done;
4906   !count
4907
4908 let name_of_argt = function
4909   | Pathname n | Device n | Dev_or_Path n | String n | OptString n
4910   | StringList n | DeviceList n | Bool n | Int n | Int64 n
4911   | FileIn n | FileOut n -> n
4912
4913 let java_name_of_struct typ =
4914   try List.assoc typ java_structs
4915   with Not_found ->
4916     failwithf
4917       "java_name_of_struct: no java_structs entry corresponding to %s" typ
4918
4919 let cols_of_struct typ =
4920   try List.assoc typ structs
4921   with Not_found ->
4922     failwithf "cols_of_struct: unknown struct %s" typ
4923
4924 let seq_of_test = function
4925   | TestRun s | TestOutput (s, _) | TestOutputList (s, _)
4926   | TestOutputListOfDevices (s, _)
4927   | TestOutputInt (s, _) | TestOutputIntOp (s, _, _)
4928   | TestOutputTrue s | TestOutputFalse s
4929   | TestOutputLength (s, _) | TestOutputBuffer (s, _)
4930   | TestOutputStruct (s, _)
4931   | TestLastFail s -> s
4932
4933 (* Handling for function flags. *)
4934 let protocol_limit_warning =
4935   "Because of the message protocol, there is a transfer limit
4936 of somewhere between 2MB and 4MB.  See L<guestfs(3)/PROTOCOL LIMITS>."
4937
4938 let danger_will_robinson =
4939   "B<This command is dangerous.  Without careful use you
4940 can easily destroy all your data>."
4941
4942 let deprecation_notice flags =
4943   try
4944     let alt =
4945       find_map (function DeprecatedBy str -> Some str | _ -> None) flags in
4946     let txt =
4947       sprintf "This function is deprecated.
4948 In new code, use the C<%s> call instead.
4949
4950 Deprecated functions will not be removed from the API, but the
4951 fact that they are deprecated indicates that there are problems
4952 with correct use of these functions." alt in
4953     Some txt
4954   with
4955     Not_found -> None
4956
4957 (* Create list of optional groups. *)
4958 let optgroups =
4959   let h = Hashtbl.create 13 in
4960   List.iter (
4961     fun (name, _, _, flags, _, _, _) ->
4962       List.iter (
4963         function
4964         | Optional group ->
4965             let names = try Hashtbl.find h group with Not_found -> [] in
4966             Hashtbl.replace h group (name :: names)
4967         | _ -> ()
4968       ) flags
4969   ) daemon_functions;
4970   let groups = Hashtbl.fold (fun k _ ks -> k :: ks) h [] in
4971   let groups =
4972     List.map (
4973       fun group -> group, List.sort compare (Hashtbl.find h group)
4974     ) groups in
4975   List.sort (fun x y -> compare (fst x) (fst y)) groups
4976
4977 (* Check function names etc. for consistency. *)
4978 let check_functions () =
4979   let contains_uppercase str =
4980     let len = String.length str in
4981     let rec loop i =
4982       if i >= len then false
4983       else (
4984         let c = str.[i] in
4985         if c >= 'A' && c <= 'Z' then true
4986         else loop (i+1)
4987       )
4988     in
4989     loop 0
4990   in
4991
4992   (* Check function names. *)
4993   List.iter (
4994     fun (name, _, _, _, _, _, _) ->
4995       if String.length name >= 7 && String.sub name 0 7 = "guestfs" then
4996         failwithf "function name %s does not need 'guestfs' prefix" name;
4997       if name = "" then
4998         failwithf "function name is empty";
4999       if name.[0] < 'a' || name.[0] > 'z' then
5000         failwithf "function name %s must start with lowercase a-z" name;
5001       if String.contains name '-' then
5002         failwithf "function name %s should not contain '-', use '_' instead."
5003           name
5004   ) all_functions;
5005
5006   (* Check function parameter/return names. *)
5007   List.iter (
5008     fun (name, style, _, _, _, _, _) ->
5009       let check_arg_ret_name n =
5010         if contains_uppercase n then
5011           failwithf "%s param/ret %s should not contain uppercase chars"
5012             name n;
5013         if String.contains n '-' || String.contains n '_' then
5014           failwithf "%s param/ret %s should not contain '-' or '_'"
5015             name n;
5016         if n = "value" then
5017           failwithf "%s has a param/ret called 'value', which causes conflicts in the OCaml bindings, use something like 'val' or a more descriptive name" name;
5018         if n = "int" || n = "char" || n = "short" || n = "long" then
5019           failwithf "%s has a param/ret which conflicts with a C type (eg. 'int', 'char' etc.)" name;
5020         if n = "i" || n = "n" then
5021           failwithf "%s has a param/ret called 'i' or 'n', which will cause some conflicts in the generated code" name;
5022         if n = "argv" || n = "args" then
5023           failwithf "%s has a param/ret called 'argv' or 'args', which will cause some conflicts in the generated code" name;
5024
5025         (* List Haskell, OCaml and C keywords here.
5026          * http://www.haskell.org/haskellwiki/Keywords
5027          * http://caml.inria.fr/pub/docs/manual-ocaml/lex.html#operator-char
5028          * http://en.wikipedia.org/wiki/C_syntax#Reserved_keywords
5029          * Formatted via: cat c haskell ocaml|sort -u|grep -vE '_|^val$' \
5030          *   |perl -pe 's/(.+)/"$1";/'|fmt -70
5031          * Omitting _-containing words, since they're handled above.
5032          * Omitting the OCaml reserved word, "val", is ok,
5033          * and saves us from renaming several parameters.
5034          *)
5035         let reserved = [
5036           "and"; "as"; "asr"; "assert"; "auto"; "begin"; "break"; "case";
5037           "char"; "class"; "const"; "constraint"; "continue"; "data";
5038           "default"; "deriving"; "do"; "done"; "double"; "downto"; "else";
5039           "end"; "enum"; "exception"; "extern"; "external"; "false"; "float";
5040           "for"; "forall"; "foreign"; "fun"; "function"; "functor"; "goto";
5041           "hiding"; "if"; "import"; "in"; "include"; "infix"; "infixl";
5042           "infixr"; "inherit"; "initializer"; "inline"; "instance"; "int";
5043           "interface";
5044           "land"; "lazy"; "let"; "long"; "lor"; "lsl"; "lsr"; "lxor";
5045           "match"; "mdo"; "method"; "mod"; "module"; "mutable"; "new";
5046           "newtype"; "object"; "of"; "open"; "or"; "private"; "qualified";
5047           "rec"; "register"; "restrict"; "return"; "short"; "sig"; "signed";
5048           "sizeof"; "static"; "struct"; "switch"; "then"; "to"; "true"; "try";
5049           "type"; "typedef"; "union"; "unsigned"; "virtual"; "void";
5050           "volatile"; "when"; "where"; "while";
5051           ] in
5052         if List.mem n reserved then
5053           failwithf "%s has param/ret using reserved word %s" name n;
5054       in
5055
5056       (match fst style with
5057        | RErr -> ()
5058        | RInt n | RInt64 n | RBool n
5059        | RConstString n | RConstOptString n | RString n
5060        | RStringList n | RStruct (n, _) | RStructList (n, _)
5061        | RHashtable n | RBufferOut n ->
5062            check_arg_ret_name n
5063       );
5064       List.iter (fun arg -> check_arg_ret_name (name_of_argt arg)) (snd style)
5065   ) all_functions;
5066
5067   (* Check short descriptions. *)
5068   List.iter (
5069     fun (name, _, _, _, _, shortdesc, _) ->
5070       if shortdesc.[0] <> Char.lowercase shortdesc.[0] then
5071         failwithf "short description of %s should begin with lowercase." name;
5072       let c = shortdesc.[String.length shortdesc-1] in
5073       if c = '\n' || c = '.' then
5074         failwithf "short description of %s should not end with . or \\n." name
5075   ) all_functions;
5076
5077   (* Check long dscriptions. *)
5078   List.iter (
5079     fun (name, _, _, _, _, _, longdesc) ->
5080       if longdesc.[String.length longdesc-1] = '\n' then
5081         failwithf "long description of %s should not end with \\n." name
5082   ) all_functions;
5083
5084   (* Check proc_nrs. *)
5085   List.iter (
5086     fun (name, _, proc_nr, _, _, _, _) ->
5087       if proc_nr <= 0 then
5088         failwithf "daemon function %s should have proc_nr > 0" name
5089   ) daemon_functions;
5090
5091   List.iter (
5092     fun (name, _, proc_nr, _, _, _, _) ->
5093       if proc_nr <> -1 then
5094         failwithf "non-daemon function %s should have proc_nr -1" name
5095   ) non_daemon_functions;
5096
5097   let proc_nrs =
5098     List.map (fun (name, _, proc_nr, _, _, _, _) -> name, proc_nr)
5099       daemon_functions in
5100   let proc_nrs =
5101     List.sort (fun (_,nr1) (_,nr2) -> compare nr1 nr2) proc_nrs in
5102   let rec loop = function
5103     | [] -> ()
5104     | [_] -> ()
5105     | (name1,nr1) :: ((name2,nr2) :: _ as rest) when nr1 < nr2 ->
5106         loop rest
5107     | (name1,nr1) :: (name2,nr2) :: _ ->
5108         failwithf "%s and %s have conflicting procedure numbers (%d, %d)"
5109           name1 name2 nr1 nr2
5110   in
5111   loop proc_nrs;
5112
5113   (* Check tests. *)
5114   List.iter (
5115     function
5116       (* Ignore functions that have no tests.  We generate a
5117        * warning when the user does 'make check' instead.
5118        *)
5119     | name, _, _, _, [], _, _ -> ()
5120     | name, _, _, _, tests, _, _ ->
5121         let funcs =
5122           List.map (
5123             fun (_, _, test) ->
5124               match seq_of_test test with
5125               | [] ->
5126                   failwithf "%s has a test containing an empty sequence" name
5127               | cmds -> List.map List.hd cmds
5128           ) tests in
5129         let funcs = List.flatten funcs in
5130
5131         let tested = List.mem name funcs in
5132
5133         if not tested then
5134           failwithf "function %s has tests but does not test itself" name
5135   ) all_functions
5136
5137 (* 'pr' prints to the current output file. *)
5138 let chan = ref Pervasives.stdout
5139 let lines = ref 0
5140 let pr fs =
5141   ksprintf
5142     (fun str ->
5143        let i = count_chars '\n' str in
5144        lines := !lines + i;
5145        output_string !chan str
5146     ) fs
5147
5148 let copyright_years =
5149   let this_year = 1900 + (localtime (time ())).tm_year in
5150   if this_year > 2009 then sprintf "2009-%04d" this_year else "2009"
5151
5152 (* Generate a header block in a number of standard styles. *)
5153 type comment_style =
5154     CStyle | CPlusPlusStyle | HashStyle | OCamlStyle | HaskellStyle
5155 type license = GPLv2plus | LGPLv2plus
5156
5157 let generate_header ?(extra_inputs = []) comment license =
5158   let inputs = "src/generator.ml" :: extra_inputs in
5159   let c = match comment with
5160     | CStyle ->         pr "/* "; " *"
5161     | CPlusPlusStyle -> pr "// "; "//"
5162     | HashStyle ->      pr "# ";  "#"
5163     | OCamlStyle ->     pr "(* "; " *"
5164     | HaskellStyle ->   pr "{- "; "  " in
5165   pr "libguestfs generated file\n";
5166   pr "%s WARNING: THIS FILE IS GENERATED FROM:\n" c;
5167   List.iter (pr "%s   %s\n" c) inputs;
5168   pr "%s ANY CHANGES YOU MAKE TO THIS FILE WILL BE LOST.\n" c;
5169   pr "%s\n" c;
5170   pr "%s Copyright (C) %s Red Hat Inc.\n" c copyright_years;
5171   pr "%s\n" c;
5172   (match license with
5173    | GPLv2plus ->
5174        pr "%s This program is free software; you can redistribute it and/or modify\n" c;
5175        pr "%s it under the terms of the GNU General Public License as published by\n" c;
5176        pr "%s the Free Software Foundation; either version 2 of the License, or\n" c;
5177        pr "%s (at your option) any later version.\n" c;
5178        pr "%s\n" c;
5179        pr "%s This program is distributed in the hope that it will be useful,\n" c;
5180        pr "%s but WITHOUT ANY WARRANTY; without even the implied warranty of\n" c;
5181        pr "%s MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the\n" c;
5182        pr "%s GNU General Public License for more details.\n" c;
5183        pr "%s\n" c;
5184        pr "%s You should have received a copy of the GNU General Public License along\n" c;
5185        pr "%s with this program; if not, write to the Free Software Foundation, Inc.,\n" c;
5186        pr "%s 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA.\n" c;
5187
5188    | LGPLv2plus ->
5189        pr "%s This library is free software; you can redistribute it and/or\n" c;
5190        pr "%s modify it under the terms of the GNU Lesser General Public\n" c;
5191        pr "%s License as published by the Free Software Foundation; either\n" c;
5192        pr "%s version 2 of the License, or (at your option) any later version.\n" c;
5193        pr "%s\n" c;
5194        pr "%s This library is distributed in the hope that it will be useful,\n" c;
5195        pr "%s but WITHOUT ANY WARRANTY; without even the implied warranty of\n" c;
5196        pr "%s MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU\n" c;
5197        pr "%s Lesser General Public License for more details.\n" c;
5198        pr "%s\n" c;
5199        pr "%s You should have received a copy of the GNU Lesser General Public\n" c;
5200        pr "%s License along with this library; if not, write to the Free Software\n" c;
5201        pr "%s Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA\n" c;
5202   );
5203   (match comment with
5204    | CStyle -> pr " */\n"
5205    | CPlusPlusStyle
5206    | HashStyle -> ()
5207    | OCamlStyle -> pr " *)\n"
5208    | HaskellStyle -> pr "-}\n"
5209   );
5210   pr "\n"
5211
5212 (* Start of main code generation functions below this line. *)
5213
5214 (* Generate the pod documentation for the C API. *)
5215 let rec generate_actions_pod () =
5216   List.iter (
5217     fun (shortname, style, _, flags, _, _, longdesc) ->
5218       if not (List.mem NotInDocs flags) then (
5219         let name = "guestfs_" ^ shortname in
5220         pr "=head2 %s\n\n" name;
5221         pr " ";
5222         generate_prototype ~extern:false ~handle:"handle" name style;
5223         pr "\n\n";
5224         pr "%s\n\n" longdesc;
5225         (match fst style with
5226          | RErr ->
5227              pr "This function returns 0 on success or -1 on error.\n\n"
5228          | RInt _ ->
5229              pr "On error this function returns -1.\n\n"
5230          | RInt64 _ ->
5231              pr "On error this function returns -1.\n\n"
5232          | RBool _ ->
5233              pr "This function returns a C truth value on success or -1 on error.\n\n"
5234          | RConstString _ ->
5235              pr "This function returns a string, or NULL on error.
5236 The string is owned by the guest handle and must I<not> be freed.\n\n"
5237          | RConstOptString _ ->
5238              pr "This function returns a string which may be NULL.
5239 There is way to return an error from this function.
5240 The string is owned by the guest handle and must I<not> be freed.\n\n"
5241          | RString _ ->
5242              pr "This function returns a string, or NULL on error.
5243 I<The caller must free the returned string after use>.\n\n"
5244          | RStringList _ ->
5245              pr "This function returns a NULL-terminated array of strings
5246 (like L<environ(3)>), or NULL if there was an error.
5247 I<The caller must free the strings and the array after use>.\n\n"
5248          | RStruct (_, typ) ->
5249              pr "This function returns a C<struct guestfs_%s *>,
5250 or NULL if there was an error.
5251 I<The caller must call C<guestfs_free_%s> after use>.\n\n" typ typ
5252          | RStructList (_, typ) ->
5253              pr "This function returns a C<struct guestfs_%s_list *>
5254 (see E<lt>guestfs-structs.hE<gt>),
5255 or NULL if there was an error.
5256 I<The caller must call C<guestfs_free_%s_list> after use>.\n\n" typ typ
5257          | RHashtable _ ->
5258              pr "This function returns a NULL-terminated array of
5259 strings, or NULL if there was an error.
5260 The array of strings will always have length C<2n+1>, where
5261 C<n> keys and values alternate, followed by the trailing NULL entry.
5262 I<The caller must free the strings and the array after use>.\n\n"
5263          | RBufferOut _ ->
5264              pr "This function returns a buffer, or NULL on error.
5265 The size of the returned buffer is written to C<*size_r>.
5266 I<The caller must free the returned buffer after use>.\n\n"
5267         );
5268         if List.mem ProtocolLimitWarning flags then
5269           pr "%s\n\n" protocol_limit_warning;
5270         if List.mem DangerWillRobinson flags then
5271           pr "%s\n\n" danger_will_robinson;
5272         match deprecation_notice flags with
5273         | None -> ()
5274         | Some txt -> pr "%s\n\n" txt
5275       )
5276   ) all_functions_sorted
5277
5278 and generate_structs_pod () =
5279   (* Structs documentation. *)
5280   List.iter (
5281     fun (typ, cols) ->
5282       pr "=head2 guestfs_%s\n" typ;
5283       pr "\n";
5284       pr " struct guestfs_%s {\n" typ;
5285       List.iter (
5286         function
5287         | name, FChar -> pr "   char %s;\n" name
5288         | name, FUInt32 -> pr "   uint32_t %s;\n" name
5289         | name, FInt32 -> pr "   int32_t %s;\n" name
5290         | name, (FUInt64|FBytes) -> pr "   uint64_t %s;\n" name
5291         | name, FInt64 -> pr "   int64_t %s;\n" name
5292         | name, FString -> pr "   char *%s;\n" name
5293         | name, FBuffer ->
5294             pr "   /* The next two fields describe a byte array. */\n";
5295             pr "   uint32_t %s_len;\n" name;
5296             pr "   char *%s;\n" name
5297         | name, FUUID ->
5298             pr "   /* The next field is NOT nul-terminated, be careful when printing it: */\n";
5299             pr "   char %s[32];\n" name
5300         | name, FOptPercent ->
5301             pr "   /* The next field is [0..100] or -1 meaning 'not present': */\n";
5302             pr "   float %s;\n" name
5303       ) cols;
5304       pr " };\n";
5305       pr " \n";
5306       pr " struct guestfs_%s_list {\n" typ;
5307       pr "   uint32_t len; /* Number of elements in list. */\n";
5308       pr "   struct guestfs_%s *val; /* Elements. */\n" typ;
5309       pr " };\n";
5310       pr " \n";
5311       pr " void guestfs_free_%s (struct guestfs_free_%s *);\n" typ typ;
5312       pr " void guestfs_free_%s_list (struct guestfs_free_%s_list *);\n"
5313         typ typ;
5314       pr "\n"
5315   ) structs
5316
5317 and generate_availability_pod () =
5318   (* Availability documentation. *)
5319   pr "=over 4\n";
5320   pr "\n";
5321   List.iter (
5322     fun (group, functions) ->
5323       pr "=item B<%s>\n" group;
5324       pr "\n";
5325       pr "The following functions:\n";
5326       List.iter (pr "L</guestfs_%s>\n") functions;
5327       pr "\n"
5328   ) optgroups;
5329   pr "=back\n";
5330   pr "\n"
5331
5332 (* Generate the protocol (XDR) file, 'guestfs_protocol.x' and
5333  * indirectly 'guestfs_protocol.h' and 'guestfs_protocol.c'.
5334  *
5335  * We have to use an underscore instead of a dash because otherwise
5336  * rpcgen generates incorrect code.
5337  *
5338  * This header is NOT exported to clients, but see also generate_structs_h.
5339  *)
5340 and generate_xdr () =
5341   generate_header CStyle LGPLv2plus;
5342
5343   (* This has to be defined to get around a limitation in Sun's rpcgen. *)
5344   pr "typedef string str<>;\n";
5345   pr "\n";
5346
5347   (* Internal structures. *)
5348   List.iter (
5349     function
5350     | typ, cols ->
5351         pr "struct guestfs_int_%s {\n" typ;
5352         List.iter (function
5353                    | name, FChar -> pr "  char %s;\n" name
5354                    | name, FString -> pr "  string %s<>;\n" name
5355                    | name, FBuffer -> pr "  opaque %s<>;\n" name
5356                    | name, FUUID -> pr "  opaque %s[32];\n" name
5357                    | name, (FInt32|FUInt32) -> pr "  int %s;\n" name
5358                    | name, (FInt64|FUInt64|FBytes) -> pr "  hyper %s;\n" name
5359                    | name, FOptPercent -> pr "  float %s;\n" name
5360                   ) cols;
5361         pr "};\n";
5362         pr "\n";
5363         pr "typedef struct guestfs_int_%s guestfs_int_%s_list<>;\n" typ typ;
5364         pr "\n";
5365   ) structs;
5366
5367   List.iter (
5368     fun (shortname, style, _, _, _, _, _) ->
5369       let name = "guestfs_" ^ shortname in
5370
5371       (match snd style with
5372        | [] -> ()
5373        | args ->
5374            pr "struct %s_args {\n" name;
5375            List.iter (
5376              function
5377              | Pathname n | Device n | Dev_or_Path n | String n ->
5378                  pr "  string %s<>;\n" n
5379              | OptString n -> pr "  str *%s;\n" n
5380              | StringList n | DeviceList n -> pr "  str %s<>;\n" n
5381              | Bool n -> pr "  bool %s;\n" n
5382              | Int n -> pr "  int %s;\n" n
5383              | Int64 n -> pr "  hyper %s;\n" n
5384              | FileIn _ | FileOut _ -> ()
5385            ) args;
5386            pr "};\n\n"
5387       );
5388       (match fst style with
5389        | RErr -> ()
5390        | RInt n ->
5391            pr "struct %s_ret {\n" name;
5392            pr "  int %s;\n" n;
5393            pr "};\n\n"
5394        | RInt64 n ->
5395            pr "struct %s_ret {\n" name;
5396            pr "  hyper %s;\n" n;
5397            pr "};\n\n"
5398        | RBool n ->
5399            pr "struct %s_ret {\n" name;
5400            pr "  bool %s;\n" n;
5401            pr "};\n\n"
5402        | RConstString _ | RConstOptString _ ->
5403            failwithf "RConstString|RConstOptString cannot be used by daemon functions"
5404        | RString n ->
5405            pr "struct %s_ret {\n" name;
5406            pr "  string %s<>;\n" n;
5407            pr "};\n\n"
5408        | RStringList n ->
5409            pr "struct %s_ret {\n" name;
5410            pr "  str %s<>;\n" n;
5411            pr "};\n\n"
5412        | RStruct (n, typ) ->
5413            pr "struct %s_ret {\n" name;
5414            pr "  guestfs_int_%s %s;\n" typ n;
5415            pr "};\n\n"
5416        | RStructList (n, typ) ->
5417            pr "struct %s_ret {\n" name;
5418            pr "  guestfs_int_%s_list %s;\n" typ n;
5419            pr "};\n\n"
5420        | RHashtable n ->
5421            pr "struct %s_ret {\n" name;
5422            pr "  str %s<>;\n" n;
5423            pr "};\n\n"
5424        | RBufferOut n ->
5425            pr "struct %s_ret {\n" name;
5426            pr "  opaque %s<>;\n" n;
5427            pr "};\n\n"
5428       );
5429   ) daemon_functions;
5430
5431   (* Table of procedure numbers. *)
5432   pr "enum guestfs_procedure {\n";
5433   List.iter (
5434     fun (shortname, _, proc_nr, _, _, _, _) ->
5435       pr "  GUESTFS_PROC_%s = %d,\n" (String.uppercase shortname) proc_nr
5436   ) daemon_functions;
5437   pr "  GUESTFS_PROC_NR_PROCS\n";
5438   pr "};\n";
5439   pr "\n";
5440
5441   (* Having to choose a maximum message size is annoying for several
5442    * reasons (it limits what we can do in the API), but it (a) makes
5443    * the protocol a lot simpler, and (b) provides a bound on the size
5444    * of the daemon which operates in limited memory space.
5445    *)
5446   pr "const GUESTFS_MESSAGE_MAX = %d;\n" (4 * 1024 * 1024);
5447   pr "\n";
5448
5449   (* Message header, etc. *)
5450   pr "\
5451 /* The communication protocol is now documented in the guestfs(3)
5452  * manpage.
5453  */
5454
5455 const GUESTFS_PROGRAM = 0x2000F5F5;
5456 const GUESTFS_PROTOCOL_VERSION = 1;
5457
5458 /* These constants must be larger than any possible message length. */
5459 const GUESTFS_LAUNCH_FLAG = 0xf5f55ff5;
5460 const GUESTFS_CANCEL_FLAG = 0xffffeeee;
5461
5462 enum guestfs_message_direction {
5463   GUESTFS_DIRECTION_CALL = 0,        /* client -> daemon */
5464   GUESTFS_DIRECTION_REPLY = 1        /* daemon -> client */
5465 };
5466
5467 enum guestfs_message_status {
5468   GUESTFS_STATUS_OK = 0,
5469   GUESTFS_STATUS_ERROR = 1
5470 };
5471
5472 const GUESTFS_ERROR_LEN = 256;
5473
5474 struct guestfs_message_error {
5475   string error_message<GUESTFS_ERROR_LEN>;
5476 };
5477
5478 struct guestfs_message_header {
5479   unsigned prog;                     /* GUESTFS_PROGRAM */
5480   unsigned vers;                     /* GUESTFS_PROTOCOL_VERSION */
5481   guestfs_procedure proc;            /* GUESTFS_PROC_x */
5482   guestfs_message_direction direction;
5483   unsigned serial;                   /* message serial number */
5484   guestfs_message_status status;
5485 };
5486
5487 const GUESTFS_MAX_CHUNK_SIZE = 8192;
5488
5489 struct guestfs_chunk {
5490   int cancel;                        /* if non-zero, transfer is cancelled */
5491   /* data size is 0 bytes if the transfer has finished successfully */
5492   opaque data<GUESTFS_MAX_CHUNK_SIZE>;
5493 };
5494 "
5495
5496 (* Generate the guestfs-structs.h file. *)
5497 and generate_structs_h () =
5498   generate_header CStyle LGPLv2plus;
5499
5500   (* This is a public exported header file containing various
5501    * structures.  The structures are carefully written to have
5502    * exactly the same in-memory format as the XDR structures that
5503    * we use on the wire to the daemon.  The reason for creating
5504    * copies of these structures here is just so we don't have to
5505    * export the whole of guestfs_protocol.h (which includes much
5506    * unrelated and XDR-dependent stuff that we don't want to be
5507    * public, or required by clients).
5508    *
5509    * To reiterate, we will pass these structures to and from the
5510    * client with a simple assignment or memcpy, so the format
5511    * must be identical to what rpcgen / the RFC defines.
5512    *)
5513
5514   (* Public structures. *)
5515   List.iter (
5516     fun (typ, cols) ->
5517       pr "struct guestfs_%s {\n" typ;
5518       List.iter (
5519         function
5520         | name, FChar -> pr "  char %s;\n" name
5521         | name, FString -> pr "  char *%s;\n" name
5522         | name, FBuffer ->
5523             pr "  uint32_t %s_len;\n" name;
5524             pr "  char *%s;\n" name
5525         | name, FUUID -> pr "  char %s[32]; /* this is NOT nul-terminated, be careful when printing */\n" name
5526         | name, FUInt32 -> pr "  uint32_t %s;\n" name
5527         | name, FInt32 -> pr "  int32_t %s;\n" name
5528         | name, (FUInt64|FBytes) -> pr "  uint64_t %s;\n" name
5529         | name, FInt64 -> pr "  int64_t %s;\n" name
5530         | name, FOptPercent -> pr "  float %s; /* [0..100] or -1 */\n" name
5531       ) cols;
5532       pr "};\n";
5533       pr "\n";
5534       pr "struct guestfs_%s_list {\n" typ;
5535       pr "  uint32_t len;\n";
5536       pr "  struct guestfs_%s *val;\n" typ;
5537       pr "};\n";
5538       pr "\n";
5539       pr "extern void guestfs_free_%s (struct guestfs_%s *);\n" typ typ;
5540       pr "extern void guestfs_free_%s_list (struct guestfs_%s_list *);\n" typ typ;
5541       pr "\n"
5542   ) structs
5543
5544 (* Generate the guestfs-actions.h file. *)
5545 and generate_actions_h () =
5546   generate_header CStyle LGPLv2plus;
5547   List.iter (
5548     fun (shortname, style, _, _, _, _, _) ->
5549       let name = "guestfs_" ^ shortname in
5550       generate_prototype ~single_line:true ~newline:true ~handle:"handle"
5551         name style
5552   ) all_functions
5553
5554 (* Generate the guestfs-internal-actions.h file. *)
5555 and generate_internal_actions_h () =
5556   generate_header CStyle LGPLv2plus;
5557   List.iter (
5558     fun (shortname, style, _, _, _, _, _) ->
5559       let name = "guestfs__" ^ shortname in
5560       generate_prototype ~single_line:true ~newline:true ~handle:"handle"
5561         name style
5562   ) non_daemon_functions
5563
5564 (* Generate the client-side dispatch stubs. *)
5565 and generate_client_actions () =
5566   generate_header CStyle LGPLv2plus;
5567
5568   pr "\
5569 #include <stdio.h>
5570 #include <stdlib.h>
5571 #include <stdint.h>
5572 #include <string.h>
5573 #include <inttypes.h>
5574
5575 #include \"guestfs.h\"
5576 #include \"guestfs-internal.h\"
5577 #include \"guestfs-internal-actions.h\"
5578 #include \"guestfs_protocol.h\"
5579
5580 #define error guestfs_error
5581 //#define perrorf guestfs_perrorf
5582 #define safe_malloc guestfs_safe_malloc
5583 #define safe_realloc guestfs_safe_realloc
5584 //#define safe_strdup guestfs_safe_strdup
5585 #define safe_memdup guestfs_safe_memdup
5586
5587 /* Check the return message from a call for validity. */
5588 static int
5589 check_reply_header (guestfs_h *g,
5590                     const struct guestfs_message_header *hdr,
5591                     unsigned int proc_nr, unsigned int serial)
5592 {
5593   if (hdr->prog != GUESTFS_PROGRAM) {
5594     error (g, \"wrong program (%%d/%%d)\", hdr->prog, GUESTFS_PROGRAM);
5595     return -1;
5596   }
5597   if (hdr->vers != GUESTFS_PROTOCOL_VERSION) {
5598     error (g, \"wrong protocol version (%%d/%%d)\",
5599            hdr->vers, GUESTFS_PROTOCOL_VERSION);
5600     return -1;
5601   }
5602   if (hdr->direction != GUESTFS_DIRECTION_REPLY) {
5603     error (g, \"unexpected message direction (%%d/%%d)\",
5604            hdr->direction, GUESTFS_DIRECTION_REPLY);
5605     return -1;
5606   }
5607   if (hdr->proc != proc_nr) {
5608     error (g, \"unexpected procedure number (%%d/%%d)\", hdr->proc, proc_nr);
5609     return -1;
5610   }
5611   if (hdr->serial != serial) {
5612     error (g, \"unexpected serial (%%d/%%d)\", hdr->serial, serial);
5613     return -1;
5614   }
5615
5616   return 0;
5617 }
5618
5619 /* Check we are in the right state to run a high-level action. */
5620 static int
5621 check_state (guestfs_h *g, const char *caller)
5622 {
5623   if (!guestfs__is_ready (g)) {
5624     if (guestfs__is_config (g) || guestfs__is_launching (g))
5625       error (g, \"%%s: call launch before using this function\\n(in guestfish, don't forget to use the 'run' command)\",
5626         caller);
5627     else
5628       error (g, \"%%s called from the wrong state, %%d != READY\",
5629         caller, guestfs__get_state (g));
5630     return -1;
5631   }
5632   return 0;
5633 }
5634
5635 ";
5636
5637   (* Generate code to generate guestfish call traces. *)
5638   let trace_call shortname style =
5639     pr "  if (guestfs__get_trace (g)) {\n";
5640
5641     let needs_i =
5642       List.exists (function
5643                    | StringList _ | DeviceList _ -> true
5644                    | _ -> false) (snd style) in
5645     if needs_i then (
5646       pr "    int i;\n";
5647       pr "\n"
5648     );
5649
5650     pr "    printf (\"%s\");\n" shortname;
5651     List.iter (
5652       function
5653       | String n                        (* strings *)
5654       | Device n
5655       | Pathname n
5656       | Dev_or_Path n
5657       | FileIn n
5658       | FileOut n ->
5659           (* guestfish doesn't support string escaping, so neither do we *)
5660           pr "    printf (\" \\\"%%s\\\"\", %s);\n" n
5661       | OptString n ->                  (* string option *)
5662           pr "    if (%s) printf (\" \\\"%%s\\\"\", %s);\n" n n;
5663           pr "    else printf (\" null\");\n"
5664       | StringList n
5665       | DeviceList n ->                 (* string list *)
5666           pr "    putchar (' ');\n";
5667           pr "    putchar ('\"');\n";
5668           pr "    for (i = 0; %s[i]; ++i) {\n" n;
5669           pr "      if (i > 0) putchar (' ');\n";
5670           pr "      fputs (%s[i], stdout);\n" n;
5671           pr "    }\n";
5672           pr "    putchar ('\"');\n";
5673       | Bool n ->                       (* boolean *)
5674           pr "    fputs (%s ? \" true\" : \" false\", stdout);\n" n
5675       | Int n ->                        (* int *)
5676           pr "    printf (\" %%d\", %s);\n" n
5677       | Int64 n ->
5678           pr "    printf (\" %%\" PRIi64, %s);\n" n
5679     ) (snd style);
5680     pr "    putchar ('\\n');\n";
5681     pr "  }\n";
5682     pr "\n";
5683   in
5684
5685   (* For non-daemon functions, generate a wrapper around each function. *)
5686   List.iter (
5687     fun (shortname, style, _, _, _, _, _) ->
5688       let name = "guestfs_" ^ shortname in
5689
5690       generate_prototype ~extern:false ~semicolon:false ~newline:true
5691         ~handle:"g" name style;
5692       pr "{\n";
5693       trace_call shortname style;
5694       pr "  return guestfs__%s " shortname;
5695       generate_c_call_args ~handle:"g" style;
5696       pr ";\n";
5697       pr "}\n";
5698       pr "\n"
5699   ) non_daemon_functions;
5700
5701   (* Client-side stubs for each function. *)
5702   List.iter (
5703     fun (shortname, style, _, _, _, _, _) ->
5704       let name = "guestfs_" ^ shortname in
5705
5706       (* Generate the action stub. *)
5707       generate_prototype ~extern:false ~semicolon:false ~newline:true
5708         ~handle:"g" name style;
5709
5710       let error_code =
5711         match fst style with
5712         | RErr | RInt _ | RInt64 _ | RBool _ -> "-1"
5713         | RConstString _ | RConstOptString _ ->
5714             failwithf "RConstString|RConstOptString cannot be used by daemon functions"
5715         | RString _ | RStringList _
5716         | RStruct _ | RStructList _
5717         | RHashtable _ | RBufferOut _ ->
5718             "NULL" in
5719
5720       pr "{\n";
5721
5722       (match snd style with
5723        | [] -> ()
5724        | _ -> pr "  struct %s_args args;\n" name
5725       );
5726
5727       pr "  guestfs_message_header hdr;\n";
5728       pr "  guestfs_message_error err;\n";
5729       let has_ret =
5730         match fst style with
5731         | RErr -> false
5732         | RConstString _ | RConstOptString _ ->
5733             failwithf "RConstString|RConstOptString cannot be used by daemon functions"
5734         | RInt _ | RInt64 _
5735         | RBool _ | RString _ | RStringList _
5736         | RStruct _ | RStructList _
5737         | RHashtable _ | RBufferOut _ ->
5738             pr "  struct %s_ret ret;\n" name;
5739             true in
5740
5741       pr "  int serial;\n";
5742       pr "  int r;\n";
5743       pr "\n";
5744       trace_call shortname style;
5745       pr "  if (check_state (g, \"%s\") == -1) return %s;\n" name error_code;
5746       pr "  guestfs___set_busy (g);\n";
5747       pr "\n";
5748
5749       (* Send the main header and arguments. *)
5750       (match snd style with
5751        | [] ->
5752            pr "  serial = guestfs___send (g, GUESTFS_PROC_%s, NULL, NULL);\n"
5753              (String.uppercase shortname)
5754        | args ->
5755            List.iter (
5756              function
5757              | Pathname n | Device n | Dev_or_Path n | String n ->
5758                  pr "  args.%s = (char *) %s;\n" n n
5759              | OptString n ->
5760                  pr "  args.%s = %s ? (char **) &%s : NULL;\n" n n n
5761              | StringList n | DeviceList n ->
5762                  pr "  args.%s.%s_val = (char **) %s;\n" n n n;
5763                  pr "  for (args.%s.%s_len = 0; %s[args.%s.%s_len]; args.%s.%s_len++) ;\n" n n n n n n n;
5764              | Bool n ->
5765                  pr "  args.%s = %s;\n" n n
5766              | Int n ->
5767                  pr "  args.%s = %s;\n" n n
5768              | Int64 n ->
5769                  pr "  args.%s = %s;\n" n n
5770              | FileIn _ | FileOut _ -> ()
5771            ) args;
5772            pr "  serial = guestfs___send (g, GUESTFS_PROC_%s,\n"
5773              (String.uppercase shortname);
5774            pr "        (xdrproc_t) xdr_%s_args, (char *) &args);\n"
5775              name;
5776       );
5777       pr "  if (serial == -1) {\n";
5778       pr "    guestfs___end_busy (g);\n";
5779       pr "    return %s;\n" error_code;
5780       pr "  }\n";
5781       pr "\n";
5782
5783       (* Send any additional files (FileIn) requested. *)
5784       let need_read_reply_label = ref false in
5785       List.iter (
5786         function
5787         | FileIn n ->
5788             pr "  r = guestfs___send_file (g, %s);\n" n;
5789             pr "  if (r == -1) {\n";
5790             pr "    guestfs___end_busy (g);\n";
5791             pr "    return %s;\n" error_code;
5792             pr "  }\n";
5793             pr "  if (r == -2) /* daemon cancelled */\n";
5794             pr "    goto read_reply;\n";
5795             need_read_reply_label := true;
5796             pr "\n";
5797         | _ -> ()
5798       ) (snd style);
5799
5800       (* Wait for the reply from the remote end. *)
5801       if !need_read_reply_label then pr " read_reply:\n";
5802       pr "  memset (&hdr, 0, sizeof hdr);\n";
5803       pr "  memset (&err, 0, sizeof err);\n";
5804       if has_ret then pr "  memset (&ret, 0, sizeof ret);\n";
5805       pr "\n";
5806       pr "  r = guestfs___recv (g, \"%s\", &hdr, &err,\n        " shortname;
5807       if not has_ret then
5808         pr "NULL, NULL"
5809       else
5810         pr "(xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret" shortname;
5811       pr ");\n";
5812
5813       pr "  if (r == -1) {\n";
5814       pr "    guestfs___end_busy (g);\n";
5815       pr "    return %s;\n" error_code;
5816       pr "  }\n";
5817       pr "\n";
5818
5819       pr "  if (check_reply_header (g, &hdr, GUESTFS_PROC_%s, serial) == -1) {\n"
5820         (String.uppercase shortname);
5821       pr "    guestfs___end_busy (g);\n";
5822       pr "    return %s;\n" error_code;
5823       pr "  }\n";
5824       pr "\n";
5825
5826       pr "  if (hdr.status == GUESTFS_STATUS_ERROR) {\n";
5827       pr "    error (g, \"%%s: %%s\", \"%s\", err.error_message);\n" shortname;
5828       pr "    free (err.error_message);\n";
5829       pr "    guestfs___end_busy (g);\n";
5830       pr "    return %s;\n" error_code;
5831       pr "  }\n";
5832       pr "\n";
5833
5834       (* Expecting to receive further files (FileOut)? *)
5835       List.iter (
5836         function
5837         | FileOut n ->
5838             pr "  if (guestfs___recv_file (g, %s) == -1) {\n" n;
5839             pr "    guestfs___end_busy (g);\n";
5840             pr "    return %s;\n" error_code;
5841             pr "  }\n";
5842             pr "\n";
5843         | _ -> ()
5844       ) (snd style);
5845
5846       pr "  guestfs___end_busy (g);\n";
5847
5848       (match fst style with
5849        | RErr -> pr "  return 0;\n"
5850        | RInt n | RInt64 n | RBool n ->
5851            pr "  return ret.%s;\n" n
5852        | RConstString _ | RConstOptString _ ->
5853            failwithf "RConstString|RConstOptString cannot be used by daemon functions"
5854        | RString n ->
5855            pr "  return ret.%s; /* caller will free */\n" n
5856        | RStringList n | RHashtable n ->
5857            pr "  /* caller will free this, but we need to add a NULL entry */\n";
5858            pr "  ret.%s.%s_val =\n" n n;
5859            pr "    safe_realloc (g, ret.%s.%s_val,\n" n n;
5860            pr "                  sizeof (char *) * (ret.%s.%s_len + 1));\n"
5861              n n;
5862            pr "  ret.%s.%s_val[ret.%s.%s_len] = NULL;\n" n n n n;
5863            pr "  return ret.%s.%s_val;\n" n n
5864        | RStruct (n, _) ->
5865            pr "  /* caller will free this */\n";
5866            pr "  return safe_memdup (g, &ret.%s, sizeof (ret.%s));\n" n n
5867        | RStructList (n, _) ->
5868            pr "  /* caller will free this */\n";
5869            pr "  return safe_memdup (g, &ret.%s, sizeof (ret.%s));\n" n n
5870        | RBufferOut n ->
5871            pr "  /* RBufferOut is tricky: If the buffer is zero-length, then\n";
5872            pr "   * _val might be NULL here.  To make the API saner for\n";
5873            pr "   * callers, we turn this case into a unique pointer (using\n";
5874            pr "   * malloc(1)).\n";
5875            pr "   */\n";
5876            pr "  if (ret.%s.%s_len > 0) {\n" n n;
5877            pr "    *size_r = ret.%s.%s_len;\n" n n;
5878            pr "    return ret.%s.%s_val; /* caller will free */\n" n n;
5879            pr "  } else {\n";
5880            pr "    free (ret.%s.%s_val);\n" n n;
5881            pr "    char *p = safe_malloc (g, 1);\n";
5882            pr "    *size_r = ret.%s.%s_len;\n" n n;
5883            pr "    return p;\n";
5884            pr "  }\n";
5885       );
5886
5887       pr "}\n\n"
5888   ) daemon_functions;
5889
5890   (* Functions to free structures. *)
5891   pr "/* Structure-freeing functions.  These rely on the fact that the\n";
5892   pr " * structure format is identical to the XDR format.  See note in\n";
5893   pr " * generator.ml.\n";
5894   pr " */\n";
5895   pr "\n";
5896
5897   List.iter (
5898     fun (typ, _) ->
5899       pr "void\n";
5900       pr "guestfs_free_%s (struct guestfs_%s *x)\n" typ typ;
5901       pr "{\n";
5902       pr "  xdr_free ((xdrproc_t) xdr_guestfs_int_%s, (char *) x);\n" typ;
5903       pr "  free (x);\n";
5904       pr "}\n";
5905       pr "\n";
5906
5907       pr "void\n";
5908       pr "guestfs_free_%s_list (struct guestfs_%s_list *x)\n" typ typ;
5909       pr "{\n";
5910       pr "  xdr_free ((xdrproc_t) xdr_guestfs_int_%s_list, (char *) x);\n" typ;
5911       pr "  free (x);\n";
5912       pr "}\n";
5913       pr "\n";
5914
5915   ) structs;
5916
5917 (* Generate daemon/actions.h. *)
5918 and generate_daemon_actions_h () =
5919   generate_header CStyle GPLv2plus;
5920
5921   pr "#include \"../src/guestfs_protocol.h\"\n";
5922   pr "\n";
5923
5924   List.iter (
5925     fun (name, style, _, _, _, _, _) ->
5926       generate_prototype
5927         ~single_line:true ~newline:true ~in_daemon:true ~prefix:"do_"
5928         name style;
5929   ) daemon_functions
5930
5931 (* Generate the linker script which controls the visibility of
5932  * symbols in the public ABI and ensures no other symbols get
5933  * exported accidentally.
5934  *)
5935 and generate_linker_script () =
5936   generate_header HashStyle GPLv2plus;
5937
5938   let globals = [
5939     "guestfs_create";
5940     "guestfs_close";
5941     "guestfs_get_error_handler";
5942     "guestfs_get_out_of_memory_handler";
5943     "guestfs_last_error";
5944     "guestfs_set_error_handler";
5945     "guestfs_set_launch_done_callback";
5946     "guestfs_set_log_message_callback";
5947     "guestfs_set_out_of_memory_handler";
5948     "guestfs_set_subprocess_quit_callback";
5949
5950     (* Unofficial parts of the API: the bindings code use these
5951      * functions, so it is useful to export them.
5952      *)
5953     "guestfs_safe_calloc";
5954     "guestfs_safe_malloc";
5955   ] in
5956   let functions =
5957     List.map (fun (name, _, _, _, _, _, _) -> "guestfs_" ^ name)
5958       all_functions in
5959   let structs =
5960     List.concat (
5961       List.map (fun (typ, _) ->
5962                   ["guestfs_free_" ^ typ; "guestfs_free_" ^ typ ^ "_list"])
5963         structs
5964     ) in
5965   let globals = List.sort compare (globals @ functions @ structs) in
5966
5967   pr "{\n";
5968   pr "    global:\n";
5969   List.iter (pr "        %s;\n") globals;
5970   pr "\n";
5971
5972   pr "    local:\n";
5973   pr "        *;\n";
5974   pr "};\n"
5975
5976 (* Generate the server-side stubs. *)
5977 and generate_daemon_actions () =
5978   generate_header CStyle GPLv2plus;
5979
5980   pr "#include <config.h>\n";
5981   pr "\n";
5982   pr "#include <stdio.h>\n";
5983   pr "#include <stdlib.h>\n";
5984   pr "#include <string.h>\n";
5985   pr "#include <inttypes.h>\n";
5986   pr "#include <rpc/types.h>\n";
5987   pr "#include <rpc/xdr.h>\n";
5988   pr "\n";
5989   pr "#include \"daemon.h\"\n";
5990   pr "#include \"c-ctype.h\"\n";
5991   pr "#include \"../src/guestfs_protocol.h\"\n";
5992   pr "#include \"actions.h\"\n";
5993   pr "\n";
5994
5995   List.iter (
5996     fun (name, style, _, _, _, _, _) ->
5997       (* Generate server-side stubs. *)
5998       pr "static void %s_stub (XDR *xdr_in)\n" name;
5999       pr "{\n";
6000       let error_code =
6001         match fst style with
6002         | RErr | RInt _ -> pr "  int r;\n"; "-1"
6003         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
6004         | RBool _ -> pr "  int r;\n"; "-1"
6005         | RConstString _ | RConstOptString _ ->
6006             failwithf "RConstString|RConstOptString cannot be used by daemon functions"
6007         | RString _ -> pr "  char *r;\n"; "NULL"
6008         | RStringList _ | RHashtable _ -> pr "  char **r;\n"; "NULL"
6009         | RStruct (_, typ) -> pr "  guestfs_int_%s *r;\n" typ; "NULL"
6010         | RStructList (_, typ) -> pr "  guestfs_int_%s_list *r;\n" typ; "NULL"
6011         | RBufferOut _ ->
6012             pr "  size_t size = 1;\n";
6013             pr "  char *r;\n";
6014             "NULL" in
6015
6016       (match snd style with
6017        | [] -> ()
6018        | args ->
6019            pr "  struct guestfs_%s_args args;\n" name;
6020            List.iter (
6021              function
6022              | Device n | Dev_or_Path n
6023              | Pathname n
6024              | String n -> ()
6025              | OptString n -> pr "  char *%s;\n" n
6026              | StringList n | DeviceList n -> pr "  char **%s;\n" n
6027              | Bool n -> pr "  int %s;\n" n
6028              | Int n -> pr "  int %s;\n" n
6029              | Int64 n -> pr "  int64_t %s;\n" n
6030              | FileIn _ | FileOut _ -> ()
6031            ) args
6032       );
6033       pr "\n";
6034
6035       (match snd style with
6036        | [] -> ()
6037        | args ->
6038            pr "  memset (&args, 0, sizeof args);\n";
6039            pr "\n";
6040            pr "  if (!xdr_guestfs_%s_args (xdr_in, &args)) {\n" name;
6041            pr "    reply_with_error (\"daemon failed to decode procedure arguments\");\n";
6042            pr "    return;\n";
6043            pr "  }\n";
6044            let pr_args n =
6045              pr "  char *%s = args.%s;\n" n n
6046            in
6047            let pr_list_handling_code n =
6048              pr "  %s = realloc (args.%s.%s_val,\n" n n n;
6049              pr "                sizeof (char *) * (args.%s.%s_len+1));\n" n n;
6050              pr "  if (%s == NULL) {\n" n;
6051              pr "    reply_with_perror (\"realloc\");\n";
6052              pr "    goto done;\n";
6053              pr "  }\n";
6054              pr "  %s[args.%s.%s_len] = NULL;\n" n n n;
6055              pr "  args.%s.%s_val = %s;\n" n n n;
6056            in
6057            List.iter (
6058              function
6059              | Pathname n ->
6060                  pr_args n;
6061                  pr "  ABS_PATH (%s, goto done);\n" n;
6062              | Device n ->
6063                  pr_args n;
6064                  pr "  RESOLVE_DEVICE (%s, goto done);\n" n;
6065              | Dev_or_Path n ->
6066                  pr_args n;
6067                  pr "  REQUIRE_ROOT_OR_RESOLVE_DEVICE (%s, goto done);\n" n;
6068              | String n -> pr_args n
6069              | OptString n -> pr "  %s = args.%s ? *args.%s : NULL;\n" n n n
6070              | StringList n ->
6071                  pr_list_handling_code n;
6072              | DeviceList n ->
6073                  pr_list_handling_code n;
6074                  pr "  /* Ensure that each is a device,\n";
6075                  pr "   * and perform device name translation. */\n";
6076                  pr "  { int pvi; for (pvi = 0; physvols[pvi] != NULL; ++pvi)\n";
6077                  pr "    RESOLVE_DEVICE (physvols[pvi], goto done);\n";
6078                  pr "  }\n";
6079              | Bool n -> pr "  %s = args.%s;\n" n n
6080              | Int n -> pr "  %s = args.%s;\n" n n
6081              | Int64 n -> pr "  %s = args.%s;\n" n n
6082              | FileIn _ | FileOut _ -> ()
6083            ) args;
6084            pr "\n"
6085       );
6086
6087
6088       (* this is used at least for do_equal *)
6089       if List.exists (function Pathname _ -> true | _ -> false) (snd style) then (
6090         (* Emit NEED_ROOT just once, even when there are two or
6091            more Pathname args *)
6092         pr "  NEED_ROOT (goto done);\n";
6093       );
6094
6095       (* Don't want to call the impl with any FileIn or FileOut
6096        * parameters, since these go "outside" the RPC protocol.
6097        *)
6098       let args' =
6099         List.filter (function FileIn _ | FileOut _ -> false | _ -> true)
6100           (snd style) in
6101       pr "  r = do_%s " name;
6102       generate_c_call_args (fst style, args');
6103       pr ";\n";
6104
6105       (match fst style with
6106        | RErr | RInt _ | RInt64 _ | RBool _
6107        | RConstString _ | RConstOptString _
6108        | RString _ | RStringList _ | RHashtable _
6109        | RStruct (_, _) | RStructList (_, _) ->
6110            pr "  if (r == %s)\n" error_code;
6111            pr "    /* do_%s has already called reply_with_error */\n" name;
6112            pr "    goto done;\n";
6113            pr "\n"
6114        | RBufferOut _ ->
6115            pr "  /* size == 0 && r == NULL could be a non-error case (just\n";
6116            pr "   * an ordinary zero-length buffer), so be careful ...\n";
6117            pr "   */\n";
6118            pr "  if (size == 1 && r == %s)\n" error_code;
6119            pr "    /* do_%s has already called reply_with_error */\n" name;
6120            pr "    goto done;\n";
6121            pr "\n"
6122       );
6123
6124       (* If there are any FileOut parameters, then the impl must
6125        * send its own reply.
6126        *)
6127       let no_reply =
6128         List.exists (function FileOut _ -> true | _ -> false) (snd style) in
6129       if no_reply then
6130         pr "  /* do_%s has already sent a reply */\n" name
6131       else (
6132         match fst style with
6133         | RErr -> pr "  reply (NULL, NULL);\n"
6134         | RInt n | RInt64 n | RBool n ->
6135             pr "  struct guestfs_%s_ret ret;\n" name;
6136             pr "  ret.%s = r;\n" n;
6137             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
6138               name
6139         | RConstString _ | RConstOptString _ ->
6140             failwithf "RConstString|RConstOptString cannot be used by daemon functions"
6141         | RString n ->
6142             pr "  struct guestfs_%s_ret ret;\n" name;
6143             pr "  ret.%s = r;\n" n;
6144             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
6145               name;
6146             pr "  free (r);\n"
6147         | RStringList n | RHashtable n ->
6148             pr "  struct guestfs_%s_ret ret;\n" name;
6149             pr "  ret.%s.%s_len = count_strings (r);\n" n n;
6150             pr "  ret.%s.%s_val = r;\n" n n;
6151             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
6152               name;
6153             pr "  free_strings (r);\n"
6154         | RStruct (n, _) ->
6155             pr "  struct guestfs_%s_ret ret;\n" name;
6156             pr "  ret.%s = *r;\n" n;
6157             pr "  reply ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
6158               name;
6159             pr "  xdr_free ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
6160               name
6161         | RStructList (n, _) ->
6162             pr "  struct guestfs_%s_ret ret;\n" name;
6163             pr "  ret.%s = *r;\n" n;
6164             pr "  reply ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
6165               name;
6166             pr "  xdr_free ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
6167               name
6168         | RBufferOut n ->
6169             pr "  struct guestfs_%s_ret ret;\n" name;
6170             pr "  ret.%s.%s_val = r;\n" n n;
6171             pr "  ret.%s.%s_len = size;\n" n n;
6172             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
6173               name;
6174             pr "  free (r);\n"
6175       );
6176
6177       (* Free the args. *)
6178       (match snd style with
6179        | [] ->
6180            pr "done: ;\n";
6181        | _ ->
6182            pr "done:\n";
6183            pr "  xdr_free ((xdrproc_t) xdr_guestfs_%s_args, (char *) &args);\n"
6184              name
6185       );
6186
6187       pr "}\n\n";
6188   ) daemon_functions;
6189
6190   (* Dispatch function. *)
6191   pr "void dispatch_incoming_message (XDR *xdr_in)\n";
6192   pr "{\n";
6193   pr "  switch (proc_nr) {\n";
6194
6195   List.iter (
6196     fun (name, style, _, _, _, _, _) ->
6197       pr "    case GUESTFS_PROC_%s:\n" (String.uppercase name);
6198       pr "      %s_stub (xdr_in);\n" name;
6199       pr "      break;\n"
6200   ) daemon_functions;
6201
6202   pr "    default:\n";
6203   pr "      reply_with_error (\"dispatch_incoming_message: unknown procedure number %%d, set LIBGUESTFS_PATH to point to the matching libguestfs appliance directory\", proc_nr);\n";
6204   pr "  }\n";
6205   pr "}\n";
6206   pr "\n";
6207
6208   (* LVM columns and tokenization functions. *)
6209   (* XXX This generates crap code.  We should rethink how we
6210    * do this parsing.
6211    *)
6212   List.iter (
6213     function
6214     | typ, cols ->
6215         pr "static const char *lvm_%s_cols = \"%s\";\n"
6216           typ (String.concat "," (List.map fst cols));
6217         pr "\n";
6218
6219         pr "static int lvm_tokenize_%s (char *str, guestfs_int_lvm_%s *r)\n" typ typ;
6220         pr "{\n";
6221         pr "  char *tok, *p, *next;\n";
6222         pr "  int i, j;\n";
6223         pr "\n";
6224         (*
6225           pr "  fprintf (stderr, \"%%s: <<%%s>>\\n\", __func__, str);\n";
6226           pr "\n";
6227         *)
6228         pr "  if (!str) {\n";
6229         pr "    fprintf (stderr, \"%%s: failed: passed a NULL string\\n\", __func__);\n";
6230         pr "    return -1;\n";
6231         pr "  }\n";
6232         pr "  if (!*str || c_isspace (*str)) {\n";
6233         pr "    fprintf (stderr, \"%%s: failed: passed a empty string or one beginning with whitespace\\n\", __func__);\n";
6234         pr "    return -1;\n";
6235         pr "  }\n";
6236         pr "  tok = str;\n";
6237         List.iter (
6238           fun (name, coltype) ->
6239             pr "  if (!tok) {\n";
6240             pr "    fprintf (stderr, \"%%s: failed: string finished early, around token %%s\\n\", __func__, \"%s\");\n" name;
6241             pr "    return -1;\n";
6242             pr "  }\n";
6243             pr "  p = strchrnul (tok, ',');\n";
6244             pr "  if (*p) next = p+1; else next = NULL;\n";
6245             pr "  *p = '\\0';\n";
6246             (match coltype with
6247              | FString ->
6248                  pr "  r->%s = strdup (tok);\n" name;
6249                  pr "  if (r->%s == NULL) {\n" name;
6250                  pr "    perror (\"strdup\");\n";
6251                  pr "    return -1;\n";
6252                  pr "  }\n"
6253              | FUUID ->
6254                  pr "  for (i = j = 0; i < 32; ++j) {\n";
6255                  pr "    if (tok[j] == '\\0') {\n";
6256                  pr "      fprintf (stderr, \"%%s: failed to parse UUID from '%%s'\\n\", __func__, tok);\n";
6257                  pr "      return -1;\n";
6258                  pr "    } else if (tok[j] != '-')\n";
6259                  pr "      r->%s[i++] = tok[j];\n" name;
6260                  pr "  }\n";
6261              | FBytes ->
6262                  pr "  if (sscanf (tok, \"%%\"SCNu64, &r->%s) != 1) {\n" name;
6263                  pr "    fprintf (stderr, \"%%s: failed to parse size '%%s' from token %%s\\n\", __func__, tok, \"%s\");\n" name;
6264                  pr "    return -1;\n";
6265                  pr "  }\n";
6266              | FInt64 ->
6267                  pr "  if (sscanf (tok, \"%%\"SCNi64, &r->%s) != 1) {\n" name;
6268                  pr "    fprintf (stderr, \"%%s: failed to parse int '%%s' from token %%s\\n\", __func__, tok, \"%s\");\n" name;
6269                  pr "    return -1;\n";
6270                  pr "  }\n";
6271              | FOptPercent ->
6272                  pr "  if (tok[0] == '\\0')\n";
6273                  pr "    r->%s = -1;\n" name;
6274                  pr "  else if (sscanf (tok, \"%%f\", &r->%s) != 1) {\n" name;
6275                  pr "    fprintf (stderr, \"%%s: failed to parse float '%%s' from token %%s\\n\", __func__, tok, \"%s\");\n" name;
6276                  pr "    return -1;\n";
6277                  pr "  }\n";
6278              | FBuffer | FInt32 | FUInt32 | FUInt64 | FChar ->
6279                  assert false (* can never be an LVM column *)
6280             );
6281             pr "  tok = next;\n";
6282         ) cols;
6283
6284         pr "  if (tok != NULL) {\n";
6285         pr "    fprintf (stderr, \"%%s: failed: extra tokens at end of string\\n\", __func__);\n";
6286         pr "    return -1;\n";
6287         pr "  }\n";
6288         pr "  return 0;\n";
6289         pr "}\n";
6290         pr "\n";
6291
6292         pr "guestfs_int_lvm_%s_list *\n" typ;
6293         pr "parse_command_line_%ss (void)\n" typ;
6294         pr "{\n";
6295         pr "  char *out, *err;\n";
6296         pr "  char *p, *pend;\n";
6297         pr "  int r, i;\n";
6298         pr "  guestfs_int_lvm_%s_list *ret;\n" typ;
6299         pr "  void *newp;\n";
6300         pr "\n";
6301         pr "  ret = malloc (sizeof *ret);\n";
6302         pr "  if (!ret) {\n";
6303         pr "    reply_with_perror (\"malloc\");\n";
6304         pr "    return NULL;\n";
6305         pr "  }\n";
6306         pr "\n";
6307         pr "  ret->guestfs_int_lvm_%s_list_len = 0;\n" typ;
6308         pr "  ret->guestfs_int_lvm_%s_list_val = NULL;\n" typ;
6309         pr "\n";
6310         pr "  r = command (&out, &err,\n";
6311         pr "           \"lvm\", \"%ss\",\n" typ;
6312         pr "           \"-o\", lvm_%s_cols, \"--unbuffered\", \"--noheadings\",\n" typ;
6313         pr "           \"--nosuffix\", \"--separator\", \",\", \"--units\", \"b\", NULL);\n";
6314         pr "  if (r == -1) {\n";
6315         pr "    reply_with_error (\"%%s\", err);\n";
6316         pr "    free (out);\n";
6317         pr "    free (err);\n";
6318         pr "    free (ret);\n";
6319         pr "    return NULL;\n";
6320         pr "  }\n";
6321         pr "\n";
6322         pr "  free (err);\n";
6323         pr "\n";
6324         pr "  /* Tokenize each line of the output. */\n";
6325         pr "  p = out;\n";
6326         pr "  i = 0;\n";
6327         pr "  while (p) {\n";
6328         pr "    pend = strchr (p, '\\n');       /* Get the next line of output. */\n";
6329         pr "    if (pend) {\n";
6330         pr "      *pend = '\\0';\n";
6331         pr "      pend++;\n";
6332         pr "    }\n";
6333         pr "\n";
6334         pr "    while (*p && c_isspace (*p))    /* Skip any leading whitespace. */\n";
6335         pr "      p++;\n";
6336         pr "\n";
6337         pr "    if (!*p) {                      /* Empty line?  Skip it. */\n";
6338         pr "      p = pend;\n";
6339         pr "      continue;\n";
6340         pr "    }\n";
6341         pr "\n";
6342         pr "    /* Allocate some space to store this next entry. */\n";
6343         pr "    newp = realloc (ret->guestfs_int_lvm_%s_list_val,\n" typ;
6344         pr "                sizeof (guestfs_int_lvm_%s) * (i+1));\n" typ;
6345         pr "    if (newp == NULL) {\n";
6346         pr "      reply_with_perror (\"realloc\");\n";
6347         pr "      free (ret->guestfs_int_lvm_%s_list_val);\n" typ;
6348         pr "      free (ret);\n";
6349         pr "      free (out);\n";
6350         pr "      return NULL;\n";
6351         pr "    }\n";
6352         pr "    ret->guestfs_int_lvm_%s_list_val = newp;\n" typ;
6353         pr "\n";
6354         pr "    /* Tokenize the next entry. */\n";
6355         pr "    r = lvm_tokenize_%s (p, &ret->guestfs_int_lvm_%s_list_val[i]);\n" typ typ;
6356         pr "    if (r == -1) {\n";
6357         pr "      reply_with_error (\"failed to parse output of '%ss' command\");\n" typ;
6358         pr "      free (ret->guestfs_int_lvm_%s_list_val);\n" typ;
6359         pr "      free (ret);\n";
6360         pr "      free (out);\n";
6361         pr "      return NULL;\n";
6362         pr "    }\n";
6363         pr "\n";
6364         pr "    ++i;\n";
6365         pr "    p = pend;\n";
6366         pr "  }\n";
6367         pr "\n";
6368         pr "  ret->guestfs_int_lvm_%s_list_len = i;\n" typ;
6369         pr "\n";
6370         pr "  free (out);\n";
6371         pr "  return ret;\n";
6372         pr "}\n"
6373
6374   ) ["pv", lvm_pv_cols; "vg", lvm_vg_cols; "lv", lvm_lv_cols]
6375
6376 (* Generate a list of function names, for debugging in the daemon.. *)
6377 and generate_daemon_names () =
6378   generate_header CStyle GPLv2plus;
6379
6380   pr "#include <config.h>\n";
6381   pr "\n";
6382   pr "#include \"daemon.h\"\n";
6383   pr "\n";
6384
6385   pr "/* This array is indexed by proc_nr.  See guestfs_protocol.x. */\n";
6386   pr "const char *function_names[] = {\n";
6387   List.iter (
6388     fun (name, _, proc_nr, _, _, _, _) -> pr "  [%d] = \"%s\",\n" proc_nr name
6389   ) daemon_functions;
6390   pr "};\n";
6391
6392 (* Generate the optional groups for the daemon to implement
6393  * guestfs_available.
6394  *)
6395 and generate_daemon_optgroups_c () =
6396   generate_header CStyle GPLv2plus;
6397
6398   pr "#include <config.h>\n";
6399   pr "\n";
6400   pr "#include \"daemon.h\"\n";
6401   pr "#include \"optgroups.h\"\n";
6402   pr "\n";
6403
6404   pr "struct optgroup optgroups[] = {\n";
6405   List.iter (
6406     fun (group, _) ->
6407       pr "  { \"%s\", optgroup_%s_available },\n" group group
6408   ) optgroups;
6409   pr "  { NULL, NULL }\n";
6410   pr "};\n"
6411
6412 and generate_daemon_optgroups_h () =
6413   generate_header CStyle GPLv2plus;
6414
6415   List.iter (
6416     fun (group, _) ->
6417       pr "extern int optgroup_%s_available (void);\n" group
6418   ) optgroups
6419
6420 (* Generate the tests. *)
6421 and generate_tests () =
6422   generate_header CStyle GPLv2plus;
6423
6424   pr "\
6425 #include <stdio.h>
6426 #include <stdlib.h>
6427 #include <string.h>
6428 #include <unistd.h>
6429 #include <sys/types.h>
6430 #include <fcntl.h>
6431
6432 #include \"guestfs.h\"
6433 #include \"guestfs-internal.h\"
6434
6435 static guestfs_h *g;
6436 static int suppress_error = 0;
6437
6438 static void print_error (guestfs_h *g, void *data, const char *msg)
6439 {
6440   if (!suppress_error)
6441     fprintf (stderr, \"%%s\\n\", msg);
6442 }
6443
6444 /* FIXME: nearly identical code appears in fish.c */
6445 static void print_strings (char *const *argv)
6446 {
6447   int argc;
6448
6449   for (argc = 0; argv[argc] != NULL; ++argc)
6450     printf (\"\\t%%s\\n\", argv[argc]);
6451 }
6452
6453 /*
6454 static void print_table (char const *const *argv)
6455 {
6456   int i;
6457
6458   for (i = 0; argv[i] != NULL; i += 2)
6459     printf (\"%%s: %%s\\n\", argv[i], argv[i+1]);
6460 }
6461 */
6462
6463 ";
6464
6465   (* Generate a list of commands which are not tested anywhere. *)
6466   pr "static void no_test_warnings (void)\n";
6467   pr "{\n";
6468
6469   let hash : (string, bool) Hashtbl.t = Hashtbl.create 13 in
6470   List.iter (
6471     fun (_, _, _, _, tests, _, _) ->
6472       let tests = filter_map (
6473         function
6474         | (_, (Always|If _|Unless _), test) -> Some test
6475         | (_, Disabled, _) -> None
6476       ) tests in
6477       let seq = List.concat (List.map seq_of_test tests) in
6478       let cmds_tested = List.map List.hd seq in
6479       List.iter (fun cmd -> Hashtbl.replace hash cmd true) cmds_tested
6480   ) all_functions;
6481
6482   List.iter (
6483     fun (name, _, _, _, _, _, _) ->
6484       if not (Hashtbl.mem hash name) then
6485         pr "  fprintf (stderr, \"warning: \\\"guestfs_%s\\\" has no tests\\n\");\n" name
6486   ) all_functions;
6487
6488   pr "}\n";
6489   pr "\n";
6490
6491   (* Generate the actual tests.  Note that we generate the tests
6492    * in reverse order, deliberately, so that (in general) the
6493    * newest tests run first.  This makes it quicker and easier to
6494    * debug them.
6495    *)
6496   let test_names =
6497     List.map (
6498       fun (name, _, _, flags, tests, _, _) ->
6499         mapi (generate_one_test name flags) tests
6500     ) (List.rev all_functions) in
6501   let test_names = List.concat test_names in
6502   let nr_tests = List.length test_names in
6503
6504   pr "\
6505 int main (int argc, char *argv[])
6506 {
6507   char c = 0;
6508   unsigned long int n_failed = 0;
6509   const char *filename;
6510   int fd;
6511   int nr_tests, test_num = 0;
6512
6513   setbuf (stdout, NULL);
6514
6515   no_test_warnings ();
6516
6517   g = guestfs_create ();
6518   if (g == NULL) {
6519     printf (\"guestfs_create FAILED\\n\");
6520     exit (EXIT_FAILURE);
6521   }
6522
6523   guestfs_set_error_handler (g, print_error, NULL);
6524
6525   guestfs_set_path (g, \"../appliance\");
6526
6527   filename = \"test1.img\";
6528   fd = open (filename, O_WRONLY|O_CREAT|O_NOCTTY|O_NONBLOCK|O_TRUNC, 0666);
6529   if (fd == -1) {
6530     perror (filename);
6531     exit (EXIT_FAILURE);
6532   }
6533   if (lseek (fd, %d, SEEK_SET) == -1) {
6534     perror (\"lseek\");
6535     close (fd);
6536     unlink (filename);
6537     exit (EXIT_FAILURE);
6538   }
6539   if (write (fd, &c, 1) == -1) {
6540     perror (\"write\");
6541     close (fd);
6542     unlink (filename);
6543     exit (EXIT_FAILURE);
6544   }
6545   if (close (fd) == -1) {
6546     perror (filename);
6547     unlink (filename);
6548     exit (EXIT_FAILURE);
6549   }
6550   if (guestfs_add_drive (g, filename) == -1) {
6551     printf (\"guestfs_add_drive %%s FAILED\\n\", filename);
6552     exit (EXIT_FAILURE);
6553   }
6554
6555   filename = \"test2.img\";
6556   fd = open (filename, O_WRONLY|O_CREAT|O_NOCTTY|O_NONBLOCK|O_TRUNC, 0666);
6557   if (fd == -1) {
6558     perror (filename);
6559     exit (EXIT_FAILURE);
6560   }
6561   if (lseek (fd, %d, SEEK_SET) == -1) {
6562     perror (\"lseek\");
6563     close (fd);
6564     unlink (filename);
6565     exit (EXIT_FAILURE);
6566   }
6567   if (write (fd, &c, 1) == -1) {
6568     perror (\"write\");
6569     close (fd);
6570     unlink (filename);
6571     exit (EXIT_FAILURE);
6572   }
6573   if (close (fd) == -1) {
6574     perror (filename);
6575     unlink (filename);
6576     exit (EXIT_FAILURE);
6577   }
6578   if (guestfs_add_drive (g, filename) == -1) {
6579     printf (\"guestfs_add_drive %%s FAILED\\n\", filename);
6580     exit (EXIT_FAILURE);
6581   }
6582
6583   filename = \"test3.img\";
6584   fd = open (filename, O_WRONLY|O_CREAT|O_NOCTTY|O_NONBLOCK|O_TRUNC, 0666);
6585   if (fd == -1) {
6586     perror (filename);
6587     exit (EXIT_FAILURE);
6588   }
6589   if (lseek (fd, %d, SEEK_SET) == -1) {
6590     perror (\"lseek\");
6591     close (fd);
6592     unlink (filename);
6593     exit (EXIT_FAILURE);
6594   }
6595   if (write (fd, &c, 1) == -1) {
6596     perror (\"write\");
6597     close (fd);
6598     unlink (filename);
6599     exit (EXIT_FAILURE);
6600   }
6601   if (close (fd) == -1) {
6602     perror (filename);
6603     unlink (filename);
6604     exit (EXIT_FAILURE);
6605   }
6606   if (guestfs_add_drive (g, filename) == -1) {
6607     printf (\"guestfs_add_drive %%s FAILED\\n\", filename);
6608     exit (EXIT_FAILURE);
6609   }
6610
6611   if (guestfs_add_drive_ro (g, \"../images/test.iso\") == -1) {
6612     printf (\"guestfs_add_drive_ro ../images/test.iso FAILED\\n\");
6613     exit (EXIT_FAILURE);
6614   }
6615
6616   /* Set a timeout in case qemu hangs during launch (RHBZ#505329). */
6617   alarm (600);
6618
6619   if (guestfs_launch (g) == -1) {
6620     printf (\"guestfs_launch FAILED\\n\");
6621     exit (EXIT_FAILURE);
6622   }
6623
6624   /* Cancel previous alarm. */
6625   alarm (0);
6626
6627   nr_tests = %d;
6628
6629 " (500 * 1024 * 1024) (50 * 1024 * 1024) (10 * 1024 * 1024) nr_tests;
6630
6631   iteri (
6632     fun i test_name ->
6633       pr "  test_num++;\n";
6634       pr "  printf (\"%%3d/%%3d %s\\n\", test_num, nr_tests);\n" test_name;
6635       pr "  if (%s () == -1) {\n" test_name;
6636       pr "    printf (\"%s FAILED\\n\");\n" test_name;
6637       pr "    n_failed++;\n";
6638       pr "  }\n";
6639   ) test_names;
6640   pr "\n";
6641
6642   pr "  guestfs_close (g);\n";
6643   pr "  unlink (\"test1.img\");\n";
6644   pr "  unlink (\"test2.img\");\n";
6645   pr "  unlink (\"test3.img\");\n";
6646   pr "\n";
6647
6648   pr "  if (n_failed > 0) {\n";
6649   pr "    printf (\"***** %%lu / %%d tests FAILED *****\\n\", n_failed, nr_tests);\n";
6650   pr "    exit (EXIT_FAILURE);\n";
6651   pr "  }\n";
6652   pr "\n";
6653
6654   pr "  exit (EXIT_SUCCESS);\n";
6655   pr "}\n"
6656
6657 and generate_one_test name flags i (init, prereq, test) =
6658   let test_name = sprintf "test_%s_%d" name i in
6659
6660   pr "\
6661 static int %s_skip (void)
6662 {
6663   const char *str;
6664
6665   str = getenv (\"TEST_ONLY\");
6666   if (str)
6667     return strstr (str, \"%s\") == NULL;
6668   str = getenv (\"SKIP_%s\");
6669   if (str && STREQ (str, \"1\")) return 1;
6670   str = getenv (\"SKIP_TEST_%s\");
6671   if (str && STREQ (str, \"1\")) return 1;
6672   return 0;
6673 }
6674
6675 " test_name name (String.uppercase test_name) (String.uppercase name);
6676
6677   (match prereq with
6678    | Disabled | Always -> ()
6679    | If code | Unless code ->
6680        pr "static int %s_prereq (void)\n" test_name;
6681        pr "{\n";
6682        pr "  %s\n" code;
6683        pr "}\n";
6684        pr "\n";
6685   );
6686
6687   pr "\
6688 static int %s (void)
6689 {
6690   if (%s_skip ()) {
6691     printf (\"        %%s skipped (reason: environment variable set)\\n\", \"%s\");
6692     return 0;
6693   }
6694
6695 " test_name test_name test_name;
6696
6697   (* Optional functions should only be tested if the relevant
6698    * support is available in the daemon.
6699    *)
6700   List.iter (
6701     function
6702     | Optional group ->
6703         pr "  {\n";
6704         pr "    const char *groups[] = { \"%s\", NULL };\n" group;
6705         pr "    int r;\n";
6706         pr "    suppress_error = 1;\n";
6707         pr "    r = guestfs_available (g, (char **) groups);\n";
6708         pr "    suppress_error = 0;\n";
6709         pr "    if (r == -1) {\n";
6710         pr "      printf (\"        %%s skipped (reason: group %%s not available in daemon)\\n\", \"%s\", groups[0]);\n" test_name;
6711         pr "      return 0;\n";
6712         pr "    }\n";
6713         pr "  }\n";
6714     | _ -> ()
6715   ) flags;
6716
6717   (match prereq with
6718    | Disabled ->
6719        pr "  printf (\"        %%s skipped (reason: test disabled in generator)\\n\", \"%s\");\n" test_name
6720    | If _ ->
6721        pr "  if (! %s_prereq ()) {\n" test_name;
6722        pr "    printf (\"        %%s skipped (reason: test prerequisite)\\n\", \"%s\");\n" test_name;
6723        pr "    return 0;\n";
6724        pr "  }\n";
6725        pr "\n";
6726        generate_one_test_body name i test_name init test;
6727    | Unless _ ->
6728        pr "  if (%s_prereq ()) {\n" test_name;
6729        pr "    printf (\"        %%s skipped (reason: test prerequisite)\\n\", \"%s\");\n" test_name;
6730        pr "    return 0;\n";
6731        pr "  }\n";
6732        pr "\n";
6733        generate_one_test_body name i test_name init test;
6734    | Always ->
6735        generate_one_test_body name i test_name init test
6736   );
6737
6738   pr "  return 0;\n";
6739   pr "}\n";
6740   pr "\n";
6741   test_name
6742
6743 and generate_one_test_body name i test_name init test =
6744   (match init with
6745    | InitNone (* XXX at some point, InitNone and InitEmpty became
6746                * folded together as the same thing.  Really we should
6747                * make InitNone do nothing at all, but the tests may
6748                * need to be checked to make sure this is OK.
6749                *)
6750    | InitEmpty ->
6751        pr "  /* InitNone|InitEmpty for %s */\n" test_name;
6752        List.iter (generate_test_command_call test_name)
6753          [["blockdev_setrw"; "/dev/sda"];
6754           ["umount_all"];
6755           ["lvm_remove_all"]]
6756    | InitPartition ->
6757        pr "  /* InitPartition for %s: create /dev/sda1 */\n" test_name;
6758        List.iter (generate_test_command_call test_name)
6759          [["blockdev_setrw"; "/dev/sda"];
6760           ["umount_all"];
6761           ["lvm_remove_all"];
6762           ["part_disk"; "/dev/sda"; "mbr"]]
6763    | InitBasicFS ->
6764        pr "  /* InitBasicFS for %s: create ext2 on /dev/sda1 */\n" test_name;
6765        List.iter (generate_test_command_call test_name)
6766          [["blockdev_setrw"; "/dev/sda"];
6767           ["umount_all"];
6768           ["lvm_remove_all"];
6769           ["part_disk"; "/dev/sda"; "mbr"];
6770           ["mkfs"; "ext2"; "/dev/sda1"];
6771           ["mount_options"; ""; "/dev/sda1"; "/"]]
6772    | InitBasicFSonLVM ->
6773        pr "  /* InitBasicFSonLVM for %s: create ext2 on /dev/VG/LV */\n"
6774          test_name;
6775        List.iter (generate_test_command_call test_name)
6776          [["blockdev_setrw"; "/dev/sda"];
6777           ["umount_all"];
6778           ["lvm_remove_all"];
6779           ["part_disk"; "/dev/sda"; "mbr"];
6780           ["pvcreate"; "/dev/sda1"];
6781           ["vgcreate"; "VG"; "/dev/sda1"];
6782           ["lvcreate"; "LV"; "VG"; "8"];
6783           ["mkfs"; "ext2"; "/dev/VG/LV"];
6784           ["mount_options"; ""; "/dev/VG/LV"; "/"]]
6785    | InitISOFS ->
6786        pr "  /* InitISOFS for %s */\n" test_name;
6787        List.iter (generate_test_command_call test_name)
6788          [["blockdev_setrw"; "/dev/sda"];
6789           ["umount_all"];
6790           ["lvm_remove_all"];
6791           ["mount_ro"; "/dev/sdd"; "/"]]
6792   );
6793
6794   let get_seq_last = function
6795     | [] ->
6796         failwithf "%s: you cannot use [] (empty list) when expecting a command"
6797           test_name
6798     | seq ->
6799         let seq = List.rev seq in
6800         List.rev (List.tl seq), List.hd seq
6801   in
6802
6803   match test with
6804   | TestRun seq ->
6805       pr "  /* TestRun for %s (%d) */\n" name i;
6806       List.iter (generate_test_command_call test_name) seq
6807   | TestOutput (seq, expected) ->
6808       pr "  /* TestOutput for %s (%d) */\n" name i;
6809       pr "  const char *expected = \"%s\";\n" (c_quote expected);
6810       let seq, last = get_seq_last seq in
6811       let test () =
6812         pr "    if (STRNEQ (r, expected)) {\n";
6813         pr "      fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r);\n" test_name;
6814         pr "      return -1;\n";
6815         pr "    }\n"
6816       in
6817       List.iter (generate_test_command_call test_name) seq;
6818       generate_test_command_call ~test test_name last
6819   | TestOutputList (seq, expected) ->
6820       pr "  /* TestOutputList for %s (%d) */\n" name i;
6821       let seq, last = get_seq_last seq in
6822       let test () =
6823         iteri (
6824           fun i str ->
6825             pr "    if (!r[%d]) {\n" i;
6826             pr "      fprintf (stderr, \"%s: short list returned from command\\n\");\n" test_name;
6827             pr "      print_strings (r);\n";
6828             pr "      return -1;\n";
6829             pr "    }\n";
6830             pr "    {\n";
6831             pr "      const char *expected = \"%s\";\n" (c_quote str);
6832             pr "      if (STRNEQ (r[%d], expected)) {\n" i;
6833             pr "        fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r[%d]);\n" test_name i;
6834             pr "        return -1;\n";
6835             pr "      }\n";
6836             pr "    }\n"
6837         ) expected;
6838         pr "    if (r[%d] != NULL) {\n" (List.length expected);
6839         pr "      fprintf (stderr, \"%s: extra elements returned from command\\n\");\n"
6840           test_name;
6841         pr "      print_strings (r);\n";
6842         pr "      return -1;\n";
6843         pr "    }\n"
6844       in
6845       List.iter (generate_test_command_call test_name) seq;
6846       generate_test_command_call ~test test_name last
6847   | TestOutputListOfDevices (seq, expected) ->
6848       pr "  /* TestOutputListOfDevices for %s (%d) */\n" name i;
6849       let seq, last = get_seq_last seq in
6850       let test () =
6851         iteri (
6852           fun i str ->
6853             pr "    if (!r[%d]) {\n" i;
6854             pr "      fprintf (stderr, \"%s: short list returned from command\\n\");\n" test_name;
6855             pr "      print_strings (r);\n";
6856             pr "      return -1;\n";
6857             pr "    }\n";
6858             pr "    {\n";
6859             pr "      const char *expected = \"%s\";\n" (c_quote str);
6860             pr "      r[%d][5] = 's';\n" i;
6861             pr "      if (STRNEQ (r[%d], expected)) {\n" i;
6862             pr "        fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r[%d]);\n" test_name i;
6863             pr "        return -1;\n";
6864             pr "      }\n";
6865             pr "    }\n"
6866         ) expected;
6867         pr "    if (r[%d] != NULL) {\n" (List.length expected);
6868         pr "      fprintf (stderr, \"%s: extra elements returned from command\\n\");\n"
6869           test_name;
6870         pr "      print_strings (r);\n";
6871         pr "      return -1;\n";
6872         pr "    }\n"
6873       in
6874       List.iter (generate_test_command_call test_name) seq;
6875       generate_test_command_call ~test test_name last
6876   | TestOutputInt (seq, expected) ->
6877       pr "  /* TestOutputInt for %s (%d) */\n" name i;
6878       let seq, last = get_seq_last seq in
6879       let test () =
6880         pr "    if (r != %d) {\n" expected;
6881         pr "      fprintf (stderr, \"%s: expected %d but got %%d\\n\","
6882           test_name expected;
6883         pr "               (int) r);\n";
6884         pr "      return -1;\n";
6885         pr "    }\n"
6886       in
6887       List.iter (generate_test_command_call test_name) seq;
6888       generate_test_command_call ~test test_name last
6889   | TestOutputIntOp (seq, op, expected) ->
6890       pr "  /* TestOutputIntOp for %s (%d) */\n" name i;
6891       let seq, last = get_seq_last seq in
6892       let test () =
6893         pr "    if (! (r %s %d)) {\n" op expected;
6894         pr "      fprintf (stderr, \"%s: expected %s %d but got %%d\\n\","
6895           test_name op expected;
6896         pr "               (int) r);\n";
6897         pr "      return -1;\n";
6898         pr "    }\n"
6899       in
6900       List.iter (generate_test_command_call test_name) seq;
6901       generate_test_command_call ~test test_name last
6902   | TestOutputTrue seq ->
6903       pr "  /* TestOutputTrue for %s (%d) */\n" name i;
6904       let seq, last = get_seq_last seq in
6905       let test () =
6906         pr "    if (!r) {\n";
6907         pr "      fprintf (stderr, \"%s: expected true, got false\\n\");\n"
6908           test_name;
6909         pr "      return -1;\n";
6910         pr "    }\n"
6911       in
6912       List.iter (generate_test_command_call test_name) seq;
6913       generate_test_command_call ~test test_name last
6914   | TestOutputFalse seq ->
6915       pr "  /* TestOutputFalse for %s (%d) */\n" name i;
6916       let seq, last = get_seq_last seq in
6917       let test () =
6918         pr "    if (r) {\n";
6919         pr "      fprintf (stderr, \"%s: expected false, got true\\n\");\n"
6920           test_name;
6921         pr "      return -1;\n";
6922         pr "    }\n"
6923       in
6924       List.iter (generate_test_command_call test_name) seq;
6925       generate_test_command_call ~test test_name last
6926   | TestOutputLength (seq, expected) ->
6927       pr "  /* TestOutputLength for %s (%d) */\n" name i;
6928       let seq, last = get_seq_last seq in
6929       let test () =
6930         pr "    int j;\n";
6931         pr "    for (j = 0; j < %d; ++j)\n" expected;
6932         pr "      if (r[j] == NULL) {\n";
6933         pr "        fprintf (stderr, \"%s: short list returned\\n\");\n"
6934           test_name;
6935         pr "        print_strings (r);\n";
6936         pr "        return -1;\n";
6937         pr "      }\n";
6938         pr "    if (r[j] != NULL) {\n";
6939         pr "      fprintf (stderr, \"%s: long list returned\\n\");\n"
6940           test_name;
6941         pr "      print_strings (r);\n";
6942         pr "      return -1;\n";
6943         pr "    }\n"
6944       in
6945       List.iter (generate_test_command_call test_name) seq;
6946       generate_test_command_call ~test test_name last
6947   | TestOutputBuffer (seq, expected) ->
6948       pr "  /* TestOutputBuffer for %s (%d) */\n" name i;
6949       pr "  const char *expected = \"%s\";\n" (c_quote expected);
6950       let seq, last = get_seq_last seq in
6951       let len = String.length expected in
6952       let test () =
6953         pr "    if (size != %d) {\n" len;
6954         pr "      fprintf (stderr, \"%s: returned size of buffer wrong, expected %d but got %%zu\\n\", size);\n" test_name len;
6955         pr "      return -1;\n";
6956         pr "    }\n";
6957         pr "    if (STRNEQLEN (r, expected, size)) {\n";
6958         pr "      fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r);\n" test_name;
6959         pr "      return -1;\n";
6960         pr "    }\n"
6961       in
6962       List.iter (generate_test_command_call test_name) seq;
6963       generate_test_command_call ~test test_name last
6964   | TestOutputStruct (seq, checks) ->
6965       pr "  /* TestOutputStruct for %s (%d) */\n" name i;
6966       let seq, last = get_seq_last seq in
6967       let test () =
6968         List.iter (
6969           function
6970           | CompareWithInt (field, expected) ->
6971               pr "    if (r->%s != %d) {\n" field expected;
6972               pr "      fprintf (stderr, \"%s: %s was %%d, expected %d\\n\",\n"
6973                 test_name field expected;
6974               pr "               (int) r->%s);\n" field;
6975               pr "      return -1;\n";
6976               pr "    }\n"
6977           | CompareWithIntOp (field, op, expected) ->
6978               pr "    if (!(r->%s %s %d)) {\n" field op expected;
6979               pr "      fprintf (stderr, \"%s: %s was %%d, expected %s %d\\n\",\n"
6980                 test_name field op expected;
6981               pr "               (int) r->%s);\n" field;
6982               pr "      return -1;\n";
6983               pr "    }\n"
6984           | CompareWithString (field, expected) ->
6985               pr "    if (STRNEQ (r->%s, \"%s\")) {\n" field expected;
6986               pr "      fprintf (stderr, \"%s: %s was \"%%s\", expected \"%s\"\\n\",\n"
6987                 test_name field expected;
6988               pr "               r->%s);\n" field;
6989               pr "      return -1;\n";
6990               pr "    }\n"
6991           | CompareFieldsIntEq (field1, field2) ->
6992               pr "    if (r->%s != r->%s) {\n" field1 field2;
6993               pr "      fprintf (stderr, \"%s: %s (%%d) <> %s (%%d)\\n\",\n"
6994                 test_name field1 field2;
6995               pr "               (int) r->%s, (int) r->%s);\n" field1 field2;
6996               pr "      return -1;\n";
6997               pr "    }\n"
6998           | CompareFieldsStrEq (field1, field2) ->
6999               pr "    if (STRNEQ (r->%s, r->%s)) {\n" field1 field2;
7000               pr "      fprintf (stderr, \"%s: %s (\"%%s\") <> %s (\"%%s\")\\n\",\n"
7001                 test_name field1 field2;
7002               pr "               r->%s, r->%s);\n" field1 field2;
7003               pr "      return -1;\n";
7004               pr "    }\n"
7005         ) checks
7006       in
7007       List.iter (generate_test_command_call test_name) seq;
7008       generate_test_command_call ~test test_name last
7009   | TestLastFail seq ->
7010       pr "  /* TestLastFail for %s (%d) */\n" name i;
7011       let seq, last = get_seq_last seq in
7012       List.iter (generate_test_command_call test_name) seq;
7013       generate_test_command_call test_name ~expect_error:true last
7014
7015 (* Generate the code to run a command, leaving the result in 'r'.
7016  * If you expect to get an error then you should set expect_error:true.
7017  *)
7018 and generate_test_command_call ?(expect_error = false) ?test test_name cmd =
7019   match cmd with
7020   | [] -> assert false
7021   | name :: args ->
7022       (* Look up the command to find out what args/ret it has. *)
7023       let style =
7024         try
7025           let _, style, _, _, _, _, _ =
7026             List.find (fun (n, _, _, _, _, _, _) -> n = name) all_functions in
7027           style
7028         with Not_found ->
7029           failwithf "%s: in test, command %s was not found" test_name name in
7030
7031       if List.length (snd style) <> List.length args then
7032         failwithf "%s: in test, wrong number of args given to %s"
7033           test_name name;
7034
7035       pr "  {\n";
7036
7037       List.iter (
7038         function
7039         | OptString n, "NULL" -> ()
7040         | Pathname n, arg
7041         | Device n, arg
7042         | Dev_or_Path n, arg
7043         | String n, arg
7044         | OptString n, arg ->
7045             pr "    const char *%s = \"%s\";\n" n (c_quote arg);
7046         | Int _, _
7047         | Int64 _, _
7048         | Bool _, _
7049         | FileIn _, _ | FileOut _, _ -> ()
7050         | StringList n, "" | DeviceList n, "" ->
7051             pr "    const char *const %s[1] = { NULL };\n" n
7052         | StringList n, arg | DeviceList n, arg ->
7053             let strs = string_split " " arg in
7054             iteri (
7055               fun i str ->
7056                 pr "    const char *%s_%d = \"%s\";\n" n i (c_quote str);
7057             ) strs;
7058             pr "    const char *const %s[] = {\n" n;
7059             iteri (
7060               fun i _ -> pr "      %s_%d,\n" n i
7061             ) strs;
7062             pr "      NULL\n";
7063             pr "    };\n";
7064       ) (List.combine (snd style) args);
7065
7066       let error_code =
7067         match fst style with
7068         | RErr | RInt _ | RBool _ -> pr "    int r;\n"; "-1"
7069         | RInt64 _ -> pr "    int64_t r;\n"; "-1"
7070         | RConstString _ | RConstOptString _ ->
7071             pr "    const char *r;\n"; "NULL"
7072         | RString _ -> pr "    char *r;\n"; "NULL"
7073         | RStringList _ | RHashtable _ ->
7074             pr "    char **r;\n";
7075             pr "    int i;\n";
7076             "NULL"
7077         | RStruct (_, typ) ->
7078             pr "    struct guestfs_%s *r;\n" typ; "NULL"
7079         | RStructList (_, typ) ->
7080             pr "    struct guestfs_%s_list *r;\n" typ; "NULL"
7081         | RBufferOut _ ->
7082             pr "    char *r;\n";
7083             pr "    size_t size;\n";
7084             "NULL" in
7085
7086       pr "    suppress_error = %d;\n" (if expect_error then 1 else 0);
7087       pr "    r = guestfs_%s (g" name;
7088
7089       (* Generate the parameters. *)
7090       List.iter (
7091         function
7092         | OptString _, "NULL" -> pr ", NULL"
7093         | Pathname n, _
7094         | Device n, _ | Dev_or_Path n, _
7095         | String n, _
7096         | OptString n, _ ->
7097             pr ", %s" n
7098         | FileIn _, arg | FileOut _, arg ->
7099             pr ", \"%s\"" (c_quote arg)
7100         | StringList n, _ | DeviceList n, _ ->
7101             pr ", (char **) %s" n
7102         | Int _, arg ->
7103             let i =
7104               try int_of_string arg
7105               with Failure "int_of_string" ->
7106                 failwithf "%s: expecting an int, but got '%s'" test_name arg in
7107             pr ", %d" i
7108         | Int64 _, arg ->
7109             let i =
7110               try Int64.of_string arg
7111               with Failure "int_of_string" ->
7112                 failwithf "%s: expecting an int64, but got '%s'" test_name arg in
7113             pr ", %Ld" i
7114         | Bool _, arg ->
7115             let b = bool_of_string arg in pr ", %d" (if b then 1 else 0)
7116       ) (List.combine (snd style) args);
7117
7118       (match fst style with
7119        | RBufferOut _ -> pr ", &size"
7120        | _ -> ()
7121       );
7122
7123       pr ");\n";
7124
7125       if not expect_error then
7126         pr "    if (r == %s)\n" error_code
7127       else
7128         pr "    if (r != %s)\n" error_code;
7129       pr "      return -1;\n";
7130
7131       (* Insert the test code. *)
7132       (match test with
7133        | None -> ()
7134        | Some f -> f ()
7135       );
7136
7137       (match fst style with
7138        | RErr | RInt _ | RInt64 _ | RBool _
7139        | RConstString _ | RConstOptString _ -> ()
7140        | RString _ | RBufferOut _ -> pr "    free (r);\n"
7141        | RStringList _ | RHashtable _ ->
7142            pr "    for (i = 0; r[i] != NULL; ++i)\n";
7143            pr "      free (r[i]);\n";
7144            pr "    free (r);\n"
7145        | RStruct (_, typ) ->
7146            pr "    guestfs_free_%s (r);\n" typ
7147        | RStructList (_, typ) ->
7148            pr "    guestfs_free_%s_list (r);\n" typ
7149       );
7150
7151       pr "  }\n"
7152
7153 and c_quote str =
7154   let str = replace_str str "\r" "\\r" in
7155   let str = replace_str str "\n" "\\n" in
7156   let str = replace_str str "\t" "\\t" in
7157   let str = replace_str str "\000" "\\0" in
7158   str
7159
7160 (* Generate a lot of different functions for guestfish. *)
7161 and generate_fish_cmds () =
7162   generate_header CStyle GPLv2plus;
7163
7164   let all_functions =
7165     List.filter (
7166       fun (_, _, _, flags, _, _, _) -> not (List.mem NotInFish flags)
7167     ) all_functions in
7168   let all_functions_sorted =
7169     List.filter (
7170       fun (_, _, _, flags, _, _, _) -> not (List.mem NotInFish flags)
7171     ) all_functions_sorted in
7172
7173   pr "#include <config.h>\n";
7174   pr "\n";
7175   pr "#include <stdio.h>\n";
7176   pr "#include <stdlib.h>\n";
7177   pr "#include <string.h>\n";
7178   pr "#include <inttypes.h>\n";
7179   pr "\n";
7180   pr "#include <guestfs.h>\n";
7181   pr "#include \"c-ctype.h\"\n";
7182   pr "#include \"full-write.h\"\n";
7183   pr "#include \"xstrtol.h\"\n";
7184   pr "#include \"fish.h\"\n";
7185   pr "\n";
7186
7187   (* list_commands function, which implements guestfish -h *)
7188   pr "void list_commands (void)\n";
7189   pr "{\n";
7190   pr "  printf (\"    %%-16s     %%s\\n\", _(\"Command\"), _(\"Description\"));\n";
7191   pr "  list_builtin_commands ();\n";
7192   List.iter (
7193     fun (name, _, _, flags, _, shortdesc, _) ->
7194       let name = replace_char name '_' '-' in
7195       pr "  printf (\"%%-20s %%s\\n\", \"%s\", _(\"%s\"));\n"
7196         name shortdesc
7197   ) all_functions_sorted;
7198   pr "  printf (\"    %%s\\n\",";
7199   pr "          _(\"Use -h <cmd> / help <cmd> to show detailed help for a command.\"));\n";
7200   pr "}\n";
7201   pr "\n";
7202
7203   (* display_command function, which implements guestfish -h cmd *)
7204   pr "void display_command (const char *cmd)\n";
7205   pr "{\n";
7206   List.iter (
7207     fun (name, style, _, flags, _, shortdesc, longdesc) ->
7208       let name2 = replace_char name '_' '-' in
7209       let alias =
7210         try find_map (function FishAlias n -> Some n | _ -> None) flags
7211         with Not_found -> name in
7212       let longdesc = replace_str longdesc "C<guestfs_" "C<" in
7213       let synopsis =
7214         match snd style with
7215         | [] -> name2
7216         | args ->
7217             sprintf "%s %s"
7218               name2 (String.concat " " (List.map name_of_argt args)) in
7219
7220       let warnings =
7221         if List.mem ProtocolLimitWarning flags then
7222           ("\n\n" ^ protocol_limit_warning)
7223         else "" in
7224
7225       (* For DangerWillRobinson commands, we should probably have
7226        * guestfish prompt before allowing you to use them (especially
7227        * in interactive mode). XXX
7228        *)
7229       let warnings =
7230         warnings ^
7231           if List.mem DangerWillRobinson flags then
7232             ("\n\n" ^ danger_will_robinson)
7233           else "" in
7234
7235       let warnings =
7236         warnings ^
7237           match deprecation_notice flags with
7238           | None -> ""
7239           | Some txt -> "\n\n" ^ txt in
7240
7241       let describe_alias =
7242         if name <> alias then
7243           sprintf "\n\nYou can use '%s' as an alias for this command." alias
7244         else "" in
7245
7246       pr "  if (";
7247       pr "STRCASEEQ (cmd, \"%s\")" name;
7248       if name <> name2 then
7249         pr " || STRCASEEQ (cmd, \"%s\")" name2;
7250       if name <> alias then
7251         pr " || STRCASEEQ (cmd, \"%s\")" alias;
7252       pr ")\n";
7253       pr "    pod2text (\"%s\", _(\"%s\"), %S);\n"
7254         name2 shortdesc
7255         ("=head1 SYNOPSIS\n\n " ^ synopsis ^ "\n\n" ^
7256          "=head1 DESCRIPTION\n\n" ^
7257          longdesc ^ warnings ^ describe_alias);
7258       pr "  else\n"
7259   ) all_functions;
7260   pr "    display_builtin_command (cmd);\n";
7261   pr "}\n";
7262   pr "\n";
7263
7264   let emit_print_list_function typ =
7265     pr "static void print_%s_list (struct guestfs_%s_list *%ss)\n"
7266       typ typ typ;
7267     pr "{\n";
7268     pr "  unsigned int i;\n";
7269     pr "\n";
7270     pr "  for (i = 0; i < %ss->len; ++i) {\n" typ;
7271     pr "    printf (\"[%%d] = {\\n\", i);\n";
7272     pr "    print_%s_indent (&%ss->val[i], \"  \");\n" typ typ;
7273     pr "    printf (\"}\\n\");\n";
7274     pr "  }\n";
7275     pr "}\n";
7276     pr "\n";
7277   in
7278
7279   (* print_* functions *)
7280   List.iter (
7281     fun (typ, cols) ->
7282       let needs_i =
7283         List.exists (function (_, (FUUID|FBuffer)) -> true | _ -> false) cols in
7284
7285       pr "static void print_%s_indent (struct guestfs_%s *%s, const char *indent)\n" typ typ typ;
7286       pr "{\n";
7287       if needs_i then (
7288         pr "  unsigned int i;\n";
7289         pr "\n"
7290       );
7291       List.iter (
7292         function
7293         | name, FString ->
7294             pr "  printf (\"%%s%s: %%s\\n\", indent, %s->%s);\n" name typ name
7295         | name, FUUID ->
7296             pr "  printf (\"%%s%s: \", indent);\n" name;
7297             pr "  for (i = 0; i < 32; ++i)\n";
7298             pr "    printf (\"%%c\", %s->%s[i]);\n" typ name;
7299             pr "  printf (\"\\n\");\n"
7300         | name, FBuffer ->
7301             pr "  printf (\"%%s%s: \", indent);\n" name;
7302             pr "  for (i = 0; i < %s->%s_len; ++i)\n" typ name;
7303             pr "    if (c_isprint (%s->%s[i]))\n" typ name;
7304             pr "      printf (\"%%c\", %s->%s[i]);\n" typ name;
7305             pr "    else\n";
7306             pr "      printf (\"\\\\x%%02x\", %s->%s[i]);\n" typ name;
7307             pr "  printf (\"\\n\");\n"
7308         | name, (FUInt64|FBytes) ->
7309             pr "  printf (\"%%s%s: %%\" PRIu64 \"\\n\", indent, %s->%s);\n"
7310               name typ name
7311         | name, FInt64 ->
7312             pr "  printf (\"%%s%s: %%\" PRIi64 \"\\n\", indent, %s->%s);\n"
7313               name typ name
7314         | name, FUInt32 ->
7315             pr "  printf (\"%%s%s: %%\" PRIu32 \"\\n\", indent, %s->%s);\n"
7316               name typ name
7317         | name, FInt32 ->
7318             pr "  printf (\"%%s%s: %%\" PRIi32 \"\\n\", indent, %s->%s);\n"
7319               name typ name
7320         | name, FChar ->
7321             pr "  printf (\"%%s%s: %%c\\n\", indent, %s->%s);\n"
7322               name typ name
7323         | name, FOptPercent ->
7324             pr "  if (%s->%s >= 0) printf (\"%%s%s: %%g %%%%\\n\", indent, %s->%s);\n"
7325               typ name name typ name;
7326             pr "  else printf (\"%%s%s: \\n\", indent);\n" name
7327       ) cols;
7328       pr "}\n";
7329       pr "\n";
7330   ) structs;
7331
7332   (* Emit a print_TYPE_list function definition only if that function is used. *)
7333   List.iter (
7334     function
7335     | typ, (RStructListOnly | RStructAndList) ->
7336         (* generate the function for typ *)
7337         emit_print_list_function typ
7338     | typ, _ -> () (* empty *)
7339   ) (rstructs_used_by all_functions);
7340
7341   (* Emit a print_TYPE function definition only if that function is used. *)
7342   List.iter (
7343     function
7344     | typ, (RStructOnly | RStructAndList) ->
7345         pr "static void print_%s (struct guestfs_%s *%s)\n" typ typ typ;
7346         pr "{\n";
7347         pr "  print_%s_indent (%s, \"\");\n" typ typ;
7348         pr "}\n";
7349         pr "\n";
7350     | typ, _ -> () (* empty *)
7351   ) (rstructs_used_by all_functions);
7352
7353   (* run_<action> actions *)
7354   List.iter (
7355     fun (name, style, _, flags, _, _, _) ->
7356       pr "static int run_%s (const char *cmd, int argc, char *argv[])\n" name;
7357       pr "{\n";
7358       (match fst style with
7359        | RErr
7360        | RInt _
7361        | RBool _ -> pr "  int r;\n"
7362        | RInt64 _ -> pr "  int64_t r;\n"
7363        | RConstString _ | RConstOptString _ -> pr "  const char *r;\n"
7364        | RString _ -> pr "  char *r;\n"
7365        | RStringList _ | RHashtable _ -> pr "  char **r;\n"
7366        | RStruct (_, typ) -> pr "  struct guestfs_%s *r;\n" typ
7367        | RStructList (_, typ) -> pr "  struct guestfs_%s_list *r;\n" typ
7368        | RBufferOut _ ->
7369            pr "  char *r;\n";
7370            pr "  size_t size;\n";
7371       );
7372       List.iter (
7373         function
7374         | Device n
7375         | String n
7376         | OptString n
7377         | FileIn n
7378         | FileOut n -> pr "  const char *%s;\n" n
7379         | Pathname n
7380         | Dev_or_Path n -> pr "  char *%s;\n" n
7381         | StringList n | DeviceList n -> pr "  char **%s;\n" n
7382         | Bool n -> pr "  int %s;\n" n
7383         | Int n -> pr "  int %s;\n" n
7384         | Int64 n -> pr "  int64_t %s;\n" n
7385       ) (snd style);
7386
7387       (* Check and convert parameters. *)
7388       let argc_expected = List.length (snd style) in
7389       pr "  if (argc != %d) {\n" argc_expected;
7390       pr "    fprintf (stderr, _(\"%%s should have %%d parameter(s)\\n\"), cmd, %d);\n"
7391         argc_expected;
7392       pr "    fprintf (stderr, _(\"type 'help %%s' for help on %%s\\n\"), cmd, cmd);\n";
7393       pr "    return -1;\n";
7394       pr "  }\n";
7395
7396       let parse_integer fn fntyp rtyp range name i =
7397         pr "  {\n";
7398         pr "    strtol_error xerr;\n";
7399         pr "    %s r;\n" fntyp;
7400         pr "\n";
7401         pr "    xerr = %s (argv[%d], NULL, 0, &r, \"\");\n" fn i;
7402         pr "    if (xerr != LONGINT_OK) {\n";
7403         pr "      fprintf (stderr,\n";
7404         pr "               _(\"%%s: %%s: invalid integer parameter (%%s returned %%d)\\n\"),\n";
7405         pr "               cmd, \"%s\", \"%s\", xerr);\n" name fn;
7406         pr "      return -1;\n";
7407         pr "    }\n";
7408         (match range with
7409          | None -> ()
7410          | Some (min, max, comment) ->
7411              pr "    /* %s */\n" comment;
7412              pr "    if (r < %s || r > %s) {\n" min max;
7413              pr "      fprintf (stderr, _(\"%%s: %%s: integer out of range\\n\"), cmd, \"%s\");\n"
7414                name;
7415              pr "      return -1;\n";
7416              pr "    }\n";
7417              pr "    /* The check above should ensure this assignment does not overflow. */\n";
7418         );
7419         pr "    %s = r;\n" name;
7420         pr "  }\n";
7421       in
7422
7423       iteri (
7424         fun i ->
7425           function
7426           | Device name
7427           | String name ->
7428               pr "  %s = argv[%d];\n" name i
7429           | Pathname name
7430           | Dev_or_Path name ->
7431               pr "  %s = resolve_win_path (argv[%d]);\n" name i;
7432               pr "  if (%s == NULL) return -1;\n" name
7433           | OptString name ->
7434               pr "  %s = STRNEQ (argv[%d], \"\") ? argv[%d] : NULL;\n"
7435                 name i i
7436           | FileIn name ->
7437               pr "  %s = STRNEQ (argv[%d], \"-\") ? argv[%d] : \"/dev/stdin\";\n"
7438                 name i i
7439           | FileOut name ->
7440               pr "  %s = STRNEQ (argv[%d], \"-\") ? argv[%d] : \"/dev/stdout\";\n"
7441                 name i i
7442           | StringList name | DeviceList name ->
7443               pr "  %s = parse_string_list (argv[%d]);\n" name i;
7444               pr "  if (%s == NULL) return -1;\n" name;
7445           | Bool name ->
7446               pr "  %s = is_true (argv[%d]) ? 1 : 0;\n" name i
7447           | Int name ->
7448               let range =
7449                 let min = "(-(2LL<<30))"
7450                 and max = "((2LL<<30)-1)"
7451                 and comment =
7452                   "The Int type in the generator is a signed 31 bit int." in
7453                 Some (min, max, comment) in
7454               parse_integer "xstrtoll" "long long" "int" range name i
7455           | Int64 name ->
7456               parse_integer "xstrtoll" "long long" "int64_t" None name i
7457       ) (snd style);
7458
7459       (* Call C API function. *)
7460       let fn =
7461         try find_map (function FishAction n -> Some n | _ -> None) flags
7462         with Not_found -> sprintf "guestfs_%s" name in
7463       pr "  r = %s " fn;
7464       generate_c_call_args ~handle:"g" style;
7465       pr ";\n";
7466
7467       List.iter (
7468         function
7469         | Device name | String name
7470         | OptString name | FileIn name | FileOut name | Bool name
7471         | Int name | Int64 name -> ()
7472         | Pathname name | Dev_or_Path name ->
7473             pr "  free (%s);\n" name
7474         | StringList name | DeviceList name ->
7475             pr "  free_strings (%s);\n" name
7476       ) (snd style);
7477
7478       (* Any output flags? *)
7479       let fish_output =
7480         let flags = filter_map (
7481           function FishOutput flag -> Some flag | _ -> None
7482         ) flags in
7483         match flags with
7484         | [] -> None
7485         | [f] -> Some f
7486         | _ ->
7487             failwithf "%s: more than one FishOutput flag is not allowed" name in
7488
7489       (* Check return value for errors and display command results. *)
7490       (match fst style with
7491        | RErr -> pr "  return r;\n"
7492        | RInt _ ->
7493            pr "  if (r == -1) return -1;\n";
7494            (match fish_output with
7495             | None ->
7496                 pr "  printf (\"%%d\\n\", r);\n";
7497             | Some FishOutputOctal ->
7498                 pr "  printf (\"%%s%%o\\n\", r != 0 ? \"0\" : \"\", r);\n";
7499             | Some FishOutputHexadecimal ->
7500                 pr "  printf (\"%%s%%x\\n\", r != 0 ? \"0x\" : \"\", r);\n");
7501            pr "  return 0;\n"
7502        | RInt64 _ ->
7503            pr "  if (r == -1) return -1;\n";
7504            (match fish_output with
7505             | None ->
7506                 pr "  printf (\"%%\" PRIi64 \"\\n\", r);\n";
7507             | Some FishOutputOctal ->
7508                 pr "  printf (\"%%s%%\" PRIo64 \"\\n\", r != 0 ? \"0\" : \"\", r);\n";
7509             | Some FishOutputHexadecimal ->
7510                 pr "  printf (\"%%s%%\" PRIx64 \"\\n\", r != 0 ? \"0x\" : \"\", r);\n");
7511            pr "  return 0;\n"
7512        | RBool _ ->
7513            pr "  if (r == -1) return -1;\n";
7514            pr "  if (r) printf (\"true\\n\"); else printf (\"false\\n\");\n";
7515            pr "  return 0;\n"
7516        | RConstString _ ->
7517            pr "  if (r == NULL) return -1;\n";
7518            pr "  printf (\"%%s\\n\", r);\n";
7519            pr "  return 0;\n"
7520        | RConstOptString _ ->
7521            pr "  printf (\"%%s\\n\", r ? : \"(null)\");\n";
7522            pr "  return 0;\n"
7523        | RString _ ->
7524            pr "  if (r == NULL) return -1;\n";
7525            pr "  printf (\"%%s\\n\", r);\n";
7526            pr "  free (r);\n";
7527            pr "  return 0;\n"
7528        | RStringList _ ->
7529            pr "  if (r == NULL) return -1;\n";
7530            pr "  print_strings (r);\n";
7531            pr "  free_strings (r);\n";
7532            pr "  return 0;\n"
7533        | RStruct (_, typ) ->
7534            pr "  if (r == NULL) return -1;\n";
7535            pr "  print_%s (r);\n" typ;
7536            pr "  guestfs_free_%s (r);\n" typ;
7537            pr "  return 0;\n"
7538        | RStructList (_, typ) ->
7539            pr "  if (r == NULL) return -1;\n";
7540            pr "  print_%s_list (r);\n" typ;
7541            pr "  guestfs_free_%s_list (r);\n" typ;
7542            pr "  return 0;\n"
7543        | RHashtable _ ->
7544            pr "  if (r == NULL) return -1;\n";
7545            pr "  print_table (r);\n";
7546            pr "  free_strings (r);\n";
7547            pr "  return 0;\n"
7548        | RBufferOut _ ->
7549            pr "  if (r == NULL) return -1;\n";
7550            pr "  if (full_write (1, r, size) != size) {\n";
7551            pr "    perror (\"write\");\n";
7552            pr "    free (r);\n";
7553            pr "    return -1;\n";
7554            pr "  }\n";
7555            pr "  free (r);\n";
7556            pr "  return 0;\n"
7557       );
7558       pr "}\n";
7559       pr "\n"
7560   ) all_functions;
7561
7562   (* run_action function *)
7563   pr "int run_action (const char *cmd, int argc, char *argv[])\n";
7564   pr "{\n";
7565   List.iter (
7566     fun (name, _, _, flags, _, _, _) ->
7567       let name2 = replace_char name '_' '-' in
7568       let alias =
7569         try find_map (function FishAlias n -> Some n | _ -> None) flags
7570         with Not_found -> name in
7571       pr "  if (";
7572       pr "STRCASEEQ (cmd, \"%s\")" name;
7573       if name <> name2 then
7574         pr " || STRCASEEQ (cmd, \"%s\")" name2;
7575       if name <> alias then
7576         pr " || STRCASEEQ (cmd, \"%s\")" alias;
7577       pr ")\n";
7578       pr "    return run_%s (cmd, argc, argv);\n" name;
7579       pr "  else\n";
7580   ) all_functions;
7581   pr "    {\n";
7582   pr "      fprintf (stderr, _(\"%%s: unknown command\\n\"), cmd);\n";
7583   pr "      if (command_num == 1)\n";
7584   pr "        extended_help_message ();\n";
7585   pr "      return -1;\n";
7586   pr "    }\n";
7587   pr "  return 0;\n";
7588   pr "}\n";
7589   pr "\n"
7590
7591 (* Readline completion for guestfish. *)
7592 and generate_fish_completion () =
7593   generate_header CStyle GPLv2plus;
7594
7595   let all_functions =
7596     List.filter (
7597       fun (_, _, _, flags, _, _, _) -> not (List.mem NotInFish flags)
7598     ) all_functions in
7599
7600   pr "\
7601 #include <config.h>
7602
7603 #include <stdio.h>
7604 #include <stdlib.h>
7605 #include <string.h>
7606
7607 #ifdef HAVE_LIBREADLINE
7608 #include <readline/readline.h>
7609 #endif
7610
7611 #include \"fish.h\"
7612
7613 #ifdef HAVE_LIBREADLINE
7614
7615 static const char *const commands[] = {
7616   BUILTIN_COMMANDS_FOR_COMPLETION,
7617 ";
7618
7619   (* Get the commands, including the aliases.  They don't need to be
7620    * sorted - the generator() function just does a dumb linear search.
7621    *)
7622   let commands =
7623     List.map (
7624       fun (name, _, _, flags, _, _, _) ->
7625         let name2 = replace_char name '_' '-' in
7626         let alias =
7627           try find_map (function FishAlias n -> Some n | _ -> None) flags
7628           with Not_found -> name in
7629
7630         if name <> alias then [name2; alias] else [name2]
7631     ) all_functions in
7632   let commands = List.flatten commands in
7633
7634   List.iter (pr "  \"%s\",\n") commands;
7635
7636   pr "  NULL
7637 };
7638
7639 static char *
7640 generator (const char *text, int state)
7641 {
7642   static int index, len;
7643   const char *name;
7644
7645   if (!state) {
7646     index = 0;
7647     len = strlen (text);
7648   }
7649
7650   rl_attempted_completion_over = 1;
7651
7652   while ((name = commands[index]) != NULL) {
7653     index++;
7654     if (STRCASEEQLEN (name, text, len))
7655       return strdup (name);
7656   }
7657
7658   return NULL;
7659 }
7660
7661 #endif /* HAVE_LIBREADLINE */
7662
7663 #ifdef HAVE_RL_COMPLETION_MATCHES
7664 #define RL_COMPLETION_MATCHES rl_completion_matches
7665 #else
7666 #ifdef HAVE_COMPLETION_MATCHES
7667 #define RL_COMPLETION_MATCHES completion_matches
7668 #endif
7669 #endif /* else just fail if we don't have either symbol */
7670
7671 char **
7672 do_completion (const char *text, int start, int end)
7673 {
7674   char **matches = NULL;
7675
7676 #ifdef HAVE_LIBREADLINE
7677   rl_completion_append_character = ' ';
7678
7679   if (start == 0)
7680     matches = RL_COMPLETION_MATCHES (text, generator);
7681   else if (complete_dest_paths)
7682     matches = RL_COMPLETION_MATCHES (text, complete_dest_paths_generator);
7683 #endif
7684
7685   return matches;
7686 }
7687 ";
7688
7689 (* Generate the POD documentation for guestfish. *)
7690 and generate_fish_actions_pod () =
7691   let all_functions_sorted =
7692     List.filter (
7693       fun (_, _, _, flags, _, _, _) ->
7694         not (List.mem NotInFish flags || List.mem NotInDocs flags)
7695     ) all_functions_sorted in
7696
7697   let rex = Str.regexp "C<guestfs_\\([^>]+\\)>" in
7698
7699   List.iter (
7700     fun (name, style, _, flags, _, _, longdesc) ->
7701       let longdesc =
7702         Str.global_substitute rex (
7703           fun s ->
7704             let sub =
7705               try Str.matched_group 1 s
7706               with Not_found ->
7707                 failwithf "error substituting C<guestfs_...> in longdesc of function %s" name in
7708             "C<" ^ replace_char sub '_' '-' ^ ">"
7709         ) longdesc in
7710       let name = replace_char name '_' '-' in
7711       let alias =
7712         try find_map (function FishAlias n -> Some n | _ -> None) flags
7713         with Not_found -> name in
7714
7715       pr "=head2 %s" name;
7716       if name <> alias then
7717         pr " | %s" alias;
7718       pr "\n";
7719       pr "\n";
7720       pr " %s" name;
7721       List.iter (
7722         function
7723         | Pathname n | Device n | Dev_or_Path n | String n -> pr " %s" n
7724         | OptString n -> pr " %s" n
7725         | StringList n | DeviceList n -> pr " '%s ...'" n
7726         | Bool _ -> pr " true|false"
7727         | Int n -> pr " %s" n
7728         | Int64 n -> pr " %s" n
7729         | FileIn n | FileOut n -> pr " (%s|-)" n
7730       ) (snd style);
7731       pr "\n";
7732       pr "\n";
7733       pr "%s\n\n" longdesc;
7734
7735       if List.exists (function FileIn _ | FileOut _ -> true
7736                       | _ -> false) (snd style) then
7737         pr "Use C<-> instead of a filename to read/write from stdin/stdout.\n\n";
7738
7739       if List.mem ProtocolLimitWarning flags then
7740         pr "%s\n\n" protocol_limit_warning;
7741
7742       if List.mem DangerWillRobinson flags then
7743         pr "%s\n\n" danger_will_robinson;
7744
7745       match deprecation_notice flags with
7746       | None -> ()
7747       | Some txt -> pr "%s\n\n" txt
7748   ) all_functions_sorted
7749
7750 (* Generate a C function prototype. *)
7751 and generate_prototype ?(extern = true) ?(static = false) ?(semicolon = true)
7752     ?(single_line = false) ?(newline = false) ?(in_daemon = false)
7753     ?(prefix = "")
7754     ?handle name style =
7755   if extern then pr "extern ";
7756   if static then pr "static ";
7757   (match fst style with
7758    | RErr -> pr "int "
7759    | RInt _ -> pr "int "
7760    | RInt64 _ -> pr "int64_t "
7761    | RBool _ -> pr "int "
7762    | RConstString _ | RConstOptString _ -> pr "const char *"
7763    | RString _ | RBufferOut _ -> pr "char *"
7764    | RStringList _ | RHashtable _ -> pr "char **"
7765    | RStruct (_, typ) ->
7766        if not in_daemon then pr "struct guestfs_%s *" typ
7767        else pr "guestfs_int_%s *" typ
7768    | RStructList (_, typ) ->
7769        if not in_daemon then pr "struct guestfs_%s_list *" typ
7770        else pr "guestfs_int_%s_list *" typ
7771   );
7772   let is_RBufferOut = match fst style with RBufferOut _ -> true | _ -> false in
7773   pr "%s%s (" prefix name;
7774   if handle = None && List.length (snd style) = 0 && not is_RBufferOut then
7775     pr "void"
7776   else (
7777     let comma = ref false in
7778     (match handle with
7779      | None -> ()
7780      | Some handle -> pr "guestfs_h *%s" handle; comma := true
7781     );
7782     let next () =
7783       if !comma then (
7784         if single_line then pr ", " else pr ",\n\t\t"
7785       );
7786       comma := true
7787     in
7788     List.iter (
7789       function
7790       | Pathname n
7791       | Device n | Dev_or_Path n
7792       | String n
7793       | OptString n ->
7794           next ();
7795           pr "const char *%s" n
7796       | StringList n | DeviceList n ->
7797           next ();
7798           pr "char *const *%s" n
7799       | Bool n -> next (); pr "int %s" n
7800       | Int n -> next (); pr "int %s" n
7801       | Int64 n -> next (); pr "int64_t %s" n
7802       | FileIn n
7803       | FileOut n ->
7804           if not in_daemon then (next (); pr "const char *%s" n)
7805     ) (snd style);
7806     if is_RBufferOut then (next (); pr "size_t *size_r");
7807   );
7808   pr ")";
7809   if semicolon then pr ";";
7810   if newline then pr "\n"
7811
7812 (* Generate C call arguments, eg "(handle, foo, bar)" *)
7813 and generate_c_call_args ?handle ?(decl = false) style =
7814   pr "(";
7815   let comma = ref false in
7816   let next () =
7817     if !comma then pr ", ";
7818     comma := true
7819   in
7820   (match handle with
7821    | None -> ()
7822    | Some handle -> pr "%s" handle; comma := true
7823   );
7824   List.iter (
7825     fun arg ->
7826       next ();
7827       pr "%s" (name_of_argt arg)
7828   ) (snd style);
7829   (* For RBufferOut calls, add implicit &size parameter. *)
7830   if not decl then (
7831     match fst style with
7832     | RBufferOut _ ->
7833         next ();
7834         pr "&size"
7835     | _ -> ()
7836   );
7837   pr ")"
7838
7839 (* Generate the OCaml bindings interface. *)
7840 and generate_ocaml_mli () =
7841   generate_header OCamlStyle LGPLv2plus;
7842
7843   pr "\
7844 (** For API documentation you should refer to the C API
7845     in the guestfs(3) manual page.  The OCaml API uses almost
7846     exactly the same calls. *)
7847
7848 type t
7849 (** A [guestfs_h] handle. *)
7850
7851 exception Error of string
7852 (** This exception is raised when there is an error. *)
7853
7854 exception Handle_closed of string
7855 (** This exception is raised if you use a {!Guestfs.t} handle
7856     after calling {!close} on it.  The string is the name of
7857     the function. *)
7858
7859 val create : unit -> t
7860 (** Create a {!Guestfs.t} handle. *)
7861
7862 val close : t -> unit
7863 (** Close the {!Guestfs.t} handle and free up all resources used
7864     by it immediately.
7865
7866     Handles are closed by the garbage collector when they become
7867     unreferenced, but callers can call this in order to provide
7868     predictable cleanup. *)
7869
7870 ";
7871   generate_ocaml_structure_decls ();
7872
7873   (* The actions. *)
7874   List.iter (
7875     fun (name, style, _, _, _, shortdesc, _) ->
7876       generate_ocaml_prototype name style;
7877       pr "(** %s *)\n" shortdesc;
7878       pr "\n"
7879   ) all_functions_sorted
7880
7881 (* Generate the OCaml bindings implementation. *)
7882 and generate_ocaml_ml () =
7883   generate_header OCamlStyle LGPLv2plus;
7884
7885   pr "\
7886 type t
7887
7888 exception Error of string
7889 exception Handle_closed of string
7890
7891 external create : unit -> t = \"ocaml_guestfs_create\"
7892 external close : t -> unit = \"ocaml_guestfs_close\"
7893
7894 (* Give the exceptions names, so they can be raised from the C code. *)
7895 let () =
7896   Callback.register_exception \"ocaml_guestfs_error\" (Error \"\");
7897   Callback.register_exception \"ocaml_guestfs_closed\" (Handle_closed \"\")
7898
7899 ";
7900
7901   generate_ocaml_structure_decls ();
7902
7903   (* The actions. *)
7904   List.iter (
7905     fun (name, style, _, _, _, shortdesc, _) ->
7906       generate_ocaml_prototype ~is_external:true name style;
7907   ) all_functions_sorted
7908
7909 (* Generate the OCaml bindings C implementation. *)
7910 and generate_ocaml_c () =
7911   generate_header CStyle LGPLv2plus;
7912
7913   pr "\
7914 #include <stdio.h>
7915 #include <stdlib.h>
7916 #include <string.h>
7917
7918 #include <caml/config.h>
7919 #include <caml/alloc.h>
7920 #include <caml/callback.h>
7921 #include <caml/fail.h>
7922 #include <caml/memory.h>
7923 #include <caml/mlvalues.h>
7924 #include <caml/signals.h>
7925
7926 #include <guestfs.h>
7927
7928 #include \"guestfs_c.h\"
7929
7930 /* Copy a hashtable of string pairs into an assoc-list.  We return
7931  * the list in reverse order, but hashtables aren't supposed to be
7932  * ordered anyway.
7933  */
7934 static CAMLprim value
7935 copy_table (char * const * argv)
7936 {
7937   CAMLparam0 ();
7938   CAMLlocal5 (rv, pairv, kv, vv, cons);
7939   int i;
7940
7941   rv = Val_int (0);
7942   for (i = 0; argv[i] != NULL; i += 2) {
7943     kv = caml_copy_string (argv[i]);
7944     vv = caml_copy_string (argv[i+1]);
7945     pairv = caml_alloc (2, 0);
7946     Store_field (pairv, 0, kv);
7947     Store_field (pairv, 1, vv);
7948     cons = caml_alloc (2, 0);
7949     Store_field (cons, 1, rv);
7950     rv = cons;
7951     Store_field (cons, 0, pairv);
7952   }
7953
7954   CAMLreturn (rv);
7955 }
7956
7957 ";
7958
7959   (* Struct copy functions. *)
7960
7961   let emit_ocaml_copy_list_function typ =
7962     pr "static CAMLprim value\n";
7963     pr "copy_%s_list (const struct guestfs_%s_list *%ss)\n" typ typ typ;
7964     pr "{\n";
7965     pr "  CAMLparam0 ();\n";
7966     pr "  CAMLlocal2 (rv, v);\n";
7967     pr "  unsigned int i;\n";
7968     pr "\n";
7969     pr "  if (%ss->len == 0)\n" typ;
7970     pr "    CAMLreturn (Atom (0));\n";
7971     pr "  else {\n";
7972     pr "    rv = caml_alloc (%ss->len, 0);\n" typ;
7973     pr "    for (i = 0; i < %ss->len; ++i) {\n" typ;
7974     pr "      v = copy_%s (&%ss->val[i]);\n" typ typ;
7975     pr "      caml_modify (&Field (rv, i), v);\n";
7976     pr "    }\n";
7977     pr "    CAMLreturn (rv);\n";
7978     pr "  }\n";
7979     pr "}\n";
7980     pr "\n";
7981   in
7982
7983   List.iter (
7984     fun (typ, cols) ->
7985       let has_optpercent_col =
7986         List.exists (function (_, FOptPercent) -> true | _ -> false) cols in
7987
7988       pr "static CAMLprim value\n";
7989       pr "copy_%s (const struct guestfs_%s *%s)\n" typ typ typ;
7990       pr "{\n";
7991       pr "  CAMLparam0 ();\n";
7992       if has_optpercent_col then
7993         pr "  CAMLlocal3 (rv, v, v2);\n"
7994       else
7995         pr "  CAMLlocal2 (rv, v);\n";
7996       pr "\n";
7997       pr "  rv = caml_alloc (%d, 0);\n" (List.length cols);
7998       iteri (
7999         fun i col ->
8000           (match col with
8001            | name, FString ->
8002                pr "  v = caml_copy_string (%s->%s);\n" typ name
8003            | name, FBuffer ->
8004                pr "  v = caml_alloc_string (%s->%s_len);\n" typ name;
8005                pr "  memcpy (String_val (v), %s->%s, %s->%s_len);\n"
8006                  typ name typ name
8007            | name, FUUID ->
8008                pr "  v = caml_alloc_string (32);\n";
8009                pr "  memcpy (String_val (v), %s->%s, 32);\n" typ name
8010            | name, (FBytes|FInt64|FUInt64) ->
8011                pr "  v = caml_copy_int64 (%s->%s);\n" typ name
8012            | name, (FInt32|FUInt32) ->
8013                pr "  v = caml_copy_int32 (%s->%s);\n" typ name
8014            | name, FOptPercent ->
8015                pr "  if (%s->%s >= 0) { /* Some %s */\n" typ name name;
8016                pr "    v2 = caml_copy_double (%s->%s);\n" typ name;
8017                pr "    v = caml_alloc (1, 0);\n";
8018                pr "    Store_field (v, 0, v2);\n";
8019                pr "  } else /* None */\n";
8020                pr "    v = Val_int (0);\n";
8021            | name, FChar ->
8022                pr "  v = Val_int (%s->%s);\n" typ name
8023           );
8024           pr "  Store_field (rv, %d, v);\n" i
8025       ) cols;
8026       pr "  CAMLreturn (rv);\n";
8027       pr "}\n";
8028       pr "\n";
8029   ) structs;
8030
8031   (* Emit a copy_TYPE_list function definition only if that function is used. *)
8032   List.iter (
8033     function
8034     | typ, (RStructListOnly | RStructAndList) ->
8035         (* generate the function for typ *)
8036         emit_ocaml_copy_list_function typ
8037     | typ, _ -> () (* empty *)
8038   ) (rstructs_used_by all_functions);
8039
8040   (* The wrappers. *)
8041   List.iter (
8042     fun (name, style, _, _, _, _, _) ->
8043       pr "/* Automatically generated wrapper for function\n";
8044       pr " * ";
8045       generate_ocaml_prototype name style;
8046       pr " */\n";
8047       pr "\n";
8048
8049       let params =
8050         "gv" :: List.map (fun arg -> name_of_argt arg ^ "v") (snd style) in
8051
8052       let needs_extra_vs =
8053         match fst style with RConstOptString _ -> true | _ -> false in
8054
8055       pr "/* Emit prototype to appease gcc's -Wmissing-prototypes. */\n";
8056       pr "CAMLprim value ocaml_guestfs_%s (value %s" name (List.hd params);
8057       List.iter (pr ", value %s") (List.tl params); pr ");\n";
8058       pr "\n";
8059
8060       pr "CAMLprim value\n";
8061       pr "ocaml_guestfs_%s (value %s" name (List.hd params);
8062       List.iter (pr ", value %s") (List.tl params);
8063       pr ")\n";
8064       pr "{\n";
8065
8066       (match params with
8067        | [p1; p2; p3; p4; p5] ->
8068            pr "  CAMLparam5 (%s);\n" (String.concat ", " params)
8069        | p1 :: p2 :: p3 :: p4 :: p5 :: rest ->
8070            pr "  CAMLparam5 (%s);\n" (String.concat ", " [p1; p2; p3; p4; p5]);
8071            pr "  CAMLxparam%d (%s);\n"
8072              (List.length rest) (String.concat ", " rest)
8073        | ps ->
8074            pr "  CAMLparam%d (%s);\n" (List.length ps) (String.concat ", " ps)
8075       );
8076       if not needs_extra_vs then
8077         pr "  CAMLlocal1 (rv);\n"
8078       else
8079         pr "  CAMLlocal3 (rv, v, v2);\n";
8080       pr "\n";
8081
8082       pr "  guestfs_h *g = Guestfs_val (gv);\n";
8083       pr "  if (g == NULL)\n";
8084       pr "    ocaml_guestfs_raise_closed (\"%s\");\n" name;
8085       pr "\n";
8086
8087       List.iter (
8088         function
8089         | Pathname n
8090         | Device n | Dev_or_Path n
8091         | String n
8092         | FileIn n
8093         | FileOut n ->
8094             pr "  const char *%s = String_val (%sv);\n" n n
8095         | OptString n ->
8096             pr "  const char *%s =\n" n;
8097             pr "    %sv != Val_int (0) ? String_val (Field (%sv, 0)) : NULL;\n"
8098               n n
8099         | StringList n | DeviceList n ->
8100             pr "  char **%s = ocaml_guestfs_strings_val (g, %sv);\n" n n
8101         | Bool n ->
8102             pr "  int %s = Bool_val (%sv);\n" n n
8103         | Int n ->
8104             pr "  int %s = Int_val (%sv);\n" n n
8105         | Int64 n ->
8106             pr "  int64_t %s = Int64_val (%sv);\n" n n
8107       ) (snd style);
8108       let error_code =
8109         match fst style with
8110         | RErr -> pr "  int r;\n"; "-1"
8111         | RInt _ -> pr "  int r;\n"; "-1"
8112         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
8113         | RBool _ -> pr "  int r;\n"; "-1"
8114         | RConstString _ | RConstOptString _ ->
8115             pr "  const char *r;\n"; "NULL"
8116         | RString _ -> pr "  char *r;\n"; "NULL"
8117         | RStringList _ ->
8118             pr "  int i;\n";
8119             pr "  char **r;\n";
8120             "NULL"
8121         | RStruct (_, typ) ->
8122             pr "  struct guestfs_%s *r;\n" typ; "NULL"
8123         | RStructList (_, typ) ->
8124             pr "  struct guestfs_%s_list *r;\n" typ; "NULL"
8125         | RHashtable _ ->
8126             pr "  int i;\n";
8127             pr "  char **r;\n";
8128             "NULL"
8129         | RBufferOut _ ->
8130             pr "  char *r;\n";
8131             pr "  size_t size;\n";
8132             "NULL" in
8133       pr "\n";
8134
8135       pr "  caml_enter_blocking_section ();\n";
8136       pr "  r = guestfs_%s " name;
8137       generate_c_call_args ~handle:"g" style;
8138       pr ";\n";
8139       pr "  caml_leave_blocking_section ();\n";
8140
8141       List.iter (
8142         function
8143         | StringList n | DeviceList n ->
8144             pr "  ocaml_guestfs_free_strings (%s);\n" n;
8145         | Pathname _ | Device _ | Dev_or_Path _ | String _ | OptString _
8146         | Bool _ | Int _ | Int64 _
8147         | FileIn _ | FileOut _ -> ()
8148       ) (snd style);
8149
8150       pr "  if (r == %s)\n" error_code;
8151       pr "    ocaml_guestfs_raise_error (g, \"%s\");\n" name;
8152       pr "\n";
8153
8154       (match fst style with
8155        | RErr -> pr "  rv = Val_unit;\n"
8156        | RInt _ -> pr "  rv = Val_int (r);\n"
8157        | RInt64 _ ->
8158            pr "  rv = caml_copy_int64 (r);\n"
8159        | RBool _ -> pr "  rv = Val_bool (r);\n"
8160        | RConstString _ ->
8161            pr "  rv = caml_copy_string (r);\n"
8162        | RConstOptString _ ->
8163            pr "  if (r) { /* Some string */\n";
8164            pr "    v = caml_alloc (1, 0);\n";
8165            pr "    v2 = caml_copy_string (r);\n";
8166            pr "    Store_field (v, 0, v2);\n";
8167            pr "  } else /* None */\n";
8168            pr "    v = Val_int (0);\n";
8169        | RString _ ->
8170            pr "  rv = caml_copy_string (r);\n";
8171            pr "  free (r);\n"
8172        | RStringList _ ->
8173            pr "  rv = caml_copy_string_array ((const char **) r);\n";
8174            pr "  for (i = 0; r[i] != NULL; ++i) free (r[i]);\n";
8175            pr "  free (r);\n"
8176        | RStruct (_, typ) ->
8177            pr "  rv = copy_%s (r);\n" typ;
8178            pr "  guestfs_free_%s (r);\n" typ;
8179        | RStructList (_, typ) ->
8180            pr "  rv = copy_%s_list (r);\n" typ;
8181            pr "  guestfs_free_%s_list (r);\n" typ;
8182        | RHashtable _ ->
8183            pr "  rv = copy_table (r);\n";
8184            pr "  for (i = 0; r[i] != NULL; ++i) free (r[i]);\n";
8185            pr "  free (r);\n";
8186        | RBufferOut _ ->
8187            pr "  rv = caml_alloc_string (size);\n";
8188            pr "  memcpy (String_val (rv), r, size);\n";
8189       );
8190
8191       pr "  CAMLreturn (rv);\n";
8192       pr "}\n";
8193       pr "\n";
8194
8195       if List.length params > 5 then (
8196         pr "/* Emit prototype to appease gcc's -Wmissing-prototypes. */\n";
8197         pr "CAMLprim value ";
8198         pr "ocaml_guestfs_%s_byte (value *argv, int argn);\n" name;
8199         pr "CAMLprim value\n";
8200         pr "ocaml_guestfs_%s_byte (value *argv, int argn)\n" name;
8201         pr "{\n";
8202         pr "  return ocaml_guestfs_%s (argv[0]" name;
8203         iteri (fun i _ -> pr ", argv[%d]" i) (List.tl params);
8204         pr ");\n";
8205         pr "}\n";
8206         pr "\n"
8207       )
8208   ) all_functions_sorted
8209
8210 and generate_ocaml_structure_decls () =
8211   List.iter (
8212     fun (typ, cols) ->
8213       pr "type %s = {\n" typ;
8214       List.iter (
8215         function
8216         | name, FString -> pr "  %s : string;\n" name
8217         | name, FBuffer -> pr "  %s : string;\n" name
8218         | name, FUUID -> pr "  %s : string;\n" name
8219         | name, (FBytes|FInt64|FUInt64) -> pr "  %s : int64;\n" name
8220         | name, (FInt32|FUInt32) -> pr "  %s : int32;\n" name
8221         | name, FChar -> pr "  %s : char;\n" name
8222         | name, FOptPercent -> pr "  %s : float option;\n" name
8223       ) cols;
8224       pr "}\n";
8225       pr "\n"
8226   ) structs
8227
8228 and generate_ocaml_prototype ?(is_external = false) name style =
8229   if is_external then pr "external " else pr "val ";
8230   pr "%s : t -> " name;
8231   List.iter (
8232     function
8233     | Pathname _ | Device _ | Dev_or_Path _ | String _ | FileIn _ | FileOut _ -> pr "string -> "
8234     | OptString _ -> pr "string option -> "
8235     | StringList _ | DeviceList _ -> pr "string array -> "
8236     | Bool _ -> pr "bool -> "
8237     | Int _ -> pr "int -> "
8238     | Int64 _ -> pr "int64 -> "
8239   ) (snd style);
8240   (match fst style with
8241    | RErr -> pr "unit" (* all errors are turned into exceptions *)
8242    | RInt _ -> pr "int"
8243    | RInt64 _ -> pr "int64"
8244    | RBool _ -> pr "bool"
8245    | RConstString _ -> pr "string"
8246    | RConstOptString _ -> pr "string option"
8247    | RString _ | RBufferOut _ -> pr "string"
8248    | RStringList _ -> pr "string array"
8249    | RStruct (_, typ) -> pr "%s" typ
8250    | RStructList (_, typ) -> pr "%s array" typ
8251    | RHashtable _ -> pr "(string * string) list"
8252   );
8253   if is_external then (
8254     pr " = ";
8255     if List.length (snd style) + 1 > 5 then
8256       pr "\"ocaml_guestfs_%s_byte\" " name;
8257     pr "\"ocaml_guestfs_%s\"" name
8258   );
8259   pr "\n"
8260
8261 (* Generate Perl xs code, a sort of crazy variation of C with macros. *)
8262 and generate_perl_xs () =
8263   generate_header CStyle LGPLv2plus;
8264
8265   pr "\
8266 #include \"EXTERN.h\"
8267 #include \"perl.h\"
8268 #include \"XSUB.h\"
8269
8270 #include <guestfs.h>
8271
8272 #ifndef PRId64
8273 #define PRId64 \"lld\"
8274 #endif
8275
8276 static SV *
8277 my_newSVll(long long val) {
8278 #ifdef USE_64_BIT_ALL
8279   return newSViv(val);
8280 #else
8281   char buf[100];
8282   int len;
8283   len = snprintf(buf, 100, \"%%\" PRId64, val);
8284   return newSVpv(buf, len);
8285 #endif
8286 }
8287
8288 #ifndef PRIu64
8289 #define PRIu64 \"llu\"
8290 #endif
8291
8292 static SV *
8293 my_newSVull(unsigned long long val) {
8294 #ifdef USE_64_BIT_ALL
8295   return newSVuv(val);
8296 #else
8297   char buf[100];
8298   int len;
8299   len = snprintf(buf, 100, \"%%\" PRIu64, val);
8300   return newSVpv(buf, len);
8301 #endif
8302 }
8303
8304 /* http://www.perlmonks.org/?node_id=680842 */
8305 static char **
8306 XS_unpack_charPtrPtr (SV *arg) {
8307   char **ret;
8308   AV *av;
8309   I32 i;
8310
8311   if (!arg || !SvOK (arg) || !SvROK (arg) || SvTYPE (SvRV (arg)) != SVt_PVAV)
8312     croak (\"array reference expected\");
8313
8314   av = (AV *)SvRV (arg);
8315   ret = malloc ((av_len (av) + 1 + 1) * sizeof (char *));
8316   if (!ret)
8317     croak (\"malloc failed\");
8318
8319   for (i = 0; i <= av_len (av); i++) {
8320     SV **elem = av_fetch (av, i, 0);
8321
8322     if (!elem || !*elem)
8323       croak (\"missing element in list\");
8324
8325     ret[i] = SvPV_nolen (*elem);
8326   }
8327
8328   ret[i] = NULL;
8329
8330   return ret;
8331 }
8332
8333 MODULE = Sys::Guestfs  PACKAGE = Sys::Guestfs
8334
8335 PROTOTYPES: ENABLE
8336
8337 guestfs_h *
8338 _create ()
8339    CODE:
8340       RETVAL = guestfs_create ();
8341       if (!RETVAL)
8342         croak (\"could not create guestfs handle\");
8343       guestfs_set_error_handler (RETVAL, NULL, NULL);
8344  OUTPUT:
8345       RETVAL
8346
8347 void
8348 DESTROY (g)
8349       guestfs_h *g;
8350  PPCODE:
8351       guestfs_close (g);
8352
8353 ";
8354
8355   List.iter (
8356     fun (name, style, _, _, _, _, _) ->
8357       (match fst style with
8358        | RErr -> pr "void\n"
8359        | RInt _ -> pr "SV *\n"
8360        | RInt64 _ -> pr "SV *\n"
8361        | RBool _ -> pr "SV *\n"
8362        | RConstString _ -> pr "SV *\n"
8363        | RConstOptString _ -> pr "SV *\n"
8364        | RString _ -> pr "SV *\n"
8365        | RBufferOut _ -> pr "SV *\n"
8366        | RStringList _
8367        | RStruct _ | RStructList _
8368        | RHashtable _ ->
8369            pr "void\n" (* all lists returned implictly on the stack *)
8370       );
8371       (* Call and arguments. *)
8372       pr "%s " name;
8373       generate_c_call_args ~handle:"g" ~decl:true style;
8374       pr "\n";
8375       pr "      guestfs_h *g;\n";
8376       iteri (
8377         fun i ->
8378           function
8379           | Pathname n | Device n | Dev_or_Path n | String n | FileIn n | FileOut n ->
8380               pr "      char *%s;\n" n
8381           | OptString n ->
8382               (* http://www.perlmonks.org/?node_id=554277
8383                * Note that the implicit handle argument means we have
8384                * to add 1 to the ST(x) operator.
8385                *)
8386               pr "      char *%s = SvOK(ST(%d)) ? SvPV_nolen(ST(%d)) : NULL;\n" n (i+1) (i+1)
8387           | StringList n | DeviceList n -> pr "      char **%s;\n" n
8388           | Bool n -> pr "      int %s;\n" n
8389           | Int n -> pr "      int %s;\n" n
8390           | Int64 n -> pr "      int64_t %s;\n" n
8391       ) (snd style);
8392
8393       let do_cleanups () =
8394         List.iter (
8395           function
8396           | Pathname _ | Device _ | Dev_or_Path _ | String _ | OptString _
8397           | Bool _ | Int _ | Int64 _
8398           | FileIn _ | FileOut _ -> ()
8399           | StringList n | DeviceList n -> pr "      free (%s);\n" n
8400         ) (snd style)
8401       in
8402
8403       (* Code. *)
8404       (match fst style with
8405        | RErr ->
8406            pr "PREINIT:\n";
8407            pr "      int r;\n";
8408            pr " PPCODE:\n";
8409            pr "      r = guestfs_%s " name;
8410            generate_c_call_args ~handle:"g" style;
8411            pr ";\n";
8412            do_cleanups ();
8413            pr "      if (r == -1)\n";
8414            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
8415        | RInt n
8416        | RBool n ->
8417            pr "PREINIT:\n";
8418            pr "      int %s;\n" n;
8419            pr "   CODE:\n";
8420            pr "      %s = guestfs_%s " n name;
8421            generate_c_call_args ~handle:"g" style;
8422            pr ";\n";
8423            do_cleanups ();
8424            pr "      if (%s == -1)\n" n;
8425            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
8426            pr "      RETVAL = newSViv (%s);\n" n;
8427            pr " OUTPUT:\n";
8428            pr "      RETVAL\n"
8429        | RInt64 n ->
8430            pr "PREINIT:\n";
8431            pr "      int64_t %s;\n" n;
8432            pr "   CODE:\n";
8433            pr "      %s = guestfs_%s " n name;
8434            generate_c_call_args ~handle:"g" style;
8435            pr ";\n";
8436            do_cleanups ();
8437            pr "      if (%s == -1)\n" n;
8438            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
8439            pr "      RETVAL = my_newSVll (%s);\n" n;
8440            pr " OUTPUT:\n";
8441            pr "      RETVAL\n"
8442        | RConstString n ->
8443            pr "PREINIT:\n";
8444            pr "      const char *%s;\n" n;
8445            pr "   CODE:\n";
8446            pr "      %s = guestfs_%s " n name;
8447            generate_c_call_args ~handle:"g" style;
8448            pr ";\n";
8449            do_cleanups ();
8450            pr "      if (%s == NULL)\n" n;
8451            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
8452            pr "      RETVAL = newSVpv (%s, 0);\n" n;
8453            pr " OUTPUT:\n";
8454            pr "      RETVAL\n"
8455        | RConstOptString n ->
8456            pr "PREINIT:\n";
8457            pr "      const char *%s;\n" n;
8458            pr "   CODE:\n";
8459            pr "      %s = guestfs_%s " n name;
8460            generate_c_call_args ~handle:"g" style;
8461            pr ";\n";
8462            do_cleanups ();
8463            pr "      if (%s == NULL)\n" n;
8464            pr "        RETVAL = &PL_sv_undef;\n";
8465            pr "      else\n";
8466            pr "        RETVAL = newSVpv (%s, 0);\n" n;
8467            pr " OUTPUT:\n";
8468            pr "      RETVAL\n"
8469        | RString n ->
8470            pr "PREINIT:\n";
8471            pr "      char *%s;\n" n;
8472            pr "   CODE:\n";
8473            pr "      %s = guestfs_%s " n name;
8474            generate_c_call_args ~handle:"g" style;
8475            pr ";\n";
8476            do_cleanups ();
8477            pr "      if (%s == NULL)\n" n;
8478            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
8479            pr "      RETVAL = newSVpv (%s, 0);\n" n;
8480            pr "      free (%s);\n" n;
8481            pr " OUTPUT:\n";
8482            pr "      RETVAL\n"
8483        | RStringList n | RHashtable n ->
8484            pr "PREINIT:\n";
8485            pr "      char **%s;\n" n;
8486            pr "      int i, n;\n";
8487            pr " PPCODE:\n";
8488            pr "      %s = guestfs_%s " n name;
8489            generate_c_call_args ~handle:"g" style;
8490            pr ";\n";
8491            do_cleanups ();
8492            pr "      if (%s == NULL)\n" n;
8493            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
8494            pr "      for (n = 0; %s[n] != NULL; ++n) /**/;\n" n;
8495            pr "      EXTEND (SP, n);\n";
8496            pr "      for (i = 0; i < n; ++i) {\n";
8497            pr "        PUSHs (sv_2mortal (newSVpv (%s[i], 0)));\n" n;
8498            pr "        free (%s[i]);\n" n;
8499            pr "      }\n";
8500            pr "      free (%s);\n" n;
8501        | RStruct (n, typ) ->
8502            let cols = cols_of_struct typ in
8503            generate_perl_struct_code typ cols name style n do_cleanups
8504        | RStructList (n, typ) ->
8505            let cols = cols_of_struct typ in
8506            generate_perl_struct_list_code typ cols name style n do_cleanups
8507        | RBufferOut n ->
8508            pr "PREINIT:\n";
8509            pr "      char *%s;\n" n;
8510            pr "      size_t size;\n";
8511            pr "   CODE:\n";
8512            pr "      %s = guestfs_%s " n name;
8513            generate_c_call_args ~handle:"g" style;
8514            pr ";\n";
8515            do_cleanups ();
8516            pr "      if (%s == NULL)\n" n;
8517            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
8518            pr "      RETVAL = newSVpvn (%s, size);\n" n;
8519            pr "      free (%s);\n" n;
8520            pr " OUTPUT:\n";
8521            pr "      RETVAL\n"
8522       );
8523
8524       pr "\n"
8525   ) all_functions
8526
8527 and generate_perl_struct_list_code typ cols name style n do_cleanups =
8528   pr "PREINIT:\n";
8529   pr "      struct guestfs_%s_list *%s;\n" typ n;
8530   pr "      int i;\n";
8531   pr "      HV *hv;\n";
8532   pr " PPCODE:\n";
8533   pr "      %s = guestfs_%s " n name;
8534   generate_c_call_args ~handle:"g" style;
8535   pr ";\n";
8536   do_cleanups ();
8537   pr "      if (%s == NULL)\n" n;
8538   pr "        croak (\"%%s\", guestfs_last_error (g));\n";
8539   pr "      EXTEND (SP, %s->len);\n" n;
8540   pr "      for (i = 0; i < %s->len; ++i) {\n" n;
8541   pr "        hv = newHV ();\n";
8542   List.iter (
8543     function
8544     | name, FString ->
8545         pr "        (void) hv_store (hv, \"%s\", %d, newSVpv (%s->val[i].%s, 0), 0);\n"
8546           name (String.length name) n name
8547     | name, FUUID ->
8548         pr "        (void) hv_store (hv, \"%s\", %d, newSVpv (%s->val[i].%s, 32), 0);\n"
8549           name (String.length name) n name
8550     | name, FBuffer ->
8551         pr "        (void) hv_store (hv, \"%s\", %d, newSVpvn (%s->val[i].%s, %s->val[i].%s_len), 0);\n"
8552           name (String.length name) n name n name
8553     | name, (FBytes|FUInt64) ->
8554         pr "        (void) hv_store (hv, \"%s\", %d, my_newSVull (%s->val[i].%s), 0);\n"
8555           name (String.length name) n name
8556     | name, FInt64 ->
8557         pr "        (void) hv_store (hv, \"%s\", %d, my_newSVll (%s->val[i].%s), 0);\n"
8558           name (String.length name) n name
8559     | name, (FInt32|FUInt32) ->
8560         pr "        (void) hv_store (hv, \"%s\", %d, newSVnv (%s->val[i].%s), 0);\n"
8561           name (String.length name) n name
8562     | name, FChar ->
8563         pr "        (void) hv_store (hv, \"%s\", %d, newSVpv (&%s->val[i].%s, 1), 0);\n"
8564           name (String.length name) n name
8565     | name, FOptPercent ->
8566         pr "        (void) hv_store (hv, \"%s\", %d, newSVnv (%s->val[i].%s), 0);\n"
8567           name (String.length name) n name
8568   ) cols;
8569   pr "        PUSHs (sv_2mortal (newRV ((SV *) hv)));\n";
8570   pr "      }\n";
8571   pr "      guestfs_free_%s_list (%s);\n" typ n
8572
8573 and generate_perl_struct_code typ cols name style n do_cleanups =
8574   pr "PREINIT:\n";
8575   pr "      struct guestfs_%s *%s;\n" typ n;
8576   pr " PPCODE:\n";
8577   pr "      %s = guestfs_%s " n name;
8578   generate_c_call_args ~handle:"g" style;
8579   pr ";\n";
8580   do_cleanups ();
8581   pr "      if (%s == NULL)\n" n;
8582   pr "        croak (\"%%s\", guestfs_last_error (g));\n";
8583   pr "      EXTEND (SP, 2 * %d);\n" (List.length cols);
8584   List.iter (
8585     fun ((name, _) as col) ->
8586       pr "      PUSHs (sv_2mortal (newSVpv (\"%s\", 0)));\n" name;
8587
8588       match col with
8589       | name, FString ->
8590           pr "      PUSHs (sv_2mortal (newSVpv (%s->%s, 0)));\n"
8591             n name
8592       | name, FBuffer ->
8593           pr "      PUSHs (sv_2mortal (newSVpvn (%s->%s, %s->%s_len)));\n"
8594             n name n name
8595       | name, FUUID ->
8596           pr "      PUSHs (sv_2mortal (newSVpv (%s->%s, 32)));\n"
8597             n name
8598       | name, (FBytes|FUInt64) ->
8599           pr "      PUSHs (sv_2mortal (my_newSVull (%s->%s)));\n"
8600             n name
8601       | name, FInt64 ->
8602           pr "      PUSHs (sv_2mortal (my_newSVll (%s->%s)));\n"
8603             n name
8604       | name, (FInt32|FUInt32) ->
8605           pr "      PUSHs (sv_2mortal (newSVnv (%s->%s)));\n"
8606             n name
8607       | name, FChar ->
8608           pr "      PUSHs (sv_2mortal (newSVpv (&%s->%s, 1)));\n"
8609             n name
8610       | name, FOptPercent ->
8611           pr "      PUSHs (sv_2mortal (newSVnv (%s->%s)));\n"
8612             n name
8613   ) cols;
8614   pr "      free (%s);\n" n
8615
8616 (* Generate Sys/Guestfs.pm. *)
8617 and generate_perl_pm () =
8618   generate_header HashStyle LGPLv2plus;
8619
8620   pr "\
8621 =pod
8622
8623 =head1 NAME
8624
8625 Sys::Guestfs - Perl bindings for libguestfs
8626
8627 =head1 SYNOPSIS
8628
8629  use Sys::Guestfs;
8630
8631  my $h = Sys::Guestfs->new ();
8632  $h->add_drive ('guest.img');
8633  $h->launch ();
8634  $h->mount ('/dev/sda1', '/');
8635  $h->touch ('/hello');
8636  $h->sync ();
8637
8638 =head1 DESCRIPTION
8639
8640 The C<Sys::Guestfs> module provides a Perl XS binding to the
8641 libguestfs API for examining and modifying virtual machine
8642 disk images.
8643
8644 Amongst the things this is good for: making batch configuration
8645 changes to guests, getting disk used/free statistics (see also:
8646 virt-df), migrating between virtualization systems (see also:
8647 virt-p2v), performing partial backups, performing partial guest
8648 clones, cloning guests and changing registry/UUID/hostname info, and
8649 much else besides.
8650
8651 Libguestfs uses Linux kernel and qemu code, and can access any type of
8652 guest filesystem that Linux and qemu can, including but not limited
8653 to: ext2/3/4, btrfs, FAT and NTFS, LVM, many different disk partition
8654 schemes, qcow, qcow2, vmdk.
8655
8656 Libguestfs provides ways to enumerate guest storage (eg. partitions,
8657 LVs, what filesystem is in each LV, etc.).  It can also run commands
8658 in the context of the guest.  Also you can access filesystems over
8659 FUSE.
8660
8661 See also L<Sys::Guestfs::Lib(3)> for a set of useful library
8662 functions for using libguestfs from Perl, including integration
8663 with libvirt.
8664
8665 =head1 ERRORS
8666
8667 All errors turn into calls to C<croak> (see L<Carp(3)>).
8668
8669 =head1 METHODS
8670
8671 =over 4
8672
8673 =cut
8674
8675 package Sys::Guestfs;
8676
8677 use strict;
8678 use warnings;
8679
8680 require XSLoader;
8681 XSLoader::load ('Sys::Guestfs');
8682
8683 =item $h = Sys::Guestfs->new ();
8684
8685 Create a new guestfs handle.
8686
8687 =cut
8688
8689 sub new {
8690   my $proto = shift;
8691   my $class = ref ($proto) || $proto;
8692
8693   my $self = Sys::Guestfs::_create ();
8694   bless $self, $class;
8695   return $self;
8696 }
8697
8698 ";
8699
8700   (* Actions.  We only need to print documentation for these as
8701    * they are pulled in from the XS code automatically.
8702    *)
8703   List.iter (
8704     fun (name, style, _, flags, _, _, longdesc) ->
8705       if not (List.mem NotInDocs flags) then (
8706         let longdesc = replace_str longdesc "C<guestfs_" "C<$h-E<gt>" in
8707         pr "=item ";
8708         generate_perl_prototype name style;
8709         pr "\n\n";
8710         pr "%s\n\n" longdesc;
8711         if List.mem ProtocolLimitWarning flags then
8712           pr "%s\n\n" protocol_limit_warning;
8713         if List.mem DangerWillRobinson flags then
8714           pr "%s\n\n" danger_will_robinson;
8715         match deprecation_notice flags with
8716         | None -> ()
8717         | Some txt -> pr "%s\n\n" txt
8718       )
8719   ) all_functions_sorted;
8720
8721   (* End of file. *)
8722   pr "\
8723 =cut
8724
8725 1;
8726
8727 =back
8728
8729 =head1 COPYRIGHT
8730
8731 Copyright (C) %s Red Hat Inc.
8732
8733 =head1 LICENSE
8734
8735 Please see the file COPYING.LIB for the full license.
8736
8737 =head1 SEE ALSO
8738
8739 L<guestfs(3)>,
8740 L<guestfish(1)>,
8741 L<http://libguestfs.org>,
8742 L<Sys::Guestfs::Lib(3)>.
8743
8744 =cut
8745 " copyright_years
8746
8747 and generate_perl_prototype name style =
8748   (match fst style with
8749    | RErr -> ()
8750    | RBool n
8751    | RInt n
8752    | RInt64 n
8753    | RConstString n
8754    | RConstOptString n
8755    | RString n
8756    | RBufferOut n -> pr "$%s = " n
8757    | RStruct (n,_)
8758    | RHashtable n -> pr "%%%s = " n
8759    | RStringList n
8760    | RStructList (n,_) -> pr "@%s = " n
8761   );
8762   pr "$h->%s (" name;
8763   let comma = ref false in
8764   List.iter (
8765     fun arg ->
8766       if !comma then pr ", ";
8767       comma := true;
8768       match arg with
8769       | Pathname n | Device n | Dev_or_Path n | String n
8770       | OptString n | Bool n | Int n | Int64 n | FileIn n | FileOut n ->
8771           pr "$%s" n
8772       | StringList n | DeviceList n ->
8773           pr "\\@%s" n
8774   ) (snd style);
8775   pr ");"
8776
8777 (* Generate Python C module. *)
8778 and generate_python_c () =
8779   generate_header CStyle LGPLv2plus;
8780
8781   pr "\
8782 #include <Python.h>
8783
8784 #include <stdio.h>
8785 #include <stdlib.h>
8786 #include <assert.h>
8787
8788 #include \"guestfs.h\"
8789
8790 typedef struct {
8791   PyObject_HEAD
8792   guestfs_h *g;
8793 } Pyguestfs_Object;
8794
8795 static guestfs_h *
8796 get_handle (PyObject *obj)
8797 {
8798   assert (obj);
8799   assert (obj != Py_None);
8800   return ((Pyguestfs_Object *) obj)->g;
8801 }
8802
8803 static PyObject *
8804 put_handle (guestfs_h *g)
8805 {
8806   assert (g);
8807   return
8808     PyCObject_FromVoidPtrAndDesc ((void *) g, (char *) \"guestfs_h\", NULL);
8809 }
8810
8811 /* This list should be freed (but not the strings) after use. */
8812 static char **
8813 get_string_list (PyObject *obj)
8814 {
8815   int i, len;
8816   char **r;
8817
8818   assert (obj);
8819
8820   if (!PyList_Check (obj)) {
8821     PyErr_SetString (PyExc_RuntimeError, \"expecting a list parameter\");
8822     return NULL;
8823   }
8824
8825   len = PyList_Size (obj);
8826   r = malloc (sizeof (char *) * (len+1));
8827   if (r == NULL) {
8828     PyErr_SetString (PyExc_RuntimeError, \"get_string_list: out of memory\");
8829     return NULL;
8830   }
8831
8832   for (i = 0; i < len; ++i)
8833     r[i] = PyString_AsString (PyList_GetItem (obj, i));
8834   r[len] = NULL;
8835
8836   return r;
8837 }
8838
8839 static PyObject *
8840 put_string_list (char * const * const argv)
8841 {
8842   PyObject *list;
8843   int argc, i;
8844
8845   for (argc = 0; argv[argc] != NULL; ++argc)
8846     ;
8847
8848   list = PyList_New (argc);
8849   for (i = 0; i < argc; ++i)
8850     PyList_SetItem (list, i, PyString_FromString (argv[i]));
8851
8852   return list;
8853 }
8854
8855 static PyObject *
8856 put_table (char * const * const argv)
8857 {
8858   PyObject *list, *item;
8859   int argc, i;
8860
8861   for (argc = 0; argv[argc] != NULL; ++argc)
8862     ;
8863
8864   list = PyList_New (argc >> 1);
8865   for (i = 0; i < argc; i += 2) {
8866     item = PyTuple_New (2);
8867     PyTuple_SetItem (item, 0, PyString_FromString (argv[i]));
8868     PyTuple_SetItem (item, 1, PyString_FromString (argv[i+1]));
8869     PyList_SetItem (list, i >> 1, item);
8870   }
8871
8872   return list;
8873 }
8874
8875 static void
8876 free_strings (char **argv)
8877 {
8878   int argc;
8879
8880   for (argc = 0; argv[argc] != NULL; ++argc)
8881     free (argv[argc]);
8882   free (argv);
8883 }
8884
8885 static PyObject *
8886 py_guestfs_create (PyObject *self, PyObject *args)
8887 {
8888   guestfs_h *g;
8889
8890   g = guestfs_create ();
8891   if (g == NULL) {
8892     PyErr_SetString (PyExc_RuntimeError,
8893                      \"guestfs.create: failed to allocate handle\");
8894     return NULL;
8895   }
8896   guestfs_set_error_handler (g, NULL, NULL);
8897   return put_handle (g);
8898 }
8899
8900 static PyObject *
8901 py_guestfs_close (PyObject *self, PyObject *args)
8902 {
8903   PyObject *py_g;
8904   guestfs_h *g;
8905
8906   if (!PyArg_ParseTuple (args, (char *) \"O:guestfs_close\", &py_g))
8907     return NULL;
8908   g = get_handle (py_g);
8909
8910   guestfs_close (g);
8911
8912   Py_INCREF (Py_None);
8913   return Py_None;
8914 }
8915
8916 ";
8917
8918   let emit_put_list_function typ =
8919     pr "static PyObject *\n";
8920     pr "put_%s_list (struct guestfs_%s_list *%ss)\n" typ typ typ;
8921     pr "{\n";
8922     pr "  PyObject *list;\n";
8923     pr "  int i;\n";
8924     pr "\n";
8925     pr "  list = PyList_New (%ss->len);\n" typ;
8926     pr "  for (i = 0; i < %ss->len; ++i)\n" typ;
8927     pr "    PyList_SetItem (list, i, put_%s (&%ss->val[i]));\n" typ typ;
8928     pr "  return list;\n";
8929     pr "};\n";
8930     pr "\n"
8931   in
8932
8933   (* Structures, turned into Python dictionaries. *)
8934   List.iter (
8935     fun (typ, cols) ->
8936       pr "static PyObject *\n";
8937       pr "put_%s (struct guestfs_%s *%s)\n" typ typ typ;
8938       pr "{\n";
8939       pr "  PyObject *dict;\n";
8940       pr "\n";
8941       pr "  dict = PyDict_New ();\n";
8942       List.iter (
8943         function
8944         | name, FString ->
8945             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
8946             pr "                        PyString_FromString (%s->%s));\n"
8947               typ name
8948         | name, FBuffer ->
8949             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
8950             pr "                        PyString_FromStringAndSize (%s->%s, %s->%s_len));\n"
8951               typ name typ name
8952         | name, FUUID ->
8953             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
8954             pr "                        PyString_FromStringAndSize (%s->%s, 32));\n"
8955               typ name
8956         | name, (FBytes|FUInt64) ->
8957             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
8958             pr "                        PyLong_FromUnsignedLongLong (%s->%s));\n"
8959               typ name
8960         | name, FInt64 ->
8961             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
8962             pr "                        PyLong_FromLongLong (%s->%s));\n"
8963               typ name
8964         | name, FUInt32 ->
8965             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
8966             pr "                        PyLong_FromUnsignedLong (%s->%s));\n"
8967               typ name
8968         | name, FInt32 ->
8969             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
8970             pr "                        PyLong_FromLong (%s->%s));\n"
8971               typ name
8972         | name, FOptPercent ->
8973             pr "  if (%s->%s >= 0)\n" typ name;
8974             pr "    PyDict_SetItemString (dict, \"%s\",\n" name;
8975             pr "                          PyFloat_FromDouble ((double) %s->%s));\n"
8976               typ name;
8977             pr "  else {\n";
8978             pr "    Py_INCREF (Py_None);\n";
8979             pr "    PyDict_SetItemString (dict, \"%s\", Py_None);\n" name;
8980             pr "  }\n"
8981         | name, FChar ->
8982             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
8983             pr "                        PyString_FromStringAndSize (&dirent->%s, 1));\n" name
8984       ) cols;
8985       pr "  return dict;\n";
8986       pr "};\n";
8987       pr "\n";
8988
8989   ) structs;
8990
8991   (* Emit a put_TYPE_list function definition only if that function is used. *)
8992   List.iter (
8993     function
8994     | typ, (RStructListOnly | RStructAndList) ->
8995         (* generate the function for typ *)
8996         emit_put_list_function typ
8997     | typ, _ -> () (* empty *)
8998   ) (rstructs_used_by all_functions);
8999
9000   (* Python wrapper functions. *)
9001   List.iter (
9002     fun (name, style, _, _, _, _, _) ->
9003       pr "static PyObject *\n";
9004       pr "py_guestfs_%s (PyObject *self, PyObject *args)\n" name;
9005       pr "{\n";
9006
9007       pr "  PyObject *py_g;\n";
9008       pr "  guestfs_h *g;\n";
9009       pr "  PyObject *py_r;\n";
9010
9011       let error_code =
9012         match fst style with
9013         | RErr | RInt _ | RBool _ -> pr "  int r;\n"; "-1"
9014         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
9015         | RConstString _ | RConstOptString _ ->
9016             pr "  const char *r;\n"; "NULL"
9017         | RString _ -> pr "  char *r;\n"; "NULL"
9018         | RStringList _ | RHashtable _ -> pr "  char **r;\n"; "NULL"
9019         | RStruct (_, typ) -> pr "  struct guestfs_%s *r;\n" typ; "NULL"
9020         | RStructList (_, typ) ->
9021             pr "  struct guestfs_%s_list *r;\n" typ; "NULL"
9022         | RBufferOut _ ->
9023             pr "  char *r;\n";
9024             pr "  size_t size;\n";
9025             "NULL" in
9026
9027       List.iter (
9028         function
9029         | Pathname n | Device n | Dev_or_Path n | String n | FileIn n | FileOut n ->
9030             pr "  const char *%s;\n" n
9031         | OptString n -> pr "  const char *%s;\n" n
9032         | StringList n | DeviceList n ->
9033             pr "  PyObject *py_%s;\n" n;
9034             pr "  char **%s;\n" n
9035         | Bool n -> pr "  int %s;\n" n
9036         | Int n -> pr "  int %s;\n" n
9037         | Int64 n -> pr "  long long %s;\n" n
9038       ) (snd style);
9039
9040       pr "\n";
9041
9042       (* Convert the parameters. *)
9043       pr "  if (!PyArg_ParseTuple (args, (char *) \"O";
9044       List.iter (
9045         function
9046         | Pathname _ | Device _ | Dev_or_Path _ | String _ | FileIn _ | FileOut _ -> pr "s"
9047         | OptString _ -> pr "z"
9048         | StringList _ | DeviceList _ -> pr "O"
9049         | Bool _ -> pr "i" (* XXX Python has booleans? *)
9050         | Int _ -> pr "i"
9051         | Int64 _ -> pr "L" (* XXX Whoever thought it was a good idea to
9052                              * emulate C's int/long/long long in Python?
9053                              *)
9054       ) (snd style);
9055       pr ":guestfs_%s\",\n" name;
9056       pr "                         &py_g";
9057       List.iter (
9058         function
9059         | Pathname n | Device n | Dev_or_Path n | String n | FileIn n | FileOut n -> pr ", &%s" n
9060         | OptString n -> pr ", &%s" n
9061         | StringList n | DeviceList n -> pr ", &py_%s" n
9062         | Bool n -> pr ", &%s" n
9063         | Int n -> pr ", &%s" n
9064         | Int64 n -> pr ", &%s" n
9065       ) (snd style);
9066
9067       pr "))\n";
9068       pr "    return NULL;\n";
9069
9070       pr "  g = get_handle (py_g);\n";
9071       List.iter (
9072         function
9073         | Pathname _ | Device _ | Dev_or_Path _ | String _
9074         | FileIn _ | FileOut _ | OptString _ | Bool _ | Int _ | Int64 _ -> ()
9075         | StringList n | DeviceList n ->
9076             pr "  %s = get_string_list (py_%s);\n" n n;
9077             pr "  if (!%s) return NULL;\n" n
9078       ) (snd style);
9079
9080       pr "\n";
9081
9082       pr "  r = guestfs_%s " name;
9083       generate_c_call_args ~handle:"g" style;
9084       pr ";\n";
9085
9086       List.iter (
9087         function
9088         | Pathname _ | Device _ | Dev_or_Path _ | String _
9089         | FileIn _ | FileOut _ | OptString _ | Bool _ | Int _ | Int64 _ -> ()
9090         | StringList n | DeviceList n ->
9091             pr "  free (%s);\n" n
9092       ) (snd style);
9093
9094       pr "  if (r == %s) {\n" error_code;
9095       pr "    PyErr_SetString (PyExc_RuntimeError, guestfs_last_error (g));\n";
9096       pr "    return NULL;\n";
9097       pr "  }\n";
9098       pr "\n";
9099
9100       (match fst style with
9101        | RErr ->
9102            pr "  Py_INCREF (Py_None);\n";
9103            pr "  py_r = Py_None;\n"
9104        | RInt _
9105        | RBool _ -> pr "  py_r = PyInt_FromLong ((long) r);\n"
9106        | RInt64 _ -> pr "  py_r = PyLong_FromLongLong (r);\n"
9107        | RConstString _ -> pr "  py_r = PyString_FromString (r);\n"
9108        | RConstOptString _ ->
9109            pr "  if (r)\n";
9110            pr "    py_r = PyString_FromString (r);\n";
9111            pr "  else {\n";
9112            pr "    Py_INCREF (Py_None);\n";
9113            pr "    py_r = Py_None;\n";
9114            pr "  }\n"
9115        | RString _ ->
9116            pr "  py_r = PyString_FromString (r);\n";
9117            pr "  free (r);\n"
9118        | RStringList _ ->
9119            pr "  py_r = put_string_list (r);\n";
9120            pr "  free_strings (r);\n"
9121        | RStruct (_, typ) ->
9122            pr "  py_r = put_%s (r);\n" typ;
9123            pr "  guestfs_free_%s (r);\n" typ
9124        | RStructList (_, typ) ->
9125            pr "  py_r = put_%s_list (r);\n" typ;
9126            pr "  guestfs_free_%s_list (r);\n" typ
9127        | RHashtable n ->
9128            pr "  py_r = put_table (r);\n";
9129            pr "  free_strings (r);\n"
9130        | RBufferOut _ ->
9131            pr "  py_r = PyString_FromStringAndSize (r, size);\n";
9132            pr "  free (r);\n"
9133       );
9134
9135       pr "  return py_r;\n";
9136       pr "}\n";
9137       pr "\n"
9138   ) all_functions;
9139
9140   (* Table of functions. *)
9141   pr "static PyMethodDef methods[] = {\n";
9142   pr "  { (char *) \"create\", py_guestfs_create, METH_VARARGS, NULL },\n";
9143   pr "  { (char *) \"close\", py_guestfs_close, METH_VARARGS, NULL },\n";
9144   List.iter (
9145     fun (name, _, _, _, _, _, _) ->
9146       pr "  { (char *) \"%s\", py_guestfs_%s, METH_VARARGS, NULL },\n"
9147         name name
9148   ) all_functions;
9149   pr "  { NULL, NULL, 0, NULL }\n";
9150   pr "};\n";
9151   pr "\n";
9152
9153   (* Init function. *)
9154   pr "\
9155 void
9156 initlibguestfsmod (void)
9157 {
9158   static int initialized = 0;
9159
9160   if (initialized) return;
9161   Py_InitModule ((char *) \"libguestfsmod\", methods);
9162   initialized = 1;
9163 }
9164 "
9165
9166 (* Generate Python module. *)
9167 and generate_python_py () =
9168   generate_header HashStyle LGPLv2plus;
9169
9170   pr "\
9171 u\"\"\"Python bindings for libguestfs
9172
9173 import guestfs
9174 g = guestfs.GuestFS ()
9175 g.add_drive (\"guest.img\")
9176 g.launch ()
9177 parts = g.list_partitions ()
9178
9179 The guestfs module provides a Python binding to the libguestfs API
9180 for examining and modifying virtual machine disk images.
9181
9182 Amongst the things this is good for: making batch configuration
9183 changes to guests, getting disk used/free statistics (see also:
9184 virt-df), migrating between virtualization systems (see also:
9185 virt-p2v), performing partial backups, performing partial guest
9186 clones, cloning guests and changing registry/UUID/hostname info, and
9187 much else besides.
9188
9189 Libguestfs uses Linux kernel and qemu code, and can access any type of
9190 guest filesystem that Linux and qemu can, including but not limited
9191 to: ext2/3/4, btrfs, FAT and NTFS, LVM, many different disk partition
9192 schemes, qcow, qcow2, vmdk.
9193
9194 Libguestfs provides ways to enumerate guest storage (eg. partitions,
9195 LVs, what filesystem is in each LV, etc.).  It can also run commands
9196 in the context of the guest.  Also you can access filesystems over
9197 FUSE.
9198
9199 Errors which happen while using the API are turned into Python
9200 RuntimeError exceptions.
9201
9202 To create a guestfs handle you usually have to perform the following
9203 sequence of calls:
9204
9205 # Create the handle, call add_drive at least once, and possibly
9206 # several times if the guest has multiple block devices:
9207 g = guestfs.GuestFS ()
9208 g.add_drive (\"guest.img\")
9209
9210 # Launch the qemu subprocess and wait for it to become ready:
9211 g.launch ()
9212
9213 # Now you can issue commands, for example:
9214 logvols = g.lvs ()
9215
9216 \"\"\"
9217
9218 import libguestfsmod
9219
9220 class GuestFS:
9221     \"\"\"Instances of this class are libguestfs API handles.\"\"\"
9222
9223     def __init__ (self):
9224         \"\"\"Create a new libguestfs handle.\"\"\"
9225         self._o = libguestfsmod.create ()
9226
9227     def __del__ (self):
9228         libguestfsmod.close (self._o)
9229
9230 ";
9231
9232   List.iter (
9233     fun (name, style, _, flags, _, _, longdesc) ->
9234       pr "    def %s " name;
9235       generate_py_call_args ~handle:"self" (snd style);
9236       pr ":\n";
9237
9238       if not (List.mem NotInDocs flags) then (
9239         let doc = replace_str longdesc "C<guestfs_" "C<g." in
9240         let doc =
9241           match fst style with
9242           | RErr | RInt _ | RInt64 _ | RBool _
9243           | RConstOptString _ | RConstString _
9244           | RString _ | RBufferOut _ -> doc
9245           | RStringList _ ->
9246               doc ^ "\n\nThis function returns a list of strings."
9247           | RStruct (_, typ) ->
9248               doc ^ sprintf "\n\nThis function returns a dictionary, with keys matching the various fields in the guestfs_%s structure." typ
9249           | RStructList (_, typ) ->
9250               doc ^ sprintf "\n\nThis function returns a list of %ss.  Each %s is represented as a dictionary." typ typ
9251           | RHashtable _ ->
9252               doc ^ "\n\nThis function returns a dictionary." in
9253         let doc =
9254           if List.mem ProtocolLimitWarning flags then
9255             doc ^ "\n\n" ^ protocol_limit_warning
9256           else doc in
9257         let doc =
9258           if List.mem DangerWillRobinson flags then
9259             doc ^ "\n\n" ^ danger_will_robinson
9260           else doc in
9261         let doc =
9262           match deprecation_notice flags with
9263           | None -> doc
9264           | Some txt -> doc ^ "\n\n" ^ txt in
9265         let doc = pod2text ~width:60 name doc in
9266         let doc = List.map (fun line -> replace_str line "\\" "\\\\") doc in
9267         let doc = String.concat "\n        " doc in
9268         pr "        u\"\"\"%s\"\"\"\n" doc;
9269       );
9270       pr "        return libguestfsmod.%s " name;
9271       generate_py_call_args ~handle:"self._o" (snd style);
9272       pr "\n";
9273       pr "\n";
9274   ) all_functions
9275
9276 (* Generate Python call arguments, eg "(handle, foo, bar)" *)
9277 and generate_py_call_args ~handle args =
9278   pr "(%s" handle;
9279   List.iter (fun arg -> pr ", %s" (name_of_argt arg)) args;
9280   pr ")"
9281
9282 (* Useful if you need the longdesc POD text as plain text.  Returns a
9283  * list of lines.
9284  *
9285  * Because this is very slow (the slowest part of autogeneration),
9286  * we memoize the results.
9287  *)
9288 and pod2text ~width name longdesc =
9289   let key = width, name, longdesc in
9290   try Hashtbl.find pod2text_memo key
9291   with Not_found ->
9292     let filename, chan = Filename.open_temp_file "gen" ".tmp" in
9293     fprintf chan "=head1 %s\n\n%s\n" name longdesc;
9294     close_out chan;
9295     let cmd = sprintf "pod2text -w %d %s" width (Filename.quote filename) in
9296     let chan = open_process_in cmd in
9297     let lines = ref [] in
9298     let rec loop i =
9299       let line = input_line chan in
9300       if i = 1 then             (* discard the first line of output *)
9301         loop (i+1)
9302       else (
9303         let line = triml line in
9304         lines := line :: !lines;
9305         loop (i+1)
9306       ) in
9307     let lines = try loop 1 with End_of_file -> List.rev !lines in
9308     unlink filename;
9309     (match close_process_in chan with
9310      | WEXITED 0 -> ()
9311      | WEXITED i ->
9312          failwithf "pod2text: process exited with non-zero status (%d)" i
9313      | WSIGNALED i | WSTOPPED i ->
9314          failwithf "pod2text: process signalled or stopped by signal %d" i
9315     );
9316     Hashtbl.add pod2text_memo key lines;
9317     pod2text_memo_updated ();
9318     lines
9319
9320 (* Generate ruby bindings. *)
9321 and generate_ruby_c () =
9322   generate_header CStyle LGPLv2plus;
9323
9324   pr "\
9325 #include <stdio.h>
9326 #include <stdlib.h>
9327
9328 #include <ruby.h>
9329
9330 #include \"guestfs.h\"
9331
9332 #include \"extconf.h\"
9333
9334 /* For Ruby < 1.9 */
9335 #ifndef RARRAY_LEN
9336 #define RARRAY_LEN(r) (RARRAY((r))->len)
9337 #endif
9338
9339 static VALUE m_guestfs;                 /* guestfs module */
9340 static VALUE c_guestfs;                 /* guestfs_h handle */
9341 static VALUE e_Error;                   /* used for all errors */
9342
9343 static void ruby_guestfs_free (void *p)
9344 {
9345   if (!p) return;
9346   guestfs_close ((guestfs_h *) p);
9347 }
9348
9349 static VALUE ruby_guestfs_create (VALUE m)
9350 {
9351   guestfs_h *g;
9352
9353   g = guestfs_create ();
9354   if (!g)
9355     rb_raise (e_Error, \"failed to create guestfs handle\");
9356
9357   /* Don't print error messages to stderr by default. */
9358   guestfs_set_error_handler (g, NULL, NULL);
9359
9360   /* Wrap it, and make sure the close function is called when the
9361    * handle goes away.
9362    */
9363   return Data_Wrap_Struct (c_guestfs, NULL, ruby_guestfs_free, g);
9364 }
9365
9366 static VALUE ruby_guestfs_close (VALUE gv)
9367 {
9368   guestfs_h *g;
9369   Data_Get_Struct (gv, guestfs_h, g);
9370
9371   ruby_guestfs_free (g);
9372   DATA_PTR (gv) = NULL;
9373
9374   return Qnil;
9375 }
9376
9377 ";
9378
9379   List.iter (
9380     fun (name, style, _, _, _, _, _) ->
9381       pr "static VALUE ruby_guestfs_%s (VALUE gv" name;
9382       List.iter (fun arg -> pr ", VALUE %sv" (name_of_argt arg)) (snd style);
9383       pr ")\n";
9384       pr "{\n";
9385       pr "  guestfs_h *g;\n";
9386       pr "  Data_Get_Struct (gv, guestfs_h, g);\n";
9387       pr "  if (!g)\n";
9388       pr "    rb_raise (rb_eArgError, \"%%s: used handle after closing it\", \"%s\");\n"
9389         name;
9390       pr "\n";
9391
9392       List.iter (
9393         function
9394         | Pathname n | Device n | Dev_or_Path n | String n | FileIn n | FileOut n ->
9395             pr "  Check_Type (%sv, T_STRING);\n" n;
9396             pr "  const char *%s = StringValueCStr (%sv);\n" n n;
9397             pr "  if (!%s)\n" n;
9398             pr "    rb_raise (rb_eTypeError, \"expected string for parameter %%s of %%s\",\n";
9399             pr "              \"%s\", \"%s\");\n" n name
9400         | OptString n ->
9401             pr "  const char *%s = !NIL_P (%sv) ? StringValueCStr (%sv) : NULL;\n" n n n
9402         | StringList n | DeviceList n ->
9403             pr "  char **%s;\n" n;
9404             pr "  Check_Type (%sv, T_ARRAY);\n" n;
9405             pr "  {\n";
9406             pr "    int i, len;\n";
9407             pr "    len = RARRAY_LEN (%sv);\n" n;
9408             pr "    %s = guestfs_safe_malloc (g, sizeof (char *) * (len+1));\n"
9409               n;
9410             pr "    for (i = 0; i < len; ++i) {\n";
9411             pr "      VALUE v = rb_ary_entry (%sv, i);\n" n;
9412             pr "      %s[i] = StringValueCStr (v);\n" n;
9413             pr "    }\n";
9414             pr "    %s[len] = NULL;\n" n;
9415             pr "  }\n";
9416         | Bool n ->
9417             pr "  int %s = RTEST (%sv);\n" n n
9418         | Int n ->
9419             pr "  int %s = NUM2INT (%sv);\n" n n
9420         | Int64 n ->
9421             pr "  long long %s = NUM2LL (%sv);\n" n n
9422       ) (snd style);
9423       pr "\n";
9424
9425       let error_code =
9426         match fst style with
9427         | RErr | RInt _ | RBool _ -> pr "  int r;\n"; "-1"
9428         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
9429         | RConstString _ | RConstOptString _ ->
9430             pr "  const char *r;\n"; "NULL"
9431         | RString _ -> pr "  char *r;\n"; "NULL"
9432         | RStringList _ | RHashtable _ -> pr "  char **r;\n"; "NULL"
9433         | RStruct (_, typ) -> pr "  struct guestfs_%s *r;\n" typ; "NULL"
9434         | RStructList (_, typ) ->
9435             pr "  struct guestfs_%s_list *r;\n" typ; "NULL"
9436         | RBufferOut _ ->
9437             pr "  char *r;\n";
9438             pr "  size_t size;\n";
9439             "NULL" in
9440       pr "\n";
9441
9442       pr "  r = guestfs_%s " name;
9443       generate_c_call_args ~handle:"g" style;
9444       pr ";\n";
9445
9446       List.iter (
9447         function
9448         | Pathname _ | Device _ | Dev_or_Path _ | String _
9449         | FileIn _ | FileOut _ | OptString _ | Bool _ | Int _ | Int64 _ -> ()
9450         | StringList n | DeviceList n ->
9451             pr "  free (%s);\n" n
9452       ) (snd style);
9453
9454       pr "  if (r == %s)\n" error_code;
9455       pr "    rb_raise (e_Error, \"%%s\", guestfs_last_error (g));\n";
9456       pr "\n";
9457
9458       (match fst style with
9459        | RErr ->
9460            pr "  return Qnil;\n"
9461        | RInt _ | RBool _ ->
9462            pr "  return INT2NUM (r);\n"
9463        | RInt64 _ ->
9464            pr "  return ULL2NUM (r);\n"
9465        | RConstString _ ->
9466            pr "  return rb_str_new2 (r);\n";
9467        | RConstOptString _ ->
9468            pr "  if (r)\n";
9469            pr "    return rb_str_new2 (r);\n";
9470            pr "  else\n";
9471            pr "    return Qnil;\n";
9472        | RString _ ->
9473            pr "  VALUE rv = rb_str_new2 (r);\n";
9474            pr "  free (r);\n";
9475            pr "  return rv;\n";
9476        | RStringList _ ->
9477            pr "  int i, len = 0;\n";
9478            pr "  for (i = 0; r[i] != NULL; ++i) len++;\n";
9479            pr "  VALUE rv = rb_ary_new2 (len);\n";
9480            pr "  for (i = 0; r[i] != NULL; ++i) {\n";
9481            pr "    rb_ary_push (rv, rb_str_new2 (r[i]));\n";
9482            pr "    free (r[i]);\n";
9483            pr "  }\n";
9484            pr "  free (r);\n";
9485            pr "  return rv;\n"
9486        | RStruct (_, typ) ->
9487            let cols = cols_of_struct typ in
9488            generate_ruby_struct_code typ cols
9489        | RStructList (_, typ) ->
9490            let cols = cols_of_struct typ in
9491            generate_ruby_struct_list_code typ cols
9492        | RHashtable _ ->
9493            pr "  VALUE rv = rb_hash_new ();\n";
9494            pr "  int i;\n";
9495            pr "  for (i = 0; r[i] != NULL; i+=2) {\n";
9496            pr "    rb_hash_aset (rv, rb_str_new2 (r[i]), rb_str_new2 (r[i+1]));\n";
9497            pr "    free (r[i]);\n";
9498            pr "    free (r[i+1]);\n";
9499            pr "  }\n";
9500            pr "  free (r);\n";
9501            pr "  return rv;\n"
9502        | RBufferOut _ ->
9503            pr "  VALUE rv = rb_str_new (r, size);\n";
9504            pr "  free (r);\n";
9505            pr "  return rv;\n";
9506       );
9507
9508       pr "}\n";
9509       pr "\n"
9510   ) all_functions;
9511
9512   pr "\
9513 /* Initialize the module. */
9514 void Init__guestfs ()
9515 {
9516   m_guestfs = rb_define_module (\"Guestfs\");
9517   c_guestfs = rb_define_class_under (m_guestfs, \"Guestfs\", rb_cObject);
9518   e_Error = rb_define_class_under (m_guestfs, \"Error\", rb_eStandardError);
9519
9520   rb_define_module_function (m_guestfs, \"create\", ruby_guestfs_create, 0);
9521   rb_define_method (c_guestfs, \"close\", ruby_guestfs_close, 0);
9522
9523 ";
9524   (* Define the rest of the methods. *)
9525   List.iter (
9526     fun (name, style, _, _, _, _, _) ->
9527       pr "  rb_define_method (c_guestfs, \"%s\",\n" name;
9528       pr "        ruby_guestfs_%s, %d);\n" name (List.length (snd style))
9529   ) all_functions;
9530
9531   pr "}\n"
9532
9533 (* Ruby code to return a struct. *)
9534 and generate_ruby_struct_code typ cols =
9535   pr "  VALUE rv = rb_hash_new ();\n";
9536   List.iter (
9537     function
9538     | name, FString ->
9539         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_str_new2 (r->%s));\n" name name
9540     | name, FBuffer ->
9541         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_str_new (r->%s, r->%s_len));\n" name name name
9542     | name, FUUID ->
9543         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_str_new (r->%s, 32));\n" name name
9544     | name, (FBytes|FUInt64) ->
9545         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), ULL2NUM (r->%s));\n" name name
9546     | name, FInt64 ->
9547         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), LL2NUM (r->%s));\n" name name
9548     | name, FUInt32 ->
9549         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), UINT2NUM (r->%s));\n" name name
9550     | name, FInt32 ->
9551         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), INT2NUM (r->%s));\n" name name
9552     | name, FOptPercent ->
9553         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_dbl2big (r->%s));\n" name name
9554     | name, FChar -> (* XXX wrong? *)
9555         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), ULL2NUM (r->%s));\n" name name
9556   ) cols;
9557   pr "  guestfs_free_%s (r);\n" typ;
9558   pr "  return rv;\n"
9559
9560 (* Ruby code to return a struct list. *)
9561 and generate_ruby_struct_list_code typ cols =
9562   pr "  VALUE rv = rb_ary_new2 (r->len);\n";
9563   pr "  int i;\n";
9564   pr "  for (i = 0; i < r->len; ++i) {\n";
9565   pr "    VALUE hv = rb_hash_new ();\n";
9566   List.iter (
9567     function
9568     | name, FString ->
9569         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_str_new2 (r->val[i].%s));\n" name name
9570     | name, FBuffer ->
9571         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_str_new (r->val[i].%s, r->val[i].%s_len));\n" name name name
9572     | name, FUUID ->
9573         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_str_new (r->val[i].%s, 32));\n" name name
9574     | name, (FBytes|FUInt64) ->
9575         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), ULL2NUM (r->val[i].%s));\n" name name
9576     | name, FInt64 ->
9577         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), LL2NUM (r->val[i].%s));\n" name name
9578     | name, FUInt32 ->
9579         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), UINT2NUM (r->val[i].%s));\n" name name
9580     | name, FInt32 ->
9581         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), INT2NUM (r->val[i].%s));\n" name name
9582     | name, FOptPercent ->
9583         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_dbl2big (r->val[i].%s));\n" name name
9584     | name, FChar -> (* XXX wrong? *)
9585         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), ULL2NUM (r->val[i].%s));\n" name name
9586   ) cols;
9587   pr "    rb_ary_push (rv, hv);\n";
9588   pr "  }\n";
9589   pr "  guestfs_free_%s_list (r);\n" typ;
9590   pr "  return rv;\n"
9591
9592 (* Generate Java bindings GuestFS.java file. *)
9593 and generate_java_java () =
9594   generate_header CStyle LGPLv2plus;
9595
9596   pr "\
9597 package com.redhat.et.libguestfs;
9598
9599 import java.util.HashMap;
9600 import com.redhat.et.libguestfs.LibGuestFSException;
9601 import com.redhat.et.libguestfs.PV;
9602 import com.redhat.et.libguestfs.VG;
9603 import com.redhat.et.libguestfs.LV;
9604 import com.redhat.et.libguestfs.Stat;
9605 import com.redhat.et.libguestfs.StatVFS;
9606 import com.redhat.et.libguestfs.IntBool;
9607 import com.redhat.et.libguestfs.Dirent;
9608
9609 /**
9610  * The GuestFS object is a libguestfs handle.
9611  *
9612  * @author rjones
9613  */
9614 public class GuestFS {
9615   // Load the native code.
9616   static {
9617     System.loadLibrary (\"guestfs_jni\");
9618   }
9619
9620   /**
9621    * The native guestfs_h pointer.
9622    */
9623   long g;
9624
9625   /**
9626    * Create a libguestfs handle.
9627    *
9628    * @throws LibGuestFSException
9629    */
9630   public GuestFS () throws LibGuestFSException
9631   {
9632     g = _create ();
9633   }
9634   private native long _create () throws LibGuestFSException;
9635
9636   /**
9637    * Close a libguestfs handle.
9638    *
9639    * You can also leave handles to be collected by the garbage
9640    * collector, but this method ensures that the resources used
9641    * by the handle are freed up immediately.  If you call any
9642    * other methods after closing the handle, you will get an
9643    * exception.
9644    *
9645    * @throws LibGuestFSException
9646    */
9647   public void close () throws LibGuestFSException
9648   {
9649     if (g != 0)
9650       _close (g);
9651     g = 0;
9652   }
9653   private native void _close (long g) throws LibGuestFSException;
9654
9655   public void finalize () throws LibGuestFSException
9656   {
9657     close ();
9658   }
9659
9660 ";
9661
9662   List.iter (
9663     fun (name, style, _, flags, _, shortdesc, longdesc) ->
9664       if not (List.mem NotInDocs flags); then (
9665         let doc = replace_str longdesc "C<guestfs_" "C<g." in
9666         let doc =
9667           if List.mem ProtocolLimitWarning flags then
9668             doc ^ "\n\n" ^ protocol_limit_warning
9669           else doc in
9670         let doc =
9671           if List.mem DangerWillRobinson flags then
9672             doc ^ "\n\n" ^ danger_will_robinson
9673           else doc in
9674         let doc =
9675           match deprecation_notice flags with
9676           | None -> doc
9677           | Some txt -> doc ^ "\n\n" ^ txt in
9678         let doc = pod2text ~width:60 name doc in
9679         let doc = List.map (            (* RHBZ#501883 *)
9680           function
9681           | "" -> "<p>"
9682           | nonempty -> nonempty
9683         ) doc in
9684         let doc = String.concat "\n   * " doc in
9685
9686         pr "  /**\n";
9687         pr "   * %s\n" shortdesc;
9688         pr "   * <p>\n";
9689         pr "   * %s\n" doc;
9690         pr "   * @throws LibGuestFSException\n";
9691         pr "   */\n";
9692         pr "  ";
9693       );
9694       generate_java_prototype ~public:true ~semicolon:false name style;
9695       pr "\n";
9696       pr "  {\n";
9697       pr "    if (g == 0)\n";
9698       pr "      throw new LibGuestFSException (\"%s: handle is closed\");\n"
9699         name;
9700       pr "    ";
9701       if fst style <> RErr then pr "return ";
9702       pr "_%s " name;
9703       generate_java_call_args ~handle:"g" (snd style);
9704       pr ";\n";
9705       pr "  }\n";
9706       pr "  ";
9707       generate_java_prototype ~privat:true ~native:true name style;
9708       pr "\n";
9709       pr "\n";
9710   ) all_functions;
9711
9712   pr "}\n"
9713
9714 (* Generate Java call arguments, eg "(handle, foo, bar)" *)
9715 and generate_java_call_args ~handle args =
9716   pr "(%s" handle;
9717   List.iter (fun arg -> pr ", %s" (name_of_argt arg)) args;
9718   pr ")"
9719
9720 and generate_java_prototype ?(public=false) ?(privat=false) ?(native=false)
9721     ?(semicolon=true) name style =
9722   if privat then pr "private ";
9723   if public then pr "public ";
9724   if native then pr "native ";
9725
9726   (* return type *)
9727   (match fst style with
9728    | RErr -> pr "void ";
9729    | RInt _ -> pr "int ";
9730    | RInt64 _ -> pr "long ";
9731    | RBool _ -> pr "boolean ";
9732    | RConstString _ | RConstOptString _ | RString _
9733    | RBufferOut _ -> pr "String ";
9734    | RStringList _ -> pr "String[] ";
9735    | RStruct (_, typ) ->
9736        let name = java_name_of_struct typ in
9737        pr "%s " name;
9738    | RStructList (_, typ) ->
9739        let name = java_name_of_struct typ in
9740        pr "%s[] " name;
9741    | RHashtable _ -> pr "HashMap<String,String> ";
9742   );
9743
9744   if native then pr "_%s " name else pr "%s " name;
9745   pr "(";
9746   let needs_comma = ref false in
9747   if native then (
9748     pr "long g";
9749     needs_comma := true
9750   );
9751
9752   (* args *)
9753   List.iter (
9754     fun arg ->
9755       if !needs_comma then pr ", ";
9756       needs_comma := true;
9757
9758       match arg with
9759       | Pathname n
9760       | Device n | Dev_or_Path n
9761       | String n
9762       | OptString n
9763       | FileIn n
9764       | FileOut n ->
9765           pr "String %s" n
9766       | StringList n | DeviceList n ->
9767           pr "String[] %s" n
9768       | Bool n ->
9769           pr "boolean %s" n
9770       | Int n ->
9771           pr "int %s" n
9772       | Int64 n ->
9773           pr "long %s" n
9774   ) (snd style);
9775
9776   pr ")\n";
9777   pr "    throws LibGuestFSException";
9778   if semicolon then pr ";"
9779
9780 and generate_java_struct jtyp cols () =
9781   generate_header CStyle LGPLv2plus;
9782
9783   pr "\
9784 package com.redhat.et.libguestfs;
9785
9786 /**
9787  * Libguestfs %s structure.
9788  *
9789  * @author rjones
9790  * @see GuestFS
9791  */
9792 public class %s {
9793 " jtyp jtyp;
9794
9795   List.iter (
9796     function
9797     | name, FString
9798     | name, FUUID
9799     | name, FBuffer -> pr "  public String %s;\n" name
9800     | name, (FBytes|FUInt64|FInt64) -> pr "  public long %s;\n" name
9801     | name, (FUInt32|FInt32) -> pr "  public int %s;\n" name
9802     | name, FChar -> pr "  public char %s;\n" name
9803     | name, FOptPercent ->
9804         pr "  /* The next field is [0..100] or -1 meaning 'not present': */\n";
9805         pr "  public float %s;\n" name
9806   ) cols;
9807
9808   pr "}\n"
9809
9810 and generate_java_c () =
9811   generate_header CStyle LGPLv2plus;
9812
9813   pr "\
9814 #include <stdio.h>
9815 #include <stdlib.h>
9816 #include <string.h>
9817
9818 #include \"com_redhat_et_libguestfs_GuestFS.h\"
9819 #include \"guestfs.h\"
9820
9821 /* Note that this function returns.  The exception is not thrown
9822  * until after the wrapper function returns.
9823  */
9824 static void
9825 throw_exception (JNIEnv *env, const char *msg)
9826 {
9827   jclass cl;
9828   cl = (*env)->FindClass (env,
9829                           \"com/redhat/et/libguestfs/LibGuestFSException\");
9830   (*env)->ThrowNew (env, cl, msg);
9831 }
9832
9833 JNIEXPORT jlong JNICALL
9834 Java_com_redhat_et_libguestfs_GuestFS__1create
9835   (JNIEnv *env, jobject obj)
9836 {
9837   guestfs_h *g;
9838
9839   g = guestfs_create ();
9840   if (g == NULL) {
9841     throw_exception (env, \"GuestFS.create: failed to allocate handle\");
9842     return 0;
9843   }
9844   guestfs_set_error_handler (g, NULL, NULL);
9845   return (jlong) (long) g;
9846 }
9847
9848 JNIEXPORT void JNICALL
9849 Java_com_redhat_et_libguestfs_GuestFS__1close
9850   (JNIEnv *env, jobject obj, jlong jg)
9851 {
9852   guestfs_h *g = (guestfs_h *) (long) jg;
9853   guestfs_close (g);
9854 }
9855
9856 ";
9857
9858   List.iter (
9859     fun (name, style, _, _, _, _, _) ->
9860       pr "JNIEXPORT ";
9861       (match fst style with
9862        | RErr -> pr "void ";
9863        | RInt _ -> pr "jint ";
9864        | RInt64 _ -> pr "jlong ";
9865        | RBool _ -> pr "jboolean ";
9866        | RConstString _ | RConstOptString _ | RString _
9867        | RBufferOut _ -> pr "jstring ";
9868        | RStruct _ | RHashtable _ ->
9869            pr "jobject ";
9870        | RStringList _ | RStructList _ ->
9871            pr "jobjectArray ";
9872       );
9873       pr "JNICALL\n";
9874       pr "Java_com_redhat_et_libguestfs_GuestFS_";
9875       pr "%s" (replace_str ("_" ^ name) "_" "_1");
9876       pr "\n";
9877       pr "  (JNIEnv *env, jobject obj, jlong jg";
9878       List.iter (
9879         function
9880         | Pathname n
9881         | Device n | Dev_or_Path n
9882         | String n
9883         | OptString n
9884         | FileIn n
9885         | FileOut n ->
9886             pr ", jstring j%s" n
9887         | StringList n | DeviceList n ->
9888             pr ", jobjectArray j%s" n
9889         | Bool n ->
9890             pr ", jboolean j%s" n
9891         | Int n ->
9892             pr ", jint j%s" n
9893         | Int64 n ->
9894             pr ", jlong j%s" n
9895       ) (snd style);
9896       pr ")\n";
9897       pr "{\n";
9898       pr "  guestfs_h *g = (guestfs_h *) (long) jg;\n";
9899       let error_code, no_ret =
9900         match fst style with
9901         | RErr -> pr "  int r;\n"; "-1", ""
9902         | RBool _
9903         | RInt _ -> pr "  int r;\n"; "-1", "0"
9904         | RInt64 _ -> pr "  int64_t r;\n"; "-1", "0"
9905         | RConstString _ -> pr "  const char *r;\n"; "NULL", "NULL"
9906         | RConstOptString _ -> pr "  const char *r;\n"; "NULL", "NULL"
9907         | RString _ ->
9908             pr "  jstring jr;\n";
9909             pr "  char *r;\n"; "NULL", "NULL"
9910         | RStringList _ ->
9911             pr "  jobjectArray jr;\n";
9912             pr "  int r_len;\n";
9913             pr "  jclass cl;\n";
9914             pr "  jstring jstr;\n";
9915             pr "  char **r;\n"; "NULL", "NULL"
9916         | RStruct (_, typ) ->
9917             pr "  jobject jr;\n";
9918             pr "  jclass cl;\n";
9919             pr "  jfieldID fl;\n";
9920             pr "  struct guestfs_%s *r;\n" typ; "NULL", "NULL"
9921         | RStructList (_, typ) ->
9922             pr "  jobjectArray jr;\n";
9923             pr "  jclass cl;\n";
9924             pr "  jfieldID fl;\n";
9925             pr "  jobject jfl;\n";
9926             pr "  struct guestfs_%s_list *r;\n" typ; "NULL", "NULL"
9927         | RHashtable _ -> pr "  char **r;\n"; "NULL", "NULL"
9928         | RBufferOut _ ->
9929             pr "  jstring jr;\n";
9930             pr "  char *r;\n";
9931             pr "  size_t size;\n";
9932             "NULL", "NULL" in
9933       List.iter (
9934         function
9935         | Pathname n
9936         | Device n | Dev_or_Path n
9937         | String n
9938         | OptString n
9939         | FileIn n
9940         | FileOut n ->
9941             pr "  const char *%s;\n" n
9942         | StringList n | DeviceList n ->
9943             pr "  int %s_len;\n" n;
9944             pr "  const char **%s;\n" n
9945         | Bool n
9946         | Int n ->
9947             pr "  int %s;\n" n
9948         | Int64 n ->
9949             pr "  int64_t %s;\n" n
9950       ) (snd style);
9951
9952       let needs_i =
9953         (match fst style with
9954          | RStringList _ | RStructList _ -> true
9955          | RErr | RBool _ | RInt _ | RInt64 _ | RConstString _
9956          | RConstOptString _
9957          | RString _ | RBufferOut _ | RStruct _ | RHashtable _ -> false) ||
9958           List.exists (function
9959                        | StringList _ -> true
9960                        | DeviceList _ -> true
9961                        | _ -> false) (snd style) in
9962       if needs_i then
9963         pr "  int i;\n";
9964
9965       pr "\n";
9966
9967       (* Get the parameters. *)
9968       List.iter (
9969         function
9970         | Pathname n
9971         | Device n | Dev_or_Path n
9972         | String n
9973         | FileIn n
9974         | FileOut n ->
9975             pr "  %s = (*env)->GetStringUTFChars (env, j%s, NULL);\n" n n
9976         | OptString n ->
9977             (* This is completely undocumented, but Java null becomes
9978              * a NULL parameter.
9979              *)
9980             pr "  %s = j%s ? (*env)->GetStringUTFChars (env, j%s, NULL) : NULL;\n" n n n
9981         | StringList n | DeviceList n ->
9982             pr "  %s_len = (*env)->GetArrayLength (env, j%s);\n" n n;
9983             pr "  %s = guestfs_safe_malloc (g, sizeof (char *) * (%s_len+1));\n" n n;
9984             pr "  for (i = 0; i < %s_len; ++i) {\n" n;
9985             pr "    jobject o = (*env)->GetObjectArrayElement (env, j%s, i);\n"
9986               n;
9987             pr "    %s[i] = (*env)->GetStringUTFChars (env, o, NULL);\n" n;
9988             pr "  }\n";
9989             pr "  %s[%s_len] = NULL;\n" n n;
9990         | Bool n
9991         | Int n
9992         | Int64 n ->
9993             pr "  %s = j%s;\n" n n
9994       ) (snd style);
9995
9996       (* Make the call. *)
9997       pr "  r = guestfs_%s " name;
9998       generate_c_call_args ~handle:"g" style;
9999       pr ";\n";
10000
10001       (* Release the parameters. *)
10002       List.iter (
10003         function
10004         | Pathname n
10005         | Device n | Dev_or_Path n
10006         | String n
10007         | FileIn n
10008         | FileOut n ->
10009             pr "  (*env)->ReleaseStringUTFChars (env, j%s, %s);\n" n n
10010         | OptString n ->
10011             pr "  if (j%s)\n" n;
10012             pr "    (*env)->ReleaseStringUTFChars (env, j%s, %s);\n" n n
10013         | StringList n | DeviceList n ->
10014             pr "  for (i = 0; i < %s_len; ++i) {\n" n;
10015             pr "    jobject o = (*env)->GetObjectArrayElement (env, j%s, i);\n"
10016               n;
10017             pr "    (*env)->ReleaseStringUTFChars (env, o, %s[i]);\n" n;
10018             pr "  }\n";
10019             pr "  free (%s);\n" n
10020         | Bool n
10021         | Int n
10022         | Int64 n -> ()
10023       ) (snd style);
10024
10025       (* Check for errors. *)
10026       pr "  if (r == %s) {\n" error_code;
10027       pr "    throw_exception (env, guestfs_last_error (g));\n";
10028       pr "    return %s;\n" no_ret;
10029       pr "  }\n";
10030
10031       (* Return value. *)
10032       (match fst style with
10033        | RErr -> ()
10034        | RInt _ -> pr "  return (jint) r;\n"
10035        | RBool _ -> pr "  return (jboolean) r;\n"
10036        | RInt64 _ -> pr "  return (jlong) r;\n"
10037        | RConstString _ -> pr "  return (*env)->NewStringUTF (env, r);\n"
10038        | RConstOptString _ ->
10039            pr "  return (*env)->NewStringUTF (env, r); /* XXX r NULL? */\n"
10040        | RString _ ->
10041            pr "  jr = (*env)->NewStringUTF (env, r);\n";
10042            pr "  free (r);\n";
10043            pr "  return jr;\n"
10044        | RStringList _ ->
10045            pr "  for (r_len = 0; r[r_len] != NULL; ++r_len) ;\n";
10046            pr "  cl = (*env)->FindClass (env, \"java/lang/String\");\n";
10047            pr "  jstr = (*env)->NewStringUTF (env, \"\");\n";
10048            pr "  jr = (*env)->NewObjectArray (env, r_len, cl, jstr);\n";
10049            pr "  for (i = 0; i < r_len; ++i) {\n";
10050            pr "    jstr = (*env)->NewStringUTF (env, r[i]);\n";
10051            pr "    (*env)->SetObjectArrayElement (env, jr, i, jstr);\n";
10052            pr "    free (r[i]);\n";
10053            pr "  }\n";
10054            pr "  free (r);\n";
10055            pr "  return jr;\n"
10056        | RStruct (_, typ) ->
10057            let jtyp = java_name_of_struct typ in
10058            let cols = cols_of_struct typ in
10059            generate_java_struct_return typ jtyp cols
10060        | RStructList (_, typ) ->
10061            let jtyp = java_name_of_struct typ in
10062            let cols = cols_of_struct typ in
10063            generate_java_struct_list_return typ jtyp cols
10064        | RHashtable _ ->
10065            (* XXX *)
10066            pr "  throw_exception (env, \"%s: internal error: please let us know how to make a Java HashMap from JNI bindings!\");\n" name;
10067            pr "  return NULL;\n"
10068        | RBufferOut _ ->
10069            pr "  jr = (*env)->NewStringUTF (env, r); /* XXX size */\n";
10070            pr "  free (r);\n";
10071            pr "  return jr;\n"
10072       );
10073
10074       pr "}\n";
10075       pr "\n"
10076   ) all_functions
10077
10078 and generate_java_struct_return typ jtyp cols =
10079   pr "  cl = (*env)->FindClass (env, \"com/redhat/et/libguestfs/%s\");\n" jtyp;
10080   pr "  jr = (*env)->AllocObject (env, cl);\n";
10081   List.iter (
10082     function
10083     | name, FString ->
10084         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
10085         pr "  (*env)->SetObjectField (env, jr, fl, (*env)->NewStringUTF (env, r->%s));\n" name;
10086     | name, FUUID ->
10087         pr "  {\n";
10088         pr "    char s[33];\n";
10089         pr "    memcpy (s, r->%s, 32);\n" name;
10090         pr "    s[32] = 0;\n";
10091         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
10092         pr "    (*env)->SetObjectField (env, jr, fl, (*env)->NewStringUTF (env, s));\n";
10093         pr "  }\n";
10094     | name, FBuffer ->
10095         pr "  {\n";
10096         pr "    int len = r->%s_len;\n" name;
10097         pr "    char s[len+1];\n";
10098         pr "    memcpy (s, r->%s, len);\n" name;
10099         pr "    s[len] = 0;\n";
10100         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
10101         pr "    (*env)->SetObjectField (env, jr, fl, (*env)->NewStringUTF (env, s));\n";
10102         pr "  }\n";
10103     | name, (FBytes|FUInt64|FInt64) ->
10104         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"J\");\n" name;
10105         pr "  (*env)->SetLongField (env, jr, fl, r->%s);\n" name;
10106     | name, (FUInt32|FInt32) ->
10107         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"I\");\n" name;
10108         pr "  (*env)->SetLongField (env, jr, fl, r->%s);\n" name;
10109     | name, FOptPercent ->
10110         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"F\");\n" name;
10111         pr "  (*env)->SetFloatField (env, jr, fl, r->%s);\n" name;
10112     | name, FChar ->
10113         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"C\");\n" name;
10114         pr "  (*env)->SetLongField (env, jr, fl, r->%s);\n" name;
10115   ) cols;
10116   pr "  free (r);\n";
10117   pr "  return jr;\n"
10118
10119 and generate_java_struct_list_return typ jtyp cols =
10120   pr "  cl = (*env)->FindClass (env, \"com/redhat/et/libguestfs/%s\");\n" jtyp;
10121   pr "  jr = (*env)->NewObjectArray (env, r->len, cl, NULL);\n";
10122   pr "  for (i = 0; i < r->len; ++i) {\n";
10123   pr "    jfl = (*env)->AllocObject (env, cl);\n";
10124   List.iter (
10125     function
10126     | name, FString ->
10127         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
10128         pr "    (*env)->SetObjectField (env, jfl, fl, (*env)->NewStringUTF (env, r->val[i].%s));\n" name;
10129     | name, FUUID ->
10130         pr "    {\n";
10131         pr "      char s[33];\n";
10132         pr "      memcpy (s, r->val[i].%s, 32);\n" name;
10133         pr "      s[32] = 0;\n";
10134         pr "      fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
10135         pr "      (*env)->SetObjectField (env, jfl, fl, (*env)->NewStringUTF (env, s));\n";
10136         pr "    }\n";
10137     | name, FBuffer ->
10138         pr "    {\n";
10139         pr "      int len = r->val[i].%s_len;\n" name;
10140         pr "      char s[len+1];\n";
10141         pr "      memcpy (s, r->val[i].%s, len);\n" name;
10142         pr "      s[len] = 0;\n";
10143         pr "      fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
10144         pr "      (*env)->SetObjectField (env, jfl, fl, (*env)->NewStringUTF (env, s));\n";
10145         pr "    }\n";
10146     | name, (FBytes|FUInt64|FInt64) ->
10147         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"J\");\n" name;
10148         pr "    (*env)->SetLongField (env, jfl, fl, r->val[i].%s);\n" name;
10149     | name, (FUInt32|FInt32) ->
10150         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"I\");\n" name;
10151         pr "    (*env)->SetLongField (env, jfl, fl, r->val[i].%s);\n" name;
10152     | name, FOptPercent ->
10153         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"F\");\n" name;
10154         pr "    (*env)->SetFloatField (env, jfl, fl, r->val[i].%s);\n" name;
10155     | name, FChar ->
10156         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"C\");\n" name;
10157         pr "    (*env)->SetLongField (env, jfl, fl, r->val[i].%s);\n" name;
10158   ) cols;
10159   pr "    (*env)->SetObjectArrayElement (env, jfl, i, jfl);\n";
10160   pr "  }\n";
10161   pr "  guestfs_free_%s_list (r);\n" typ;
10162   pr "  return jr;\n"
10163
10164 and generate_java_makefile_inc () =
10165   generate_header HashStyle GPLv2plus;
10166
10167   pr "java_built_sources = \\\n";
10168   List.iter (
10169     fun (typ, jtyp) ->
10170         pr "\tcom/redhat/et/libguestfs/%s.java \\\n" jtyp;
10171   ) java_structs;
10172   pr "\tcom/redhat/et/libguestfs/GuestFS.java\n"
10173
10174 and generate_haskell_hs () =
10175   generate_header HaskellStyle LGPLv2plus;
10176
10177   (* XXX We only know how to generate partial FFI for Haskell
10178    * at the moment.  Please help out!
10179    *)
10180   let can_generate style =
10181     match style with
10182     | RErr, _
10183     | RInt _, _
10184     | RInt64 _, _ -> true
10185     | RBool _, _
10186     | RConstString _, _
10187     | RConstOptString _, _
10188     | RString _, _
10189     | RStringList _, _
10190     | RStruct _, _
10191     | RStructList _, _
10192     | RHashtable _, _
10193     | RBufferOut _, _ -> false in
10194
10195   pr "\
10196 {-# INCLUDE <guestfs.h> #-}
10197 {-# LANGUAGE ForeignFunctionInterface #-}
10198
10199 module Guestfs (
10200   create";
10201
10202   (* List out the names of the actions we want to export. *)
10203   List.iter (
10204     fun (name, style, _, _, _, _, _) ->
10205       if can_generate style then pr ",\n  %s" name
10206   ) all_functions;
10207
10208   pr "
10209   ) where
10210
10211 -- Unfortunately some symbols duplicate ones already present
10212 -- in Prelude.  We don't know which, so we hard-code a list
10213 -- here.
10214 import Prelude hiding (truncate)
10215
10216 import Foreign
10217 import Foreign.C
10218 import Foreign.C.Types
10219 import IO
10220 import Control.Exception
10221 import Data.Typeable
10222
10223 data GuestfsS = GuestfsS            -- represents the opaque C struct
10224 type GuestfsP = Ptr GuestfsS        -- guestfs_h *
10225 type GuestfsH = ForeignPtr GuestfsS -- guestfs_h * with attached finalizer
10226
10227 -- XXX define properly later XXX
10228 data PV = PV
10229 data VG = VG
10230 data LV = LV
10231 data IntBool = IntBool
10232 data Stat = Stat
10233 data StatVFS = StatVFS
10234 data Hashtable = Hashtable
10235
10236 foreign import ccall unsafe \"guestfs_create\" c_create
10237   :: IO GuestfsP
10238 foreign import ccall unsafe \"&guestfs_close\" c_close
10239   :: FunPtr (GuestfsP -> IO ())
10240 foreign import ccall unsafe \"guestfs_set_error_handler\" c_set_error_handler
10241   :: GuestfsP -> Ptr CInt -> Ptr CInt -> IO ()
10242
10243 create :: IO GuestfsH
10244 create = do
10245   p <- c_create
10246   c_set_error_handler p nullPtr nullPtr
10247   h <- newForeignPtr c_close p
10248   return h
10249
10250 foreign import ccall unsafe \"guestfs_last_error\" c_last_error
10251   :: GuestfsP -> IO CString
10252
10253 -- last_error :: GuestfsH -> IO (Maybe String)
10254 -- last_error h = do
10255 --   str <- withForeignPtr h (\\p -> c_last_error p)
10256 --   maybePeek peekCString str
10257
10258 last_error :: GuestfsH -> IO (String)
10259 last_error h = do
10260   str <- withForeignPtr h (\\p -> c_last_error p)
10261   if (str == nullPtr)
10262     then return \"no error\"
10263     else peekCString str
10264
10265 ";
10266
10267   (* Generate wrappers for each foreign function. *)
10268   List.iter (
10269     fun (name, style, _, _, _, _, _) ->
10270       if can_generate style then (
10271         pr "foreign import ccall unsafe \"guestfs_%s\" c_%s\n" name name;
10272         pr "  :: ";
10273         generate_haskell_prototype ~handle:"GuestfsP" style;
10274         pr "\n";
10275         pr "\n";
10276         pr "%s :: " name;
10277         generate_haskell_prototype ~handle:"GuestfsH" ~hs:true style;
10278         pr "\n";
10279         pr "%s %s = do\n" name
10280           (String.concat " " ("h" :: List.map name_of_argt (snd style)));
10281         pr "  r <- ";
10282         (* Convert pointer arguments using with* functions. *)
10283         List.iter (
10284           function
10285           | FileIn n
10286           | FileOut n
10287           | Pathname n | Device n | Dev_or_Path n | String n -> pr "withCString %s $ \\%s -> " n n
10288           | OptString n -> pr "maybeWith withCString %s $ \\%s -> " n n
10289           | StringList n | DeviceList n -> pr "withMany withCString %s $ \\%s -> withArray0 nullPtr %s $ \\%s -> " n n n n
10290           | Bool _ | Int _ | Int64 _ -> ()
10291         ) (snd style);
10292         (* Convert integer arguments. *)
10293         let args =
10294           List.map (
10295             function
10296             | Bool n -> sprintf "(fromBool %s)" n
10297             | Int n -> sprintf "(fromIntegral %s)" n
10298             | Int64 n -> sprintf "(fromIntegral %s)" n
10299             | FileIn n | FileOut n
10300             | Pathname n | Device n | Dev_or_Path n | String n | OptString n | StringList n | DeviceList n -> n
10301           ) (snd style) in
10302         pr "withForeignPtr h (\\p -> c_%s %s)\n" name
10303           (String.concat " " ("p" :: args));
10304         (match fst style with
10305          | RErr | RInt _ | RInt64 _ | RBool _ ->
10306              pr "  if (r == -1)\n";
10307              pr "    then do\n";
10308              pr "      err <- last_error h\n";
10309              pr "      fail err\n";
10310          | RConstString _ | RConstOptString _ | RString _
10311          | RStringList _ | RStruct _
10312          | RStructList _ | RHashtable _ | RBufferOut _ ->
10313              pr "  if (r == nullPtr)\n";
10314              pr "    then do\n";
10315              pr "      err <- last_error h\n";
10316              pr "      fail err\n";
10317         );
10318         (match fst style with
10319          | RErr ->
10320              pr "    else return ()\n"
10321          | RInt _ ->
10322              pr "    else return (fromIntegral r)\n"
10323          | RInt64 _ ->
10324              pr "    else return (fromIntegral r)\n"
10325          | RBool _ ->
10326              pr "    else return (toBool r)\n"
10327          | RConstString _
10328          | RConstOptString _
10329          | RString _
10330          | RStringList _
10331          | RStruct _
10332          | RStructList _
10333          | RHashtable _
10334          | RBufferOut _ ->
10335              pr "    else return ()\n" (* XXXXXXXXXXXXXXXXXXXX *)
10336         );
10337         pr "\n";
10338       )
10339   ) all_functions
10340
10341 and generate_haskell_prototype ~handle ?(hs = false) style =
10342   pr "%s -> " handle;
10343   let string = if hs then "String" else "CString" in
10344   let int = if hs then "Int" else "CInt" in
10345   let bool = if hs then "Bool" else "CInt" in
10346   let int64 = if hs then "Integer" else "Int64" in
10347   List.iter (
10348     fun arg ->
10349       (match arg with
10350        | Pathname _ | Device _ | Dev_or_Path _ | String _ -> pr "%s" string
10351        | OptString _ -> if hs then pr "Maybe String" else pr "CString"
10352        | StringList _ | DeviceList _ -> if hs then pr "[String]" else pr "Ptr CString"
10353        | Bool _ -> pr "%s" bool
10354        | Int _ -> pr "%s" int
10355        | Int64 _ -> pr "%s" int
10356        | FileIn _ -> pr "%s" string
10357        | FileOut _ -> pr "%s" string
10358       );
10359       pr " -> ";
10360   ) (snd style);
10361   pr "IO (";
10362   (match fst style with
10363    | RErr -> if not hs then pr "CInt"
10364    | RInt _ -> pr "%s" int
10365    | RInt64 _ -> pr "%s" int64
10366    | RBool _ -> pr "%s" bool
10367    | RConstString _ -> pr "%s" string
10368    | RConstOptString _ -> pr "Maybe %s" string
10369    | RString _ -> pr "%s" string
10370    | RStringList _ -> pr "[%s]" string
10371    | RStruct (_, typ) ->
10372        let name = java_name_of_struct typ in
10373        pr "%s" name
10374    | RStructList (_, typ) ->
10375        let name = java_name_of_struct typ in
10376        pr "[%s]" name
10377    | RHashtable _ -> pr "Hashtable"
10378    | RBufferOut _ -> pr "%s" string
10379   );
10380   pr ")"
10381
10382 and generate_csharp () =
10383   generate_header CPlusPlusStyle LGPLv2plus;
10384
10385   (* XXX Make this configurable by the C# assembly users. *)
10386   let library = "libguestfs.so.0" in
10387
10388   pr "\
10389 // These C# bindings are highly experimental at present.
10390 //
10391 // Firstly they only work on Linux (ie. Mono).  In order to get them
10392 // to work on Windows (ie. .Net) you would need to port the library
10393 // itself to Windows first.
10394 //
10395 // The second issue is that some calls are known to be incorrect and
10396 // can cause Mono to segfault.  Particularly: calls which pass or
10397 // return string[], or return any structure value.  This is because
10398 // we haven't worked out the correct way to do this from C#.
10399 //
10400 // The third issue is that when compiling you get a lot of warnings.
10401 // We are not sure whether the warnings are important or not.
10402 //
10403 // Fourthly we do not routinely build or test these bindings as part
10404 // of the make && make check cycle, which means that regressions might
10405 // go unnoticed.
10406 //
10407 // Suggestions and patches are welcome.
10408
10409 // To compile:
10410 //
10411 // gmcs Libguestfs.cs
10412 // mono Libguestfs.exe
10413 //
10414 // (You'll probably want to add a Test class / static main function
10415 // otherwise this won't do anything useful).
10416
10417 using System;
10418 using System.IO;
10419 using System.Runtime.InteropServices;
10420 using System.Runtime.Serialization;
10421 using System.Collections;
10422
10423 namespace Guestfs
10424 {
10425   class Error : System.ApplicationException
10426   {
10427     public Error (string message) : base (message) {}
10428     protected Error (SerializationInfo info, StreamingContext context) {}
10429   }
10430
10431   class Guestfs
10432   {
10433     IntPtr _handle;
10434
10435     [DllImport (\"%s\")]
10436     static extern IntPtr guestfs_create ();
10437
10438     public Guestfs ()
10439     {
10440       _handle = guestfs_create ();
10441       if (_handle == IntPtr.Zero)
10442         throw new Error (\"could not create guestfs handle\");
10443     }
10444
10445     [DllImport (\"%s\")]
10446     static extern void guestfs_close (IntPtr h);
10447
10448     ~Guestfs ()
10449     {
10450       guestfs_close (_handle);
10451     }
10452
10453     [DllImport (\"%s\")]
10454     static extern string guestfs_last_error (IntPtr h);
10455
10456 " library library library;
10457
10458   (* Generate C# structure bindings.  We prefix struct names with
10459    * underscore because C# cannot have conflicting struct names and
10460    * method names (eg. "class stat" and "stat").
10461    *)
10462   List.iter (
10463     fun (typ, cols) ->
10464       pr "    [StructLayout (LayoutKind.Sequential)]\n";
10465       pr "    public class _%s {\n" typ;
10466       List.iter (
10467         function
10468         | name, FChar -> pr "      char %s;\n" name
10469         | name, FString -> pr "      string %s;\n" name
10470         | name, FBuffer ->
10471             pr "      uint %s_len;\n" name;
10472             pr "      string %s;\n" name
10473         | name, FUUID ->
10474             pr "      [MarshalAs (UnmanagedType.ByValTStr, SizeConst=16)]\n";
10475             pr "      string %s;\n" name
10476         | name, FUInt32 -> pr "      uint %s;\n" name
10477         | name, FInt32 -> pr "      int %s;\n" name
10478         | name, (FUInt64|FBytes) -> pr "      ulong %s;\n" name
10479         | name, FInt64 -> pr "      long %s;\n" name
10480         | name, FOptPercent -> pr "      float %s; /* [0..100] or -1 */\n" name
10481       ) cols;
10482       pr "    }\n";
10483       pr "\n"
10484   ) structs;
10485
10486   (* Generate C# function bindings. *)
10487   List.iter (
10488     fun (name, style, _, _, _, shortdesc, _) ->
10489       let rec csharp_return_type () =
10490         match fst style with
10491         | RErr -> "void"
10492         | RBool n -> "bool"
10493         | RInt n -> "int"
10494         | RInt64 n -> "long"
10495         | RConstString n
10496         | RConstOptString n
10497         | RString n
10498         | RBufferOut n -> "string"
10499         | RStruct (_,n) -> "_" ^ n
10500         | RHashtable n -> "Hashtable"
10501         | RStringList n -> "string[]"
10502         | RStructList (_,n) -> sprintf "_%s[]" n
10503
10504       and c_return_type () =
10505         match fst style with
10506         | RErr
10507         | RBool _
10508         | RInt _ -> "int"
10509         | RInt64 _ -> "long"
10510         | RConstString _
10511         | RConstOptString _
10512         | RString _
10513         | RBufferOut _ -> "string"
10514         | RStruct (_,n) -> "_" ^ n
10515         | RHashtable _
10516         | RStringList _ -> "string[]"
10517         | RStructList (_,n) -> sprintf "_%s[]" n
10518
10519       and c_error_comparison () =
10520         match fst style with
10521         | RErr
10522         | RBool _
10523         | RInt _
10524         | RInt64 _ -> "== -1"
10525         | RConstString _
10526         | RConstOptString _
10527         | RString _
10528         | RBufferOut _
10529         | RStruct (_,_)
10530         | RHashtable _
10531         | RStringList _
10532         | RStructList (_,_) -> "== null"
10533
10534       and generate_extern_prototype () =
10535         pr "    static extern %s guestfs_%s (IntPtr h"
10536           (c_return_type ()) name;
10537         List.iter (
10538           function
10539           | Pathname n | Device n | Dev_or_Path n | String n | OptString n
10540           | FileIn n | FileOut n ->
10541               pr ", [In] string %s" n
10542           | StringList n | DeviceList n ->
10543               pr ", [In] string[] %s" n
10544           | Bool n ->
10545               pr ", bool %s" n
10546           | Int n ->
10547               pr ", int %s" n
10548           | Int64 n ->
10549               pr ", long %s" n
10550         ) (snd style);
10551         pr ");\n"
10552
10553       and generate_public_prototype () =
10554         pr "    public %s %s (" (csharp_return_type ()) name;
10555         let comma = ref false in
10556         let next () =
10557           if !comma then pr ", ";
10558           comma := true
10559         in
10560         List.iter (
10561           function
10562           | Pathname n | Device n | Dev_or_Path n | String n | OptString n
10563           | FileIn n | FileOut n ->
10564               next (); pr "string %s" n
10565           | StringList n | DeviceList n ->
10566               next (); pr "string[] %s" n
10567           | Bool n ->
10568               next (); pr "bool %s" n
10569           | Int n ->
10570               next (); pr "int %s" n
10571           | Int64 n ->
10572               next (); pr "long %s" n
10573         ) (snd style);
10574         pr ")\n"
10575
10576       and generate_call () =
10577         pr "guestfs_%s (_handle" name;
10578         List.iter (fun arg -> pr ", %s" (name_of_argt arg)) (snd style);
10579         pr ");\n";
10580       in
10581
10582       pr "    [DllImport (\"%s\")]\n" library;
10583       generate_extern_prototype ();
10584       pr "\n";
10585       pr "    /// <summary>\n";
10586       pr "    /// %s\n" shortdesc;
10587       pr "    /// </summary>\n";
10588       generate_public_prototype ();
10589       pr "    {\n";
10590       pr "      %s r;\n" (c_return_type ());
10591       pr "      r = ";
10592       generate_call ();
10593       pr "      if (r %s)\n" (c_error_comparison ());
10594       pr "        throw new Error (guestfs_last_error (_handle));\n";
10595       (match fst style with
10596        | RErr -> ()
10597        | RBool _ ->
10598            pr "      return r != 0 ? true : false;\n"
10599        | RHashtable _ ->
10600            pr "      Hashtable rr = new Hashtable ();\n";
10601            pr "      for (int i = 0; i < r.Length; i += 2)\n";
10602            pr "        rr.Add (r[i], r[i+1]);\n";
10603            pr "      return rr;\n"
10604        | RInt _ | RInt64 _ | RConstString _ | RConstOptString _
10605        | RString _ | RBufferOut _ | RStruct _ | RStringList _
10606        | RStructList _ ->
10607            pr "      return r;\n"
10608       );
10609       pr "    }\n";
10610       pr "\n";
10611   ) all_functions_sorted;
10612
10613   pr "  }
10614 }
10615 "
10616
10617 and generate_bindtests () =
10618   generate_header CStyle LGPLv2plus;
10619
10620   pr "\
10621 #include <stdio.h>
10622 #include <stdlib.h>
10623 #include <inttypes.h>
10624 #include <string.h>
10625
10626 #include \"guestfs.h\"
10627 #include \"guestfs-internal.h\"
10628 #include \"guestfs-internal-actions.h\"
10629 #include \"guestfs_protocol.h\"
10630
10631 #define error guestfs_error
10632 #define safe_calloc guestfs_safe_calloc
10633 #define safe_malloc guestfs_safe_malloc
10634
10635 static void
10636 print_strings (char *const *argv)
10637 {
10638   int argc;
10639
10640   printf (\"[\");
10641   for (argc = 0; argv[argc] != NULL; ++argc) {
10642     if (argc > 0) printf (\", \");
10643     printf (\"\\\"%%s\\\"\", argv[argc]);
10644   }
10645   printf (\"]\\n\");
10646 }
10647
10648 /* The test0 function prints its parameters to stdout. */
10649 ";
10650
10651   let test0, tests =
10652     match test_functions with
10653     | [] -> assert false
10654     | test0 :: tests -> test0, tests in
10655
10656   let () =
10657     let (name, style, _, _, _, _, _) = test0 in
10658     generate_prototype ~extern:false ~semicolon:false ~newline:true
10659       ~handle:"g" ~prefix:"guestfs__" name style;
10660     pr "{\n";
10661     List.iter (
10662       function
10663       | Pathname n
10664       | Device n | Dev_or_Path n
10665       | String n
10666       | FileIn n
10667       | FileOut n -> pr "  printf (\"%%s\\n\", %s);\n" n
10668       | OptString n -> pr "  printf (\"%%s\\n\", %s ? %s : \"null\");\n" n n
10669       | StringList n | DeviceList n -> pr "  print_strings (%s);\n" n
10670       | Bool n -> pr "  printf (\"%%s\\n\", %s ? \"true\" : \"false\");\n" n
10671       | Int n -> pr "  printf (\"%%d\\n\", %s);\n" n
10672       | Int64 n -> pr "  printf (\"%%\" PRIi64 \"\\n\", %s);\n" n
10673     ) (snd style);
10674     pr "  /* Java changes stdout line buffering so we need this: */\n";
10675     pr "  fflush (stdout);\n";
10676     pr "  return 0;\n";
10677     pr "}\n";
10678     pr "\n" in
10679
10680   List.iter (
10681     fun (name, style, _, _, _, _, _) ->
10682       if String.sub name (String.length name - 3) 3 <> "err" then (
10683         pr "/* Test normal return. */\n";
10684         generate_prototype ~extern:false ~semicolon:false ~newline:true
10685           ~handle:"g" ~prefix:"guestfs__" name style;
10686         pr "{\n";
10687         (match fst style with
10688          | RErr ->
10689              pr "  return 0;\n"
10690          | RInt _ ->
10691              pr "  int r;\n";
10692              pr "  sscanf (val, \"%%d\", &r);\n";
10693              pr "  return r;\n"
10694          | RInt64 _ ->
10695              pr "  int64_t r;\n";
10696              pr "  sscanf (val, \"%%\" SCNi64, &r);\n";
10697              pr "  return r;\n"
10698          | RBool _ ->
10699              pr "  return STREQ (val, \"true\");\n"
10700          | RConstString _
10701          | RConstOptString _ ->
10702              (* Can't return the input string here.  Return a static
10703               * string so we ensure we get a segfault if the caller
10704               * tries to free it.
10705               *)
10706              pr "  return \"static string\";\n"
10707          | RString _ ->
10708              pr "  return strdup (val);\n"
10709          | RStringList _ ->
10710              pr "  char **strs;\n";
10711              pr "  int n, i;\n";
10712              pr "  sscanf (val, \"%%d\", &n);\n";
10713              pr "  strs = safe_malloc (g, (n+1) * sizeof (char *));\n";
10714              pr "  for (i = 0; i < n; ++i) {\n";
10715              pr "    strs[i] = safe_malloc (g, 16);\n";
10716              pr "    snprintf (strs[i], 16, \"%%d\", i);\n";
10717              pr "  }\n";
10718              pr "  strs[n] = NULL;\n";
10719              pr "  return strs;\n"
10720          | RStruct (_, typ) ->
10721              pr "  struct guestfs_%s *r;\n" typ;
10722              pr "  r = safe_calloc (g, sizeof *r, 1);\n";
10723              pr "  return r;\n"
10724          | RStructList (_, typ) ->
10725              pr "  struct guestfs_%s_list *r;\n" typ;
10726              pr "  r = safe_calloc (g, sizeof *r, 1);\n";
10727              pr "  sscanf (val, \"%%d\", &r->len);\n";
10728              pr "  r->val = safe_calloc (g, r->len, sizeof *r->val);\n";
10729              pr "  return r;\n"
10730          | RHashtable _ ->
10731              pr "  char **strs;\n";
10732              pr "  int n, i;\n";
10733              pr "  sscanf (val, \"%%d\", &n);\n";
10734              pr "  strs = safe_malloc (g, (n*2+1) * sizeof (*strs));\n";
10735              pr "  for (i = 0; i < n; ++i) {\n";
10736              pr "    strs[i*2] = safe_malloc (g, 16);\n";
10737              pr "    strs[i*2+1] = safe_malloc (g, 16);\n";
10738              pr "    snprintf (strs[i*2], 16, \"%%d\", i);\n";
10739              pr "    snprintf (strs[i*2+1], 16, \"%%d\", i);\n";
10740              pr "  }\n";
10741              pr "  strs[n*2] = NULL;\n";
10742              pr "  return strs;\n"
10743          | RBufferOut _ ->
10744              pr "  return strdup (val);\n"
10745         );
10746         pr "}\n";
10747         pr "\n"
10748       ) else (
10749         pr "/* Test error return. */\n";
10750         generate_prototype ~extern:false ~semicolon:false ~newline:true
10751           ~handle:"g" ~prefix:"guestfs__" name style;
10752         pr "{\n";
10753         pr "  error (g, \"error\");\n";
10754         (match fst style with
10755          | RErr | RInt _ | RInt64 _ | RBool _ ->
10756              pr "  return -1;\n"
10757          | RConstString _ | RConstOptString _
10758          | RString _ | RStringList _ | RStruct _
10759          | RStructList _
10760          | RHashtable _
10761          | RBufferOut _ ->
10762              pr "  return NULL;\n"
10763         );
10764         pr "}\n";
10765         pr "\n"
10766       )
10767   ) tests
10768
10769 and generate_ocaml_bindtests () =
10770   generate_header OCamlStyle GPLv2plus;
10771
10772   pr "\
10773 let () =
10774   let g = Guestfs.create () in
10775 ";
10776
10777   let mkargs args =
10778     String.concat " " (
10779       List.map (
10780         function
10781         | CallString s -> "\"" ^ s ^ "\""
10782         | CallOptString None -> "None"
10783         | CallOptString (Some s) -> sprintf "(Some \"%s\")" s
10784         | CallStringList xs ->
10785             "[|" ^ String.concat ";" (List.map (sprintf "\"%s\"") xs) ^ "|]"
10786         | CallInt i when i >= 0 -> string_of_int i
10787         | CallInt i (* when i < 0 *) -> "(" ^ string_of_int i ^ ")"
10788         | CallInt64 i when i >= 0L -> Int64.to_string i ^ "L"
10789         | CallInt64 i (* when i < 0L *) -> "(" ^ Int64.to_string i ^ "L)"
10790         | CallBool b -> string_of_bool b
10791       ) args
10792     )
10793   in
10794
10795   generate_lang_bindtests (
10796     fun f args -> pr "  Guestfs.%s g %s;\n" f (mkargs args)
10797   );
10798
10799   pr "print_endline \"EOF\"\n"
10800
10801 and generate_perl_bindtests () =
10802   pr "#!/usr/bin/perl -w\n";
10803   generate_header HashStyle GPLv2plus;
10804
10805   pr "\
10806 use strict;
10807
10808 use Sys::Guestfs;
10809
10810 my $g = Sys::Guestfs->new ();
10811 ";
10812
10813   let mkargs args =
10814     String.concat ", " (
10815       List.map (
10816         function
10817         | CallString s -> "\"" ^ s ^ "\""
10818         | CallOptString None -> "undef"
10819         | CallOptString (Some s) -> sprintf "\"%s\"" s
10820         | CallStringList xs ->
10821             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
10822         | CallInt i -> string_of_int i
10823         | CallInt64 i -> Int64.to_string i
10824         | CallBool b -> if b then "1" else "0"
10825       ) args
10826     )
10827   in
10828
10829   generate_lang_bindtests (
10830     fun f args -> pr "$g->%s (%s);\n" f (mkargs args)
10831   );
10832
10833   pr "print \"EOF\\n\"\n"
10834
10835 and generate_python_bindtests () =
10836   generate_header HashStyle GPLv2plus;
10837
10838   pr "\
10839 import guestfs
10840
10841 g = guestfs.GuestFS ()
10842 ";
10843
10844   let mkargs args =
10845     String.concat ", " (
10846       List.map (
10847         function
10848         | CallString s -> "\"" ^ s ^ "\""
10849         | CallOptString None -> "None"
10850         | CallOptString (Some s) -> sprintf "\"%s\"" s
10851         | CallStringList xs ->
10852             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
10853         | CallInt i -> string_of_int i
10854         | CallInt64 i -> Int64.to_string i
10855         | CallBool b -> if b then "1" else "0"
10856       ) args
10857     )
10858   in
10859
10860   generate_lang_bindtests (
10861     fun f args -> pr "g.%s (%s)\n" f (mkargs args)
10862   );
10863
10864   pr "print \"EOF\"\n"
10865
10866 and generate_ruby_bindtests () =
10867   generate_header HashStyle GPLv2plus;
10868
10869   pr "\
10870 require 'guestfs'
10871
10872 g = Guestfs::create()
10873 ";
10874
10875   let mkargs args =
10876     String.concat ", " (
10877       List.map (
10878         function
10879         | CallString s -> "\"" ^ s ^ "\""
10880         | CallOptString None -> "nil"
10881         | CallOptString (Some s) -> sprintf "\"%s\"" s
10882         | CallStringList xs ->
10883             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
10884         | CallInt i -> string_of_int i
10885         | CallInt64 i -> Int64.to_string i
10886         | CallBool b -> string_of_bool b
10887       ) args
10888     )
10889   in
10890
10891   generate_lang_bindtests (
10892     fun f args -> pr "g.%s(%s)\n" f (mkargs args)
10893   );
10894
10895   pr "print \"EOF\\n\"\n"
10896
10897 and generate_java_bindtests () =
10898   generate_header CStyle GPLv2plus;
10899
10900   pr "\
10901 import com.redhat.et.libguestfs.*;
10902
10903 public class Bindtests {
10904     public static void main (String[] argv)
10905     {
10906         try {
10907             GuestFS g = new GuestFS ();
10908 ";
10909
10910   let mkargs args =
10911     String.concat ", " (
10912       List.map (
10913         function
10914         | CallString s -> "\"" ^ s ^ "\""
10915         | CallOptString None -> "null"
10916         | CallOptString (Some s) -> sprintf "\"%s\"" s
10917         | CallStringList xs ->
10918             "new String[]{" ^
10919               String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "}"
10920         | CallInt i -> string_of_int i
10921         | CallInt64 i -> Int64.to_string i
10922         | CallBool b -> string_of_bool b
10923       ) args
10924     )
10925   in
10926
10927   generate_lang_bindtests (
10928     fun f args -> pr "            g.%s (%s);\n" f (mkargs args)
10929   );
10930
10931   pr "
10932             System.out.println (\"EOF\");
10933         }
10934         catch (Exception exn) {
10935             System.err.println (exn);
10936             System.exit (1);
10937         }
10938     }
10939 }
10940 "
10941
10942 and generate_haskell_bindtests () =
10943   generate_header HaskellStyle GPLv2plus;
10944
10945   pr "\
10946 module Bindtests where
10947 import qualified Guestfs
10948
10949 main = do
10950   g <- Guestfs.create
10951 ";
10952
10953   let mkargs args =
10954     String.concat " " (
10955       List.map (
10956         function
10957         | CallString s -> "\"" ^ s ^ "\""
10958         | CallOptString None -> "Nothing"
10959         | CallOptString (Some s) -> sprintf "(Just \"%s\")" s
10960         | CallStringList xs ->
10961             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
10962         | CallInt i when i < 0 -> "(" ^ string_of_int i ^ ")"
10963         | CallInt i -> string_of_int i
10964         | CallInt64 i when i < 0L -> "(" ^ Int64.to_string i ^ ")"
10965         | CallInt64 i -> Int64.to_string i
10966         | CallBool true -> "True"
10967         | CallBool false -> "False"
10968       ) args
10969     )
10970   in
10971
10972   generate_lang_bindtests (
10973     fun f args -> pr "  Guestfs.%s g %s\n" f (mkargs args)
10974   );
10975
10976   pr "  putStrLn \"EOF\"\n"
10977
10978 (* Language-independent bindings tests - we do it this way to
10979  * ensure there is parity in testing bindings across all languages.
10980  *)
10981 and generate_lang_bindtests call =
10982   call "test0" [CallString "abc"; CallOptString (Some "def");
10983                 CallStringList []; CallBool false;
10984                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456"];
10985   call "test0" [CallString "abc"; CallOptString None;
10986                 CallStringList []; CallBool false;
10987                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456"];
10988   call "test0" [CallString ""; CallOptString (Some "def");
10989                 CallStringList []; CallBool false;
10990                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456"];
10991   call "test0" [CallString ""; CallOptString (Some "");
10992                 CallStringList []; CallBool false;
10993                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456"];
10994   call "test0" [CallString "abc"; CallOptString (Some "def");
10995                 CallStringList ["1"]; CallBool false;
10996                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456"];
10997   call "test0" [CallString "abc"; CallOptString (Some "def");
10998                 CallStringList ["1"; "2"]; CallBool false;
10999                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456"];
11000   call "test0" [CallString "abc"; CallOptString (Some "def");
11001                 CallStringList ["1"]; CallBool true;
11002                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456"];
11003   call "test0" [CallString "abc"; CallOptString (Some "def");
11004                 CallStringList ["1"]; CallBool false;
11005                 CallInt (-1); CallInt64 (-1L); CallString "123"; CallString "456"];
11006   call "test0" [CallString "abc"; CallOptString (Some "def");
11007                 CallStringList ["1"]; CallBool false;
11008                 CallInt (-2); CallInt64 (-2L); CallString "123"; CallString "456"];
11009   call "test0" [CallString "abc"; CallOptString (Some "def");
11010                 CallStringList ["1"]; CallBool false;
11011                 CallInt 1; CallInt64 1L; CallString "123"; CallString "456"];
11012   call "test0" [CallString "abc"; CallOptString (Some "def");
11013                 CallStringList ["1"]; CallBool false;
11014                 CallInt 2; CallInt64 2L; CallString "123"; CallString "456"];
11015   call "test0" [CallString "abc"; CallOptString (Some "def");
11016                 CallStringList ["1"]; CallBool false;
11017                 CallInt 4095; CallInt64 4095L; CallString "123"; CallString "456"];
11018   call "test0" [CallString "abc"; CallOptString (Some "def");
11019                 CallStringList ["1"]; CallBool false;
11020                 CallInt 0; CallInt64 0L; CallString ""; CallString ""]
11021
11022 (* XXX Add here tests of the return and error functions. *)
11023
11024 (* Code to generator bindings for virt-inspector.  Currently only
11025  * implemented for OCaml code (for virt-p2v 2.0).
11026  *)
11027 let rng_input = "inspector/virt-inspector.rng"
11028
11029 (* Read the input file and parse it into internal structures.  This is
11030  * by no means a complete RELAX NG parser, but is just enough to be
11031  * able to parse the specific input file.
11032  *)
11033 type rng =
11034   | Element of string * rng list        (* <element name=name/> *)
11035   | Attribute of string * rng list        (* <attribute name=name/> *)
11036   | Interleave of rng list                (* <interleave/> *)
11037   | ZeroOrMore of rng                        (* <zeroOrMore/> *)
11038   | OneOrMore of rng                        (* <oneOrMore/> *)
11039   | Optional of rng                        (* <optional/> *)
11040   | Choice of string list                (* <choice><value/>*</choice> *)
11041   | Value of string                        (* <value>str</value> *)
11042   | Text                                (* <text/> *)
11043
11044 let rec string_of_rng = function
11045   | Element (name, xs) ->
11046       "Element (\"" ^ name ^ "\", (" ^ string_of_rng_list xs ^ "))"
11047   | Attribute (name, xs) ->
11048       "Attribute (\"" ^ name ^ "\", (" ^ string_of_rng_list xs ^ "))"
11049   | Interleave xs -> "Interleave (" ^ string_of_rng_list xs ^ ")"
11050   | ZeroOrMore rng -> "ZeroOrMore (" ^ string_of_rng rng ^ ")"
11051   | OneOrMore rng -> "OneOrMore (" ^ string_of_rng rng ^ ")"
11052   | Optional rng -> "Optional (" ^ string_of_rng rng ^ ")"
11053   | Choice values -> "Choice [" ^ String.concat ", " values ^ "]"
11054   | Value value -> "Value \"" ^ value ^ "\""
11055   | Text -> "Text"
11056
11057 and string_of_rng_list xs =
11058   String.concat ", " (List.map string_of_rng xs)
11059
11060 let rec parse_rng ?defines context = function
11061   | [] -> []
11062   | Xml.Element ("element", ["name", name], children) :: rest ->
11063       Element (name, parse_rng ?defines context children)
11064       :: parse_rng ?defines context rest
11065   | Xml.Element ("attribute", ["name", name], children) :: rest ->
11066       Attribute (name, parse_rng ?defines context children)
11067       :: parse_rng ?defines context rest
11068   | Xml.Element ("interleave", [], children) :: rest ->
11069       Interleave (parse_rng ?defines context children)
11070       :: parse_rng ?defines context rest
11071   | Xml.Element ("zeroOrMore", [], [child]) :: rest ->
11072       let rng = parse_rng ?defines context [child] in
11073       (match rng with
11074        | [child] -> ZeroOrMore child :: parse_rng ?defines context rest
11075        | _ ->
11076            failwithf "%s: <zeroOrMore> contains more than one child element"
11077              context
11078       )
11079   | Xml.Element ("oneOrMore", [], [child]) :: rest ->
11080       let rng = parse_rng ?defines context [child] in
11081       (match rng with
11082        | [child] -> OneOrMore child :: parse_rng ?defines context rest
11083        | _ ->
11084            failwithf "%s: <oneOrMore> contains more than one child element"
11085              context
11086       )
11087   | Xml.Element ("optional", [], [child]) :: rest ->
11088       let rng = parse_rng ?defines context [child] in
11089       (match rng with
11090        | [child] -> Optional child :: parse_rng ?defines context rest
11091        | _ ->
11092            failwithf "%s: <optional> contains more than one child element"
11093              context
11094       )
11095   | Xml.Element ("choice", [], children) :: rest ->
11096       let values = List.map (
11097         function Xml.Element ("value", [], [Xml.PCData value]) -> value
11098         | _ ->
11099             failwithf "%s: can't handle anything except <value> in <choice>"
11100               context
11101       ) children in
11102       Choice values
11103       :: parse_rng ?defines context rest
11104   | Xml.Element ("value", [], [Xml.PCData value]) :: rest ->
11105       Value value :: parse_rng ?defines context rest
11106   | Xml.Element ("text", [], []) :: rest ->
11107       Text :: parse_rng ?defines context rest
11108   | Xml.Element ("ref", ["name", name], []) :: rest ->
11109       (* Look up the reference.  Because of limitations in this parser,
11110        * we can't handle arbitrarily nested <ref> yet.  You can only
11111        * use <ref> from inside <start>.
11112        *)
11113       (match defines with
11114        | None ->
11115            failwithf "%s: contains <ref>, but no refs are defined yet" context
11116        | Some map ->
11117            let rng = StringMap.find name map in
11118            rng @ parse_rng ?defines context rest
11119       )
11120   | x :: _ ->
11121       failwithf "%s: can't handle '%s' in schema" context (Xml.to_string x)
11122
11123 let grammar =
11124   let xml = Xml.parse_file rng_input in
11125   match xml with
11126   | Xml.Element ("grammar", _,
11127                  Xml.Element ("start", _, gram) :: defines) ->
11128       (* The <define/> elements are referenced in the <start> section,
11129        * so build a map of those first.
11130        *)
11131       let defines = List.fold_left (
11132         fun map ->
11133           function Xml.Element ("define", ["name", name], defn) ->
11134             StringMap.add name defn map
11135           | _ ->
11136               failwithf "%s: expected <define name=name/>" rng_input
11137       ) StringMap.empty defines in
11138       let defines = StringMap.mapi parse_rng defines in
11139
11140       (* Parse the <start> clause, passing the defines. *)
11141       parse_rng ~defines "<start>" gram
11142   | _ ->
11143       failwithf "%s: input is not <grammar><start/><define>*</grammar>"
11144         rng_input
11145
11146 let name_of_field = function
11147   | Element (name, _) | Attribute (name, _)
11148   | ZeroOrMore (Element (name, _))
11149   | OneOrMore (Element (name, _))
11150   | Optional (Element (name, _)) -> name
11151   | Optional (Attribute (name, _)) -> name
11152   | Text -> (* an unnamed field in an element *)
11153       "data"
11154   | rng ->
11155       failwithf "name_of_field failed at: %s" (string_of_rng rng)
11156
11157 (* At the moment this function only generates OCaml types.  However we
11158  * should parameterize it later so it can generate types/structs in a
11159  * variety of languages.
11160  *)
11161 let generate_types xs =
11162   (* A simple type is one that can be printed out directly, eg.
11163    * "string option".  A complex type is one which has a name and has
11164    * to be defined via another toplevel definition, eg. a struct.
11165    *
11166    * generate_type generates code for either simple or complex types.
11167    * In the simple case, it returns the string ("string option").  In
11168    * the complex case, it returns the name ("mountpoint").  In the
11169    * complex case it has to print out the definition before returning,
11170    * so it should only be called when we are at the beginning of a
11171    * new line (BOL context).
11172    *)
11173   let rec generate_type = function
11174     | Text ->                                (* string *)
11175         "string", true
11176     | Choice values ->                        (* [`val1|`val2|...] *)
11177         "[" ^ String.concat "|" (List.map ((^)"`") values) ^ "]", true
11178     | ZeroOrMore rng ->                        (* <rng> list *)
11179         let t, is_simple = generate_type rng in
11180         t ^ " list (* 0 or more *)", is_simple
11181     | OneOrMore rng ->                        (* <rng> list *)
11182         let t, is_simple = generate_type rng in
11183         t ^ " list (* 1 or more *)", is_simple
11184                                         (* virt-inspector hack: bool *)
11185     | Optional (Attribute (name, [Value "1"])) ->
11186         "bool", true
11187     | Optional rng ->                        (* <rng> list *)
11188         let t, is_simple = generate_type rng in
11189         t ^ " option", is_simple
11190                                         (* type name = { fields ... } *)
11191     | Element (name, fields) when is_attrs_interleave fields ->
11192         generate_type_struct name (get_attrs_interleave fields)
11193     | Element (name, [field])                (* type name = field *)
11194     | Attribute (name, [field]) ->
11195         let t, is_simple = generate_type field in
11196         if is_simple then (t, true)
11197         else (
11198           pr "type %s = %s\n" name t;
11199           name, false
11200         )
11201     | Element (name, fields) ->              (* type name = { fields ... } *)
11202         generate_type_struct name fields
11203     | rng ->
11204         failwithf "generate_type failed at: %s" (string_of_rng rng)
11205
11206   and is_attrs_interleave = function
11207     | [Interleave _] -> true
11208     | Attribute _ :: fields -> is_attrs_interleave fields
11209     | Optional (Attribute _) :: fields -> is_attrs_interleave fields
11210     | _ -> false
11211
11212   and get_attrs_interleave = function
11213     | [Interleave fields] -> fields
11214     | ((Attribute _) as field) :: fields
11215     | ((Optional (Attribute _)) as field) :: fields ->
11216         field :: get_attrs_interleave fields
11217     | _ -> assert false
11218
11219   and generate_types xs =
11220     List.iter (fun x -> ignore (generate_type x)) xs
11221
11222   and generate_type_struct name fields =
11223     (* Calculate the types of the fields first.  We have to do this
11224      * before printing anything so we are still in BOL context.
11225      *)
11226     let types = List.map fst (List.map generate_type fields) in
11227
11228     (* Special case of a struct containing just a string and another
11229      * field.  Turn it into an assoc list.
11230      *)
11231     match types with
11232     | ["string"; other] ->
11233         let fname1, fname2 =
11234           match fields with
11235           | [f1; f2] -> name_of_field f1, name_of_field f2
11236           | _ -> assert false in
11237         pr "type %s = string * %s (* %s -> %s *)\n" name other fname1 fname2;
11238         name, false
11239
11240     | types ->
11241         pr "type %s = {\n" name;
11242         List.iter (
11243           fun (field, ftype) ->
11244             let fname = name_of_field field in
11245             pr "  %s_%s : %s;\n" name fname ftype
11246         ) (List.combine fields types);
11247         pr "}\n";
11248         (* Return the name of this type, and
11249          * false because it's not a simple type.
11250          *)
11251         name, false
11252   in
11253
11254   generate_types xs
11255
11256 let generate_parsers xs =
11257   (* As for generate_type above, generate_parser makes a parser for
11258    * some type, and returns the name of the parser it has generated.
11259    * Because it (may) need to print something, it should always be
11260    * called in BOL context.
11261    *)
11262   let rec generate_parser = function
11263     | Text ->                                (* string *)
11264         "string_child_or_empty"
11265     | Choice values ->                        (* [`val1|`val2|...] *)
11266         sprintf "(fun x -> match Xml.pcdata (first_child x) with %s | str -> failwith (\"unexpected field value: \" ^ str))"
11267           (String.concat "|"
11268              (List.map (fun v -> sprintf "%S -> `%s" v v) values))
11269     | ZeroOrMore rng ->                        (* <rng> list *)
11270         let pa = generate_parser rng in
11271         sprintf "(fun x -> List.map %s (Xml.children x))" pa
11272     | OneOrMore rng ->                        (* <rng> list *)
11273         let pa = generate_parser rng in
11274         sprintf "(fun x -> List.map %s (Xml.children x))" pa
11275                                         (* virt-inspector hack: bool *)
11276     | Optional (Attribute (name, [Value "1"])) ->
11277         sprintf "(fun x -> try ignore (Xml.attrib x %S); true with Xml.No_attribute _ -> false)" name
11278     | Optional rng ->                        (* <rng> list *)
11279         let pa = generate_parser rng in
11280         sprintf "(function None -> None | Some x -> Some (%s x))" pa
11281                                         (* type name = { fields ... } *)
11282     | Element (name, fields) when is_attrs_interleave fields ->
11283         generate_parser_struct name (get_attrs_interleave fields)
11284     | Element (name, [field]) ->        (* type name = field *)
11285         let pa = generate_parser field in
11286         let parser_name = sprintf "parse_%s_%d" name (unique ()) in
11287         pr "let %s =\n" parser_name;
11288         pr "  %s\n" pa;
11289         pr "let parse_%s = %s\n" name parser_name;
11290         parser_name
11291     | Attribute (name, [field]) ->
11292         let pa = generate_parser field in
11293         let parser_name = sprintf "parse_%s_%d" name (unique ()) in
11294         pr "let %s =\n" parser_name;
11295         pr "  %s\n" pa;
11296         pr "let parse_%s = %s\n" name parser_name;
11297         parser_name
11298     | Element (name, fields) ->              (* type name = { fields ... } *)
11299         generate_parser_struct name ([], fields)
11300     | rng ->
11301         failwithf "generate_parser failed at: %s" (string_of_rng rng)
11302
11303   and is_attrs_interleave = function
11304     | [Interleave _] -> true
11305     | Attribute _ :: fields -> is_attrs_interleave fields
11306     | Optional (Attribute _) :: fields -> is_attrs_interleave fields
11307     | _ -> false
11308
11309   and get_attrs_interleave = function
11310     | [Interleave fields] -> [], fields
11311     | ((Attribute _) as field) :: fields
11312     | ((Optional (Attribute _)) as field) :: fields ->
11313         let attrs, interleaves = get_attrs_interleave fields in
11314         (field :: attrs), interleaves
11315     | _ -> assert false
11316
11317   and generate_parsers xs =
11318     List.iter (fun x -> ignore (generate_parser x)) xs
11319
11320   and generate_parser_struct name (attrs, interleaves) =
11321     (* Generate parsers for the fields first.  We have to do this
11322      * before printing anything so we are still in BOL context.
11323      *)
11324     let fields = attrs @ interleaves in
11325     let pas = List.map generate_parser fields in
11326
11327     (* Generate an intermediate tuple from all the fields first.
11328      * If the type is just a string + another field, then we will
11329      * return this directly, otherwise it is turned into a record.
11330      *
11331      * RELAX NG note: This code treats <interleave> and plain lists of
11332      * fields the same.  In other words, it doesn't bother enforcing
11333      * any ordering of fields in the XML.
11334      *)
11335     pr "let parse_%s x =\n" name;
11336     pr "  let t = (\n    ";
11337     let comma = ref false in
11338     List.iter (
11339       fun x ->
11340         if !comma then pr ",\n    ";
11341         comma := true;
11342         match x with
11343         | Optional (Attribute (fname, [field])), pa ->
11344             pr "%s x" pa
11345         | Optional (Element (fname, [field])), pa ->
11346             pr "%s (optional_child %S x)" pa fname
11347         | Attribute (fname, [Text]), _ ->
11348             pr "attribute %S x" fname
11349         | (ZeroOrMore _ | OneOrMore _), pa ->
11350             pr "%s x" pa
11351         | Text, pa ->
11352             pr "%s x" pa
11353         | (field, pa) ->
11354             let fname = name_of_field field in
11355             pr "%s (child %S x)" pa fname
11356     ) (List.combine fields pas);
11357     pr "\n  ) in\n";
11358
11359     (match fields with
11360      | [Element (_, [Text]) | Attribute (_, [Text]); _] ->
11361          pr "  t\n"
11362
11363      | _ ->
11364          pr "  (Obj.magic t : %s)\n" name
11365 (*
11366          List.iter (
11367            function
11368            | (Optional (Attribute (fname, [field])), pa) ->
11369                pr "  %s_%s =\n" name fname;
11370                pr "    %s x;\n" pa
11371            | (Optional (Element (fname, [field])), pa) ->
11372                pr "  %s_%s =\n" name fname;
11373                pr "    (let x = optional_child %S x in\n" fname;
11374                pr "     %s x);\n" pa
11375            | (field, pa) ->
11376                let fname = name_of_field field in
11377                pr "  %s_%s =\n" name fname;
11378                pr "    (let x = child %S x in\n" fname;
11379                pr "     %s x);\n" pa
11380          ) (List.combine fields pas);
11381          pr "}\n"
11382 *)
11383     );
11384     sprintf "parse_%s" name
11385   in
11386
11387   generate_parsers xs
11388
11389 (* Generate ocaml/guestfs_inspector.mli. *)
11390 let generate_ocaml_inspector_mli () =
11391   generate_header ~extra_inputs:[rng_input] OCamlStyle LGPLv2plus;
11392
11393   pr "\
11394 (** This is an OCaml language binding to the external [virt-inspector]
11395     program.
11396
11397     For more information, please read the man page [virt-inspector(1)].
11398 *)
11399
11400 ";
11401
11402   generate_types grammar;
11403   pr "(** The nested information returned from the {!inspect} function. *)\n";
11404   pr "\n";
11405
11406   pr "\
11407 val inspect : ?connect:string -> ?xml:string -> string list -> operatingsystems
11408 (** To inspect a libvirt domain called [name], pass a singleton
11409     list: [inspect [name]].  When using libvirt only, you may
11410     optionally pass a libvirt URI using [inspect ~connect:uri ...].
11411
11412     To inspect a disk image or images, pass a list of the filenames
11413     of the disk images: [inspect filenames]
11414
11415     This function inspects the given guest or disk images and
11416     returns a list of operating system(s) found and a large amount
11417     of information about them.  In the vast majority of cases,
11418     a virtual machine only contains a single operating system.
11419
11420     If the optional [~xml] parameter is given, then this function
11421     skips running the external virt-inspector program and just
11422     parses the given XML directly (which is expected to be XML
11423     produced from a previous run of virt-inspector).  The list of
11424     names and connect URI are ignored in this case.
11425
11426     This function can throw a wide variety of exceptions, for example
11427     if the external virt-inspector program cannot be found, or if
11428     it doesn't generate valid XML.
11429 *)
11430 "
11431
11432 (* Generate ocaml/guestfs_inspector.ml. *)
11433 let generate_ocaml_inspector_ml () =
11434   generate_header ~extra_inputs:[rng_input] OCamlStyle LGPLv2plus;
11435
11436   pr "open Unix\n";
11437   pr "\n";
11438
11439   generate_types grammar;
11440   pr "\n";
11441
11442   pr "\
11443 (* Misc functions which are used by the parser code below. *)
11444 let first_child = function
11445   | Xml.Element (_, _, c::_) -> c
11446   | Xml.Element (name, _, []) ->
11447       failwith (\"expected <\" ^ name ^ \"/> to have a child node\")
11448   | Xml.PCData str ->
11449       failwith (\"expected XML tag, but read PCDATA '\" ^ str ^ \"' instead\")
11450
11451 let string_child_or_empty = function
11452   | Xml.Element (_, _, [Xml.PCData s]) -> s
11453   | Xml.Element (_, _, []) -> \"\"
11454   | Xml.Element (x, _, _) ->
11455       failwith (\"expected XML tag with a single PCDATA child, but got \" ^
11456                 x ^ \" instead\")
11457   | Xml.PCData str ->
11458       failwith (\"expected XML tag, but read PCDATA '\" ^ str ^ \"' instead\")
11459
11460 let optional_child name xml =
11461   let children = Xml.children xml in
11462   try
11463     Some (List.find (function
11464                      | Xml.Element (n, _, _) when n = name -> true
11465                      | _ -> false) children)
11466   with
11467     Not_found -> None
11468
11469 let child name xml =
11470   match optional_child name xml with
11471   | Some c -> c
11472   | None ->
11473       failwith (\"mandatory field <\" ^ name ^ \"/> missing in XML output\")
11474
11475 let attribute name xml =
11476   try Xml.attrib xml name
11477   with Xml.No_attribute _ ->
11478     failwith (\"mandatory attribute \" ^ name ^ \" missing in XML output\")
11479
11480 ";
11481
11482   generate_parsers grammar;
11483   pr "\n";
11484
11485   pr "\
11486 (* Run external virt-inspector, then use parser to parse the XML. *)
11487 let inspect ?connect ?xml names =
11488   let xml =
11489     match xml with
11490     | None ->
11491         if names = [] then invalid_arg \"inspect: no names given\";
11492         let cmd = [ \"virt-inspector\"; \"--xml\" ] @
11493           (match connect with None -> [] | Some uri -> [ \"--connect\"; uri ]) @
11494           names in
11495         let cmd = List.map Filename.quote cmd in
11496         let cmd = String.concat \" \" cmd in
11497         let chan = open_process_in cmd in
11498         let xml = Xml.parse_in chan in
11499         (match close_process_in chan with
11500          | WEXITED 0 -> ()
11501          | WEXITED _ -> failwith \"external virt-inspector command failed\"
11502          | WSIGNALED i | WSTOPPED i ->
11503              failwith (\"external virt-inspector command died or stopped on sig \" ^
11504                        string_of_int i)
11505         );
11506         xml
11507     | Some doc ->
11508         Xml.parse_string doc in
11509   parse_operatingsystems xml
11510 "
11511
11512 (* This is used to generate the src/MAX_PROC_NR file which
11513  * contains the maximum procedure number, a surrogate for the
11514  * ABI version number.  See src/Makefile.am for the details.
11515  *)
11516 and generate_max_proc_nr () =
11517   let proc_nrs = List.map (
11518     fun (_, _, proc_nr, _, _, _, _) -> proc_nr
11519   ) daemon_functions in
11520
11521   let max_proc_nr = List.fold_left max 0 proc_nrs in
11522
11523   pr "%d\n" max_proc_nr
11524
11525 let output_to filename k =
11526   let filename_new = filename ^ ".new" in
11527   chan := open_out filename_new;
11528   k ();
11529   close_out !chan;
11530   chan := Pervasives.stdout;
11531
11532   (* Is the new file different from the current file? *)
11533   if Sys.file_exists filename && files_equal filename filename_new then
11534     unlink filename_new                 (* same, so skip it *)
11535   else (
11536     (* different, overwrite old one *)
11537     (try chmod filename 0o644 with Unix_error _ -> ());
11538     rename filename_new filename;
11539     chmod filename 0o444;
11540     printf "written %s\n%!" filename;
11541   )
11542
11543 let perror msg = function
11544   | Unix_error (err, _, _) ->
11545       eprintf "%s: %s\n" msg (error_message err)
11546   | exn ->
11547       eprintf "%s: %s\n" msg (Printexc.to_string exn)
11548
11549 (* Main program. *)
11550 let () =
11551   let lock_fd =
11552     try openfile "HACKING" [O_RDWR] 0
11553     with
11554     | Unix_error (ENOENT, _, _) ->
11555         eprintf "\
11556 You are probably running this from the wrong directory.
11557 Run it from the top source directory using the command
11558   src/generator.ml
11559 ";
11560         exit 1
11561     | exn ->
11562         perror "open: HACKING" exn;
11563         exit 1 in
11564
11565   (* Acquire a lock so parallel builds won't try to run the generator
11566    * twice at the same time.  Subsequent builds will wait for the first
11567    * one to finish.  Note the lock is released implicitly when the
11568    * program exits.
11569    *)
11570   (try lockf lock_fd F_LOCK 1
11571    with exn ->
11572      perror "lock: HACKING" exn;
11573      exit 1);
11574
11575   check_functions ();
11576
11577   output_to "src/guestfs_protocol.x" generate_xdr;
11578   output_to "src/guestfs-structs.h" generate_structs_h;
11579   output_to "src/guestfs-actions.h" generate_actions_h;
11580   output_to "src/guestfs-internal-actions.h" generate_internal_actions_h;
11581   output_to "src/guestfs-actions.c" generate_client_actions;
11582   output_to "src/guestfs-bindtests.c" generate_bindtests;
11583   output_to "src/guestfs-structs.pod" generate_structs_pod;
11584   output_to "src/guestfs-actions.pod" generate_actions_pod;
11585   output_to "src/guestfs-availability.pod" generate_availability_pod;
11586   output_to "src/MAX_PROC_NR" generate_max_proc_nr;
11587   output_to "src/libguestfs.syms" generate_linker_script;
11588   output_to "daemon/actions.h" generate_daemon_actions_h;
11589   output_to "daemon/stubs.c" generate_daemon_actions;
11590   output_to "daemon/names.c" generate_daemon_names;
11591   output_to "daemon/optgroups.c" generate_daemon_optgroups_c;
11592   output_to "daemon/optgroups.h" generate_daemon_optgroups_h;
11593   output_to "capitests/tests.c" generate_tests;
11594   output_to "fish/cmds.c" generate_fish_cmds;
11595   output_to "fish/completion.c" generate_fish_completion;
11596   output_to "fish/guestfish-actions.pod" generate_fish_actions_pod;
11597   output_to "ocaml/guestfs.mli" generate_ocaml_mli;
11598   output_to "ocaml/guestfs.ml" generate_ocaml_ml;
11599   output_to "ocaml/guestfs_c_actions.c" generate_ocaml_c;
11600   output_to "ocaml/bindtests.ml" generate_ocaml_bindtests;
11601   output_to "ocaml/guestfs_inspector.mli" generate_ocaml_inspector_mli;
11602   output_to "ocaml/guestfs_inspector.ml" generate_ocaml_inspector_ml;
11603   output_to "perl/Guestfs.xs" generate_perl_xs;
11604   output_to "perl/lib/Sys/Guestfs.pm" generate_perl_pm;
11605   output_to "perl/bindtests.pl" generate_perl_bindtests;
11606   output_to "python/guestfs-py.c" generate_python_c;
11607   output_to "python/guestfs.py" generate_python_py;
11608   output_to "python/bindtests.py" generate_python_bindtests;
11609   output_to "ruby/ext/guestfs/_guestfs.c" generate_ruby_c;
11610   output_to "ruby/bindtests.rb" generate_ruby_bindtests;
11611   output_to "java/com/redhat/et/libguestfs/GuestFS.java" generate_java_java;
11612
11613   List.iter (
11614     fun (typ, jtyp) ->
11615       let cols = cols_of_struct typ in
11616       let filename = sprintf "java/com/redhat/et/libguestfs/%s.java" jtyp in
11617       output_to filename (generate_java_struct jtyp cols);
11618   ) java_structs;
11619
11620   output_to "java/Makefile.inc" generate_java_makefile_inc;
11621   output_to "java/com_redhat_et_libguestfs_GuestFS.c" generate_java_c;
11622   output_to "java/Bindtests.java" generate_java_bindtests;
11623   output_to "haskell/Guestfs.hs" generate_haskell_hs;
11624   output_to "haskell/Bindtests.hs" generate_haskell_bindtests;
11625   output_to "csharp/Libguestfs.cs" generate_csharp;
11626
11627   (* Always generate this file last, and unconditionally.  It's used
11628    * by the Makefile to know when we must re-run the generator.
11629    *)
11630   let chan = open_out "src/stamp-generator" in
11631   fprintf chan "1\n";
11632   close_out chan;
11633
11634   printf "generated %d lines of code\n" !lines