d427558c8715db3249e779ed2fce48be187c5bae
[libguestfs.git] / src / generator.ml
1 #!/usr/bin/env ocaml
2 (* libguestfs
3  * Copyright (C) 2009-2010 Red Hat Inc.
4  *
5  * This program is free software; you can redistribute it and/or modify
6  * it under the terms of the GNU General Public License as published by
7  * the Free Software Foundation; either version 2 of the License, or
8  * (at your option) any later version.
9  *
10  * This program is distributed in the hope that it will be useful,
11  * but WITHOUT ANY WARRANTY; without even the implied warranty of
12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
13  * GNU General Public License for more details.
14  *
15  * You should have received a copy of the GNU General Public License
16  * along with this program; if not, write to the Free Software
17  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
18  *)
19
20 (* This script generates a large amount of code and documentation for
21  * all the daemon actions.
22  *
23  * To add a new action there are only two files you need to change,
24  * this one to describe the interface (see the big table of
25  * 'daemon_functions' below), and daemon/<somefile>.c to write the
26  * implementation.
27  *
28  * After editing this file, run it (./src/generator.ml) to regenerate
29  * all the output files.  'make' will rerun this automatically when
30  * necessary.  Note that if you are using a separate build directory
31  * you must run generator.ml from the _source_ directory.
32  *
33  * IMPORTANT: This script should NOT print any warnings.  If it prints
34  * warnings, you should treat them as errors.
35  *
36  * OCaml tips:
37  * (1) In emacs, install tuareg-mode to display and format OCaml code
38  * correctly.  'vim' comes with a good OCaml editing mode by default.
39  * (2) Read the resources at http://ocaml-tutorial.org/
40  *)
41
42 #load "unix.cma";;
43 #load "str.cma";;
44 #directory "+xml-light";;
45 #directory "+../pkg-lib/xml-light";; (* for GODI users *)
46 #load "xml-light.cma";;
47
48 open Unix
49 open Printf
50
51 type style = ret * args
52 and ret =
53     (* "RErr" as a return value means an int used as a simple error
54      * indication, ie. 0 or -1.
55      *)
56   | RErr
57
58     (* "RInt" as a return value means an int which is -1 for error
59      * or any value >= 0 on success.  Only use this for smallish
60      * positive ints (0 <= i < 2^30).
61      *)
62   | RInt of string
63
64     (* "RInt64" is the same as RInt, but is guaranteed to be able
65      * to return a full 64 bit value, _except_ that -1 means error
66      * (so -1 cannot be a valid, non-error return value).
67      *)
68   | RInt64 of string
69
70     (* "RBool" is a bool return value which can be true/false or
71      * -1 for error.
72      *)
73   | RBool of string
74
75     (* "RConstString" is a string that refers to a constant value.
76      * The return value must NOT be NULL (since NULL indicates
77      * an error).
78      *
79      * Try to avoid using this.  In particular you cannot use this
80      * for values returned from the daemon, because there is no
81      * thread-safe way to return them in the C API.
82      *)
83   | RConstString of string
84
85     (* "RConstOptString" is an even more broken version of
86      * "RConstString".  The returned string may be NULL and there
87      * is no way to return an error indication.  Avoid using this!
88      *)
89   | RConstOptString of string
90
91     (* "RString" is a returned string.  It must NOT be NULL, since
92      * a NULL return indicates an error.  The caller frees this.
93      *)
94   | RString of string
95
96     (* "RStringList" is a list of strings.  No string in the list
97      * can be NULL.  The caller frees the strings and the array.
98      *)
99   | RStringList of string
100
101     (* "RStruct" is a function which returns a single named structure
102      * or an error indication (in C, a struct, and in other languages
103      * with varying representations, but usually very efficient).  See
104      * after the function list below for the structures.
105      *)
106   | RStruct of string * string          (* name of retval, name of struct *)
107
108     (* "RStructList" is a function which returns either a list/array
109      * of structures (could be zero-length), or an error indication.
110      *)
111   | RStructList of string * string      (* name of retval, name of struct *)
112
113     (* Key-value pairs of untyped strings.  Turns into a hashtable or
114      * dictionary in languages which support it.  DON'T use this as a
115      * general "bucket" for results.  Prefer a stronger typed return
116      * value if one is available, or write a custom struct.  Don't use
117      * this if the list could potentially be very long, since it is
118      * inefficient.  Keys should be unique.  NULLs are not permitted.
119      *)
120   | RHashtable of string
121
122     (* "RBufferOut" is handled almost exactly like RString, but
123      * it allows the string to contain arbitrary 8 bit data including
124      * ASCII NUL.  In the C API this causes an implicit extra parameter
125      * to be added of type <size_t *size_r>.  The extra parameter
126      * returns the actual size of the return buffer in bytes.
127      *
128      * Other programming languages support strings with arbitrary 8 bit
129      * data.
130      *
131      * At the RPC layer we have to use the opaque<> type instead of
132      * string<>.  Returned data is still limited to the max message
133      * size (ie. ~ 2 MB).
134      *)
135   | RBufferOut of string
136
137 and args = argt list    (* Function parameters, guestfs handle is implicit. *)
138
139     (* Note in future we should allow a "variable args" parameter as
140      * the final parameter, to allow commands like
141      *   chmod mode file [file(s)...]
142      * This is not implemented yet, but many commands (such as chmod)
143      * are currently defined with the argument order keeping this future
144      * possibility in mind.
145      *)
146 and argt =
147   | String of string    (* const char *name, cannot be NULL *)
148   | Device of string    (* /dev device name, cannot be NULL *)
149   | Pathname of string  (* file name, cannot be NULL *)
150   | Dev_or_Path of string (* /dev device name or Pathname, cannot be NULL *)
151   | OptString of string (* const char *name, may be NULL *)
152   | StringList of string(* list of strings (each string cannot be NULL) *)
153   | DeviceList of string(* list of Device names (each cannot be NULL) *)
154   | Bool of string      (* boolean *)
155   | Int of string       (* int (smallish ints, signed, <= 31 bits) *)
156   | Int64 of string     (* any 64 bit int *)
157     (* These are treated as filenames (simple string parameters) in
158      * the C API and bindings.  But in the RPC protocol, we transfer
159      * the actual file content up to or down from the daemon.
160      * FileIn: local machine -> daemon (in request)
161      * FileOut: daemon -> local machine (in reply)
162      * In guestfish (only), the special name "-" means read from
163      * stdin or write to stdout.
164      *)
165   | FileIn of string
166   | FileOut of string
167     (* Opaque buffer which can contain arbitrary 8 bit data.
168      * In the C API, this is expressed as <const char *, size_t> pair.
169      * Most other languages have a string type which can contain
170      * ASCII NUL.  We use whatever type is appropriate for each
171      * language.
172      * Buffers are limited by the total message size.  To transfer
173      * large blocks of data, use FileIn/FileOut parameters instead.
174      * To return an arbitrary buffer, use RBufferOut.
175      *)
176   | BufferIn of string
177
178 type flags =
179   | ProtocolLimitWarning  (* display warning about protocol size limits *)
180   | DangerWillRobinson    (* flags particularly dangerous commands *)
181   | FishAlias of string   (* provide an alias for this cmd in guestfish *)
182   | FishOutput of fish_output_t (* how to display output in guestfish *)
183   | NotInFish             (* do not export via guestfish *)
184   | NotInDocs             (* do not add this function to documentation *)
185   | DeprecatedBy of string (* function is deprecated, use .. instead *)
186   | Optional of string    (* function is part of an optional group *)
187
188 and fish_output_t =
189   | FishOutputOctal       (* for int return, print in octal *)
190   | FishOutputHexadecimal (* for int return, print in hex *)
191
192 (* You can supply zero or as many tests as you want per API call.
193  *
194  * Note that the test environment has 3 block devices, of size 500MB,
195  * 50MB and 10MB (respectively /dev/sda, /dev/sdb, /dev/sdc), and
196  * a fourth ISO block device with some known files on it (/dev/sdd).
197  *
198  * Note for partitioning purposes, the 500MB device has 1015 cylinders.
199  * Number of cylinders was 63 for IDE emulated disks with precisely
200  * the same size.  How exactly this is calculated is a mystery.
201  *
202  * The ISO block device (/dev/sdd) comes from images/test.iso.
203  *
204  * To be able to run the tests in a reasonable amount of time,
205  * the virtual machine and block devices are reused between tests.
206  * So don't try testing kill_subprocess :-x
207  *
208  * Between each test we blockdev-setrw, umount-all, lvm-remove-all.
209  *
210  * Don't assume anything about the previous contents of the block
211  * devices.  Use 'Init*' to create some initial scenarios.
212  *
213  * You can add a prerequisite clause to any individual test.  This
214  * is a run-time check, which, if it fails, causes the test to be
215  * skipped.  Useful if testing a command which might not work on
216  * all variations of libguestfs builds.  A test that has prerequisite
217  * of 'Always' is run unconditionally.
218  *
219  * In addition, packagers can skip individual tests by setting the
220  * environment variables:     eg:
221  *   SKIP_TEST_<CMD>_<NUM>=1  SKIP_TEST_COMMAND_3=1  (skips test #3 of command)
222  *   SKIP_TEST_<CMD>=1        SKIP_TEST_ZEROFREE=1   (skips all zerofree tests)
223  *)
224 type tests = (test_init * test_prereq * test) list
225 and test =
226     (* Run the command sequence and just expect nothing to fail. *)
227   | TestRun of seq
228
229     (* Run the command sequence and expect the output of the final
230      * command to be the string.
231      *)
232   | TestOutput of seq * string
233
234     (* Run the command sequence and expect the output of the final
235      * command to be the list of strings.
236      *)
237   | TestOutputList of seq * string list
238
239     (* Run the command sequence and expect the output of the final
240      * command to be the list of block devices (could be either
241      * "/dev/sd.." or "/dev/hd.." form - we don't check the 5th
242      * character of each string).
243      *)
244   | TestOutputListOfDevices of seq * string list
245
246     (* Run the command sequence and expect the output of the final
247      * command to be the integer.
248      *)
249   | TestOutputInt of seq * int
250
251     (* Run the command sequence and expect the output of the final
252      * command to be <op> <int>, eg. ">=", "1".
253      *)
254   | TestOutputIntOp of seq * string * int
255
256     (* Run the command sequence and expect the output of the final
257      * command to be a true value (!= 0 or != NULL).
258      *)
259   | TestOutputTrue of seq
260
261     (* Run the command sequence and expect the output of the final
262      * command to be a false value (== 0 or == NULL, but not an error).
263      *)
264   | TestOutputFalse of seq
265
266     (* Run the command sequence and expect the output of the final
267      * command to be a list of the given length (but don't care about
268      * content).
269      *)
270   | TestOutputLength of seq * int
271
272     (* Run the command sequence and expect the output of the final
273      * command to be a buffer (RBufferOut), ie. string + size.
274      *)
275   | TestOutputBuffer of seq * string
276
277     (* Run the command sequence and expect the output of the final
278      * command to be a structure.
279      *)
280   | TestOutputStruct of seq * test_field_compare list
281
282     (* Run the command sequence and expect the final command (only)
283      * to fail.
284      *)
285   | TestLastFail of seq
286
287 and test_field_compare =
288   | CompareWithInt of string * int
289   | CompareWithIntOp of string * string * int
290   | CompareWithString of string * string
291   | CompareFieldsIntEq of string * string
292   | CompareFieldsStrEq of string * string
293
294 (* Test prerequisites. *)
295 and test_prereq =
296     (* Test always runs. *)
297   | Always
298
299     (* Test is currently disabled - eg. it fails, or it tests some
300      * unimplemented feature.
301      *)
302   | Disabled
303
304     (* 'string' is some C code (a function body) that should return
305      * true or false.  The test will run if the code returns true.
306      *)
307   | If of string
308
309     (* As for 'If' but the test runs _unless_ the code returns true. *)
310   | Unless of string
311
312     (* Run the test only if 'string' is available in the daemon. *)
313   | IfAvailable of string
314
315 (* Some initial scenarios for testing. *)
316 and test_init =
317     (* Do nothing, block devices could contain random stuff including
318      * LVM PVs, and some filesystems might be mounted.  This is usually
319      * a bad idea.
320      *)
321   | InitNone
322
323     (* Block devices are empty and no filesystems are mounted. *)
324   | InitEmpty
325
326     (* /dev/sda contains a single partition /dev/sda1, with random
327      * content.  /dev/sdb and /dev/sdc may have random content.
328      * No LVM.
329      *)
330   | InitPartition
331
332     (* /dev/sda contains a single partition /dev/sda1, which is formatted
333      * as ext2, empty [except for lost+found] and mounted on /.
334      * /dev/sdb and /dev/sdc may have random content.
335      * No LVM.
336      *)
337   | InitBasicFS
338
339     (* /dev/sda:
340      *   /dev/sda1 (is a PV):
341      *     /dev/VG/LV (size 8MB):
342      *       formatted as ext2, empty [except for lost+found], mounted on /
343      * /dev/sdb and /dev/sdc may have random content.
344      *)
345   | InitBasicFSonLVM
346
347     (* /dev/sdd (the ISO, see images/ directory in source)
348      * is mounted on /
349      *)
350   | InitISOFS
351
352 (* Sequence of commands for testing. *)
353 and seq = cmd list
354 and cmd = string list
355
356 (* Note about long descriptions: When referring to another
357  * action, use the format C<guestfs_other> (ie. the full name of
358  * the C function).  This will be replaced as appropriate in other
359  * language bindings.
360  *
361  * Apart from that, long descriptions are just perldoc paragraphs.
362  *)
363
364 (* Generate a random UUID (used in tests). *)
365 let uuidgen () =
366   let chan = open_process_in "uuidgen" in
367   let uuid = input_line chan in
368   (match close_process_in chan with
369    | WEXITED 0 -> ()
370    | WEXITED _ ->
371        failwith "uuidgen: process exited with non-zero status"
372    | WSIGNALED _ | WSTOPPED _ ->
373        failwith "uuidgen: process signalled or stopped by signal"
374   );
375   uuid
376
377 (* These test functions are used in the language binding tests. *)
378
379 let test_all_args = [
380   String "str";
381   OptString "optstr";
382   StringList "strlist";
383   Bool "b";
384   Int "integer";
385   Int64 "integer64";
386   FileIn "filein";
387   FileOut "fileout";
388   BufferIn "bufferin";
389 ]
390
391 let test_all_rets = [
392   (* except for RErr, which is tested thoroughly elsewhere *)
393   "test0rint",         RInt "valout";
394   "test0rint64",       RInt64 "valout";
395   "test0rbool",        RBool "valout";
396   "test0rconststring", RConstString "valout";
397   "test0rconstoptstring", RConstOptString "valout";
398   "test0rstring",      RString "valout";
399   "test0rstringlist",  RStringList "valout";
400   "test0rstruct",      RStruct ("valout", "lvm_pv");
401   "test0rstructlist",  RStructList ("valout", "lvm_pv");
402   "test0rhashtable",   RHashtable "valout";
403 ]
404
405 let test_functions = [
406   ("test0", (RErr, test_all_args), -1, [NotInFish; NotInDocs],
407    [],
408    "internal test function - do not use",
409    "\
410 This is an internal test function which is used to test whether
411 the automatically generated bindings can handle every possible
412 parameter type correctly.
413
414 It echos the contents of each parameter to stdout.
415
416 You probably don't want to call this function.");
417 ] @ List.flatten (
418   List.map (
419     fun (name, ret) ->
420       [(name, (ret, [String "val"]), -1, [NotInFish; NotInDocs],
421         [],
422         "internal test function - do not use",
423         "\
424 This is an internal test function which is used to test whether
425 the automatically generated bindings can handle every possible
426 return type correctly.
427
428 It converts string C<val> to the return type.
429
430 You probably don't want to call this function.");
431        (name ^ "err", (ret, []), -1, [NotInFish; NotInDocs],
432         [],
433         "internal test function - do not use",
434         "\
435 This is an internal test function which is used to test whether
436 the automatically generated bindings can handle every possible
437 return type correctly.
438
439 This function always returns an error.
440
441 You probably don't want to call this function.")]
442   ) test_all_rets
443 )
444
445 (* non_daemon_functions are any functions which don't get processed
446  * in the daemon, eg. functions for setting and getting local
447  * configuration values.
448  *)
449
450 let non_daemon_functions = test_functions @ [
451   ("launch", (RErr, []), -1, [FishAlias "run"],
452    [],
453    "launch the qemu subprocess",
454    "\
455 Internally libguestfs is implemented by running a virtual machine
456 using L<qemu(1)>.
457
458 You should call this after configuring the handle
459 (eg. adding drives) but before performing any actions.");
460
461   ("wait_ready", (RErr, []), -1, [NotInFish],
462    [],
463    "wait until the qemu subprocess launches (no op)",
464    "\
465 This function is a no op.
466
467 In versions of the API E<lt> 1.0.71 you had to call this function
468 just after calling C<guestfs_launch> to wait for the launch
469 to complete.  However this is no longer necessary because
470 C<guestfs_launch> now does the waiting.
471
472 If you see any calls to this function in code then you can just
473 remove them, unless you want to retain compatibility with older
474 versions of the API.");
475
476   ("kill_subprocess", (RErr, []), -1, [],
477    [],
478    "kill the qemu subprocess",
479    "\
480 This kills the qemu subprocess.  You should never need to call this.");
481
482   ("add_drive", (RErr, [String "filename"]), -1, [FishAlias "add"],
483    [],
484    "add an image to examine or modify",
485    "\
486 This function adds a virtual machine disk image C<filename> to the
487 guest.  The first time you call this function, the disk appears as IDE
488 disk 0 (C</dev/sda>) in the guest, the second time as C</dev/sdb>, and
489 so on.
490
491 You don't necessarily need to be root when using libguestfs.  However
492 you obviously do need sufficient permissions to access the filename
493 for whatever operations you want to perform (ie. read access if you
494 just want to read the image or write access if you want to modify the
495 image).
496
497 This is equivalent to the qemu parameter
498 C<-drive file=filename,cache=off,if=...>.
499
500 C<cache=off> is omitted in cases where it is not supported by
501 the underlying filesystem.
502
503 C<if=...> is set at compile time by the configuration option
504 C<./configure --with-drive-if=...>.  In the rare case where you
505 might need to change this at run time, use C<guestfs_add_drive_with_if>
506 or C<guestfs_add_drive_ro_with_if>.
507
508 Note that this call checks for the existence of C<filename>.  This
509 stops you from specifying other types of drive which are supported
510 by qemu such as C<nbd:> and C<http:> URLs.  To specify those, use
511 the general C<guestfs_config> call instead.");
512
513   ("add_cdrom", (RErr, [String "filename"]), -1, [FishAlias "cdrom"],
514    [],
515    "add a CD-ROM disk image to examine",
516    "\
517 This function adds a virtual CD-ROM disk image to the guest.
518
519 This is equivalent to the qemu parameter C<-cdrom filename>.
520
521 Notes:
522
523 =over 4
524
525 =item *
526
527 This call checks for the existence of C<filename>.  This
528 stops you from specifying other types of drive which are supported
529 by qemu such as C<nbd:> and C<http:> URLs.  To specify those, use
530 the general C<guestfs_config> call instead.
531
532 =item *
533
534 If you just want to add an ISO file (often you use this as an
535 efficient way to transfer large files into the guest), then you
536 should probably use C<guestfs_add_drive_ro> instead.
537
538 =back");
539
540   ("add_drive_ro", (RErr, [String "filename"]), -1, [FishAlias "add-ro"],
541    [],
542    "add a drive in snapshot mode (read-only)",
543    "\
544 This adds a drive in snapshot mode, making it effectively
545 read-only.
546
547 Note that writes to the device are allowed, and will be seen for
548 the duration of the guestfs handle, but they are written
549 to a temporary file which is discarded as soon as the guestfs
550 handle is closed.  We don't currently have any method to enable
551 changes to be committed, although qemu can support this.
552
553 This is equivalent to the qemu parameter
554 C<-drive file=filename,snapshot=on,readonly=on,if=...>.
555
556 C<if=...> is set at compile time by the configuration option
557 C<./configure --with-drive-if=...>.  In the rare case where you
558 might need to change this at run time, use C<guestfs_add_drive_with_if>
559 or C<guestfs_add_drive_ro_with_if>.
560
561 C<readonly=on> is only added where qemu supports this option.
562
563 Note that this call checks for the existence of C<filename>.  This
564 stops you from specifying other types of drive which are supported
565 by qemu such as C<nbd:> and C<http:> URLs.  To specify those, use
566 the general C<guestfs_config> call instead.");
567
568   ("config", (RErr, [String "qemuparam"; OptString "qemuvalue"]), -1, [],
569    [],
570    "add qemu parameters",
571    "\
572 This can be used to add arbitrary qemu command line parameters
573 of the form C<-param value>.  Actually it's not quite arbitrary - we
574 prevent you from setting some parameters which would interfere with
575 parameters that we use.
576
577 The first character of C<param> string must be a C<-> (dash).
578
579 C<value> can be NULL.");
580
581   ("set_qemu", (RErr, [OptString "qemu"]), -1, [FishAlias "qemu"],
582    [],
583    "set the qemu binary",
584    "\
585 Set the qemu binary that we will use.
586
587 The default is chosen when the library was compiled by the
588 configure script.
589
590 You can also override this by setting the C<LIBGUESTFS_QEMU>
591 environment variable.
592
593 Setting C<qemu> to C<NULL> restores the default qemu binary.
594
595 Note that you should call this function as early as possible
596 after creating the handle.  This is because some pre-launch
597 operations depend on testing qemu features (by running C<qemu -help>).
598 If the qemu binary changes, we don't retest features, and
599 so you might see inconsistent results.  Using the environment
600 variable C<LIBGUESTFS_QEMU> is safest of all since that picks
601 the qemu binary at the same time as the handle is created.");
602
603   ("get_qemu", (RConstString "qemu", []), -1, [],
604    [InitNone, Always, TestRun (
605       [["get_qemu"]])],
606    "get the qemu binary",
607    "\
608 Return the current qemu binary.
609
610 This is always non-NULL.  If it wasn't set already, then this will
611 return the default qemu binary name.");
612
613   ("set_path", (RErr, [OptString "searchpath"]), -1, [FishAlias "path"],
614    [],
615    "set the search path",
616    "\
617 Set the path that libguestfs searches for kernel and initrd.img.
618
619 The default is C<$libdir/guestfs> unless overridden by setting
620 C<LIBGUESTFS_PATH> environment variable.
621
622 Setting C<path> to C<NULL> restores the default path.");
623
624   ("get_path", (RConstString "path", []), -1, [],
625    [InitNone, Always, TestRun (
626       [["get_path"]])],
627    "get the search path",
628    "\
629 Return the current search path.
630
631 This is always non-NULL.  If it wasn't set already, then this will
632 return the default path.");
633
634   ("set_append", (RErr, [OptString "append"]), -1, [FishAlias "append"],
635    [],
636    "add options to kernel command line",
637    "\
638 This function is used to add additional options to the
639 guest kernel command line.
640
641 The default is C<NULL> unless overridden by setting
642 C<LIBGUESTFS_APPEND> environment variable.
643
644 Setting C<append> to C<NULL> means I<no> additional options
645 are passed (libguestfs always adds a few of its own).");
646
647   ("get_append", (RConstOptString "append", []), -1, [],
648    (* This cannot be tested with the current framework.  The
649     * function can return NULL in normal operations, which the
650     * test framework interprets as an error.
651     *)
652    [],
653    "get the additional kernel options",
654    "\
655 Return the additional kernel options which are added to the
656 guest kernel command line.
657
658 If C<NULL> then no options are added.");
659
660   ("set_autosync", (RErr, [Bool "autosync"]), -1, [FishAlias "autosync"],
661    [],
662    "set autosync mode",
663    "\
664 If C<autosync> is true, this enables autosync.  Libguestfs will make a
665 best effort attempt to run C<guestfs_umount_all> followed by
666 C<guestfs_sync> when the handle is closed
667 (also if the program exits without closing handles).
668
669 This is disabled by default (except in guestfish where it is
670 enabled by default).");
671
672   ("get_autosync", (RBool "autosync", []), -1, [],
673    [InitNone, Always, TestRun (
674       [["get_autosync"]])],
675    "get autosync mode",
676    "\
677 Get the autosync flag.");
678
679   ("set_verbose", (RErr, [Bool "verbose"]), -1, [FishAlias "verbose"],
680    [],
681    "set verbose mode",
682    "\
683 If C<verbose> is true, this turns on verbose messages (to C<stderr>).
684
685 Verbose messages are disabled unless the environment variable
686 C<LIBGUESTFS_DEBUG> is defined and set to C<1>.");
687
688   ("get_verbose", (RBool "verbose", []), -1, [],
689    [],
690    "get verbose mode",
691    "\
692 This returns the verbose messages flag.");
693
694   ("is_ready", (RBool "ready", []), -1, [],
695    [InitNone, Always, TestOutputTrue (
696       [["is_ready"]])],
697    "is ready to accept commands",
698    "\
699 This returns true iff this handle is ready to accept commands
700 (in the C<READY> state).
701
702 For more information on states, see L<guestfs(3)>.");
703
704   ("is_config", (RBool "config", []), -1, [],
705    [InitNone, Always, TestOutputFalse (
706       [["is_config"]])],
707    "is in configuration state",
708    "\
709 This returns true iff this handle is being configured
710 (in the C<CONFIG> state).
711
712 For more information on states, see L<guestfs(3)>.");
713
714   ("is_launching", (RBool "launching", []), -1, [],
715    [InitNone, Always, TestOutputFalse (
716       [["is_launching"]])],
717    "is launching subprocess",
718    "\
719 This returns true iff this handle is launching the subprocess
720 (in the C<LAUNCHING> state).
721
722 For more information on states, see L<guestfs(3)>.");
723
724   ("is_busy", (RBool "busy", []), -1, [],
725    [InitNone, Always, TestOutputFalse (
726       [["is_busy"]])],
727    "is busy processing a command",
728    "\
729 This returns true iff this handle is busy processing a command
730 (in the C<BUSY> state).
731
732 For more information on states, see L<guestfs(3)>.");
733
734   ("get_state", (RInt "state", []), -1, [],
735    [],
736    "get the current state",
737    "\
738 This returns the current state as an opaque integer.  This is
739 only useful for printing debug and internal error messages.
740
741 For more information on states, see L<guestfs(3)>.");
742
743   ("set_memsize", (RErr, [Int "memsize"]), -1, [FishAlias "memsize"],
744    [InitNone, Always, TestOutputInt (
745       [["set_memsize"; "500"];
746        ["get_memsize"]], 500)],
747    "set memory allocated to the qemu subprocess",
748    "\
749 This sets the memory size in megabytes allocated to the
750 qemu subprocess.  This only has any effect if called before
751 C<guestfs_launch>.
752
753 You can also change this by setting the environment
754 variable C<LIBGUESTFS_MEMSIZE> before the handle is
755 created.
756
757 For more information on the architecture of libguestfs,
758 see L<guestfs(3)>.");
759
760   ("get_memsize", (RInt "memsize", []), -1, [],
761    [InitNone, Always, TestOutputIntOp (
762       [["get_memsize"]], ">=", 256)],
763    "get memory allocated to the qemu subprocess",
764    "\
765 This gets the memory size in megabytes allocated to the
766 qemu subprocess.
767
768 If C<guestfs_set_memsize> was not called
769 on this handle, and if C<LIBGUESTFS_MEMSIZE> was not set,
770 then this returns the compiled-in default value for memsize.
771
772 For more information on the architecture of libguestfs,
773 see L<guestfs(3)>.");
774
775   ("get_pid", (RInt "pid", []), -1, [FishAlias "pid"],
776    [InitNone, Always, TestOutputIntOp (
777       [["get_pid"]], ">=", 1)],
778    "get PID of qemu subprocess",
779    "\
780 Return the process ID of the qemu subprocess.  If there is no
781 qemu subprocess, then this will return an error.
782
783 This is an internal call used for debugging and testing.");
784
785   ("version", (RStruct ("version", "version"), []), -1, [],
786    [InitNone, Always, TestOutputStruct (
787       [["version"]], [CompareWithInt ("major", 1)])],
788    "get the library version number",
789    "\
790 Return the libguestfs version number that the program is linked
791 against.
792
793 Note that because of dynamic linking this is not necessarily
794 the version of libguestfs that you compiled against.  You can
795 compile the program, and then at runtime dynamically link
796 against a completely different C<libguestfs.so> library.
797
798 This call was added in version C<1.0.58>.  In previous
799 versions of libguestfs there was no way to get the version
800 number.  From C code you can use dynamic linker functions
801 to find out if this symbol exists (if it doesn't, then
802 it's an earlier version).
803
804 The call returns a structure with four elements.  The first
805 three (C<major>, C<minor> and C<release>) are numbers and
806 correspond to the usual version triplet.  The fourth element
807 (C<extra>) is a string and is normally empty, but may be
808 used for distro-specific information.
809
810 To construct the original version string:
811 C<$major.$minor.$release$extra>
812
813 See also: L<guestfs(3)/LIBGUESTFS VERSION NUMBERS>.
814
815 I<Note:> Don't use this call to test for availability
816 of features.  In enterprise distributions we backport
817 features from later versions into earlier versions,
818 making this an unreliable way to test for features.
819 Use C<guestfs_available> instead.");
820
821   ("set_selinux", (RErr, [Bool "selinux"]), -1, [FishAlias "selinux"],
822    [InitNone, Always, TestOutputTrue (
823       [["set_selinux"; "true"];
824        ["get_selinux"]])],
825    "set SELinux enabled or disabled at appliance boot",
826    "\
827 This sets the selinux flag that is passed to the appliance
828 at boot time.  The default is C<selinux=0> (disabled).
829
830 Note that if SELinux is enabled, it is always in
831 Permissive mode (C<enforcing=0>).
832
833 For more information on the architecture of libguestfs,
834 see L<guestfs(3)>.");
835
836   ("get_selinux", (RBool "selinux", []), -1, [],
837    [],
838    "get SELinux enabled flag",
839    "\
840 This returns the current setting of the selinux flag which
841 is passed to the appliance at boot time.  See C<guestfs_set_selinux>.
842
843 For more information on the architecture of libguestfs,
844 see L<guestfs(3)>.");
845
846   ("set_trace", (RErr, [Bool "trace"]), -1, [FishAlias "trace"],
847    [InitNone, Always, TestOutputFalse (
848       [["set_trace"; "false"];
849        ["get_trace"]])],
850    "enable or disable command traces",
851    "\
852 If the command trace flag is set to 1, then commands are
853 printed on stdout before they are executed in a format
854 which is very similar to the one used by guestfish.  In
855 other words, you can run a program with this enabled, and
856 you will get out a script which you can feed to guestfish
857 to perform the same set of actions.
858
859 If you want to trace C API calls into libguestfs (and
860 other libraries) then possibly a better way is to use
861 the external ltrace(1) command.
862
863 Command traces are disabled unless the environment variable
864 C<LIBGUESTFS_TRACE> is defined and set to C<1>.");
865
866   ("get_trace", (RBool "trace", []), -1, [],
867    [],
868    "get command trace enabled flag",
869    "\
870 Return the command trace flag.");
871
872   ("set_direct", (RErr, [Bool "direct"]), -1, [FishAlias "direct"],
873    [InitNone, Always, TestOutputFalse (
874       [["set_direct"; "false"];
875        ["get_direct"]])],
876    "enable or disable direct appliance mode",
877    "\
878 If the direct appliance mode flag is enabled, then stdin and
879 stdout are passed directly through to the appliance once it
880 is launched.
881
882 One consequence of this is that log messages aren't caught
883 by the library and handled by C<guestfs_set_log_message_callback>,
884 but go straight to stdout.
885
886 You probably don't want to use this unless you know what you
887 are doing.
888
889 The default is disabled.");
890
891   ("get_direct", (RBool "direct", []), -1, [],
892    [],
893    "get direct appliance mode flag",
894    "\
895 Return the direct appliance mode flag.");
896
897   ("set_recovery_proc", (RErr, [Bool "recoveryproc"]), -1, [FishAlias "recovery-proc"],
898    [InitNone, Always, TestOutputTrue (
899       [["set_recovery_proc"; "true"];
900        ["get_recovery_proc"]])],
901    "enable or disable the recovery process",
902    "\
903 If this is called with the parameter C<false> then
904 C<guestfs_launch> does not create a recovery process.  The
905 purpose of the recovery process is to stop runaway qemu
906 processes in the case where the main program aborts abruptly.
907
908 This only has any effect if called before C<guestfs_launch>,
909 and the default is true.
910
911 About the only time when you would want to disable this is
912 if the main process will fork itself into the background
913 (\"daemonize\" itself).  In this case the recovery process
914 thinks that the main program has disappeared and so kills
915 qemu, which is not very helpful.");
916
917   ("get_recovery_proc", (RBool "recoveryproc", []), -1, [],
918    [],
919    "get recovery process enabled flag",
920    "\
921 Return the recovery process enabled flag.");
922
923   ("add_drive_with_if", (RErr, [String "filename"; String "iface"]), -1, [],
924    [],
925    "add a drive specifying the QEMU block emulation to use",
926    "\
927 This is the same as C<guestfs_add_drive> but it allows you
928 to specify the QEMU interface emulation to use at run time.");
929
930   ("add_drive_ro_with_if", (RErr, [String "filename"; String "iface"]), -1, [],
931    [],
932    "add a drive read-only specifying the QEMU block emulation to use",
933    "\
934 This is the same as C<guestfs_add_drive_ro> but it allows you
935 to specify the QEMU interface emulation to use at run time.");
936
937 ]
938
939 (* daemon_functions are any functions which cause some action
940  * to take place in the daemon.
941  *)
942
943 let daemon_functions = [
944   ("mount", (RErr, [Device "device"; String "mountpoint"]), 1, [],
945    [InitEmpty, Always, TestOutput (
946       [["part_disk"; "/dev/sda"; "mbr"];
947        ["mkfs"; "ext2"; "/dev/sda1"];
948        ["mount"; "/dev/sda1"; "/"];
949        ["write"; "/new"; "new file contents"];
950        ["cat"; "/new"]], "new file contents")],
951    "mount a guest disk at a position in the filesystem",
952    "\
953 Mount a guest disk at a position in the filesystem.  Block devices
954 are named C</dev/sda>, C</dev/sdb> and so on, as they were added to
955 the guest.  If those block devices contain partitions, they will have
956 the usual names (eg. C</dev/sda1>).  Also LVM C</dev/VG/LV>-style
957 names can be used.
958
959 The rules are the same as for L<mount(2)>:  A filesystem must
960 first be mounted on C</> before others can be mounted.  Other
961 filesystems can only be mounted on directories which already
962 exist.
963
964 The mounted filesystem is writable, if we have sufficient permissions
965 on the underlying device.
966
967 B<Important note:>
968 When you use this call, the filesystem options C<sync> and C<noatime>
969 are set implicitly.  This was originally done because we thought it
970 would improve reliability, but it turns out that I<-o sync> has a
971 very large negative performance impact and negligible effect on
972 reliability.  Therefore we recommend that you avoid using
973 C<guestfs_mount> in any code that needs performance, and instead
974 use C<guestfs_mount_options> (use an empty string for the first
975 parameter if you don't want any options).");
976
977   ("sync", (RErr, []), 2, [],
978    [ InitEmpty, Always, TestRun [["sync"]]],
979    "sync disks, writes are flushed through to the disk image",
980    "\
981 This syncs the disk, so that any writes are flushed through to the
982 underlying disk image.
983
984 You should always call this if you have modified a disk image, before
985 closing the handle.");
986
987   ("touch", (RErr, [Pathname "path"]), 3, [],
988    [InitBasicFS, Always, TestOutputTrue (
989       [["touch"; "/new"];
990        ["exists"; "/new"]])],
991    "update file timestamps or create a new file",
992    "\
993 Touch acts like the L<touch(1)> command.  It can be used to
994 update the timestamps on a file, or, if the file does not exist,
995 to create a new zero-length file.
996
997 This command only works on regular files, and will fail on other
998 file types such as directories, symbolic links, block special etc.");
999
1000   ("cat", (RString "content", [Pathname "path"]), 4, [ProtocolLimitWarning],
1001    [InitISOFS, Always, TestOutput (
1002       [["cat"; "/known-2"]], "abcdef\n")],
1003    "list the contents of a file",
1004    "\
1005 Return the contents of the file named C<path>.
1006
1007 Note that this function cannot correctly handle binary files
1008 (specifically, files containing C<\\0> character which is treated
1009 as end of string).  For those you need to use the C<guestfs_read_file>
1010 or C<guestfs_download> functions which have a more complex interface.");
1011
1012   ("ll", (RString "listing", [Pathname "directory"]), 5, [],
1013    [], (* XXX Tricky to test because it depends on the exact format
1014         * of the 'ls -l' command, which changes between F10 and F11.
1015         *)
1016    "list the files in a directory (long format)",
1017    "\
1018 List the files in C<directory> (relative to the root directory,
1019 there is no cwd) in the format of 'ls -la'.
1020
1021 This command is mostly useful for interactive sessions.  It
1022 is I<not> intended that you try to parse the output string.");
1023
1024   ("ls", (RStringList "listing", [Pathname "directory"]), 6, [],
1025    [InitBasicFS, Always, TestOutputList (
1026       [["touch"; "/new"];
1027        ["touch"; "/newer"];
1028        ["touch"; "/newest"];
1029        ["ls"; "/"]], ["lost+found"; "new"; "newer"; "newest"])],
1030    "list the files in a directory",
1031    "\
1032 List the files in C<directory> (relative to the root directory,
1033 there is no cwd).  The '.' and '..' entries are not returned, but
1034 hidden files are shown.
1035
1036 This command is mostly useful for interactive sessions.  Programs
1037 should probably use C<guestfs_readdir> instead.");
1038
1039   ("list_devices", (RStringList "devices", []), 7, [],
1040    [InitEmpty, Always, TestOutputListOfDevices (
1041       [["list_devices"]], ["/dev/sda"; "/dev/sdb"; "/dev/sdc"; "/dev/sdd"])],
1042    "list the block devices",
1043    "\
1044 List all the block devices.
1045
1046 The full block device names are returned, eg. C</dev/sda>");
1047
1048   ("list_partitions", (RStringList "partitions", []), 8, [],
1049    [InitBasicFS, Always, TestOutputListOfDevices (
1050       [["list_partitions"]], ["/dev/sda1"]);
1051     InitEmpty, Always, TestOutputListOfDevices (
1052       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1053        ["list_partitions"]], ["/dev/sda1"; "/dev/sda2"; "/dev/sda3"])],
1054    "list the partitions",
1055    "\
1056 List all the partitions detected on all block devices.
1057
1058 The full partition device names are returned, eg. C</dev/sda1>
1059
1060 This does not return logical volumes.  For that you will need to
1061 call C<guestfs_lvs>.");
1062
1063   ("pvs", (RStringList "physvols", []), 9, [Optional "lvm2"],
1064    [InitBasicFSonLVM, Always, TestOutputListOfDevices (
1065       [["pvs"]], ["/dev/sda1"]);
1066     InitEmpty, Always, TestOutputListOfDevices (
1067       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1068        ["pvcreate"; "/dev/sda1"];
1069        ["pvcreate"; "/dev/sda2"];
1070        ["pvcreate"; "/dev/sda3"];
1071        ["pvs"]], ["/dev/sda1"; "/dev/sda2"; "/dev/sda3"])],
1072    "list the LVM physical volumes (PVs)",
1073    "\
1074 List all the physical volumes detected.  This is the equivalent
1075 of the L<pvs(8)> command.
1076
1077 This returns a list of just the device names that contain
1078 PVs (eg. C</dev/sda2>).
1079
1080 See also C<guestfs_pvs_full>.");
1081
1082   ("vgs", (RStringList "volgroups", []), 10, [Optional "lvm2"],
1083    [InitBasicFSonLVM, Always, TestOutputList (
1084       [["vgs"]], ["VG"]);
1085     InitEmpty, Always, TestOutputList (
1086       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1087        ["pvcreate"; "/dev/sda1"];
1088        ["pvcreate"; "/dev/sda2"];
1089        ["pvcreate"; "/dev/sda3"];
1090        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1091        ["vgcreate"; "VG2"; "/dev/sda3"];
1092        ["vgs"]], ["VG1"; "VG2"])],
1093    "list the LVM volume groups (VGs)",
1094    "\
1095 List all the volumes groups detected.  This is the equivalent
1096 of the L<vgs(8)> command.
1097
1098 This returns a list of just the volume group names that were
1099 detected (eg. C<VolGroup00>).
1100
1101 See also C<guestfs_vgs_full>.");
1102
1103   ("lvs", (RStringList "logvols", []), 11, [Optional "lvm2"],
1104    [InitBasicFSonLVM, Always, TestOutputList (
1105       [["lvs"]], ["/dev/VG/LV"]);
1106     InitEmpty, Always, TestOutputList (
1107       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1108        ["pvcreate"; "/dev/sda1"];
1109        ["pvcreate"; "/dev/sda2"];
1110        ["pvcreate"; "/dev/sda3"];
1111        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1112        ["vgcreate"; "VG2"; "/dev/sda3"];
1113        ["lvcreate"; "LV1"; "VG1"; "50"];
1114        ["lvcreate"; "LV2"; "VG1"; "50"];
1115        ["lvcreate"; "LV3"; "VG2"; "50"];
1116        ["lvs"]], ["/dev/VG1/LV1"; "/dev/VG1/LV2"; "/dev/VG2/LV3"])],
1117    "list the LVM logical volumes (LVs)",
1118    "\
1119 List all the logical volumes detected.  This is the equivalent
1120 of the L<lvs(8)> command.
1121
1122 This returns a list of the logical volume device names
1123 (eg. C</dev/VolGroup00/LogVol00>).
1124
1125 See also C<guestfs_lvs_full>.");
1126
1127   ("pvs_full", (RStructList ("physvols", "lvm_pv"), []), 12, [Optional "lvm2"],
1128    [], (* XXX how to test? *)
1129    "list the LVM physical volumes (PVs)",
1130    "\
1131 List all the physical volumes detected.  This is the equivalent
1132 of the L<pvs(8)> command.  The \"full\" version includes all fields.");
1133
1134   ("vgs_full", (RStructList ("volgroups", "lvm_vg"), []), 13, [Optional "lvm2"],
1135    [], (* XXX how to test? *)
1136    "list the LVM volume groups (VGs)",
1137    "\
1138 List all the volumes groups detected.  This is the equivalent
1139 of the L<vgs(8)> command.  The \"full\" version includes all fields.");
1140
1141   ("lvs_full", (RStructList ("logvols", "lvm_lv"), []), 14, [Optional "lvm2"],
1142    [], (* XXX how to test? *)
1143    "list the LVM logical volumes (LVs)",
1144    "\
1145 List all the logical volumes detected.  This is the equivalent
1146 of the L<lvs(8)> command.  The \"full\" version includes all fields.");
1147
1148   ("read_lines", (RStringList "lines", [Pathname "path"]), 15, [],
1149    [InitISOFS, Always, TestOutputList (
1150       [["read_lines"; "/known-4"]], ["abc"; "def"; "ghi"]);
1151     InitISOFS, Always, TestOutputList (
1152       [["read_lines"; "/empty"]], [])],
1153    "read file as lines",
1154    "\
1155 Return the contents of the file named C<path>.
1156
1157 The file contents are returned as a list of lines.  Trailing
1158 C<LF> and C<CRLF> character sequences are I<not> returned.
1159
1160 Note that this function cannot correctly handle binary files
1161 (specifically, files containing C<\\0> character which is treated
1162 as end of line).  For those you need to use the C<guestfs_read_file>
1163 function which has a more complex interface.");
1164
1165   ("aug_init", (RErr, [Pathname "root"; Int "flags"]), 16, [Optional "augeas"],
1166    [], (* XXX Augeas code needs tests. *)
1167    "create a new Augeas handle",
1168    "\
1169 Create a new Augeas handle for editing configuration files.
1170 If there was any previous Augeas handle associated with this
1171 guestfs session, then it is closed.
1172
1173 You must call this before using any other C<guestfs_aug_*>
1174 commands.
1175
1176 C<root> is the filesystem root.  C<root> must not be NULL,
1177 use C</> instead.
1178
1179 The flags are the same as the flags defined in
1180 E<lt>augeas.hE<gt>, the logical I<or> of the following
1181 integers:
1182
1183 =over 4
1184
1185 =item C<AUG_SAVE_BACKUP> = 1
1186
1187 Keep the original file with a C<.augsave> extension.
1188
1189 =item C<AUG_SAVE_NEWFILE> = 2
1190
1191 Save changes into a file with extension C<.augnew>, and
1192 do not overwrite original.  Overrides C<AUG_SAVE_BACKUP>.
1193
1194 =item C<AUG_TYPE_CHECK> = 4
1195
1196 Typecheck lenses (can be expensive).
1197
1198 =item C<AUG_NO_STDINC> = 8
1199
1200 Do not use standard load path for modules.
1201
1202 =item C<AUG_SAVE_NOOP> = 16
1203
1204 Make save a no-op, just record what would have been changed.
1205
1206 =item C<AUG_NO_LOAD> = 32
1207
1208 Do not load the tree in C<guestfs_aug_init>.
1209
1210 =back
1211
1212 To close the handle, you can call C<guestfs_aug_close>.
1213
1214 To find out more about Augeas, see L<http://augeas.net/>.");
1215
1216   ("aug_close", (RErr, []), 26, [Optional "augeas"],
1217    [], (* XXX Augeas code needs tests. *)
1218    "close the current Augeas handle",
1219    "\
1220 Close the current Augeas handle and free up any resources
1221 used by it.  After calling this, you have to call
1222 C<guestfs_aug_init> again before you can use any other
1223 Augeas functions.");
1224
1225   ("aug_defvar", (RInt "nrnodes", [String "name"; OptString "expr"]), 17, [Optional "augeas"],
1226    [], (* XXX Augeas code needs tests. *)
1227    "define an Augeas variable",
1228    "\
1229 Defines an Augeas variable C<name> whose value is the result
1230 of evaluating C<expr>.  If C<expr> is NULL, then C<name> is
1231 undefined.
1232
1233 On success this returns the number of nodes in C<expr>, or
1234 C<0> if C<expr> evaluates to something which is not a nodeset.");
1235
1236   ("aug_defnode", (RStruct ("nrnodescreated", "int_bool"), [String "name"; String "expr"; String "val"]), 18, [Optional "augeas"],
1237    [], (* XXX Augeas code needs tests. *)
1238    "define an Augeas node",
1239    "\
1240 Defines a variable C<name> whose value is the result of
1241 evaluating C<expr>.
1242
1243 If C<expr> evaluates to an empty nodeset, a node is created,
1244 equivalent to calling C<guestfs_aug_set> C<expr>, C<value>.
1245 C<name> will be the nodeset containing that single node.
1246
1247 On success this returns a pair containing the
1248 number of nodes in the nodeset, and a boolean flag
1249 if a node was created.");
1250
1251   ("aug_get", (RString "val", [String "augpath"]), 19, [Optional "augeas"],
1252    [], (* XXX Augeas code needs tests. *)
1253    "look up the value of an Augeas path",
1254    "\
1255 Look up the value associated with C<path>.  If C<path>
1256 matches exactly one node, the C<value> is returned.");
1257
1258   ("aug_set", (RErr, [String "augpath"; String "val"]), 20, [Optional "augeas"],
1259    [], (* XXX Augeas code needs tests. *)
1260    "set Augeas path to value",
1261    "\
1262 Set the value associated with C<path> to C<val>.
1263
1264 In the Augeas API, it is possible to clear a node by setting
1265 the value to NULL.  Due to an oversight in the libguestfs API
1266 you cannot do that with this call.  Instead you must use the
1267 C<guestfs_aug_clear> call.");
1268
1269   ("aug_insert", (RErr, [String "augpath"; String "label"; Bool "before"]), 21, [Optional "augeas"],
1270    [], (* XXX Augeas code needs tests. *)
1271    "insert a sibling Augeas node",
1272    "\
1273 Create a new sibling C<label> for C<path>, inserting it into
1274 the tree before or after C<path> (depending on the boolean
1275 flag C<before>).
1276
1277 C<path> must match exactly one existing node in the tree, and
1278 C<label> must be a label, ie. not contain C</>, C<*> or end
1279 with a bracketed index C<[N]>.");
1280
1281   ("aug_rm", (RInt "nrnodes", [String "augpath"]), 22, [Optional "augeas"],
1282    [], (* XXX Augeas code needs tests. *)
1283    "remove an Augeas path",
1284    "\
1285 Remove C<path> and all of its children.
1286
1287 On success this returns the number of entries which were removed.");
1288
1289   ("aug_mv", (RErr, [String "src"; String "dest"]), 23, [Optional "augeas"],
1290    [], (* XXX Augeas code needs tests. *)
1291    "move Augeas node",
1292    "\
1293 Move the node C<src> to C<dest>.  C<src> must match exactly
1294 one node.  C<dest> is overwritten if it exists.");
1295
1296   ("aug_match", (RStringList "matches", [String "augpath"]), 24, [Optional "augeas"],
1297    [], (* XXX Augeas code needs tests. *)
1298    "return Augeas nodes which match augpath",
1299    "\
1300 Returns a list of paths which match the path expression C<path>.
1301 The returned paths are sufficiently qualified so that they match
1302 exactly one node in the current tree.");
1303
1304   ("aug_save", (RErr, []), 25, [Optional "augeas"],
1305    [], (* XXX Augeas code needs tests. *)
1306    "write all pending Augeas changes to disk",
1307    "\
1308 This writes all pending changes to disk.
1309
1310 The flags which were passed to C<guestfs_aug_init> affect exactly
1311 how files are saved.");
1312
1313   ("aug_load", (RErr, []), 27, [Optional "augeas"],
1314    [], (* XXX Augeas code needs tests. *)
1315    "load files into the tree",
1316    "\
1317 Load files into the tree.
1318
1319 See C<aug_load> in the Augeas documentation for the full gory
1320 details.");
1321
1322   ("aug_ls", (RStringList "matches", [String "augpath"]), 28, [Optional "augeas"],
1323    [], (* XXX Augeas code needs tests. *)
1324    "list Augeas nodes under augpath",
1325    "\
1326 This is just a shortcut for listing C<guestfs_aug_match>
1327 C<path/*> and sorting the resulting nodes into alphabetical order.");
1328
1329   ("rm", (RErr, [Pathname "path"]), 29, [],
1330    [InitBasicFS, Always, TestRun
1331       [["touch"; "/new"];
1332        ["rm"; "/new"]];
1333     InitBasicFS, Always, TestLastFail
1334       [["rm"; "/new"]];
1335     InitBasicFS, Always, TestLastFail
1336       [["mkdir"; "/new"];
1337        ["rm"; "/new"]]],
1338    "remove a file",
1339    "\
1340 Remove the single file C<path>.");
1341
1342   ("rmdir", (RErr, [Pathname "path"]), 30, [],
1343    [InitBasicFS, Always, TestRun
1344       [["mkdir"; "/new"];
1345        ["rmdir"; "/new"]];
1346     InitBasicFS, Always, TestLastFail
1347       [["rmdir"; "/new"]];
1348     InitBasicFS, Always, TestLastFail
1349       [["touch"; "/new"];
1350        ["rmdir"; "/new"]]],
1351    "remove a directory",
1352    "\
1353 Remove the single directory C<path>.");
1354
1355   ("rm_rf", (RErr, [Pathname "path"]), 31, [],
1356    [InitBasicFS, Always, TestOutputFalse
1357       [["mkdir"; "/new"];
1358        ["mkdir"; "/new/foo"];
1359        ["touch"; "/new/foo/bar"];
1360        ["rm_rf"; "/new"];
1361        ["exists"; "/new"]]],
1362    "remove a file or directory recursively",
1363    "\
1364 Remove the file or directory C<path>, recursively removing the
1365 contents if its a directory.  This is like the C<rm -rf> shell
1366 command.");
1367
1368   ("mkdir", (RErr, [Pathname "path"]), 32, [],
1369    [InitBasicFS, Always, TestOutputTrue
1370       [["mkdir"; "/new"];
1371        ["is_dir"; "/new"]];
1372     InitBasicFS, Always, TestLastFail
1373       [["mkdir"; "/new/foo/bar"]]],
1374    "create a directory",
1375    "\
1376 Create a directory named C<path>.");
1377
1378   ("mkdir_p", (RErr, [Pathname "path"]), 33, [],
1379    [InitBasicFS, Always, TestOutputTrue
1380       [["mkdir_p"; "/new/foo/bar"];
1381        ["is_dir"; "/new/foo/bar"]];
1382     InitBasicFS, Always, TestOutputTrue
1383       [["mkdir_p"; "/new/foo/bar"];
1384        ["is_dir"; "/new/foo"]];
1385     InitBasicFS, Always, TestOutputTrue
1386       [["mkdir_p"; "/new/foo/bar"];
1387        ["is_dir"; "/new"]];
1388     (* Regression tests for RHBZ#503133: *)
1389     InitBasicFS, Always, TestRun
1390       [["mkdir"; "/new"];
1391        ["mkdir_p"; "/new"]];
1392     InitBasicFS, Always, TestLastFail
1393       [["touch"; "/new"];
1394        ["mkdir_p"; "/new"]]],
1395    "create a directory and parents",
1396    "\
1397 Create a directory named C<path>, creating any parent directories
1398 as necessary.  This is like the C<mkdir -p> shell command.");
1399
1400   ("chmod", (RErr, [Int "mode"; Pathname "path"]), 34, [],
1401    [], (* XXX Need stat command to test *)
1402    "change file mode",
1403    "\
1404 Change the mode (permissions) of C<path> to C<mode>.  Only
1405 numeric modes are supported.
1406
1407 I<Note>: When using this command from guestfish, C<mode>
1408 by default would be decimal, unless you prefix it with
1409 C<0> to get octal, ie. use C<0700> not C<700>.
1410
1411 The mode actually set is affected by the umask.");
1412
1413   ("chown", (RErr, [Int "owner"; Int "group"; Pathname "path"]), 35, [],
1414    [], (* XXX Need stat command to test *)
1415    "change file owner and group",
1416    "\
1417 Change the file owner to C<owner> and group to C<group>.
1418
1419 Only numeric uid and gid are supported.  If you want to use
1420 names, you will need to locate and parse the password file
1421 yourself (Augeas support makes this relatively easy).");
1422
1423   ("exists", (RBool "existsflag", [Pathname "path"]), 36, [],
1424    [InitISOFS, Always, TestOutputTrue (
1425       [["exists"; "/empty"]]);
1426     InitISOFS, Always, TestOutputTrue (
1427       [["exists"; "/directory"]])],
1428    "test if file or directory exists",
1429    "\
1430 This returns C<true> if and only if there is a file, directory
1431 (or anything) with the given C<path> name.
1432
1433 See also C<guestfs_is_file>, C<guestfs_is_dir>, C<guestfs_stat>.");
1434
1435   ("is_file", (RBool "fileflag", [Pathname "path"]), 37, [],
1436    [InitISOFS, Always, TestOutputTrue (
1437       [["is_file"; "/known-1"]]);
1438     InitISOFS, Always, TestOutputFalse (
1439       [["is_file"; "/directory"]])],
1440    "test if file exists",
1441    "\
1442 This returns C<true> if and only if there is a file
1443 with the given C<path> name.  Note that it returns false for
1444 other objects like directories.
1445
1446 See also C<guestfs_stat>.");
1447
1448   ("is_dir", (RBool "dirflag", [Pathname "path"]), 38, [],
1449    [InitISOFS, Always, TestOutputFalse (
1450       [["is_dir"; "/known-3"]]);
1451     InitISOFS, Always, TestOutputTrue (
1452       [["is_dir"; "/directory"]])],
1453    "test if file exists",
1454    "\
1455 This returns C<true> if and only if there is a directory
1456 with the given C<path> name.  Note that it returns false for
1457 other objects like files.
1458
1459 See also C<guestfs_stat>.");
1460
1461   ("pvcreate", (RErr, [Device "device"]), 39, [Optional "lvm2"],
1462    [InitEmpty, Always, TestOutputListOfDevices (
1463       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1464        ["pvcreate"; "/dev/sda1"];
1465        ["pvcreate"; "/dev/sda2"];
1466        ["pvcreate"; "/dev/sda3"];
1467        ["pvs"]], ["/dev/sda1"; "/dev/sda2"; "/dev/sda3"])],
1468    "create an LVM physical volume",
1469    "\
1470 This creates an LVM physical volume on the named C<device>,
1471 where C<device> should usually be a partition name such
1472 as C</dev/sda1>.");
1473
1474   ("vgcreate", (RErr, [String "volgroup"; DeviceList "physvols"]), 40, [Optional "lvm2"],
1475    [InitEmpty, Always, TestOutputList (
1476       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1477        ["pvcreate"; "/dev/sda1"];
1478        ["pvcreate"; "/dev/sda2"];
1479        ["pvcreate"; "/dev/sda3"];
1480        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1481        ["vgcreate"; "VG2"; "/dev/sda3"];
1482        ["vgs"]], ["VG1"; "VG2"])],
1483    "create an LVM volume group",
1484    "\
1485 This creates an LVM volume group called C<volgroup>
1486 from the non-empty list of physical volumes C<physvols>.");
1487
1488   ("lvcreate", (RErr, [String "logvol"; String "volgroup"; Int "mbytes"]), 41, [Optional "lvm2"],
1489    [InitEmpty, Always, TestOutputList (
1490       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1491        ["pvcreate"; "/dev/sda1"];
1492        ["pvcreate"; "/dev/sda2"];
1493        ["pvcreate"; "/dev/sda3"];
1494        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1495        ["vgcreate"; "VG2"; "/dev/sda3"];
1496        ["lvcreate"; "LV1"; "VG1"; "50"];
1497        ["lvcreate"; "LV2"; "VG1"; "50"];
1498        ["lvcreate"; "LV3"; "VG2"; "50"];
1499        ["lvcreate"; "LV4"; "VG2"; "50"];
1500        ["lvcreate"; "LV5"; "VG2"; "50"];
1501        ["lvs"]],
1502       ["/dev/VG1/LV1"; "/dev/VG1/LV2";
1503        "/dev/VG2/LV3"; "/dev/VG2/LV4"; "/dev/VG2/LV5"])],
1504    "create an LVM logical volume",
1505    "\
1506 This creates an LVM logical volume called C<logvol>
1507 on the volume group C<volgroup>, with C<size> megabytes.");
1508
1509   ("mkfs", (RErr, [String "fstype"; Device "device"]), 42, [],
1510    [InitEmpty, Always, TestOutput (
1511       [["part_disk"; "/dev/sda"; "mbr"];
1512        ["mkfs"; "ext2"; "/dev/sda1"];
1513        ["mount_options"; ""; "/dev/sda1"; "/"];
1514        ["write"; "/new"; "new file contents"];
1515        ["cat"; "/new"]], "new file contents")],
1516    "make a filesystem",
1517    "\
1518 This creates a filesystem on C<device> (usually a partition
1519 or LVM logical volume).  The filesystem type is C<fstype>, for
1520 example C<ext3>.");
1521
1522   ("sfdisk", (RErr, [Device "device";
1523                      Int "cyls"; Int "heads"; Int "sectors";
1524                      StringList "lines"]), 43, [DangerWillRobinson],
1525    [],
1526    "create partitions on a block device",
1527    "\
1528 This is a direct interface to the L<sfdisk(8)> program for creating
1529 partitions on block devices.
1530
1531 C<device> should be a block device, for example C</dev/sda>.
1532
1533 C<cyls>, C<heads> and C<sectors> are the number of cylinders, heads
1534 and sectors on the device, which are passed directly to sfdisk as
1535 the I<-C>, I<-H> and I<-S> parameters.  If you pass C<0> for any
1536 of these, then the corresponding parameter is omitted.  Usually for
1537 'large' disks, you can just pass C<0> for these, but for small
1538 (floppy-sized) disks, sfdisk (or rather, the kernel) cannot work
1539 out the right geometry and you will need to tell it.
1540
1541 C<lines> is a list of lines that we feed to C<sfdisk>.  For more
1542 information refer to the L<sfdisk(8)> manpage.
1543
1544 To create a single partition occupying the whole disk, you would
1545 pass C<lines> as a single element list, when the single element being
1546 the string C<,> (comma).
1547
1548 See also: C<guestfs_sfdisk_l>, C<guestfs_sfdisk_N>,
1549 C<guestfs_part_init>");
1550
1551   ("write_file", (RErr, [Pathname "path"; String "content"; Int "size"]), 44, [ProtocolLimitWarning; DeprecatedBy "write"],
1552    (* Regression test for RHBZ#597135. *)
1553    [InitBasicFS, Always, TestLastFail
1554       [["write_file"; "/new"; "abc"; "10000"]]],
1555    "create a file",
1556    "\
1557 This call creates a file called C<path>.  The contents of the
1558 file is the string C<content> (which can contain any 8 bit data),
1559 with length C<size>.
1560
1561 As a special case, if C<size> is C<0>
1562 then the length is calculated using C<strlen> (so in this case
1563 the content cannot contain embedded ASCII NULs).
1564
1565 I<NB.> Owing to a bug, writing content containing ASCII NUL
1566 characters does I<not> work, even if the length is specified.");
1567
1568   ("umount", (RErr, [String "pathordevice"]), 45, [FishAlias "unmount"],
1569    [InitEmpty, Always, TestOutputListOfDevices (
1570       [["part_disk"; "/dev/sda"; "mbr"];
1571        ["mkfs"; "ext2"; "/dev/sda1"];
1572        ["mount_options"; ""; "/dev/sda1"; "/"];
1573        ["mounts"]], ["/dev/sda1"]);
1574     InitEmpty, Always, TestOutputList (
1575       [["part_disk"; "/dev/sda"; "mbr"];
1576        ["mkfs"; "ext2"; "/dev/sda1"];
1577        ["mount_options"; ""; "/dev/sda1"; "/"];
1578        ["umount"; "/"];
1579        ["mounts"]], [])],
1580    "unmount a filesystem",
1581    "\
1582 This unmounts the given filesystem.  The filesystem may be
1583 specified either by its mountpoint (path) or the device which
1584 contains the filesystem.");
1585
1586   ("mounts", (RStringList "devices", []), 46, [],
1587    [InitBasicFS, Always, TestOutputListOfDevices (
1588       [["mounts"]], ["/dev/sda1"])],
1589    "show mounted filesystems",
1590    "\
1591 This returns the list of currently mounted filesystems.  It returns
1592 the list of devices (eg. C</dev/sda1>, C</dev/VG/LV>).
1593
1594 Some internal mounts are not shown.
1595
1596 See also: C<guestfs_mountpoints>");
1597
1598   ("umount_all", (RErr, []), 47, [FishAlias "unmount-all"],
1599    [InitBasicFS, Always, TestOutputList (
1600       [["umount_all"];
1601        ["mounts"]], []);
1602     (* check that umount_all can unmount nested mounts correctly: *)
1603     InitEmpty, Always, TestOutputList (
1604       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1605        ["mkfs"; "ext2"; "/dev/sda1"];
1606        ["mkfs"; "ext2"; "/dev/sda2"];
1607        ["mkfs"; "ext2"; "/dev/sda3"];
1608        ["mount_options"; ""; "/dev/sda1"; "/"];
1609        ["mkdir"; "/mp1"];
1610        ["mount_options"; ""; "/dev/sda2"; "/mp1"];
1611        ["mkdir"; "/mp1/mp2"];
1612        ["mount_options"; ""; "/dev/sda3"; "/mp1/mp2"];
1613        ["mkdir"; "/mp1/mp2/mp3"];
1614        ["umount_all"];
1615        ["mounts"]], [])],
1616    "unmount all filesystems",
1617    "\
1618 This unmounts all mounted filesystems.
1619
1620 Some internal mounts are not unmounted by this call.");
1621
1622   ("lvm_remove_all", (RErr, []), 48, [DangerWillRobinson; Optional "lvm2"],
1623    [],
1624    "remove all LVM LVs, VGs and PVs",
1625    "\
1626 This command removes all LVM logical volumes, volume groups
1627 and physical volumes.");
1628
1629   ("file", (RString "description", [Dev_or_Path "path"]), 49, [],
1630    [InitISOFS, Always, TestOutput (
1631       [["file"; "/empty"]], "empty");
1632     InitISOFS, Always, TestOutput (
1633       [["file"; "/known-1"]], "ASCII text");
1634     InitISOFS, Always, TestLastFail (
1635       [["file"; "/notexists"]]);
1636     InitISOFS, Always, TestOutput (
1637       [["file"; "/abssymlink"]], "symbolic link");
1638     InitISOFS, Always, TestOutput (
1639       [["file"; "/directory"]], "directory")],
1640    "determine file type",
1641    "\
1642 This call uses the standard L<file(1)> command to determine
1643 the type or contents of the file.
1644
1645 This call will also transparently look inside various types
1646 of compressed file.
1647
1648 The exact command which runs is C<file -zb path>.  Note in
1649 particular that the filename is not prepended to the output
1650 (the C<-b> option).
1651
1652 This command can also be used on C</dev/> devices
1653 (and partitions, LV names).  You can for example use this
1654 to determine if a device contains a filesystem, although
1655 it's usually better to use C<guestfs_vfs_type>.
1656
1657 If the C<path> does not begin with C</dev/> then
1658 this command only works for the content of regular files.
1659 For other file types (directory, symbolic link etc) it
1660 will just return the string C<directory> etc.");
1661
1662   ("command", (RString "output", [StringList "arguments"]), 50, [ProtocolLimitWarning],
1663    [InitBasicFS, Always, TestOutput (
1664       [["upload"; "test-command"; "/test-command"];
1665        ["chmod"; "0o755"; "/test-command"];
1666        ["command"; "/test-command 1"]], "Result1");
1667     InitBasicFS, Always, TestOutput (
1668       [["upload"; "test-command"; "/test-command"];
1669        ["chmod"; "0o755"; "/test-command"];
1670        ["command"; "/test-command 2"]], "Result2\n");
1671     InitBasicFS, Always, TestOutput (
1672       [["upload"; "test-command"; "/test-command"];
1673        ["chmod"; "0o755"; "/test-command"];
1674        ["command"; "/test-command 3"]], "\nResult3");
1675     InitBasicFS, Always, TestOutput (
1676       [["upload"; "test-command"; "/test-command"];
1677        ["chmod"; "0o755"; "/test-command"];
1678        ["command"; "/test-command 4"]], "\nResult4\n");
1679     InitBasicFS, Always, TestOutput (
1680       [["upload"; "test-command"; "/test-command"];
1681        ["chmod"; "0o755"; "/test-command"];
1682        ["command"; "/test-command 5"]], "\nResult5\n\n");
1683     InitBasicFS, Always, TestOutput (
1684       [["upload"; "test-command"; "/test-command"];
1685        ["chmod"; "0o755"; "/test-command"];
1686        ["command"; "/test-command 6"]], "\n\nResult6\n\n");
1687     InitBasicFS, Always, TestOutput (
1688       [["upload"; "test-command"; "/test-command"];
1689        ["chmod"; "0o755"; "/test-command"];
1690        ["command"; "/test-command 7"]], "");
1691     InitBasicFS, Always, TestOutput (
1692       [["upload"; "test-command"; "/test-command"];
1693        ["chmod"; "0o755"; "/test-command"];
1694        ["command"; "/test-command 8"]], "\n");
1695     InitBasicFS, Always, TestOutput (
1696       [["upload"; "test-command"; "/test-command"];
1697        ["chmod"; "0o755"; "/test-command"];
1698        ["command"; "/test-command 9"]], "\n\n");
1699     InitBasicFS, Always, TestOutput (
1700       [["upload"; "test-command"; "/test-command"];
1701        ["chmod"; "0o755"; "/test-command"];
1702        ["command"; "/test-command 10"]], "Result10-1\nResult10-2\n");
1703     InitBasicFS, Always, TestOutput (
1704       [["upload"; "test-command"; "/test-command"];
1705        ["chmod"; "0o755"; "/test-command"];
1706        ["command"; "/test-command 11"]], "Result11-1\nResult11-2");
1707     InitBasicFS, Always, TestLastFail (
1708       [["upload"; "test-command"; "/test-command"];
1709        ["chmod"; "0o755"; "/test-command"];
1710        ["command"; "/test-command"]])],
1711    "run a command from the guest filesystem",
1712    "\
1713 This call runs a command from the guest filesystem.  The
1714 filesystem must be mounted, and must contain a compatible
1715 operating system (ie. something Linux, with the same
1716 or compatible processor architecture).
1717
1718 The single parameter is an argv-style list of arguments.
1719 The first element is the name of the program to run.
1720 Subsequent elements are parameters.  The list must be
1721 non-empty (ie. must contain a program name).  Note that
1722 the command runs directly, and is I<not> invoked via
1723 the shell (see C<guestfs_sh>).
1724
1725 The return value is anything printed to I<stdout> by
1726 the command.
1727
1728 If the command returns a non-zero exit status, then
1729 this function returns an error message.  The error message
1730 string is the content of I<stderr> from the command.
1731
1732 The C<$PATH> environment variable will contain at least
1733 C</usr/bin> and C</bin>.  If you require a program from
1734 another location, you should provide the full path in the
1735 first parameter.
1736
1737 Shared libraries and data files required by the program
1738 must be available on filesystems which are mounted in the
1739 correct places.  It is the caller's responsibility to ensure
1740 all filesystems that are needed are mounted at the right
1741 locations.");
1742
1743   ("command_lines", (RStringList "lines", [StringList "arguments"]), 51, [ProtocolLimitWarning],
1744    [InitBasicFS, Always, TestOutputList (
1745       [["upload"; "test-command"; "/test-command"];
1746        ["chmod"; "0o755"; "/test-command"];
1747        ["command_lines"; "/test-command 1"]], ["Result1"]);
1748     InitBasicFS, Always, TestOutputList (
1749       [["upload"; "test-command"; "/test-command"];
1750        ["chmod"; "0o755"; "/test-command"];
1751        ["command_lines"; "/test-command 2"]], ["Result2"]);
1752     InitBasicFS, Always, TestOutputList (
1753       [["upload"; "test-command"; "/test-command"];
1754        ["chmod"; "0o755"; "/test-command"];
1755        ["command_lines"; "/test-command 3"]], ["";"Result3"]);
1756     InitBasicFS, Always, TestOutputList (
1757       [["upload"; "test-command"; "/test-command"];
1758        ["chmod"; "0o755"; "/test-command"];
1759        ["command_lines"; "/test-command 4"]], ["";"Result4"]);
1760     InitBasicFS, Always, TestOutputList (
1761       [["upload"; "test-command"; "/test-command"];
1762        ["chmod"; "0o755"; "/test-command"];
1763        ["command_lines"; "/test-command 5"]], ["";"Result5";""]);
1764     InitBasicFS, Always, TestOutputList (
1765       [["upload"; "test-command"; "/test-command"];
1766        ["chmod"; "0o755"; "/test-command"];
1767        ["command_lines"; "/test-command 6"]], ["";"";"Result6";""]);
1768     InitBasicFS, Always, TestOutputList (
1769       [["upload"; "test-command"; "/test-command"];
1770        ["chmod"; "0o755"; "/test-command"];
1771        ["command_lines"; "/test-command 7"]], []);
1772     InitBasicFS, Always, TestOutputList (
1773       [["upload"; "test-command"; "/test-command"];
1774        ["chmod"; "0o755"; "/test-command"];
1775        ["command_lines"; "/test-command 8"]], [""]);
1776     InitBasicFS, Always, TestOutputList (
1777       [["upload"; "test-command"; "/test-command"];
1778        ["chmod"; "0o755"; "/test-command"];
1779        ["command_lines"; "/test-command 9"]], ["";""]);
1780     InitBasicFS, Always, TestOutputList (
1781       [["upload"; "test-command"; "/test-command"];
1782        ["chmod"; "0o755"; "/test-command"];
1783        ["command_lines"; "/test-command 10"]], ["Result10-1";"Result10-2"]);
1784     InitBasicFS, Always, TestOutputList (
1785       [["upload"; "test-command"; "/test-command"];
1786        ["chmod"; "0o755"; "/test-command"];
1787        ["command_lines"; "/test-command 11"]], ["Result11-1";"Result11-2"])],
1788    "run a command, returning lines",
1789    "\
1790 This is the same as C<guestfs_command>, but splits the
1791 result into a list of lines.
1792
1793 See also: C<guestfs_sh_lines>");
1794
1795   ("stat", (RStruct ("statbuf", "stat"), [Pathname "path"]), 52, [],
1796    [InitISOFS, Always, TestOutputStruct (
1797       [["stat"; "/empty"]], [CompareWithInt ("size", 0)])],
1798    "get file information",
1799    "\
1800 Returns file information for the given C<path>.
1801
1802 This is the same as the C<stat(2)> system call.");
1803
1804   ("lstat", (RStruct ("statbuf", "stat"), [Pathname "path"]), 53, [],
1805    [InitISOFS, Always, TestOutputStruct (
1806       [["lstat"; "/empty"]], [CompareWithInt ("size", 0)])],
1807    "get file information for a symbolic link",
1808    "\
1809 Returns file information for the given C<path>.
1810
1811 This is the same as C<guestfs_stat> except that if C<path>
1812 is a symbolic link, then the link is stat-ed, not the file it
1813 refers to.
1814
1815 This is the same as the C<lstat(2)> system call.");
1816
1817   ("statvfs", (RStruct ("statbuf", "statvfs"), [Pathname "path"]), 54, [],
1818    [InitISOFS, Always, TestOutputStruct (
1819       [["statvfs"; "/"]], [CompareWithInt ("namemax", 255)])],
1820    "get file system statistics",
1821    "\
1822 Returns file system statistics for any mounted file system.
1823 C<path> should be a file or directory in the mounted file system
1824 (typically it is the mount point itself, but it doesn't need to be).
1825
1826 This is the same as the C<statvfs(2)> system call.");
1827
1828   ("tune2fs_l", (RHashtable "superblock", [Device "device"]), 55, [],
1829    [], (* XXX test *)
1830    "get ext2/ext3/ext4 superblock details",
1831    "\
1832 This returns the contents of the ext2, ext3 or ext4 filesystem
1833 superblock on C<device>.
1834
1835 It is the same as running C<tune2fs -l device>.  See L<tune2fs(8)>
1836 manpage for more details.  The list of fields returned isn't
1837 clearly defined, and depends on both the version of C<tune2fs>
1838 that libguestfs was built against, and the filesystem itself.");
1839
1840   ("blockdev_setro", (RErr, [Device "device"]), 56, [],
1841    [InitEmpty, Always, TestOutputTrue (
1842       [["blockdev_setro"; "/dev/sda"];
1843        ["blockdev_getro"; "/dev/sda"]])],
1844    "set block device to read-only",
1845    "\
1846 Sets the block device named C<device> to read-only.
1847
1848 This uses the L<blockdev(8)> command.");
1849
1850   ("blockdev_setrw", (RErr, [Device "device"]), 57, [],
1851    [InitEmpty, Always, TestOutputFalse (
1852       [["blockdev_setrw"; "/dev/sda"];
1853        ["blockdev_getro"; "/dev/sda"]])],
1854    "set block device to read-write",
1855    "\
1856 Sets the block device named C<device> to read-write.
1857
1858 This uses the L<blockdev(8)> command.");
1859
1860   ("blockdev_getro", (RBool "ro", [Device "device"]), 58, [],
1861    [InitEmpty, Always, TestOutputTrue (
1862       [["blockdev_setro"; "/dev/sda"];
1863        ["blockdev_getro"; "/dev/sda"]])],
1864    "is block device set to read-only",
1865    "\
1866 Returns a boolean indicating if the block device is read-only
1867 (true if read-only, false if not).
1868
1869 This uses the L<blockdev(8)> command.");
1870
1871   ("blockdev_getss", (RInt "sectorsize", [Device "device"]), 59, [],
1872    [InitEmpty, Always, TestOutputInt (
1873       [["blockdev_getss"; "/dev/sda"]], 512)],
1874    "get sectorsize of block device",
1875    "\
1876 This returns the size of sectors on a block device.
1877 Usually 512, but can be larger for modern devices.
1878
1879 (Note, this is not the size in sectors, use C<guestfs_blockdev_getsz>
1880 for that).
1881
1882 This uses the L<blockdev(8)> command.");
1883
1884   ("blockdev_getbsz", (RInt "blocksize", [Device "device"]), 60, [],
1885    [InitEmpty, Always, TestOutputInt (
1886       [["blockdev_getbsz"; "/dev/sda"]], 4096)],
1887    "get blocksize of block device",
1888    "\
1889 This returns the block size of a device.
1890
1891 (Note this is different from both I<size in blocks> and
1892 I<filesystem block size>).
1893
1894 This uses the L<blockdev(8)> command.");
1895
1896   ("blockdev_setbsz", (RErr, [Device "device"; Int "blocksize"]), 61, [],
1897    [], (* XXX test *)
1898    "set blocksize of block device",
1899    "\
1900 This sets the block size of a device.
1901
1902 (Note this is different from both I<size in blocks> and
1903 I<filesystem block size>).
1904
1905 This uses the L<blockdev(8)> command.");
1906
1907   ("blockdev_getsz", (RInt64 "sizeinsectors", [Device "device"]), 62, [],
1908    [InitEmpty, Always, TestOutputInt (
1909       [["blockdev_getsz"; "/dev/sda"]], 1024000)],
1910    "get total size of device in 512-byte sectors",
1911    "\
1912 This returns the size of the device in units of 512-byte sectors
1913 (even if the sectorsize isn't 512 bytes ... weird).
1914
1915 See also C<guestfs_blockdev_getss> for the real sector size of
1916 the device, and C<guestfs_blockdev_getsize64> for the more
1917 useful I<size in bytes>.
1918
1919 This uses the L<blockdev(8)> command.");
1920
1921   ("blockdev_getsize64", (RInt64 "sizeinbytes", [Device "device"]), 63, [],
1922    [InitEmpty, Always, TestOutputInt (
1923       [["blockdev_getsize64"; "/dev/sda"]], 524288000)],
1924    "get total size of device in bytes",
1925    "\
1926 This returns the size of the device in bytes.
1927
1928 See also C<guestfs_blockdev_getsz>.
1929
1930 This uses the L<blockdev(8)> command.");
1931
1932   ("blockdev_flushbufs", (RErr, [Device "device"]), 64, [],
1933    [InitEmpty, Always, TestRun
1934       [["blockdev_flushbufs"; "/dev/sda"]]],
1935    "flush device buffers",
1936    "\
1937 This tells the kernel to flush internal buffers associated
1938 with C<device>.
1939
1940 This uses the L<blockdev(8)> command.");
1941
1942   ("blockdev_rereadpt", (RErr, [Device "device"]), 65, [],
1943    [InitEmpty, Always, TestRun
1944       [["blockdev_rereadpt"; "/dev/sda"]]],
1945    "reread partition table",
1946    "\
1947 Reread the partition table on C<device>.
1948
1949 This uses the L<blockdev(8)> command.");
1950
1951   ("upload", (RErr, [FileIn "filename"; Dev_or_Path "remotefilename"]), 66, [],
1952    [InitBasicFS, Always, TestOutput (
1953       (* Pick a file from cwd which isn't likely to change. *)
1954       [["upload"; "../COPYING.LIB"; "/COPYING.LIB"];
1955        ["checksum"; "md5"; "/COPYING.LIB"]],
1956       Digest.to_hex (Digest.file "COPYING.LIB"))],
1957    "upload a file from the local machine",
1958    "\
1959 Upload local file C<filename> to C<remotefilename> on the
1960 filesystem.
1961
1962 C<filename> can also be a named pipe.
1963
1964 See also C<guestfs_download>.");
1965
1966   ("download", (RErr, [Dev_or_Path "remotefilename"; FileOut "filename"]), 67, [],
1967    [InitBasicFS, Always, TestOutput (
1968       (* Pick a file from cwd which isn't likely to change. *)
1969       [["upload"; "../COPYING.LIB"; "/COPYING.LIB"];
1970        ["download"; "/COPYING.LIB"; "testdownload.tmp"];
1971        ["upload"; "testdownload.tmp"; "/upload"];
1972        ["checksum"; "md5"; "/upload"]],
1973       Digest.to_hex (Digest.file "COPYING.LIB"))],
1974    "download a file to the local machine",
1975    "\
1976 Download file C<remotefilename> and save it as C<filename>
1977 on the local machine.
1978
1979 C<filename> can also be a named pipe.
1980
1981 See also C<guestfs_upload>, C<guestfs_cat>.");
1982
1983   ("checksum", (RString "checksum", [String "csumtype"; Pathname "path"]), 68, [],
1984    [InitISOFS, Always, TestOutput (
1985       [["checksum"; "crc"; "/known-3"]], "2891671662");
1986     InitISOFS, Always, TestLastFail (
1987       [["checksum"; "crc"; "/notexists"]]);
1988     InitISOFS, Always, TestOutput (
1989       [["checksum"; "md5"; "/known-3"]], "46d6ca27ee07cdc6fa99c2e138cc522c");
1990     InitISOFS, Always, TestOutput (
1991       [["checksum"; "sha1"; "/known-3"]], "b7ebccc3ee418311091c3eda0a45b83c0a770f15");
1992     InitISOFS, Always, TestOutput (
1993       [["checksum"; "sha224"; "/known-3"]], "d2cd1774b28f3659c14116be0a6dc2bb5c4b350ce9cd5defac707741");
1994     InitISOFS, Always, TestOutput (
1995       [["checksum"; "sha256"; "/known-3"]], "75bb71b90cd20cb13f86d2bea8dad63ac7194e7517c3b52b8d06ff52d3487d30");
1996     InitISOFS, Always, TestOutput (
1997       [["checksum"; "sha384"; "/known-3"]], "5fa7883430f357b5d7b7271d3a1d2872b51d73cba72731de6863d3dea55f30646af2799bef44d5ea776a5ec7941ac640");
1998     InitISOFS, Always, TestOutput (
1999       [["checksum"; "sha512"; "/known-3"]], "2794062c328c6b216dca90443b7f7134c5f40e56bd0ed7853123275a09982a6f992e6ca682f9d2fba34a4c5e870d8fe077694ff831e3032a004ee077e00603f6");
2000     (* Test for RHBZ#579608, absolute symbolic links. *)
2001     InitISOFS, Always, TestOutput (
2002       [["checksum"; "sha512"; "/abssymlink"]], "5f57d0639bc95081c53afc63a449403883818edc64da48930ad6b1a4fb49be90404686877743fbcd7c99811f3def7df7bc22635c885c6a8cf79c806b43451c1a")],
2003    "compute MD5, SHAx or CRC checksum of file",
2004    "\
2005 This call computes the MD5, SHAx or CRC checksum of the
2006 file named C<path>.
2007
2008 The type of checksum to compute is given by the C<csumtype>
2009 parameter which must have one of the following values:
2010
2011 =over 4
2012
2013 =item C<crc>
2014
2015 Compute the cyclic redundancy check (CRC) specified by POSIX
2016 for the C<cksum> command.
2017
2018 =item C<md5>
2019
2020 Compute the MD5 hash (using the C<md5sum> program).
2021
2022 =item C<sha1>
2023
2024 Compute the SHA1 hash (using the C<sha1sum> program).
2025
2026 =item C<sha224>
2027
2028 Compute the SHA224 hash (using the C<sha224sum> program).
2029
2030 =item C<sha256>
2031
2032 Compute the SHA256 hash (using the C<sha256sum> program).
2033
2034 =item C<sha384>
2035
2036 Compute the SHA384 hash (using the C<sha384sum> program).
2037
2038 =item C<sha512>
2039
2040 Compute the SHA512 hash (using the C<sha512sum> program).
2041
2042 =back
2043
2044 The checksum is returned as a printable string.
2045
2046 To get the checksum for a device, use C<guestfs_checksum_device>.
2047
2048 To get the checksums for many files, use C<guestfs_checksums_out>.");
2049
2050   ("tar_in", (RErr, [FileIn "tarfile"; Pathname "directory"]), 69, [],
2051    [InitBasicFS, Always, TestOutput (
2052       [["tar_in"; "../images/helloworld.tar"; "/"];
2053        ["cat"; "/hello"]], "hello\n")],
2054    "unpack tarfile to directory",
2055    "\
2056 This command uploads and unpacks local file C<tarfile> (an
2057 I<uncompressed> tar file) into C<directory>.
2058
2059 To upload a compressed tarball, use C<guestfs_tgz_in>
2060 or C<guestfs_txz_in>.");
2061
2062   ("tar_out", (RErr, [String "directory"; FileOut "tarfile"]), 70, [],
2063    [],
2064    "pack directory into tarfile",
2065    "\
2066 This command packs the contents of C<directory> and downloads
2067 it to local file C<tarfile>.
2068
2069 To download a compressed tarball, use C<guestfs_tgz_out>
2070 or C<guestfs_txz_out>.");
2071
2072   ("tgz_in", (RErr, [FileIn "tarball"; Pathname "directory"]), 71, [],
2073    [InitBasicFS, Always, TestOutput (
2074       [["tgz_in"; "../images/helloworld.tar.gz"; "/"];
2075        ["cat"; "/hello"]], "hello\n")],
2076    "unpack compressed tarball to directory",
2077    "\
2078 This command uploads and unpacks local file C<tarball> (a
2079 I<gzip compressed> tar file) into C<directory>.
2080
2081 To upload an uncompressed tarball, use C<guestfs_tar_in>.");
2082
2083   ("tgz_out", (RErr, [Pathname "directory"; FileOut "tarball"]), 72, [],
2084    [],
2085    "pack directory into compressed tarball",
2086    "\
2087 This command packs the contents of C<directory> and downloads
2088 it to local file C<tarball>.
2089
2090 To download an uncompressed tarball, use C<guestfs_tar_out>.");
2091
2092   ("mount_ro", (RErr, [Device "device"; String "mountpoint"]), 73, [],
2093    [InitBasicFS, Always, TestLastFail (
2094       [["umount"; "/"];
2095        ["mount_ro"; "/dev/sda1"; "/"];
2096        ["touch"; "/new"]]);
2097     InitBasicFS, Always, TestOutput (
2098       [["write"; "/new"; "data"];
2099        ["umount"; "/"];
2100        ["mount_ro"; "/dev/sda1"; "/"];
2101        ["cat"; "/new"]], "data")],
2102    "mount a guest disk, read-only",
2103    "\
2104 This is the same as the C<guestfs_mount> command, but it
2105 mounts the filesystem with the read-only (I<-o ro>) flag.");
2106
2107   ("mount_options", (RErr, [String "options"; Device "device"; String "mountpoint"]), 74, [],
2108    [],
2109    "mount a guest disk with mount options",
2110    "\
2111 This is the same as the C<guestfs_mount> command, but it
2112 allows you to set the mount options as for the
2113 L<mount(8)> I<-o> flag.
2114
2115 If the C<options> parameter is an empty string, then
2116 no options are passed (all options default to whatever
2117 the filesystem uses).");
2118
2119   ("mount_vfs", (RErr, [String "options"; String "vfstype"; Device "device"; String "mountpoint"]), 75, [],
2120    [],
2121    "mount a guest disk with mount options and vfstype",
2122    "\
2123 This is the same as the C<guestfs_mount> command, but it
2124 allows you to set both the mount options and the vfstype
2125 as for the L<mount(8)> I<-o> and I<-t> flags.");
2126
2127   ("debug", (RString "result", [String "subcmd"; StringList "extraargs"]), 76, [],
2128    [],
2129    "debugging and internals",
2130    "\
2131 The C<guestfs_debug> command exposes some internals of
2132 C<guestfsd> (the guestfs daemon) that runs inside the
2133 qemu subprocess.
2134
2135 There is no comprehensive help for this command.  You have
2136 to look at the file C<daemon/debug.c> in the libguestfs source
2137 to find out what you can do.");
2138
2139   ("lvremove", (RErr, [Device "device"]), 77, [Optional "lvm2"],
2140    [InitEmpty, Always, TestOutputList (
2141       [["part_disk"; "/dev/sda"; "mbr"];
2142        ["pvcreate"; "/dev/sda1"];
2143        ["vgcreate"; "VG"; "/dev/sda1"];
2144        ["lvcreate"; "LV1"; "VG"; "50"];
2145        ["lvcreate"; "LV2"; "VG"; "50"];
2146        ["lvremove"; "/dev/VG/LV1"];
2147        ["lvs"]], ["/dev/VG/LV2"]);
2148     InitEmpty, Always, TestOutputList (
2149       [["part_disk"; "/dev/sda"; "mbr"];
2150        ["pvcreate"; "/dev/sda1"];
2151        ["vgcreate"; "VG"; "/dev/sda1"];
2152        ["lvcreate"; "LV1"; "VG"; "50"];
2153        ["lvcreate"; "LV2"; "VG"; "50"];
2154        ["lvremove"; "/dev/VG"];
2155        ["lvs"]], []);
2156     InitEmpty, Always, TestOutputList (
2157       [["part_disk"; "/dev/sda"; "mbr"];
2158        ["pvcreate"; "/dev/sda1"];
2159        ["vgcreate"; "VG"; "/dev/sda1"];
2160        ["lvcreate"; "LV1"; "VG"; "50"];
2161        ["lvcreate"; "LV2"; "VG"; "50"];
2162        ["lvremove"; "/dev/VG"];
2163        ["vgs"]], ["VG"])],
2164    "remove an LVM logical volume",
2165    "\
2166 Remove an LVM logical volume C<device>, where C<device> is
2167 the path to the LV, such as C</dev/VG/LV>.
2168
2169 You can also remove all LVs in a volume group by specifying
2170 the VG name, C</dev/VG>.");
2171
2172   ("vgremove", (RErr, [String "vgname"]), 78, [Optional "lvm2"],
2173    [InitEmpty, Always, TestOutputList (
2174       [["part_disk"; "/dev/sda"; "mbr"];
2175        ["pvcreate"; "/dev/sda1"];
2176        ["vgcreate"; "VG"; "/dev/sda1"];
2177        ["lvcreate"; "LV1"; "VG"; "50"];
2178        ["lvcreate"; "LV2"; "VG"; "50"];
2179        ["vgremove"; "VG"];
2180        ["lvs"]], []);
2181     InitEmpty, Always, TestOutputList (
2182       [["part_disk"; "/dev/sda"; "mbr"];
2183        ["pvcreate"; "/dev/sda1"];
2184        ["vgcreate"; "VG"; "/dev/sda1"];
2185        ["lvcreate"; "LV1"; "VG"; "50"];
2186        ["lvcreate"; "LV2"; "VG"; "50"];
2187        ["vgremove"; "VG"];
2188        ["vgs"]], [])],
2189    "remove an LVM volume group",
2190    "\
2191 Remove an LVM volume group C<vgname>, (for example C<VG>).
2192
2193 This also forcibly removes all logical volumes in the volume
2194 group (if any).");
2195
2196   ("pvremove", (RErr, [Device "device"]), 79, [Optional "lvm2"],
2197    [InitEmpty, Always, TestOutputListOfDevices (
2198       [["part_disk"; "/dev/sda"; "mbr"];
2199        ["pvcreate"; "/dev/sda1"];
2200        ["vgcreate"; "VG"; "/dev/sda1"];
2201        ["lvcreate"; "LV1"; "VG"; "50"];
2202        ["lvcreate"; "LV2"; "VG"; "50"];
2203        ["vgremove"; "VG"];
2204        ["pvremove"; "/dev/sda1"];
2205        ["lvs"]], []);
2206     InitEmpty, Always, TestOutputListOfDevices (
2207       [["part_disk"; "/dev/sda"; "mbr"];
2208        ["pvcreate"; "/dev/sda1"];
2209        ["vgcreate"; "VG"; "/dev/sda1"];
2210        ["lvcreate"; "LV1"; "VG"; "50"];
2211        ["lvcreate"; "LV2"; "VG"; "50"];
2212        ["vgremove"; "VG"];
2213        ["pvremove"; "/dev/sda1"];
2214        ["vgs"]], []);
2215     InitEmpty, Always, TestOutputListOfDevices (
2216       [["part_disk"; "/dev/sda"; "mbr"];
2217        ["pvcreate"; "/dev/sda1"];
2218        ["vgcreate"; "VG"; "/dev/sda1"];
2219        ["lvcreate"; "LV1"; "VG"; "50"];
2220        ["lvcreate"; "LV2"; "VG"; "50"];
2221        ["vgremove"; "VG"];
2222        ["pvremove"; "/dev/sda1"];
2223        ["pvs"]], [])],
2224    "remove an LVM physical volume",
2225    "\
2226 This wipes a physical volume C<device> so that LVM will no longer
2227 recognise it.
2228
2229 The implementation uses the C<pvremove> command which refuses to
2230 wipe physical volumes that contain any volume groups, so you have
2231 to remove those first.");
2232
2233   ("set_e2label", (RErr, [Device "device"; String "label"]), 80, [],
2234    [InitBasicFS, Always, TestOutput (
2235       [["set_e2label"; "/dev/sda1"; "testlabel"];
2236        ["get_e2label"; "/dev/sda1"]], "testlabel")],
2237    "set the ext2/3/4 filesystem label",
2238    "\
2239 This sets the ext2/3/4 filesystem label of the filesystem on
2240 C<device> to C<label>.  Filesystem labels are limited to
2241 16 characters.
2242
2243 You can use either C<guestfs_tune2fs_l> or C<guestfs_get_e2label>
2244 to return the existing label on a filesystem.");
2245
2246   ("get_e2label", (RString "label", [Device "device"]), 81, [DeprecatedBy "vfs_label"],
2247    [],
2248    "get the ext2/3/4 filesystem label",
2249    "\
2250 This returns the ext2/3/4 filesystem label of the filesystem on
2251 C<device>.");
2252
2253   ("set_e2uuid", (RErr, [Device "device"; String "uuid"]), 82, [],
2254    (let uuid = uuidgen () in
2255     [InitBasicFS, Always, TestOutput (
2256        [["set_e2uuid"; "/dev/sda1"; uuid];
2257         ["get_e2uuid"; "/dev/sda1"]], uuid);
2258      InitBasicFS, Always, TestOutput (
2259        [["set_e2uuid"; "/dev/sda1"; "clear"];
2260         ["get_e2uuid"; "/dev/sda1"]], "");
2261      (* We can't predict what UUIDs will be, so just check the commands run. *)
2262      InitBasicFS, Always, TestRun (
2263        [["set_e2uuid"; "/dev/sda1"; "random"]]);
2264      InitBasicFS, Always, TestRun (
2265        [["set_e2uuid"; "/dev/sda1"; "time"]])]),
2266    "set the ext2/3/4 filesystem UUID",
2267    "\
2268 This sets the ext2/3/4 filesystem UUID of the filesystem on
2269 C<device> to C<uuid>.  The format of the UUID and alternatives
2270 such as C<clear>, C<random> and C<time> are described in the
2271 L<tune2fs(8)> manpage.
2272
2273 You can use either C<guestfs_tune2fs_l> or C<guestfs_get_e2uuid>
2274 to return the existing UUID of a filesystem.");
2275
2276   ("get_e2uuid", (RString "uuid", [Device "device"]), 83, [DeprecatedBy "vfs_uuid"],
2277    (* Regression test for RHBZ#597112. *)
2278    (let uuid = uuidgen () in
2279     [InitBasicFS, Always, TestOutput (
2280        [["mke2journal"; "1024"; "/dev/sdb"];
2281         ["set_e2uuid"; "/dev/sdb"; uuid];
2282         ["get_e2uuid"; "/dev/sdb"]], uuid)]),
2283    "get the ext2/3/4 filesystem UUID",
2284    "\
2285 This returns the ext2/3/4 filesystem UUID of the filesystem on
2286 C<device>.");
2287
2288   ("fsck", (RInt "status", [String "fstype"; Device "device"]), 84, [FishOutput FishOutputHexadecimal],
2289    [InitBasicFS, Always, TestOutputInt (
2290       [["umount"; "/dev/sda1"];
2291        ["fsck"; "ext2"; "/dev/sda1"]], 0);
2292     InitBasicFS, Always, TestOutputInt (
2293       [["umount"; "/dev/sda1"];
2294        ["zero"; "/dev/sda1"];
2295        ["fsck"; "ext2"; "/dev/sda1"]], 8)],
2296    "run the filesystem checker",
2297    "\
2298 This runs the filesystem checker (fsck) on C<device> which
2299 should have filesystem type C<fstype>.
2300
2301 The returned integer is the status.  See L<fsck(8)> for the
2302 list of status codes from C<fsck>.
2303
2304 Notes:
2305
2306 =over 4
2307
2308 =item *
2309
2310 Multiple status codes can be summed together.
2311
2312 =item *
2313
2314 A non-zero return code can mean \"success\", for example if
2315 errors have been corrected on the filesystem.
2316
2317 =item *
2318
2319 Checking or repairing NTFS volumes is not supported
2320 (by linux-ntfs).
2321
2322 =back
2323
2324 This command is entirely equivalent to running C<fsck -a -t fstype device>.");
2325
2326   ("zero", (RErr, [Device "device"]), 85, [],
2327    [InitBasicFS, Always, TestOutput (
2328       [["umount"; "/dev/sda1"];
2329        ["zero"; "/dev/sda1"];
2330        ["file"; "/dev/sda1"]], "data")],
2331    "write zeroes to the device",
2332    "\
2333 This command writes zeroes over the first few blocks of C<device>.
2334
2335 How many blocks are zeroed isn't specified (but it's I<not> enough
2336 to securely wipe the device).  It should be sufficient to remove
2337 any partition tables, filesystem superblocks and so on.
2338
2339 See also: C<guestfs_zero_device>, C<guestfs_scrub_device>.");
2340
2341   ("grub_install", (RErr, [Pathname "root"; Device "device"]), 86, [],
2342    (* See:
2343     * https://bugzilla.redhat.com/show_bug.cgi?id=484986
2344     * https://bugzilla.redhat.com/show_bug.cgi?id=479760
2345     *)
2346    [InitBasicFS, Always, TestOutputTrue (
2347       [["mkdir_p"; "/boot/grub"];
2348        ["write"; "/boot/grub/device.map"; "(hd0) /dev/vda"];
2349        ["grub_install"; "/"; "/dev/vda"];
2350        ["is_dir"; "/boot"]])],
2351    "install GRUB",
2352    "\
2353 This command installs GRUB (the Grand Unified Bootloader) on
2354 C<device>, with the root directory being C<root>.
2355
2356 Note: If grub-install reports the error
2357 \"No suitable drive was found in the generated device map.\"
2358 it may be that you need to create a C</boot/grub/device.map>
2359 file first that contains the mapping between grub device names
2360 and Linux device names.  It is usually sufficient to create
2361 a file containing:
2362
2363  (hd0) /dev/vda
2364
2365 replacing C</dev/vda> with the name of the installation device.");
2366
2367   ("cp", (RErr, [Pathname "src"; Pathname "dest"]), 87, [],
2368    [InitBasicFS, Always, TestOutput (
2369       [["write"; "/old"; "file content"];
2370        ["cp"; "/old"; "/new"];
2371        ["cat"; "/new"]], "file content");
2372     InitBasicFS, Always, TestOutputTrue (
2373       [["write"; "/old"; "file content"];
2374        ["cp"; "/old"; "/new"];
2375        ["is_file"; "/old"]]);
2376     InitBasicFS, Always, TestOutput (
2377       [["write"; "/old"; "file content"];
2378        ["mkdir"; "/dir"];
2379        ["cp"; "/old"; "/dir/new"];
2380        ["cat"; "/dir/new"]], "file content")],
2381    "copy a file",
2382    "\
2383 This copies a file from C<src> to C<dest> where C<dest> is
2384 either a destination filename or destination directory.");
2385
2386   ("cp_a", (RErr, [Pathname "src"; Pathname "dest"]), 88, [],
2387    [InitBasicFS, Always, TestOutput (
2388       [["mkdir"; "/olddir"];
2389        ["mkdir"; "/newdir"];
2390        ["write"; "/olddir/file"; "file content"];
2391        ["cp_a"; "/olddir"; "/newdir"];
2392        ["cat"; "/newdir/olddir/file"]], "file content")],
2393    "copy a file or directory recursively",
2394    "\
2395 This copies a file or directory from C<src> to C<dest>
2396 recursively using the C<cp -a> command.");
2397
2398   ("mv", (RErr, [Pathname "src"; Pathname "dest"]), 89, [],
2399    [InitBasicFS, Always, TestOutput (
2400       [["write"; "/old"; "file content"];
2401        ["mv"; "/old"; "/new"];
2402        ["cat"; "/new"]], "file content");
2403     InitBasicFS, Always, TestOutputFalse (
2404       [["write"; "/old"; "file content"];
2405        ["mv"; "/old"; "/new"];
2406        ["is_file"; "/old"]])],
2407    "move a file",
2408    "\
2409 This moves a file from C<src> to C<dest> where C<dest> is
2410 either a destination filename or destination directory.");
2411
2412   ("drop_caches", (RErr, [Int "whattodrop"]), 90, [],
2413    [InitEmpty, Always, TestRun (
2414       [["drop_caches"; "3"]])],
2415    "drop kernel page cache, dentries and inodes",
2416    "\
2417 This instructs the guest kernel to drop its page cache,
2418 and/or dentries and inode caches.  The parameter C<whattodrop>
2419 tells the kernel what precisely to drop, see
2420 L<http://linux-mm.org/Drop_Caches>
2421
2422 Setting C<whattodrop> to 3 should drop everything.
2423
2424 This automatically calls L<sync(2)> before the operation,
2425 so that the maximum guest memory is freed.");
2426
2427   ("dmesg", (RString "kmsgs", []), 91, [],
2428    [InitEmpty, Always, TestRun (
2429       [["dmesg"]])],
2430    "return kernel messages",
2431    "\
2432 This returns the kernel messages (C<dmesg> output) from
2433 the guest kernel.  This is sometimes useful for extended
2434 debugging of problems.
2435
2436 Another way to get the same information is to enable
2437 verbose messages with C<guestfs_set_verbose> or by setting
2438 the environment variable C<LIBGUESTFS_DEBUG=1> before
2439 running the program.");
2440
2441   ("ping_daemon", (RErr, []), 92, [],
2442    [InitEmpty, Always, TestRun (
2443       [["ping_daemon"]])],
2444    "ping the guest daemon",
2445    "\
2446 This is a test probe into the guestfs daemon running inside
2447 the qemu subprocess.  Calling this function checks that the
2448 daemon responds to the ping message, without affecting the daemon
2449 or attached block device(s) in any other way.");
2450
2451   ("equal", (RBool "equality", [Pathname "file1"; Pathname "file2"]), 93, [],
2452    [InitBasicFS, Always, TestOutputTrue (
2453       [["write"; "/file1"; "contents of a file"];
2454        ["cp"; "/file1"; "/file2"];
2455        ["equal"; "/file1"; "/file2"]]);
2456     InitBasicFS, Always, TestOutputFalse (
2457       [["write"; "/file1"; "contents of a file"];
2458        ["write"; "/file2"; "contents of another file"];
2459        ["equal"; "/file1"; "/file2"]]);
2460     InitBasicFS, Always, TestLastFail (
2461       [["equal"; "/file1"; "/file2"]])],
2462    "test if two files have equal contents",
2463    "\
2464 This compares the two files C<file1> and C<file2> and returns
2465 true if their content is exactly equal, or false otherwise.
2466
2467 The external L<cmp(1)> program is used for the comparison.");
2468
2469   ("strings", (RStringList "stringsout", [Pathname "path"]), 94, [ProtocolLimitWarning],
2470    [InitISOFS, Always, TestOutputList (
2471       [["strings"; "/known-5"]], ["abcdefghi"; "jklmnopqr"]);
2472     InitISOFS, Always, TestOutputList (
2473       [["strings"; "/empty"]], []);
2474     (* Test for RHBZ#579608, absolute symbolic links. *)
2475     InitISOFS, Always, TestRun (
2476       [["strings"; "/abssymlink"]])],
2477    "print the printable strings in a file",
2478    "\
2479 This runs the L<strings(1)> command on a file and returns
2480 the list of printable strings found.");
2481
2482   ("strings_e", (RStringList "stringsout", [String "encoding"; Pathname "path"]), 95, [ProtocolLimitWarning],
2483    [InitISOFS, Always, TestOutputList (
2484       [["strings_e"; "b"; "/known-5"]], []);
2485     InitBasicFS, Always, TestOutputList (
2486       [["write"; "/new"; "\000h\000e\000l\000l\000o\000\n\000w\000o\000r\000l\000d\000\n"];
2487        ["strings_e"; "b"; "/new"]], ["hello"; "world"])],
2488    "print the printable strings in a file",
2489    "\
2490 This is like the C<guestfs_strings> command, but allows you to
2491 specify the encoding of strings that are looked for in
2492 the source file C<path>.
2493
2494 Allowed encodings are:
2495
2496 =over 4
2497
2498 =item s
2499
2500 Single 7-bit-byte characters like ASCII and the ASCII-compatible
2501 parts of ISO-8859-X (this is what C<guestfs_strings> uses).
2502
2503 =item S
2504
2505 Single 8-bit-byte characters.
2506
2507 =item b
2508
2509 16-bit big endian strings such as those encoded in
2510 UTF-16BE or UCS-2BE.
2511
2512 =item l (lower case letter L)
2513
2514 16-bit little endian such as UTF-16LE and UCS-2LE.
2515 This is useful for examining binaries in Windows guests.
2516
2517 =item B
2518
2519 32-bit big endian such as UCS-4BE.
2520
2521 =item L
2522
2523 32-bit little endian such as UCS-4LE.
2524
2525 =back
2526
2527 The returned strings are transcoded to UTF-8.");
2528
2529   ("hexdump", (RString "dump", [Pathname "path"]), 96, [ProtocolLimitWarning],
2530    [InitISOFS, Always, TestOutput (
2531       [["hexdump"; "/known-4"]], "00000000  61 62 63 0a 64 65 66 0a  67 68 69                 |abc.def.ghi|\n0000000b\n");
2532     (* Test for RHBZ#501888c2 regression which caused large hexdump
2533      * commands to segfault.
2534      *)
2535     InitISOFS, Always, TestRun (
2536       [["hexdump"; "/100krandom"]]);
2537     (* Test for RHBZ#579608, absolute symbolic links. *)
2538     InitISOFS, Always, TestRun (
2539       [["hexdump"; "/abssymlink"]])],
2540    "dump a file in hexadecimal",
2541    "\
2542 This runs C<hexdump -C> on the given C<path>.  The result is
2543 the human-readable, canonical hex dump of the file.");
2544
2545   ("zerofree", (RErr, [Device "device"]), 97, [Optional "zerofree"],
2546    [InitNone, Always, TestOutput (
2547       [["part_disk"; "/dev/sda"; "mbr"];
2548        ["mkfs"; "ext3"; "/dev/sda1"];
2549        ["mount_options"; ""; "/dev/sda1"; "/"];
2550        ["write"; "/new"; "test file"];
2551        ["umount"; "/dev/sda1"];
2552        ["zerofree"; "/dev/sda1"];
2553        ["mount_options"; ""; "/dev/sda1"; "/"];
2554        ["cat"; "/new"]], "test file")],
2555    "zero unused inodes and disk blocks on ext2/3 filesystem",
2556    "\
2557 This runs the I<zerofree> program on C<device>.  This program
2558 claims to zero unused inodes and disk blocks on an ext2/3
2559 filesystem, thus making it possible to compress the filesystem
2560 more effectively.
2561
2562 You should B<not> run this program if the filesystem is
2563 mounted.
2564
2565 It is possible that using this program can damage the filesystem
2566 or data on the filesystem.");
2567
2568   ("pvresize", (RErr, [Device "device"]), 98, [Optional "lvm2"],
2569    [],
2570    "resize an LVM physical volume",
2571    "\
2572 This resizes (expands or shrinks) an existing LVM physical
2573 volume to match the new size of the underlying device.");
2574
2575   ("sfdisk_N", (RErr, [Device "device"; Int "partnum";
2576                        Int "cyls"; Int "heads"; Int "sectors";
2577                        String "line"]), 99, [DangerWillRobinson],
2578    [],
2579    "modify a single partition on a block device",
2580    "\
2581 This runs L<sfdisk(8)> option to modify just the single
2582 partition C<n> (note: C<n> counts from 1).
2583
2584 For other parameters, see C<guestfs_sfdisk>.  You should usually
2585 pass C<0> for the cyls/heads/sectors parameters.
2586
2587 See also: C<guestfs_part_add>");
2588
2589   ("sfdisk_l", (RString "partitions", [Device "device"]), 100, [],
2590    [],
2591    "display the partition table",
2592    "\
2593 This displays the partition table on C<device>, in the
2594 human-readable output of the L<sfdisk(8)> command.  It is
2595 not intended to be parsed.
2596
2597 See also: C<guestfs_part_list>");
2598
2599   ("sfdisk_kernel_geometry", (RString "partitions", [Device "device"]), 101, [],
2600    [],
2601    "display the kernel geometry",
2602    "\
2603 This displays the kernel's idea of the geometry of C<device>.
2604
2605 The result is in human-readable format, and not designed to
2606 be parsed.");
2607
2608   ("sfdisk_disk_geometry", (RString "partitions", [Device "device"]), 102, [],
2609    [],
2610    "display the disk geometry from the partition table",
2611    "\
2612 This displays the disk geometry of C<device> read from the
2613 partition table.  Especially in the case where the underlying
2614 block device has been resized, this can be different from the
2615 kernel's idea of the geometry (see C<guestfs_sfdisk_kernel_geometry>).
2616
2617 The result is in human-readable format, and not designed to
2618 be parsed.");
2619
2620   ("vg_activate_all", (RErr, [Bool "activate"]), 103, [Optional "lvm2"],
2621    [],
2622    "activate or deactivate all volume groups",
2623    "\
2624 This command activates or (if C<activate> is false) deactivates
2625 all logical volumes in all volume groups.
2626 If activated, then they are made known to the
2627 kernel, ie. they appear as C</dev/mapper> devices.  If deactivated,
2628 then those devices disappear.
2629
2630 This command is the same as running C<vgchange -a y|n>");
2631
2632   ("vg_activate", (RErr, [Bool "activate"; StringList "volgroups"]), 104, [Optional "lvm2"],
2633    [],
2634    "activate or deactivate some volume groups",
2635    "\
2636 This command activates or (if C<activate> is false) deactivates
2637 all logical volumes in the listed volume groups C<volgroups>.
2638 If activated, then they are made known to the
2639 kernel, ie. they appear as C</dev/mapper> devices.  If deactivated,
2640 then those devices disappear.
2641
2642 This command is the same as running C<vgchange -a y|n volgroups...>
2643
2644 Note that if C<volgroups> is an empty list then B<all> volume groups
2645 are activated or deactivated.");
2646
2647   ("lvresize", (RErr, [Device "device"; Int "mbytes"]), 105, [Optional "lvm2"],
2648    [InitNone, Always, TestOutput (
2649       [["part_disk"; "/dev/sda"; "mbr"];
2650        ["pvcreate"; "/dev/sda1"];
2651        ["vgcreate"; "VG"; "/dev/sda1"];
2652        ["lvcreate"; "LV"; "VG"; "10"];
2653        ["mkfs"; "ext2"; "/dev/VG/LV"];
2654        ["mount_options"; ""; "/dev/VG/LV"; "/"];
2655        ["write"; "/new"; "test content"];
2656        ["umount"; "/"];
2657        ["lvresize"; "/dev/VG/LV"; "20"];
2658        ["e2fsck_f"; "/dev/VG/LV"];
2659        ["resize2fs"; "/dev/VG/LV"];
2660        ["mount_options"; ""; "/dev/VG/LV"; "/"];
2661        ["cat"; "/new"]], "test content");
2662     InitNone, Always, TestRun (
2663       (* Make an LV smaller to test RHBZ#587484. *)
2664       [["part_disk"; "/dev/sda"; "mbr"];
2665        ["pvcreate"; "/dev/sda1"];
2666        ["vgcreate"; "VG"; "/dev/sda1"];
2667        ["lvcreate"; "LV"; "VG"; "20"];
2668        ["lvresize"; "/dev/VG/LV"; "10"]])],
2669    "resize an LVM logical volume",
2670    "\
2671 This resizes (expands or shrinks) an existing LVM logical
2672 volume to C<mbytes>.  When reducing, data in the reduced part
2673 is lost.");
2674
2675   ("resize2fs", (RErr, [Device "device"]), 106, [],
2676    [], (* lvresize tests this *)
2677    "resize an ext2, ext3 or ext4 filesystem",
2678    "\
2679 This resizes an ext2, ext3 or ext4 filesystem to match the size of
2680 the underlying device.
2681
2682 I<Note:> It is sometimes required that you run C<guestfs_e2fsck_f>
2683 on the C<device> before calling this command.  For unknown reasons
2684 C<resize2fs> sometimes gives an error about this and sometimes not.
2685 In any case, it is always safe to call C<guestfs_e2fsck_f> before
2686 calling this function.");
2687
2688   ("find", (RStringList "names", [Pathname "directory"]), 107, [ProtocolLimitWarning],
2689    [InitBasicFS, Always, TestOutputList (
2690       [["find"; "/"]], ["lost+found"]);
2691     InitBasicFS, Always, TestOutputList (
2692       [["touch"; "/a"];
2693        ["mkdir"; "/b"];
2694        ["touch"; "/b/c"];
2695        ["find"; "/"]], ["a"; "b"; "b/c"; "lost+found"]);
2696     InitBasicFS, Always, TestOutputList (
2697       [["mkdir_p"; "/a/b/c"];
2698        ["touch"; "/a/b/c/d"];
2699        ["find"; "/a/b/"]], ["c"; "c/d"])],
2700    "find all files and directories",
2701    "\
2702 This command lists out all files and directories, recursively,
2703 starting at C<directory>.  It is essentially equivalent to
2704 running the shell command C<find directory -print> but some
2705 post-processing happens on the output, described below.
2706
2707 This returns a list of strings I<without any prefix>.  Thus
2708 if the directory structure was:
2709
2710  /tmp/a
2711  /tmp/b
2712  /tmp/c/d
2713
2714 then the returned list from C<guestfs_find> C</tmp> would be
2715 4 elements:
2716
2717  a
2718  b
2719  c
2720  c/d
2721
2722 If C<directory> is not a directory, then this command returns
2723 an error.
2724
2725 The returned list is sorted.
2726
2727 See also C<guestfs_find0>.");
2728
2729   ("e2fsck_f", (RErr, [Device "device"]), 108, [],
2730    [], (* lvresize tests this *)
2731    "check an ext2/ext3 filesystem",
2732    "\
2733 This runs C<e2fsck -p -f device>, ie. runs the ext2/ext3
2734 filesystem checker on C<device>, noninteractively (C<-p>),
2735 even if the filesystem appears to be clean (C<-f>).
2736
2737 This command is only needed because of C<guestfs_resize2fs>
2738 (q.v.).  Normally you should use C<guestfs_fsck>.");
2739
2740   ("sleep", (RErr, [Int "secs"]), 109, [],
2741    [InitNone, Always, TestRun (
2742       [["sleep"; "1"]])],
2743    "sleep for some seconds",
2744    "\
2745 Sleep for C<secs> seconds.");
2746
2747   ("ntfs_3g_probe", (RInt "status", [Bool "rw"; Device "device"]), 110, [Optional "ntfs3g"],
2748    [InitNone, Always, TestOutputInt (
2749       [["part_disk"; "/dev/sda"; "mbr"];
2750        ["mkfs"; "ntfs"; "/dev/sda1"];
2751        ["ntfs_3g_probe"; "true"; "/dev/sda1"]], 0);
2752     InitNone, Always, TestOutputInt (
2753       [["part_disk"; "/dev/sda"; "mbr"];
2754        ["mkfs"; "ext2"; "/dev/sda1"];
2755        ["ntfs_3g_probe"; "true"; "/dev/sda1"]], 12)],
2756    "probe NTFS volume",
2757    "\
2758 This command runs the L<ntfs-3g.probe(8)> command which probes
2759 an NTFS C<device> for mountability.  (Not all NTFS volumes can
2760 be mounted read-write, and some cannot be mounted at all).
2761
2762 C<rw> is a boolean flag.  Set it to true if you want to test
2763 if the volume can be mounted read-write.  Set it to false if
2764 you want to test if the volume can be mounted read-only.
2765
2766 The return value is an integer which C<0> if the operation
2767 would succeed, or some non-zero value documented in the
2768 L<ntfs-3g.probe(8)> manual page.");
2769
2770   ("sh", (RString "output", [String "command"]), 111, [],
2771    [], (* XXX needs tests *)
2772    "run a command via the shell",
2773    "\
2774 This call runs a command from the guest filesystem via the
2775 guest's C</bin/sh>.
2776
2777 This is like C<guestfs_command>, but passes the command to:
2778
2779  /bin/sh -c \"command\"
2780
2781 Depending on the guest's shell, this usually results in
2782 wildcards being expanded, shell expressions being interpolated
2783 and so on.
2784
2785 All the provisos about C<guestfs_command> apply to this call.");
2786
2787   ("sh_lines", (RStringList "lines", [String "command"]), 112, [],
2788    [], (* XXX needs tests *)
2789    "run a command via the shell returning lines",
2790    "\
2791 This is the same as C<guestfs_sh>, but splits the result
2792 into a list of lines.
2793
2794 See also: C<guestfs_command_lines>");
2795
2796   ("glob_expand", (RStringList "paths", [Pathname "pattern"]), 113, [],
2797    (* Use Pathname here, and hence ABS_PATH (pattern,... in generated
2798     * code in stubs.c, since all valid glob patterns must start with "/".
2799     * There is no concept of "cwd" in libguestfs, hence no "."-relative names.
2800     *)
2801    [InitBasicFS, Always, TestOutputList (
2802       [["mkdir_p"; "/a/b/c"];
2803        ["touch"; "/a/b/c/d"];
2804        ["touch"; "/a/b/c/e"];
2805        ["glob_expand"; "/a/b/c/*"]], ["/a/b/c/d"; "/a/b/c/e"]);
2806     InitBasicFS, Always, TestOutputList (
2807       [["mkdir_p"; "/a/b/c"];
2808        ["touch"; "/a/b/c/d"];
2809        ["touch"; "/a/b/c/e"];
2810        ["glob_expand"; "/a/*/c/*"]], ["/a/b/c/d"; "/a/b/c/e"]);
2811     InitBasicFS, Always, TestOutputList (
2812       [["mkdir_p"; "/a/b/c"];
2813        ["touch"; "/a/b/c/d"];
2814        ["touch"; "/a/b/c/e"];
2815        ["glob_expand"; "/a/*/x/*"]], [])],
2816    "expand a wildcard path",
2817    "\
2818 This command searches for all the pathnames matching
2819 C<pattern> according to the wildcard expansion rules
2820 used by the shell.
2821
2822 If no paths match, then this returns an empty list
2823 (note: not an error).
2824
2825 It is just a wrapper around the C L<glob(3)> function
2826 with flags C<GLOB_MARK|GLOB_BRACE>.
2827 See that manual page for more details.");
2828
2829   ("scrub_device", (RErr, [Device "device"]), 114, [DangerWillRobinson; Optional "scrub"],
2830    [InitNone, Always, TestRun ( (* use /dev/sdc because it's smaller *)
2831       [["scrub_device"; "/dev/sdc"]])],
2832    "scrub (securely wipe) a device",
2833    "\
2834 This command writes patterns over C<device> to make data retrieval
2835 more difficult.
2836
2837 It is an interface to the L<scrub(1)> program.  See that
2838 manual page for more details.");
2839
2840   ("scrub_file", (RErr, [Pathname "file"]), 115, [Optional "scrub"],
2841    [InitBasicFS, Always, TestRun (
2842       [["write"; "/file"; "content"];
2843        ["scrub_file"; "/file"]])],
2844    "scrub (securely wipe) a file",
2845    "\
2846 This command writes patterns over a file to make data retrieval
2847 more difficult.
2848
2849 The file is I<removed> after scrubbing.
2850
2851 It is an interface to the L<scrub(1)> program.  See that
2852 manual page for more details.");
2853
2854   ("scrub_freespace", (RErr, [Pathname "dir"]), 116, [Optional "scrub"],
2855    [], (* XXX needs testing *)
2856    "scrub (securely wipe) free space",
2857    "\
2858 This command creates the directory C<dir> and then fills it
2859 with files until the filesystem is full, and scrubs the files
2860 as for C<guestfs_scrub_file>, and deletes them.
2861 The intention is to scrub any free space on the partition
2862 containing C<dir>.
2863
2864 It is an interface to the L<scrub(1)> program.  See that
2865 manual page for more details.");
2866
2867   ("mkdtemp", (RString "dir", [Pathname "template"]), 117, [],
2868    [InitBasicFS, Always, TestRun (
2869       [["mkdir"; "/tmp"];
2870        ["mkdtemp"; "/tmp/tmpXXXXXX"]])],
2871    "create a temporary directory",
2872    "\
2873 This command creates a temporary directory.  The
2874 C<template> parameter should be a full pathname for the
2875 temporary directory name with the final six characters being
2876 \"XXXXXX\".
2877
2878 For example: \"/tmp/myprogXXXXXX\" or \"/Temp/myprogXXXXXX\",
2879 the second one being suitable for Windows filesystems.
2880
2881 The name of the temporary directory that was created
2882 is returned.
2883
2884 The temporary directory is created with mode 0700
2885 and is owned by root.
2886
2887 The caller is responsible for deleting the temporary
2888 directory and its contents after use.
2889
2890 See also: L<mkdtemp(3)>");
2891
2892   ("wc_l", (RInt "lines", [Pathname "path"]), 118, [],
2893    [InitISOFS, Always, TestOutputInt (
2894       [["wc_l"; "/10klines"]], 10000);
2895     (* Test for RHBZ#579608, absolute symbolic links. *)
2896     InitISOFS, Always, TestOutputInt (
2897       [["wc_l"; "/abssymlink"]], 10000)],
2898    "count lines in a file",
2899    "\
2900 This command counts the lines in a file, using the
2901 C<wc -l> external command.");
2902
2903   ("wc_w", (RInt "words", [Pathname "path"]), 119, [],
2904    [InitISOFS, Always, TestOutputInt (
2905       [["wc_w"; "/10klines"]], 10000)],
2906    "count words in a file",
2907    "\
2908 This command counts the words in a file, using the
2909 C<wc -w> external command.");
2910
2911   ("wc_c", (RInt "chars", [Pathname "path"]), 120, [],
2912    [InitISOFS, Always, TestOutputInt (
2913       [["wc_c"; "/100kallspaces"]], 102400)],
2914    "count characters in a file",
2915    "\
2916 This command counts the characters in a file, using the
2917 C<wc -c> external command.");
2918
2919   ("head", (RStringList "lines", [Pathname "path"]), 121, [ProtocolLimitWarning],
2920    [InitISOFS, Always, TestOutputList (
2921       [["head"; "/10klines"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz";"3abcdefghijklmnopqrstuvwxyz";"4abcdefghijklmnopqrstuvwxyz";"5abcdefghijklmnopqrstuvwxyz";"6abcdefghijklmnopqrstuvwxyz";"7abcdefghijklmnopqrstuvwxyz";"8abcdefghijklmnopqrstuvwxyz";"9abcdefghijklmnopqrstuvwxyz"]);
2922     (* Test for RHBZ#579608, absolute symbolic links. *)
2923     InitISOFS, Always, TestOutputList (
2924       [["head"; "/abssymlink"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz";"3abcdefghijklmnopqrstuvwxyz";"4abcdefghijklmnopqrstuvwxyz";"5abcdefghijklmnopqrstuvwxyz";"6abcdefghijklmnopqrstuvwxyz";"7abcdefghijklmnopqrstuvwxyz";"8abcdefghijklmnopqrstuvwxyz";"9abcdefghijklmnopqrstuvwxyz"])],
2925    "return first 10 lines of a file",
2926    "\
2927 This command returns up to the first 10 lines of a file as
2928 a list of strings.");
2929
2930   ("head_n", (RStringList "lines", [Int "nrlines"; Pathname "path"]), 122, [ProtocolLimitWarning],
2931    [InitISOFS, Always, TestOutputList (
2932       [["head_n"; "3"; "/10klines"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz"]);
2933     InitISOFS, Always, TestOutputList (
2934       [["head_n"; "-9997"; "/10klines"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz"]);
2935     InitISOFS, Always, TestOutputList (
2936       [["head_n"; "0"; "/10klines"]], [])],
2937    "return first N lines of a file",
2938    "\
2939 If the parameter C<nrlines> is a positive number, this returns the first
2940 C<nrlines> lines of the file C<path>.
2941
2942 If the parameter C<nrlines> is a negative number, this returns lines
2943 from the file C<path>, excluding the last C<nrlines> lines.
2944
2945 If the parameter C<nrlines> is zero, this returns an empty list.");
2946
2947   ("tail", (RStringList "lines", [Pathname "path"]), 123, [ProtocolLimitWarning],
2948    [InitISOFS, Always, TestOutputList (
2949       [["tail"; "/10klines"]], ["9990abcdefghijklmnopqrstuvwxyz";"9991abcdefghijklmnopqrstuvwxyz";"9992abcdefghijklmnopqrstuvwxyz";"9993abcdefghijklmnopqrstuvwxyz";"9994abcdefghijklmnopqrstuvwxyz";"9995abcdefghijklmnopqrstuvwxyz";"9996abcdefghijklmnopqrstuvwxyz";"9997abcdefghijklmnopqrstuvwxyz";"9998abcdefghijklmnopqrstuvwxyz";"9999abcdefghijklmnopqrstuvwxyz"])],
2950    "return last 10 lines of a file",
2951    "\
2952 This command returns up to the last 10 lines of a file as
2953 a list of strings.");
2954
2955   ("tail_n", (RStringList "lines", [Int "nrlines"; Pathname "path"]), 124, [ProtocolLimitWarning],
2956    [InitISOFS, Always, TestOutputList (
2957       [["tail_n"; "3"; "/10klines"]], ["9997abcdefghijklmnopqrstuvwxyz";"9998abcdefghijklmnopqrstuvwxyz";"9999abcdefghijklmnopqrstuvwxyz"]);
2958     InitISOFS, Always, TestOutputList (
2959       [["tail_n"; "-9998"; "/10klines"]], ["9997abcdefghijklmnopqrstuvwxyz";"9998abcdefghijklmnopqrstuvwxyz";"9999abcdefghijklmnopqrstuvwxyz"]);
2960     InitISOFS, Always, TestOutputList (
2961       [["tail_n"; "0"; "/10klines"]], [])],
2962    "return last N lines of a file",
2963    "\
2964 If the parameter C<nrlines> is a positive number, this returns the last
2965 C<nrlines> lines of the file C<path>.
2966
2967 If the parameter C<nrlines> is a negative number, this returns lines
2968 from the file C<path>, starting with the C<-nrlines>th line.
2969
2970 If the parameter C<nrlines> is zero, this returns an empty list.");
2971
2972   ("df", (RString "output", []), 125, [],
2973    [], (* XXX Tricky to test because it depends on the exact format
2974         * of the 'df' command and other imponderables.
2975         *)
2976    "report file system disk space usage",
2977    "\
2978 This command runs the C<df> command to report disk space used.
2979
2980 This command is mostly useful for interactive sessions.  It
2981 is I<not> intended that you try to parse the output string.
2982 Use C<statvfs> from programs.");
2983
2984   ("df_h", (RString "output", []), 126, [],
2985    [], (* XXX Tricky to test because it depends on the exact format
2986         * of the 'df' command and other imponderables.
2987         *)
2988    "report file system disk space usage (human readable)",
2989    "\
2990 This command runs the C<df -h> command to report disk space used
2991 in human-readable format.
2992
2993 This command is mostly useful for interactive sessions.  It
2994 is I<not> intended that you try to parse the output string.
2995 Use C<statvfs> from programs.");
2996
2997   ("du", (RInt64 "sizekb", [Pathname "path"]), 127, [],
2998    [InitISOFS, Always, TestOutputInt (
2999       [["du"; "/directory"]], 2 (* ISO fs blocksize is 2K *))],
3000    "estimate file space usage",
3001    "\
3002 This command runs the C<du -s> command to estimate file space
3003 usage for C<path>.
3004
3005 C<path> can be a file or a directory.  If C<path> is a directory
3006 then the estimate includes the contents of the directory and all
3007 subdirectories (recursively).
3008
3009 The result is the estimated size in I<kilobytes>
3010 (ie. units of 1024 bytes).");
3011
3012   ("initrd_list", (RStringList "filenames", [Pathname "path"]), 128, [],
3013    [InitISOFS, Always, TestOutputList (
3014       [["initrd_list"; "/initrd"]], ["empty";"known-1";"known-2";"known-3";"known-4"; "known-5"])],
3015    "list files in an initrd",
3016    "\
3017 This command lists out files contained in an initrd.
3018
3019 The files are listed without any initial C</> character.  The
3020 files are listed in the order they appear (not necessarily
3021 alphabetical).  Directory names are listed as separate items.
3022
3023 Old Linux kernels (2.4 and earlier) used a compressed ext2
3024 filesystem as initrd.  We I<only> support the newer initramfs
3025 format (compressed cpio files).");
3026
3027   ("mount_loop", (RErr, [Pathname "file"; Pathname "mountpoint"]), 129, [],
3028    [],
3029    "mount a file using the loop device",
3030    "\
3031 This command lets you mount C<file> (a filesystem image
3032 in a file) on a mount point.  It is entirely equivalent to
3033 the command C<mount -o loop file mountpoint>.");
3034
3035   ("mkswap", (RErr, [Device "device"]), 130, [],
3036    [InitEmpty, Always, TestRun (
3037       [["part_disk"; "/dev/sda"; "mbr"];
3038        ["mkswap"; "/dev/sda1"]])],
3039    "create a swap partition",
3040    "\
3041 Create a swap partition on C<device>.");
3042
3043   ("mkswap_L", (RErr, [String "label"; Device "device"]), 131, [],
3044    [InitEmpty, Always, TestRun (
3045       [["part_disk"; "/dev/sda"; "mbr"];
3046        ["mkswap_L"; "hello"; "/dev/sda1"]])],
3047    "create a swap partition with a label",
3048    "\
3049 Create a swap partition on C<device> with label C<label>.
3050
3051 Note that you cannot attach a swap label to a block device
3052 (eg. C</dev/sda>), just to a partition.  This appears to be
3053 a limitation of the kernel or swap tools.");
3054
3055   ("mkswap_U", (RErr, [String "uuid"; Device "device"]), 132, [Optional "linuxfsuuid"],
3056    (let uuid = uuidgen () in
3057     [InitEmpty, Always, TestRun (
3058        [["part_disk"; "/dev/sda"; "mbr"];
3059         ["mkswap_U"; uuid; "/dev/sda1"]])]),
3060    "create a swap partition with an explicit UUID",
3061    "\
3062 Create a swap partition on C<device> with UUID C<uuid>.");
3063
3064   ("mknod", (RErr, [Int "mode"; Int "devmajor"; Int "devminor"; Pathname "path"]), 133, [Optional "mknod"],
3065    [InitBasicFS, Always, TestOutputStruct (
3066       [["mknod"; "0o10777"; "0"; "0"; "/node"];
3067        (* NB: default umask 022 means 0777 -> 0755 in these tests *)
3068        ["stat"; "/node"]], [CompareWithInt ("mode", 0o10755)]);
3069     InitBasicFS, Always, TestOutputStruct (
3070       [["mknod"; "0o60777"; "66"; "99"; "/node"];
3071        ["stat"; "/node"]], [CompareWithInt ("mode", 0o60755)])],
3072    "make block, character or FIFO devices",
3073    "\
3074 This call creates block or character special devices, or
3075 named pipes (FIFOs).
3076
3077 The C<mode> parameter should be the mode, using the standard
3078 constants.  C<devmajor> and C<devminor> are the
3079 device major and minor numbers, only used when creating block
3080 and character special devices.
3081
3082 Note that, just like L<mknod(2)>, the mode must be bitwise
3083 OR'd with S_IFBLK, S_IFCHR, S_IFIFO or S_IFSOCK (otherwise this call
3084 just creates a regular file).  These constants are
3085 available in the standard Linux header files, or you can use
3086 C<guestfs_mknod_b>, C<guestfs_mknod_c> or C<guestfs_mkfifo>
3087 which are wrappers around this command which bitwise OR
3088 in the appropriate constant for you.
3089
3090 The mode actually set is affected by the umask.");
3091
3092   ("mkfifo", (RErr, [Int "mode"; Pathname "path"]), 134, [Optional "mknod"],
3093    [InitBasicFS, Always, TestOutputStruct (
3094       [["mkfifo"; "0o777"; "/node"];
3095        ["stat"; "/node"]], [CompareWithInt ("mode", 0o10755)])],
3096    "make FIFO (named pipe)",
3097    "\
3098 This call creates a FIFO (named pipe) called C<path> with
3099 mode C<mode>.  It is just a convenient wrapper around
3100 C<guestfs_mknod>.
3101
3102 The mode actually set is affected by the umask.");
3103
3104   ("mknod_b", (RErr, [Int "mode"; Int "devmajor"; Int "devminor"; Pathname "path"]), 135, [Optional "mknod"],
3105    [InitBasicFS, Always, TestOutputStruct (
3106       [["mknod_b"; "0o777"; "99"; "66"; "/node"];
3107        ["stat"; "/node"]], [CompareWithInt ("mode", 0o60755)])],
3108    "make block device node",
3109    "\
3110 This call creates a block device node called C<path> with
3111 mode C<mode> and device major/minor C<devmajor> and C<devminor>.
3112 It is just a convenient wrapper around C<guestfs_mknod>.
3113
3114 The mode actually set is affected by the umask.");
3115
3116   ("mknod_c", (RErr, [Int "mode"; Int "devmajor"; Int "devminor"; Pathname "path"]), 136, [Optional "mknod"],
3117    [InitBasicFS, Always, TestOutputStruct (
3118       [["mknod_c"; "0o777"; "99"; "66"; "/node"];
3119        ["stat"; "/node"]], [CompareWithInt ("mode", 0o20755)])],
3120    "make char device node",
3121    "\
3122 This call creates a char device node called C<path> with
3123 mode C<mode> and device major/minor C<devmajor> and C<devminor>.
3124 It is just a convenient wrapper around C<guestfs_mknod>.
3125
3126 The mode actually set is affected by the umask.");
3127
3128   ("umask", (RInt "oldmask", [Int "mask"]), 137, [FishOutput FishOutputOctal],
3129    [InitEmpty, Always, TestOutputInt (
3130       [["umask"; "0o22"]], 0o22)],
3131    "set file mode creation mask (umask)",
3132    "\
3133 This function sets the mask used for creating new files and
3134 device nodes to C<mask & 0777>.
3135
3136 Typical umask values would be C<022> which creates new files
3137 with permissions like \"-rw-r--r--\" or \"-rwxr-xr-x\", and
3138 C<002> which creates new files with permissions like
3139 \"-rw-rw-r--\" or \"-rwxrwxr-x\".
3140
3141 The default umask is C<022>.  This is important because it
3142 means that directories and device nodes will be created with
3143 C<0644> or C<0755> mode even if you specify C<0777>.
3144
3145 See also C<guestfs_get_umask>,
3146 L<umask(2)>, C<guestfs_mknod>, C<guestfs_mkdir>.
3147
3148 This call returns the previous umask.");
3149
3150   ("readdir", (RStructList ("entries", "dirent"), [Pathname "dir"]), 138, [],
3151    [],
3152    "read directories entries",
3153    "\
3154 This returns the list of directory entries in directory C<dir>.
3155
3156 All entries in the directory are returned, including C<.> and
3157 C<..>.  The entries are I<not> sorted, but returned in the same
3158 order as the underlying filesystem.
3159
3160 Also this call returns basic file type information about each
3161 file.  The C<ftyp> field will contain one of the following characters:
3162
3163 =over 4
3164
3165 =item 'b'
3166
3167 Block special
3168
3169 =item 'c'
3170
3171 Char special
3172
3173 =item 'd'
3174
3175 Directory
3176
3177 =item 'f'
3178
3179 FIFO (named pipe)
3180
3181 =item 'l'
3182
3183 Symbolic link
3184
3185 =item 'r'
3186
3187 Regular file
3188
3189 =item 's'
3190
3191 Socket
3192
3193 =item 'u'
3194
3195 Unknown file type
3196
3197 =item '?'
3198
3199 The L<readdir(3)> call returned a C<d_type> field with an
3200 unexpected value
3201
3202 =back
3203
3204 This function is primarily intended for use by programs.  To
3205 get a simple list of names, use C<guestfs_ls>.  To get a printable
3206 directory for human consumption, use C<guestfs_ll>.");
3207
3208   ("sfdiskM", (RErr, [Device "device"; StringList "lines"]), 139, [DangerWillRobinson],
3209    [],
3210    "create partitions on a block device",
3211    "\
3212 This is a simplified interface to the C<guestfs_sfdisk>
3213 command, where partition sizes are specified in megabytes
3214 only (rounded to the nearest cylinder) and you don't need
3215 to specify the cyls, heads and sectors parameters which
3216 were rarely if ever used anyway.
3217
3218 See also: C<guestfs_sfdisk>, the L<sfdisk(8)> manpage
3219 and C<guestfs_part_disk>");
3220
3221   ("zfile", (RString "description", [String "meth"; Pathname "path"]), 140, [DeprecatedBy "file"],
3222    [],
3223    "determine file type inside a compressed file",
3224    "\
3225 This command runs C<file> after first decompressing C<path>
3226 using C<method>.
3227
3228 C<method> must be one of C<gzip>, C<compress> or C<bzip2>.
3229
3230 Since 1.0.63, use C<guestfs_file> instead which can now
3231 process compressed files.");
3232
3233   ("getxattrs", (RStructList ("xattrs", "xattr"), [Pathname "path"]), 141, [Optional "linuxxattrs"],
3234    [],
3235    "list extended attributes of a file or directory",
3236    "\
3237 This call lists the extended attributes of the file or directory
3238 C<path>.
3239
3240 At the system call level, this is a combination of the
3241 L<listxattr(2)> and L<getxattr(2)> calls.
3242
3243 See also: C<guestfs_lgetxattrs>, L<attr(5)>.");
3244
3245   ("lgetxattrs", (RStructList ("xattrs", "xattr"), [Pathname "path"]), 142, [Optional "linuxxattrs"],
3246    [],
3247    "list extended attributes of a file or directory",
3248    "\
3249 This is the same as C<guestfs_getxattrs>, but if C<path>
3250 is a symbolic link, then it returns the extended attributes
3251 of the link itself.");
3252
3253   ("setxattr", (RErr, [String "xattr";
3254                        String "val"; Int "vallen"; (* will be BufferIn *)
3255                        Pathname "path"]), 143, [Optional "linuxxattrs"],
3256    [],
3257    "set extended attribute of a file or directory",
3258    "\
3259 This call sets the extended attribute named C<xattr>
3260 of the file C<path> to the value C<val> (of length C<vallen>).
3261 The value is arbitrary 8 bit data.
3262
3263 See also: C<guestfs_lsetxattr>, L<attr(5)>.");
3264
3265   ("lsetxattr", (RErr, [String "xattr";
3266                         String "val"; Int "vallen"; (* will be BufferIn *)
3267                         Pathname "path"]), 144, [Optional "linuxxattrs"],
3268    [],
3269    "set extended attribute of a file or directory",
3270    "\
3271 This is the same as C<guestfs_setxattr>, but if C<path>
3272 is a symbolic link, then it sets an extended attribute
3273 of the link itself.");
3274
3275   ("removexattr", (RErr, [String "xattr"; Pathname "path"]), 145, [Optional "linuxxattrs"],
3276    [],
3277    "remove extended attribute of a file or directory",
3278    "\
3279 This call removes the extended attribute named C<xattr>
3280 of the file C<path>.
3281
3282 See also: C<guestfs_lremovexattr>, L<attr(5)>.");
3283
3284   ("lremovexattr", (RErr, [String "xattr"; Pathname "path"]), 146, [Optional "linuxxattrs"],
3285    [],
3286    "remove extended attribute of a file or directory",
3287    "\
3288 This is the same as C<guestfs_removexattr>, but if C<path>
3289 is a symbolic link, then it removes an extended attribute
3290 of the link itself.");
3291
3292   ("mountpoints", (RHashtable "mps", []), 147, [],
3293    [],
3294    "show mountpoints",
3295    "\
3296 This call is similar to C<guestfs_mounts>.  That call returns
3297 a list of devices.  This one returns a hash table (map) of
3298 device name to directory where the device is mounted.");
3299
3300   ("mkmountpoint", (RErr, [String "exemptpath"]), 148, [],
3301    (* This is a special case: while you would expect a parameter
3302     * of type "Pathname", that doesn't work, because it implies
3303     * NEED_ROOT in the generated calling code in stubs.c, and
3304     * this function cannot use NEED_ROOT.
3305     *)
3306    [],
3307    "create a mountpoint",
3308    "\
3309 C<guestfs_mkmountpoint> and C<guestfs_rmmountpoint> are
3310 specialized calls that can be used to create extra mountpoints
3311 before mounting the first filesystem.
3312
3313 These calls are I<only> necessary in some very limited circumstances,
3314 mainly the case where you want to mount a mix of unrelated and/or
3315 read-only filesystems together.
3316
3317 For example, live CDs often contain a \"Russian doll\" nest of
3318 filesystems, an ISO outer layer, with a squashfs image inside, with
3319 an ext2/3 image inside that.  You can unpack this as follows
3320 in guestfish:
3321
3322  add-ro Fedora-11-i686-Live.iso
3323  run
3324  mkmountpoint /cd
3325  mkmountpoint /squash
3326  mkmountpoint /ext3
3327  mount /dev/sda /cd
3328  mount-loop /cd/LiveOS/squashfs.img /squash
3329  mount-loop /squash/LiveOS/ext3fs.img /ext3
3330
3331 The inner filesystem is now unpacked under the /ext3 mountpoint.");
3332
3333   ("rmmountpoint", (RErr, [String "exemptpath"]), 149, [],
3334    [],
3335    "remove a mountpoint",
3336    "\
3337 This calls removes a mountpoint that was previously created
3338 with C<guestfs_mkmountpoint>.  See C<guestfs_mkmountpoint>
3339 for full details.");
3340
3341   ("read_file", (RBufferOut "content", [Pathname "path"]), 150, [ProtocolLimitWarning],
3342    [InitISOFS, Always, TestOutputBuffer (
3343       [["read_file"; "/known-4"]], "abc\ndef\nghi");
3344     (* Test various near large, large and too large files (RHBZ#589039). *)
3345     InitBasicFS, Always, TestLastFail (
3346       [["touch"; "/a"];
3347        ["truncate_size"; "/a"; "4194303"]; (* GUESTFS_MESSAGE_MAX - 1 *)
3348        ["read_file"; "/a"]]);
3349     InitBasicFS, Always, TestLastFail (
3350       [["touch"; "/a"];
3351        ["truncate_size"; "/a"; "4194304"]; (* GUESTFS_MESSAGE_MAX *)
3352        ["read_file"; "/a"]]);
3353     InitBasicFS, Always, TestLastFail (
3354       [["touch"; "/a"];
3355        ["truncate_size"; "/a"; "41943040"]; (* GUESTFS_MESSAGE_MAX * 10 *)
3356        ["read_file"; "/a"]])],
3357    "read a file",
3358    "\
3359 This calls returns the contents of the file C<path> as a
3360 buffer.
3361
3362 Unlike C<guestfs_cat>, this function can correctly
3363 handle files that contain embedded ASCII NUL characters.
3364 However unlike C<guestfs_download>, this function is limited
3365 in the total size of file that can be handled.");
3366
3367   ("grep", (RStringList "lines", [String "regex"; Pathname "path"]), 151, [ProtocolLimitWarning],
3368    [InitISOFS, Always, TestOutputList (
3369       [["grep"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"]);
3370     InitISOFS, Always, TestOutputList (
3371       [["grep"; "nomatch"; "/test-grep.txt"]], []);
3372     (* Test for RHBZ#579608, absolute symbolic links. *)
3373     InitISOFS, Always, TestOutputList (
3374       [["grep"; "nomatch"; "/abssymlink"]], [])],
3375    "return lines matching a pattern",
3376    "\
3377 This calls the external C<grep> program and returns the
3378 matching lines.");
3379
3380   ("egrep", (RStringList "lines", [String "regex"; Pathname "path"]), 152, [ProtocolLimitWarning],
3381    [InitISOFS, Always, TestOutputList (
3382       [["egrep"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"])],
3383    "return lines matching a pattern",
3384    "\
3385 This calls the external C<egrep> program and returns the
3386 matching lines.");
3387
3388   ("fgrep", (RStringList "lines", [String "pattern"; Pathname "path"]), 153, [ProtocolLimitWarning],
3389    [InitISOFS, Always, TestOutputList (
3390       [["fgrep"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"])],
3391    "return lines matching a pattern",
3392    "\
3393 This calls the external C<fgrep> program and returns the
3394 matching lines.");
3395
3396   ("grepi", (RStringList "lines", [String "regex"; Pathname "path"]), 154, [ProtocolLimitWarning],
3397    [InitISOFS, Always, TestOutputList (
3398       [["grepi"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"; "ABC"])],
3399    "return lines matching a pattern",
3400    "\
3401 This calls the external C<grep -i> program and returns the
3402 matching lines.");
3403
3404   ("egrepi", (RStringList "lines", [String "regex"; Pathname "path"]), 155, [ProtocolLimitWarning],
3405    [InitISOFS, Always, TestOutputList (
3406       [["egrepi"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"; "ABC"])],
3407    "return lines matching a pattern",
3408    "\
3409 This calls the external C<egrep -i> program and returns the
3410 matching lines.");
3411
3412   ("fgrepi", (RStringList "lines", [String "pattern"; Pathname "path"]), 156, [ProtocolLimitWarning],
3413    [InitISOFS, Always, TestOutputList (
3414       [["fgrepi"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"; "ABC"])],
3415    "return lines matching a pattern",
3416    "\
3417 This calls the external C<fgrep -i> program and returns the
3418 matching lines.");
3419
3420   ("zgrep", (RStringList "lines", [String "regex"; Pathname "path"]), 157, [ProtocolLimitWarning],
3421    [InitISOFS, Always, TestOutputList (
3422       [["zgrep"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"])],
3423    "return lines matching a pattern",
3424    "\
3425 This calls the external C<zgrep> program and returns the
3426 matching lines.");
3427
3428   ("zegrep", (RStringList "lines", [String "regex"; Pathname "path"]), 158, [ProtocolLimitWarning],
3429    [InitISOFS, Always, TestOutputList (
3430       [["zegrep"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"])],
3431    "return lines matching a pattern",
3432    "\
3433 This calls the external C<zegrep> program and returns the
3434 matching lines.");
3435
3436   ("zfgrep", (RStringList "lines", [String "pattern"; Pathname "path"]), 159, [ProtocolLimitWarning],
3437    [InitISOFS, Always, TestOutputList (
3438       [["zfgrep"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"])],
3439    "return lines matching a pattern",
3440    "\
3441 This calls the external C<zfgrep> program and returns the
3442 matching lines.");
3443
3444   ("zgrepi", (RStringList "lines", [String "regex"; Pathname "path"]), 160, [ProtocolLimitWarning],
3445    [InitISOFS, Always, TestOutputList (
3446       [["zgrepi"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"; "ABC"])],
3447    "return lines matching a pattern",
3448    "\
3449 This calls the external C<zgrep -i> program and returns the
3450 matching lines.");
3451
3452   ("zegrepi", (RStringList "lines", [String "regex"; Pathname "path"]), 161, [ProtocolLimitWarning],
3453    [InitISOFS, Always, TestOutputList (
3454       [["zegrepi"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"; "ABC"])],
3455    "return lines matching a pattern",
3456    "\
3457 This calls the external C<zegrep -i> program and returns the
3458 matching lines.");
3459
3460   ("zfgrepi", (RStringList "lines", [String "pattern"; Pathname "path"]), 162, [ProtocolLimitWarning],
3461    [InitISOFS, Always, TestOutputList (
3462       [["zfgrepi"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"; "ABC"])],
3463    "return lines matching a pattern",
3464    "\
3465 This calls the external C<zfgrep -i> program and returns the
3466 matching lines.");
3467
3468   ("realpath", (RString "rpath", [Pathname "path"]), 163, [Optional "realpath"],
3469    [InitISOFS, Always, TestOutput (
3470       [["realpath"; "/../directory"]], "/directory")],
3471    "canonicalized absolute pathname",
3472    "\
3473 Return the canonicalized absolute pathname of C<path>.  The
3474 returned path has no C<.>, C<..> or symbolic link path elements.");
3475
3476   ("ln", (RErr, [String "target"; Pathname "linkname"]), 164, [],
3477    [InitBasicFS, Always, TestOutputStruct (
3478       [["touch"; "/a"];
3479        ["ln"; "/a"; "/b"];
3480        ["stat"; "/b"]], [CompareWithInt ("nlink", 2)])],
3481    "create a hard link",
3482    "\
3483 This command creates a hard link using the C<ln> command.");
3484
3485   ("ln_f", (RErr, [String "target"; Pathname "linkname"]), 165, [],
3486    [InitBasicFS, Always, TestOutputStruct (
3487       [["touch"; "/a"];
3488        ["touch"; "/b"];
3489        ["ln_f"; "/a"; "/b"];
3490        ["stat"; "/b"]], [CompareWithInt ("nlink", 2)])],
3491    "create a hard link",
3492    "\
3493 This command creates a hard link using the C<ln -f> command.
3494 The C<-f> option removes the link (C<linkname>) if it exists already.");
3495
3496   ("ln_s", (RErr, [String "target"; Pathname "linkname"]), 166, [],
3497    [InitBasicFS, Always, TestOutputStruct (
3498       [["touch"; "/a"];
3499        ["ln_s"; "a"; "/b"];
3500        ["lstat"; "/b"]], [CompareWithInt ("mode", 0o120777)])],
3501    "create a symbolic link",
3502    "\
3503 This command creates a symbolic link using the C<ln -s> command.");
3504
3505   ("ln_sf", (RErr, [String "target"; Pathname "linkname"]), 167, [],
3506    [InitBasicFS, Always, TestOutput (
3507       [["mkdir_p"; "/a/b"];
3508        ["touch"; "/a/b/c"];
3509        ["ln_sf"; "../d"; "/a/b/c"];
3510        ["readlink"; "/a/b/c"]], "../d")],
3511    "create a symbolic link",
3512    "\
3513 This command creates a symbolic link using the C<ln -sf> command,
3514 The C<-f> option removes the link (C<linkname>) if it exists already.");
3515
3516   ("readlink", (RString "link", [Pathname "path"]), 168, [],
3517    [] (* XXX tested above *),
3518    "read the target of a symbolic link",
3519    "\
3520 This command reads the target of a symbolic link.");
3521
3522   ("fallocate", (RErr, [Pathname "path"; Int "len"]), 169, [DeprecatedBy "fallocate64"],
3523    [InitBasicFS, Always, TestOutputStruct (
3524       [["fallocate"; "/a"; "1000000"];
3525        ["stat"; "/a"]], [CompareWithInt ("size", 1_000_000)])],
3526    "preallocate a file in the guest filesystem",
3527    "\
3528 This command preallocates a file (containing zero bytes) named
3529 C<path> of size C<len> bytes.  If the file exists already, it
3530 is overwritten.
3531
3532 Do not confuse this with the guestfish-specific
3533 C<alloc> command which allocates a file in the host and
3534 attaches it as a device.");
3535
3536   ("swapon_device", (RErr, [Device "device"]), 170, [],
3537    [InitPartition, Always, TestRun (
3538       [["mkswap"; "/dev/sda1"];
3539        ["swapon_device"; "/dev/sda1"];
3540        ["swapoff_device"; "/dev/sda1"]])],
3541    "enable swap on device",
3542    "\
3543 This command enables the libguestfs appliance to use the
3544 swap device or partition named C<device>.  The increased
3545 memory is made available for all commands, for example
3546 those run using C<guestfs_command> or C<guestfs_sh>.
3547
3548 Note that you should not swap to existing guest swap
3549 partitions unless you know what you are doing.  They may
3550 contain hibernation information, or other information that
3551 the guest doesn't want you to trash.  You also risk leaking
3552 information about the host to the guest this way.  Instead,
3553 attach a new host device to the guest and swap on that.");
3554
3555   ("swapoff_device", (RErr, [Device "device"]), 171, [],
3556    [], (* XXX tested by swapon_device *)
3557    "disable swap on device",
3558    "\
3559 This command disables the libguestfs appliance swap
3560 device or partition named C<device>.
3561 See C<guestfs_swapon_device>.");
3562
3563   ("swapon_file", (RErr, [Pathname "file"]), 172, [],
3564    [InitBasicFS, Always, TestRun (
3565       [["fallocate"; "/swap"; "8388608"];
3566        ["mkswap_file"; "/swap"];
3567        ["swapon_file"; "/swap"];
3568        ["swapoff_file"; "/swap"]])],
3569    "enable swap on file",
3570    "\
3571 This command enables swap to a file.
3572 See C<guestfs_swapon_device> for other notes.");
3573
3574   ("swapoff_file", (RErr, [Pathname "file"]), 173, [],
3575    [], (* XXX tested by swapon_file *)
3576    "disable swap on file",
3577    "\
3578 This command disables the libguestfs appliance swap on file.");
3579
3580   ("swapon_label", (RErr, [String "label"]), 174, [],
3581    [InitEmpty, Always, TestRun (
3582       [["part_disk"; "/dev/sdb"; "mbr"];
3583        ["mkswap_L"; "swapit"; "/dev/sdb1"];
3584        ["swapon_label"; "swapit"];
3585        ["swapoff_label"; "swapit"];
3586        ["zero"; "/dev/sdb"];
3587        ["blockdev_rereadpt"; "/dev/sdb"]])],
3588    "enable swap on labeled swap partition",
3589    "\
3590 This command enables swap to a labeled swap partition.
3591 See C<guestfs_swapon_device> for other notes.");
3592
3593   ("swapoff_label", (RErr, [String "label"]), 175, [],
3594    [], (* XXX tested by swapon_label *)
3595    "disable swap on labeled swap partition",
3596    "\
3597 This command disables the libguestfs appliance swap on
3598 labeled swap partition.");
3599
3600   ("swapon_uuid", (RErr, [String "uuid"]), 176, [Optional "linuxfsuuid"],
3601    (let uuid = uuidgen () in
3602     [InitEmpty, Always, TestRun (
3603        [["mkswap_U"; uuid; "/dev/sdb"];
3604         ["swapon_uuid"; uuid];
3605         ["swapoff_uuid"; uuid]])]),
3606    "enable swap on swap partition by UUID",
3607    "\
3608 This command enables swap to a swap partition with the given UUID.
3609 See C<guestfs_swapon_device> for other notes.");
3610
3611   ("swapoff_uuid", (RErr, [String "uuid"]), 177, [Optional "linuxfsuuid"],
3612    [], (* XXX tested by swapon_uuid *)
3613    "disable swap on swap partition by UUID",
3614    "\
3615 This command disables the libguestfs appliance swap partition
3616 with the given UUID.");
3617
3618   ("mkswap_file", (RErr, [Pathname "path"]), 178, [],
3619    [InitBasicFS, Always, TestRun (
3620       [["fallocate"; "/swap"; "8388608"];
3621        ["mkswap_file"; "/swap"]])],
3622    "create a swap file",
3623    "\
3624 Create a swap file.
3625
3626 This command just writes a swap file signature to an existing
3627 file.  To create the file itself, use something like C<guestfs_fallocate>.");
3628
3629   ("inotify_init", (RErr, [Int "maxevents"]), 179, [Optional "inotify"],
3630    [InitISOFS, Always, TestRun (
3631       [["inotify_init"; "0"]])],
3632    "create an inotify handle",
3633    "\
3634 This command creates a new inotify handle.
3635 The inotify subsystem can be used to notify events which happen to
3636 objects in the guest filesystem.
3637
3638 C<maxevents> is the maximum number of events which will be
3639 queued up between calls to C<guestfs_inotify_read> or
3640 C<guestfs_inotify_files>.
3641 If this is passed as C<0>, then the kernel (or previously set)
3642 default is used.  For Linux 2.6.29 the default was 16384 events.
3643 Beyond this limit, the kernel throws away events, but records
3644 the fact that it threw them away by setting a flag
3645 C<IN_Q_OVERFLOW> in the returned structure list (see
3646 C<guestfs_inotify_read>).
3647
3648 Before any events are generated, you have to add some
3649 watches to the internal watch list.  See:
3650 C<guestfs_inotify_add_watch>,
3651 C<guestfs_inotify_rm_watch> and
3652 C<guestfs_inotify_watch_all>.
3653
3654 Queued up events should be read periodically by calling
3655 C<guestfs_inotify_read>
3656 (or C<guestfs_inotify_files> which is just a helpful
3657 wrapper around C<guestfs_inotify_read>).  If you don't
3658 read the events out often enough then you risk the internal
3659 queue overflowing.
3660
3661 The handle should be closed after use by calling
3662 C<guestfs_inotify_close>.  This also removes any
3663 watches automatically.
3664
3665 See also L<inotify(7)> for an overview of the inotify interface
3666 as exposed by the Linux kernel, which is roughly what we expose
3667 via libguestfs.  Note that there is one global inotify handle
3668 per libguestfs instance.");
3669
3670   ("inotify_add_watch", (RInt64 "wd", [Pathname "path"; Int "mask"]), 180, [Optional "inotify"],
3671    [InitBasicFS, Always, TestOutputList (
3672       [["inotify_init"; "0"];
3673        ["inotify_add_watch"; "/"; "1073741823"];
3674        ["touch"; "/a"];
3675        ["touch"; "/b"];
3676        ["inotify_files"]], ["a"; "b"])],
3677    "add an inotify watch",
3678    "\
3679 Watch C<path> for the events listed in C<mask>.
3680
3681 Note that if C<path> is a directory then events within that
3682 directory are watched, but this does I<not> happen recursively
3683 (in subdirectories).
3684
3685 Note for non-C or non-Linux callers: the inotify events are
3686 defined by the Linux kernel ABI and are listed in
3687 C</usr/include/sys/inotify.h>.");
3688
3689   ("inotify_rm_watch", (RErr, [Int(*XXX64*) "wd"]), 181, [Optional "inotify"],
3690    [],
3691    "remove an inotify watch",
3692    "\
3693 Remove a previously defined inotify watch.
3694 See C<guestfs_inotify_add_watch>.");
3695
3696   ("inotify_read", (RStructList ("events", "inotify_event"), []), 182, [Optional "inotify"],
3697    [],
3698    "return list of inotify events",
3699    "\
3700 Return the complete queue of events that have happened
3701 since the previous read call.
3702
3703 If no events have happened, this returns an empty list.
3704
3705 I<Note>: In order to make sure that all events have been
3706 read, you must call this function repeatedly until it
3707 returns an empty list.  The reason is that the call will
3708 read events up to the maximum appliance-to-host message
3709 size and leave remaining events in the queue.");
3710
3711   ("inotify_files", (RStringList "paths", []), 183, [Optional "inotify"],
3712    [],
3713    "return list of watched files that had events",
3714    "\
3715 This function is a helpful wrapper around C<guestfs_inotify_read>
3716 which just returns a list of pathnames of objects that were
3717 touched.  The returned pathnames are sorted and deduplicated.");
3718
3719   ("inotify_close", (RErr, []), 184, [Optional "inotify"],
3720    [],
3721    "close the inotify handle",
3722    "\
3723 This closes the inotify handle which was previously
3724 opened by inotify_init.  It removes all watches, throws
3725 away any pending events, and deallocates all resources.");
3726
3727   ("setcon", (RErr, [String "context"]), 185, [Optional "selinux"],
3728    [],
3729    "set SELinux security context",
3730    "\
3731 This sets the SELinux security context of the daemon
3732 to the string C<context>.
3733
3734 See the documentation about SELINUX in L<guestfs(3)>.");
3735
3736   ("getcon", (RString "context", []), 186, [Optional "selinux"],
3737    [],
3738    "get SELinux security context",
3739    "\
3740 This gets the SELinux security context of the daemon.
3741
3742 See the documentation about SELINUX in L<guestfs(3)>,
3743 and C<guestfs_setcon>");
3744
3745   ("mkfs_b", (RErr, [String "fstype"; Int "blocksize"; Device "device"]), 187, [],
3746    [InitEmpty, Always, TestOutput (
3747       [["part_disk"; "/dev/sda"; "mbr"];
3748        ["mkfs_b"; "ext2"; "4096"; "/dev/sda1"];
3749        ["mount_options"; ""; "/dev/sda1"; "/"];
3750        ["write"; "/new"; "new file contents"];
3751        ["cat"; "/new"]], "new file contents");
3752     InitEmpty, Always, TestRun (
3753       [["part_disk"; "/dev/sda"; "mbr"];
3754        ["mkfs_b"; "vfat"; "32768"; "/dev/sda1"]]);
3755     InitEmpty, Always, TestLastFail (
3756       [["part_disk"; "/dev/sda"; "mbr"];
3757        ["mkfs_b"; "vfat"; "32769"; "/dev/sda1"]]);
3758     InitEmpty, Always, TestLastFail (
3759       [["part_disk"; "/dev/sda"; "mbr"];
3760        ["mkfs_b"; "vfat"; "33280"; "/dev/sda1"]]);
3761     InitEmpty, IfAvailable "ntfsprogs", TestRun (
3762       [["part_disk"; "/dev/sda"; "mbr"];
3763        ["mkfs_b"; "ntfs"; "32768"; "/dev/sda1"]])],
3764    "make a filesystem with block size",
3765    "\
3766 This call is similar to C<guestfs_mkfs>, but it allows you to
3767 control the block size of the resulting filesystem.  Supported
3768 block sizes depend on the filesystem type, but typically they
3769 are C<1024>, C<2048> or C<4096> only.
3770
3771 For VFAT and NTFS the C<blocksize> parameter is treated as
3772 the requested cluster size.");
3773
3774   ("mke2journal", (RErr, [Int "blocksize"; Device "device"]), 188, [],
3775    [InitEmpty, Always, TestOutput (
3776       [["sfdiskM"; "/dev/sda"; ",100 ,"];
3777        ["mke2journal"; "4096"; "/dev/sda1"];
3778        ["mke2fs_J"; "ext2"; "4096"; "/dev/sda2"; "/dev/sda1"];
3779        ["mount_options"; ""; "/dev/sda2"; "/"];
3780        ["write"; "/new"; "new file contents"];
3781        ["cat"; "/new"]], "new file contents")],
3782    "make ext2/3/4 external journal",
3783    "\
3784 This creates an ext2 external journal on C<device>.  It is equivalent
3785 to the command:
3786
3787  mke2fs -O journal_dev -b blocksize device");
3788
3789   ("mke2journal_L", (RErr, [Int "blocksize"; String "label"; Device "device"]), 189, [],
3790    [InitEmpty, Always, TestOutput (
3791       [["sfdiskM"; "/dev/sda"; ",100 ,"];
3792        ["mke2journal_L"; "4096"; "JOURNAL"; "/dev/sda1"];
3793        ["mke2fs_JL"; "ext2"; "4096"; "/dev/sda2"; "JOURNAL"];
3794        ["mount_options"; ""; "/dev/sda2"; "/"];
3795        ["write"; "/new"; "new file contents"];
3796        ["cat"; "/new"]], "new file contents")],
3797    "make ext2/3/4 external journal with label",
3798    "\
3799 This creates an ext2 external journal on C<device> with label C<label>.");
3800
3801   ("mke2journal_U", (RErr, [Int "blocksize"; String "uuid"; Device "device"]), 190, [Optional "linuxfsuuid"],
3802    (let uuid = uuidgen () in
3803     [InitEmpty, Always, TestOutput (
3804        [["sfdiskM"; "/dev/sda"; ",100 ,"];
3805         ["mke2journal_U"; "4096"; uuid; "/dev/sda1"];
3806         ["mke2fs_JU"; "ext2"; "4096"; "/dev/sda2"; uuid];
3807         ["mount_options"; ""; "/dev/sda2"; "/"];
3808         ["write"; "/new"; "new file contents"];
3809         ["cat"; "/new"]], "new file contents")]),
3810    "make ext2/3/4 external journal with UUID",
3811    "\
3812 This creates an ext2 external journal on C<device> with UUID C<uuid>.");
3813
3814   ("mke2fs_J", (RErr, [String "fstype"; Int "blocksize"; Device "device"; Device "journal"]), 191, [],
3815    [],
3816    "make ext2/3/4 filesystem with external journal",
3817    "\
3818 This creates an ext2/3/4 filesystem on C<device> with
3819 an external journal on C<journal>.  It is equivalent
3820 to the command:
3821
3822  mke2fs -t fstype -b blocksize -J device=<journal> <device>
3823
3824 See also C<guestfs_mke2journal>.");
3825
3826   ("mke2fs_JL", (RErr, [String "fstype"; Int "blocksize"; Device "device"; String "label"]), 192, [],
3827    [],
3828    "make ext2/3/4 filesystem with external journal",
3829    "\
3830 This creates an ext2/3/4 filesystem on C<device> with
3831 an external journal on the journal labeled C<label>.
3832
3833 See also C<guestfs_mke2journal_L>.");
3834
3835   ("mke2fs_JU", (RErr, [String "fstype"; Int "blocksize"; Device "device"; String "uuid"]), 193, [Optional "linuxfsuuid"],
3836    [],
3837    "make ext2/3/4 filesystem with external journal",
3838    "\
3839 This creates an ext2/3/4 filesystem on C<device> with
3840 an external journal on the journal with UUID C<uuid>.
3841
3842 See also C<guestfs_mke2journal_U>.");
3843
3844   ("modprobe", (RErr, [String "modulename"]), 194, [Optional "linuxmodules"],
3845    [InitNone, Always, TestRun [["modprobe"; "fat"]]],
3846    "load a kernel module",
3847    "\
3848 This loads a kernel module in the appliance.
3849
3850 The kernel module must have been whitelisted when libguestfs
3851 was built (see C<appliance/kmod.whitelist.in> in the source).");
3852
3853   ("echo_daemon", (RString "output", [StringList "words"]), 195, [],
3854    [InitNone, Always, TestOutput (
3855       [["echo_daemon"; "This is a test"]], "This is a test"
3856     )],
3857    "echo arguments back to the client",
3858    "\
3859 This command concatenates the list of C<words> passed with single spaces
3860 between them and returns the resulting string.
3861
3862 You can use this command to test the connection through to the daemon.
3863
3864 See also C<guestfs_ping_daemon>.");
3865
3866   ("find0", (RErr, [Pathname "directory"; FileOut "files"]), 196, [],
3867    [], (* There is a regression test for this. *)
3868    "find all files and directories, returning NUL-separated list",
3869    "\
3870 This command lists out all files and directories, recursively,
3871 starting at C<directory>, placing the resulting list in the
3872 external file called C<files>.
3873
3874 This command works the same way as C<guestfs_find> with the
3875 following exceptions:
3876
3877 =over 4
3878
3879 =item *
3880
3881 The resulting list is written to an external file.
3882
3883 =item *
3884
3885 Items (filenames) in the result are separated
3886 by C<\\0> characters.  See L<find(1)> option I<-print0>.
3887
3888 =item *
3889
3890 This command is not limited in the number of names that it
3891 can return.
3892
3893 =item *
3894
3895 The result list is not sorted.
3896
3897 =back");
3898
3899   ("case_sensitive_path", (RString "rpath", [Pathname "path"]), 197, [],
3900    [InitISOFS, Always, TestOutput (
3901       [["case_sensitive_path"; "/DIRECTORY"]], "/directory");
3902     InitISOFS, Always, TestOutput (
3903       [["case_sensitive_path"; "/DIRECTORY/"]], "/directory");
3904     InitISOFS, Always, TestOutput (
3905       [["case_sensitive_path"; "/Known-1"]], "/known-1");
3906     InitISOFS, Always, TestLastFail (
3907       [["case_sensitive_path"; "/Known-1/"]]);
3908     InitBasicFS, Always, TestOutput (
3909       [["mkdir"; "/a"];
3910        ["mkdir"; "/a/bbb"];
3911        ["touch"; "/a/bbb/c"];
3912        ["case_sensitive_path"; "/A/bbB/C"]], "/a/bbb/c");
3913     InitBasicFS, Always, TestOutput (
3914       [["mkdir"; "/a"];
3915        ["mkdir"; "/a/bbb"];
3916        ["touch"; "/a/bbb/c"];
3917        ["case_sensitive_path"; "/A////bbB/C"]], "/a/bbb/c");
3918     InitBasicFS, Always, TestLastFail (
3919       [["mkdir"; "/a"];
3920        ["mkdir"; "/a/bbb"];
3921        ["touch"; "/a/bbb/c"];
3922        ["case_sensitive_path"; "/A/bbb/../bbb/C"]])],
3923    "return true path on case-insensitive filesystem",
3924    "\
3925 This can be used to resolve case insensitive paths on
3926 a filesystem which is case sensitive.  The use case is
3927 to resolve paths which you have read from Windows configuration
3928 files or the Windows Registry, to the true path.
3929
3930 The command handles a peculiarity of the Linux ntfs-3g
3931 filesystem driver (and probably others), which is that although
3932 the underlying filesystem is case-insensitive, the driver
3933 exports the filesystem to Linux as case-sensitive.
3934
3935 One consequence of this is that special directories such
3936 as C<c:\\windows> may appear as C</WINDOWS> or C</windows>
3937 (or other things) depending on the precise details of how
3938 they were created.  In Windows itself this would not be
3939 a problem.
3940
3941 Bug or feature?  You decide:
3942 L<http://www.tuxera.com/community/ntfs-3g-faq/#posixfilenames1>
3943
3944 This function resolves the true case of each element in the
3945 path and returns the case-sensitive path.
3946
3947 Thus C<guestfs_case_sensitive_path> (\"/Windows/System32\")
3948 might return C<\"/WINDOWS/system32\"> (the exact return value
3949 would depend on details of how the directories were originally
3950 created under Windows).
3951
3952 I<Note>:
3953 This function does not handle drive names, backslashes etc.
3954
3955 See also C<guestfs_realpath>.");
3956
3957   ("vfs_type", (RString "fstype", [Device "device"]), 198, [],
3958    [InitBasicFS, Always, TestOutput (
3959       [["vfs_type"; "/dev/sda1"]], "ext2")],
3960    "get the Linux VFS type corresponding to a mounted device",
3961    "\
3962 This command gets the filesystem type corresponding to
3963 the filesystem on C<device>.
3964
3965 For most filesystems, the result is the name of the Linux
3966 VFS module which would be used to mount this filesystem
3967 if you mounted it without specifying the filesystem type.
3968 For example a string such as C<ext3> or C<ntfs>.");
3969
3970   ("truncate", (RErr, [Pathname "path"]), 199, [],
3971    [InitBasicFS, Always, TestOutputStruct (
3972       [["write"; "/test"; "some stuff so size is not zero"];
3973        ["truncate"; "/test"];
3974        ["stat"; "/test"]], [CompareWithInt ("size", 0)])],
3975    "truncate a file to zero size",
3976    "\
3977 This command truncates C<path> to a zero-length file.  The
3978 file must exist already.");
3979
3980   ("truncate_size", (RErr, [Pathname "path"; Int64 "size"]), 200, [],
3981    [InitBasicFS, Always, TestOutputStruct (
3982       [["touch"; "/test"];
3983        ["truncate_size"; "/test"; "1000"];
3984        ["stat"; "/test"]], [CompareWithInt ("size", 1000)])],
3985    "truncate a file to a particular size",
3986    "\
3987 This command truncates C<path> to size C<size> bytes.  The file
3988 must exist already.
3989
3990 If the current file size is less than C<size> then
3991 the file is extended to the required size with zero bytes.
3992 This creates a sparse file (ie. disk blocks are not allocated
3993 for the file until you write to it).  To create a non-sparse
3994 file of zeroes, use C<guestfs_fallocate64> instead.");
3995
3996   ("utimens", (RErr, [Pathname "path"; Int64 "atsecs"; Int64 "atnsecs"; Int64 "mtsecs"; Int64 "mtnsecs"]), 201, [],
3997    [InitBasicFS, Always, TestOutputStruct (
3998       [["touch"; "/test"];
3999        ["utimens"; "/test"; "12345"; "67890"; "9876"; "5432"];
4000        ["stat"; "/test"]], [CompareWithInt ("mtime", 9876)])],
4001    "set timestamp of a file with nanosecond precision",
4002    "\
4003 This command sets the timestamps of a file with nanosecond
4004 precision.
4005
4006 C<atsecs, atnsecs> are the last access time (atime) in secs and
4007 nanoseconds from the epoch.
4008
4009 C<mtsecs, mtnsecs> are the last modification time (mtime) in
4010 secs and nanoseconds from the epoch.
4011
4012 If the C<*nsecs> field contains the special value C<-1> then
4013 the corresponding timestamp is set to the current time.  (The
4014 C<*secs> field is ignored in this case).
4015
4016 If the C<*nsecs> field contains the special value C<-2> then
4017 the corresponding timestamp is left unchanged.  (The
4018 C<*secs> field is ignored in this case).");
4019
4020   ("mkdir_mode", (RErr, [Pathname "path"; Int "mode"]), 202, [],
4021    [InitBasicFS, Always, TestOutputStruct (
4022       [["mkdir_mode"; "/test"; "0o111"];
4023        ["stat"; "/test"]], [CompareWithInt ("mode", 0o40111)])],
4024    "create a directory with a particular mode",
4025    "\
4026 This command creates a directory, setting the initial permissions
4027 of the directory to C<mode>.
4028
4029 For common Linux filesystems, the actual mode which is set will
4030 be C<mode & ~umask & 01777>.  Non-native-Linux filesystems may
4031 interpret the mode in other ways.
4032
4033 See also C<guestfs_mkdir>, C<guestfs_umask>");
4034
4035   ("lchown", (RErr, [Int "owner"; Int "group"; Pathname "path"]), 203, [],
4036    [], (* XXX *)
4037    "change file owner and group",
4038    "\
4039 Change the file owner to C<owner> and group to C<group>.
4040 This is like C<guestfs_chown> but if C<path> is a symlink then
4041 the link itself is changed, not the target.
4042
4043 Only numeric uid and gid are supported.  If you want to use
4044 names, you will need to locate and parse the password file
4045 yourself (Augeas support makes this relatively easy).");
4046
4047   ("lstatlist", (RStructList ("statbufs", "stat"), [Pathname "path"; StringList "names"]), 204, [],
4048    [], (* XXX *)
4049    "lstat on multiple files",
4050    "\
4051 This call allows you to perform the C<guestfs_lstat> operation
4052 on multiple files, where all files are in the directory C<path>.
4053 C<names> is the list of files from this directory.
4054
4055 On return you get a list of stat structs, with a one-to-one
4056 correspondence to the C<names> list.  If any name did not exist
4057 or could not be lstat'd, then the C<ino> field of that structure
4058 is set to C<-1>.
4059
4060 This call is intended for programs that want to efficiently
4061 list a directory contents without making many round-trips.
4062 See also C<guestfs_lxattrlist> for a similarly efficient call
4063 for getting extended attributes.  Very long directory listings
4064 might cause the protocol message size to be exceeded, causing
4065 this call to fail.  The caller must split up such requests
4066 into smaller groups of names.");
4067
4068   ("lxattrlist", (RStructList ("xattrs", "xattr"), [Pathname "path"; StringList "names"]), 205, [Optional "linuxxattrs"],
4069    [], (* XXX *)
4070    "lgetxattr on multiple files",
4071    "\
4072 This call allows you to get the extended attributes
4073 of multiple files, where all files are in the directory C<path>.
4074 C<names> is the list of files from this directory.
4075
4076 On return you get a flat list of xattr structs which must be
4077 interpreted sequentially.  The first xattr struct always has a zero-length
4078 C<attrname>.  C<attrval> in this struct is zero-length
4079 to indicate there was an error doing C<lgetxattr> for this
4080 file, I<or> is a C string which is a decimal number
4081 (the number of following attributes for this file, which could
4082 be C<\"0\">).  Then after the first xattr struct are the
4083 zero or more attributes for the first named file.
4084 This repeats for the second and subsequent files.
4085
4086 This call is intended for programs that want to efficiently
4087 list a directory contents without making many round-trips.
4088 See also C<guestfs_lstatlist> for a similarly efficient call
4089 for getting standard stats.  Very long directory listings
4090 might cause the protocol message size to be exceeded, causing
4091 this call to fail.  The caller must split up such requests
4092 into smaller groups of names.");
4093
4094   ("readlinklist", (RStringList "links", [Pathname "path"; StringList "names"]), 206, [],
4095    [], (* XXX *)
4096    "readlink on multiple files",
4097    "\
4098 This call allows you to do a C<readlink> operation
4099 on multiple files, where all files are in the directory C<path>.
4100 C<names> is the list of files from this directory.
4101
4102 On return you get a list of strings, with a one-to-one
4103 correspondence to the C<names> list.  Each string is the
4104 value of the symbolic link.
4105
4106 If the C<readlink(2)> operation fails on any name, then
4107 the corresponding result string is the empty string C<\"\">.
4108 However the whole operation is completed even if there
4109 were C<readlink(2)> errors, and so you can call this
4110 function with names where you don't know if they are
4111 symbolic links already (albeit slightly less efficient).
4112
4113 This call is intended for programs that want to efficiently
4114 list a directory contents without making many round-trips.
4115 Very long directory listings might cause the protocol
4116 message size to be exceeded, causing
4117 this call to fail.  The caller must split up such requests
4118 into smaller groups of names.");
4119
4120   ("pread", (RBufferOut "content", [Pathname "path"; Int "count"; Int64 "offset"]), 207, [ProtocolLimitWarning],
4121    [InitISOFS, Always, TestOutputBuffer (
4122       [["pread"; "/known-4"; "1"; "3"]], "\n");
4123     InitISOFS, Always, TestOutputBuffer (
4124       [["pread"; "/empty"; "0"; "100"]], "")],
4125    "read part of a file",
4126    "\
4127 This command lets you read part of a file.  It reads C<count>
4128 bytes of the file, starting at C<offset>, from file C<path>.
4129
4130 This may read fewer bytes than requested.  For further details
4131 see the L<pread(2)> system call.
4132
4133 See also C<guestfs_pwrite>.");
4134
4135   ("part_init", (RErr, [Device "device"; String "parttype"]), 208, [],
4136    [InitEmpty, Always, TestRun (
4137       [["part_init"; "/dev/sda"; "gpt"]])],
4138    "create an empty partition table",
4139    "\
4140 This creates an empty partition table on C<device> of one of the
4141 partition types listed below.  Usually C<parttype> should be
4142 either C<msdos> or C<gpt> (for large disks).
4143
4144 Initially there are no partitions.  Following this, you should
4145 call C<guestfs_part_add> for each partition required.
4146
4147 Possible values for C<parttype> are:
4148
4149 =over 4
4150
4151 =item B<efi> | B<gpt>
4152
4153 Intel EFI / GPT partition table.
4154
4155 This is recommended for >= 2 TB partitions that will be accessed
4156 from Linux and Intel-based Mac OS X.  It also has limited backwards
4157 compatibility with the C<mbr> format.
4158
4159 =item B<mbr> | B<msdos>
4160
4161 The standard PC \"Master Boot Record\" (MBR) format used
4162 by MS-DOS and Windows.  This partition type will B<only> work
4163 for device sizes up to 2 TB.  For large disks we recommend
4164 using C<gpt>.
4165
4166 =back
4167
4168 Other partition table types that may work but are not
4169 supported include:
4170
4171 =over 4
4172
4173 =item B<aix>
4174
4175 AIX disk labels.
4176
4177 =item B<amiga> | B<rdb>
4178
4179 Amiga \"Rigid Disk Block\" format.
4180
4181 =item B<bsd>
4182
4183 BSD disk labels.
4184
4185 =item B<dasd>
4186
4187 DASD, used on IBM mainframes.
4188
4189 =item B<dvh>
4190
4191 MIPS/SGI volumes.
4192
4193 =item B<mac>
4194
4195 Old Mac partition format.  Modern Macs use C<gpt>.
4196
4197 =item B<pc98>
4198
4199 NEC PC-98 format, common in Japan apparently.
4200
4201 =item B<sun>
4202
4203 Sun disk labels.
4204
4205 =back");
4206
4207   ("part_add", (RErr, [Device "device"; String "prlogex"; Int64 "startsect"; Int64 "endsect"]), 209, [],
4208    [InitEmpty, Always, TestRun (
4209       [["part_init"; "/dev/sda"; "mbr"];
4210        ["part_add"; "/dev/sda"; "primary"; "1"; "-1"]]);
4211     InitEmpty, Always, TestRun (
4212       [["part_init"; "/dev/sda"; "gpt"];
4213        ["part_add"; "/dev/sda"; "primary"; "34"; "127"];
4214        ["part_add"; "/dev/sda"; "primary"; "128"; "-34"]]);
4215     InitEmpty, Always, TestRun (
4216       [["part_init"; "/dev/sda"; "mbr"];
4217        ["part_add"; "/dev/sda"; "primary"; "32"; "127"];
4218        ["part_add"; "/dev/sda"; "primary"; "128"; "255"];
4219        ["part_add"; "/dev/sda"; "primary"; "256"; "511"];
4220        ["part_add"; "/dev/sda"; "primary"; "512"; "-1"]])],
4221    "add a partition to the device",
4222    "\
4223 This command adds a partition to C<device>.  If there is no partition
4224 table on the device, call C<guestfs_part_init> first.
4225
4226 The C<prlogex> parameter is the type of partition.  Normally you
4227 should pass C<p> or C<primary> here, but MBR partition tables also
4228 support C<l> (or C<logical>) and C<e> (or C<extended>) partition
4229 types.
4230
4231 C<startsect> and C<endsect> are the start and end of the partition
4232 in I<sectors>.  C<endsect> may be negative, which means it counts
4233 backwards from the end of the disk (C<-1> is the last sector).
4234
4235 Creating a partition which covers the whole disk is not so easy.
4236 Use C<guestfs_part_disk> to do that.");
4237
4238   ("part_disk", (RErr, [Device "device"; String "parttype"]), 210, [DangerWillRobinson],
4239    [InitEmpty, Always, TestRun (
4240       [["part_disk"; "/dev/sda"; "mbr"]]);
4241     InitEmpty, Always, TestRun (
4242       [["part_disk"; "/dev/sda"; "gpt"]])],
4243    "partition whole disk with a single primary partition",
4244    "\
4245 This command is simply a combination of C<guestfs_part_init>
4246 followed by C<guestfs_part_add> to create a single primary partition
4247 covering the whole disk.
4248
4249 C<parttype> is the partition table type, usually C<mbr> or C<gpt>,
4250 but other possible values are described in C<guestfs_part_init>.");
4251
4252   ("part_set_bootable", (RErr, [Device "device"; Int "partnum"; Bool "bootable"]), 211, [],
4253    [InitEmpty, Always, TestRun (
4254       [["part_disk"; "/dev/sda"; "mbr"];
4255        ["part_set_bootable"; "/dev/sda"; "1"; "true"]])],
4256    "make a partition bootable",
4257    "\
4258 This sets the bootable flag on partition numbered C<partnum> on
4259 device C<device>.  Note that partitions are numbered from 1.
4260
4261 The bootable flag is used by some operating systems (notably
4262 Windows) to determine which partition to boot from.  It is by
4263 no means universally recognized.");
4264
4265   ("part_set_name", (RErr, [Device "device"; Int "partnum"; String "name"]), 212, [],
4266    [InitEmpty, Always, TestRun (
4267       [["part_disk"; "/dev/sda"; "gpt"];
4268        ["part_set_name"; "/dev/sda"; "1"; "thepartname"]])],
4269    "set partition name",
4270    "\
4271 This sets the partition name on partition numbered C<partnum> on
4272 device C<device>.  Note that partitions are numbered from 1.
4273
4274 The partition name can only be set on certain types of partition
4275 table.  This works on C<gpt> but not on C<mbr> partitions.");
4276
4277   ("part_list", (RStructList ("partitions", "partition"), [Device "device"]), 213, [],
4278    [], (* XXX Add a regression test for this. *)
4279    "list partitions on a device",
4280    "\
4281 This command parses the partition table on C<device> and
4282 returns the list of partitions found.
4283
4284 The fields in the returned structure are:
4285
4286 =over 4
4287
4288 =item B<part_num>
4289
4290 Partition number, counting from 1.
4291
4292 =item B<part_start>
4293
4294 Start of the partition I<in bytes>.  To get sectors you have to
4295 divide by the device's sector size, see C<guestfs_blockdev_getss>.
4296
4297 =item B<part_end>
4298
4299 End of the partition in bytes.
4300
4301 =item B<part_size>
4302
4303 Size of the partition in bytes.
4304
4305 =back");
4306
4307   ("part_get_parttype", (RString "parttype", [Device "device"]), 214, [],
4308    [InitEmpty, Always, TestOutput (
4309       [["part_disk"; "/dev/sda"; "gpt"];
4310        ["part_get_parttype"; "/dev/sda"]], "gpt")],
4311    "get the partition table type",
4312    "\
4313 This command examines the partition table on C<device> and
4314 returns the partition table type (format) being used.
4315
4316 Common return values include: C<msdos> (a DOS/Windows style MBR
4317 partition table), C<gpt> (a GPT/EFI-style partition table).  Other
4318 values are possible, although unusual.  See C<guestfs_part_init>
4319 for a full list.");
4320
4321   ("fill", (RErr, [Int "c"; Int "len"; Pathname "path"]), 215, [],
4322    [InitBasicFS, Always, TestOutputBuffer (
4323       [["fill"; "0x63"; "10"; "/test"];
4324        ["read_file"; "/test"]], "cccccccccc")],
4325    "fill a file with octets",
4326    "\
4327 This command creates a new file called C<path>.  The initial
4328 content of the file is C<len> octets of C<c>, where C<c>
4329 must be a number in the range C<[0..255]>.
4330
4331 To fill a file with zero bytes (sparsely), it is
4332 much more efficient to use C<guestfs_truncate_size>.
4333 To create a file with a pattern of repeating bytes
4334 use C<guestfs_fill_pattern>.");
4335
4336   ("available", (RErr, [StringList "groups"]), 216, [],
4337    [InitNone, Always, TestRun [["available"; ""]]],
4338    "test availability of some parts of the API",
4339    "\
4340 This command is used to check the availability of some
4341 groups of functionality in the appliance, which not all builds of
4342 the libguestfs appliance will be able to provide.
4343
4344 The libguestfs groups, and the functions that those
4345 groups correspond to, are listed in L<guestfs(3)/AVAILABILITY>.
4346 You can also fetch this list at runtime by calling
4347 C<guestfs_available_all_groups>.
4348
4349 The argument C<groups> is a list of group names, eg:
4350 C<[\"inotify\", \"augeas\"]> would check for the availability of
4351 the Linux inotify functions and Augeas (configuration file
4352 editing) functions.
4353
4354 The command returns no error if I<all> requested groups are available.
4355
4356 It fails with an error if one or more of the requested
4357 groups is unavailable in the appliance.
4358
4359 If an unknown group name is included in the
4360 list of groups then an error is always returned.
4361
4362 I<Notes:>
4363
4364 =over 4
4365
4366 =item *
4367
4368 You must call C<guestfs_launch> before calling this function.
4369
4370 The reason is because we don't know what groups are
4371 supported by the appliance/daemon until it is running and can
4372 be queried.
4373
4374 =item *
4375
4376 If a group of functions is available, this does not necessarily
4377 mean that they will work.  You still have to check for errors
4378 when calling individual API functions even if they are
4379 available.
4380
4381 =item *
4382
4383 It is usually the job of distro packagers to build
4384 complete functionality into the libguestfs appliance.
4385 Upstream libguestfs, if built from source with all
4386 requirements satisfied, will support everything.
4387
4388 =item *
4389
4390 This call was added in version C<1.0.80>.  In previous
4391 versions of libguestfs all you could do would be to speculatively
4392 execute a command to find out if the daemon implemented it.
4393 See also C<guestfs_version>.
4394
4395 =back");
4396
4397   ("dd", (RErr, [Dev_or_Path "src"; Dev_or_Path "dest"]), 217, [],
4398    [InitBasicFS, Always, TestOutputBuffer (
4399       [["write"; "/src"; "hello, world"];
4400        ["dd"; "/src"; "/dest"];
4401        ["read_file"; "/dest"]], "hello, world")],
4402    "copy from source to destination using dd",
4403    "\
4404 This command copies from one source device or file C<src>
4405 to another destination device or file C<dest>.  Normally you
4406 would use this to copy to or from a device or partition, for
4407 example to duplicate a filesystem.
4408
4409 If the destination is a device, it must be as large or larger
4410 than the source file or device, otherwise the copy will fail.
4411 This command cannot do partial copies (see C<guestfs_copy_size>).");
4412
4413   ("filesize", (RInt64 "size", [Pathname "file"]), 218, [],
4414    [InitBasicFS, Always, TestOutputInt (
4415       [["write"; "/file"; "hello, world"];
4416        ["filesize"; "/file"]], 12)],
4417    "return the size of the file in bytes",
4418    "\
4419 This command returns the size of C<file> in bytes.
4420
4421 To get other stats about a file, use C<guestfs_stat>, C<guestfs_lstat>,
4422 C<guestfs_is_dir>, C<guestfs_is_file> etc.
4423 To get the size of block devices, use C<guestfs_blockdev_getsize64>.");
4424
4425   ("lvrename", (RErr, [String "logvol"; String "newlogvol"]), 219, [],
4426    [InitBasicFSonLVM, Always, TestOutputList (
4427       [["lvrename"; "/dev/VG/LV"; "/dev/VG/LV2"];
4428        ["lvs"]], ["/dev/VG/LV2"])],
4429    "rename an LVM logical volume",
4430    "\
4431 Rename a logical volume C<logvol> with the new name C<newlogvol>.");
4432
4433   ("vgrename", (RErr, [String "volgroup"; String "newvolgroup"]), 220, [],
4434    [InitBasicFSonLVM, Always, TestOutputList (
4435       [["umount"; "/"];
4436        ["vg_activate"; "false"; "VG"];
4437        ["vgrename"; "VG"; "VG2"];
4438        ["vg_activate"; "true"; "VG2"];
4439        ["mount_options"; ""; "/dev/VG2/LV"; "/"];
4440        ["vgs"]], ["VG2"])],
4441    "rename an LVM volume group",
4442    "\
4443 Rename a volume group C<volgroup> with the new name C<newvolgroup>.");
4444
4445   ("initrd_cat", (RBufferOut "content", [Pathname "initrdpath"; String "filename"]), 221, [ProtocolLimitWarning],
4446    [InitISOFS, Always, TestOutputBuffer (
4447       [["initrd_cat"; "/initrd"; "known-4"]], "abc\ndef\nghi")],
4448    "list the contents of a single file in an initrd",
4449    "\
4450 This command unpacks the file C<filename> from the initrd file
4451 called C<initrdpath>.  The filename must be given I<without> the
4452 initial C</> character.
4453
4454 For example, in guestfish you could use the following command
4455 to examine the boot script (usually called C</init>)
4456 contained in a Linux initrd or initramfs image:
4457
4458  initrd-cat /boot/initrd-<version>.img init
4459
4460 See also C<guestfs_initrd_list>.");
4461
4462   ("pvuuid", (RString "uuid", [Device "device"]), 222, [],
4463    [],
4464    "get the UUID of a physical volume",
4465    "\
4466 This command returns the UUID of the LVM PV C<device>.");
4467
4468   ("vguuid", (RString "uuid", [String "vgname"]), 223, [],
4469    [],
4470    "get the UUID of a volume group",
4471    "\
4472 This command returns the UUID of the LVM VG named C<vgname>.");
4473
4474   ("lvuuid", (RString "uuid", [Device "device"]), 224, [],
4475    [],
4476    "get the UUID of a logical volume",
4477    "\
4478 This command returns the UUID of the LVM LV C<device>.");
4479
4480   ("vgpvuuids", (RStringList "uuids", [String "vgname"]), 225, [],
4481    [],
4482    "get the PV UUIDs containing the volume group",
4483    "\
4484 Given a VG called C<vgname>, this returns the UUIDs of all
4485 the physical volumes that this volume group resides on.
4486
4487 You can use this along with C<guestfs_pvs> and C<guestfs_pvuuid>
4488 calls to associate physical volumes and volume groups.
4489
4490 See also C<guestfs_vglvuuids>.");
4491
4492   ("vglvuuids", (RStringList "uuids", [String "vgname"]), 226, [],
4493    [],
4494    "get the LV UUIDs of all LVs in the volume group",
4495    "\
4496 Given a VG called C<vgname>, this returns the UUIDs of all
4497 the logical volumes created in this volume group.
4498
4499 You can use this along with C<guestfs_lvs> and C<guestfs_lvuuid>
4500 calls to associate logical volumes and volume groups.
4501
4502 See also C<guestfs_vgpvuuids>.");
4503
4504   ("copy_size", (RErr, [Dev_or_Path "src"; Dev_or_Path "dest"; Int64 "size"]), 227, [],
4505    [InitBasicFS, Always, TestOutputBuffer (
4506       [["write"; "/src"; "hello, world"];
4507        ["copy_size"; "/src"; "/dest"; "5"];
4508        ["read_file"; "/dest"]], "hello")],
4509    "copy size bytes from source to destination using dd",
4510    "\
4511 This command copies exactly C<size> bytes from one source device
4512 or file C<src> to another destination device or file C<dest>.
4513
4514 Note this will fail if the source is too short or if the destination
4515 is not large enough.");
4516
4517   ("zero_device", (RErr, [Device "device"]), 228, [DangerWillRobinson],
4518    [InitBasicFSonLVM, Always, TestRun (
4519       [["zero_device"; "/dev/VG/LV"]])],
4520    "write zeroes to an entire device",
4521    "\
4522 This command writes zeroes over the entire C<device>.  Compare
4523 with C<guestfs_zero> which just zeroes the first few blocks of
4524 a device.");
4525
4526   ("txz_in", (RErr, [FileIn "tarball"; Pathname "directory"]), 229, [Optional "xz"],
4527    [InitBasicFS, Always, TestOutput (
4528       [["txz_in"; "../images/helloworld.tar.xz"; "/"];
4529        ["cat"; "/hello"]], "hello\n")],
4530    "unpack compressed tarball to directory",
4531    "\
4532 This command uploads and unpacks local file C<tarball> (an
4533 I<xz compressed> tar file) into C<directory>.");
4534
4535   ("txz_out", (RErr, [Pathname "directory"; FileOut "tarball"]), 230, [Optional "xz"],
4536    [],
4537    "pack directory into compressed tarball",
4538    "\
4539 This command packs the contents of C<directory> and downloads
4540 it to local file C<tarball> (as an xz compressed tar archive).");
4541
4542   ("ntfsresize", (RErr, [Device "device"]), 231, [Optional "ntfsprogs"],
4543    [],
4544    "resize an NTFS filesystem",
4545    "\
4546 This command resizes an NTFS filesystem, expanding or
4547 shrinking it to the size of the underlying device.
4548 See also L<ntfsresize(8)>.");
4549
4550   ("vgscan", (RErr, []), 232, [],
4551    [InitEmpty, Always, TestRun (
4552       [["vgscan"]])],
4553    "rescan for LVM physical volumes, volume groups and logical volumes",
4554    "\
4555 This rescans all block devices and rebuilds the list of LVM
4556 physical volumes, volume groups and logical volumes.");
4557
4558   ("part_del", (RErr, [Device "device"; Int "partnum"]), 233, [],
4559    [InitEmpty, Always, TestRun (
4560       [["part_init"; "/dev/sda"; "mbr"];
4561        ["part_add"; "/dev/sda"; "primary"; "1"; "-1"];
4562        ["part_del"; "/dev/sda"; "1"]])],
4563    "delete a partition",
4564    "\
4565 This command deletes the partition numbered C<partnum> on C<device>.
4566
4567 Note that in the case of MBR partitioning, deleting an
4568 extended partition also deletes any logical partitions
4569 it contains.");
4570
4571   ("part_get_bootable", (RBool "bootable", [Device "device"; Int "partnum"]), 234, [],
4572    [InitEmpty, Always, TestOutputTrue (
4573       [["part_init"; "/dev/sda"; "mbr"];
4574        ["part_add"; "/dev/sda"; "primary"; "1"; "-1"];
4575        ["part_set_bootable"; "/dev/sda"; "1"; "true"];
4576        ["part_get_bootable"; "/dev/sda"; "1"]])],
4577    "return true if a partition is bootable",
4578    "\
4579 This command returns true if the partition C<partnum> on
4580 C<device> has the bootable flag set.
4581
4582 See also C<guestfs_part_set_bootable>.");
4583
4584   ("part_get_mbr_id", (RInt "idbyte", [Device "device"; Int "partnum"]), 235, [FishOutput FishOutputHexadecimal],
4585    [InitEmpty, Always, TestOutputInt (
4586       [["part_init"; "/dev/sda"; "mbr"];
4587        ["part_add"; "/dev/sda"; "primary"; "1"; "-1"];
4588        ["part_set_mbr_id"; "/dev/sda"; "1"; "0x7f"];
4589        ["part_get_mbr_id"; "/dev/sda"; "1"]], 0x7f)],
4590    "get the MBR type byte (ID byte) from a partition",
4591    "\
4592 Returns the MBR type byte (also known as the ID byte) from
4593 the numbered partition C<partnum>.
4594
4595 Note that only MBR (old DOS-style) partitions have type bytes.
4596 You will get undefined results for other partition table
4597 types (see C<guestfs_part_get_parttype>).");
4598
4599   ("part_set_mbr_id", (RErr, [Device "device"; Int "partnum"; Int "idbyte"]), 236, [],
4600    [], (* tested by part_get_mbr_id *)
4601    "set the MBR type byte (ID byte) of a partition",
4602    "\
4603 Sets the MBR type byte (also known as the ID byte) of
4604 the numbered partition C<partnum> to C<idbyte>.  Note
4605 that the type bytes quoted in most documentation are
4606 in fact hexadecimal numbers, but usually documented
4607 without any leading \"0x\" which might be confusing.
4608
4609 Note that only MBR (old DOS-style) partitions have type bytes.
4610 You will get undefined results for other partition table
4611 types (see C<guestfs_part_get_parttype>).");
4612
4613   ("checksum_device", (RString "checksum", [String "csumtype"; Device "device"]), 237, [],
4614    [InitISOFS, Always, TestOutput (
4615       [["checksum_device"; "md5"; "/dev/sdd"]],
4616       (Digest.to_hex (Digest.file "images/test.iso")))],
4617    "compute MD5, SHAx or CRC checksum of the contents of a device",
4618    "\
4619 This call computes the MD5, SHAx or CRC checksum of the
4620 contents of the device named C<device>.  For the types of
4621 checksums supported see the C<guestfs_checksum> command.");
4622
4623   ("lvresize_free", (RErr, [Device "lv"; Int "percent"]), 238, [Optional "lvm2"],
4624    [InitNone, Always, TestRun (
4625       [["part_disk"; "/dev/sda"; "mbr"];
4626        ["pvcreate"; "/dev/sda1"];
4627        ["vgcreate"; "VG"; "/dev/sda1"];
4628        ["lvcreate"; "LV"; "VG"; "10"];
4629        ["lvresize_free"; "/dev/VG/LV"; "100"]])],
4630    "expand an LV to fill free space",
4631    "\
4632 This expands an existing logical volume C<lv> so that it fills
4633 C<pc>% of the remaining free space in the volume group.  Commonly
4634 you would call this with pc = 100 which expands the logical volume
4635 as much as possible, using all remaining free space in the volume
4636 group.");
4637
4638   ("aug_clear", (RErr, [String "augpath"]), 239, [Optional "augeas"],
4639    [], (* XXX Augeas code needs tests. *)
4640    "clear Augeas path",
4641    "\
4642 Set the value associated with C<path> to C<NULL>.  This
4643 is the same as the L<augtool(1)> C<clear> command.");
4644
4645   ("get_umask", (RInt "mask", []), 240, [FishOutput FishOutputOctal],
4646    [InitEmpty, Always, TestOutputInt (
4647       [["get_umask"]], 0o22)],
4648    "get the current umask",
4649    "\
4650 Return the current umask.  By default the umask is C<022>
4651 unless it has been set by calling C<guestfs_umask>.");
4652
4653   ("debug_upload", (RErr, [FileIn "filename"; String "tmpname"; Int "mode"]), 241, [],
4654    [],
4655    "upload a file to the appliance (internal use only)",
4656    "\
4657 The C<guestfs_debug_upload> command uploads a file to
4658 the libguestfs appliance.
4659
4660 There is no comprehensive help for this command.  You have
4661 to look at the file C<daemon/debug.c> in the libguestfs source
4662 to find out what it is for.");
4663
4664   ("base64_in", (RErr, [FileIn "base64file"; Pathname "filename"]), 242, [],
4665    [InitBasicFS, Always, TestOutput (
4666       [["base64_in"; "../images/hello.b64"; "/hello"];
4667        ["cat"; "/hello"]], "hello\n")],
4668    "upload base64-encoded data to file",
4669    "\
4670 This command uploads base64-encoded data from C<base64file>
4671 to C<filename>.");
4672
4673   ("base64_out", (RErr, [Pathname "filename"; FileOut "base64file"]), 243, [],
4674    [],
4675    "download file and encode as base64",
4676    "\
4677 This command downloads the contents of C<filename>, writing
4678 it out to local file C<base64file> encoded as base64.");
4679
4680   ("checksums_out", (RErr, [String "csumtype"; Pathname "directory"; FileOut "sumsfile"]), 244, [],
4681    [],
4682    "compute MD5, SHAx or CRC checksum of files in a directory",
4683    "\
4684 This command computes the checksums of all regular files in
4685 C<directory> and then emits a list of those checksums to
4686 the local output file C<sumsfile>.
4687
4688 This can be used for verifying the integrity of a virtual
4689 machine.  However to be properly secure you should pay
4690 attention to the output of the checksum command (it uses
4691 the ones from GNU coreutils).  In particular when the
4692 filename is not printable, coreutils uses a special
4693 backslash syntax.  For more information, see the GNU
4694 coreutils info file.");
4695
4696   ("fill_pattern", (RErr, [String "pattern"; Int "len"; Pathname "path"]), 245, [],
4697    [InitBasicFS, Always, TestOutputBuffer (
4698       [["fill_pattern"; "abcdefghijklmnopqrstuvwxyz"; "28"; "/test"];
4699        ["read_file"; "/test"]], "abcdefghijklmnopqrstuvwxyzab")],
4700    "fill a file with a repeating pattern of bytes",
4701    "\
4702 This function is like C<guestfs_fill> except that it creates
4703 a new file of length C<len> containing the repeating pattern
4704 of bytes in C<pattern>.  The pattern is truncated if necessary
4705 to ensure the length of the file is exactly C<len> bytes.");
4706
4707   ("write", (RErr, [Pathname "path"; BufferIn "content"]), 246, [ProtocolLimitWarning],
4708    [InitBasicFS, Always, TestOutput (
4709       [["write"; "/new"; "new file contents"];
4710        ["cat"; "/new"]], "new file contents");
4711     InitBasicFS, Always, TestOutput (
4712       [["write"; "/new"; "\nnew file contents\n"];
4713        ["cat"; "/new"]], "\nnew file contents\n");
4714     InitBasicFS, Always, TestOutput (
4715       [["write"; "/new"; "\n\n"];
4716        ["cat"; "/new"]], "\n\n");
4717     InitBasicFS, Always, TestOutput (
4718       [["write"; "/new"; ""];
4719        ["cat"; "/new"]], "");
4720     InitBasicFS, Always, TestOutput (
4721       [["write"; "/new"; "\n\n\n"];
4722        ["cat"; "/new"]], "\n\n\n");
4723     InitBasicFS, Always, TestOutput (
4724       [["write"; "/new"; "\n"];
4725        ["cat"; "/new"]], "\n")],
4726    "create a new file",
4727    "\
4728 This call creates a file called C<path>.  The content of the
4729 file is the string C<content> (which can contain any 8 bit data).");
4730
4731   ("pwrite", (RInt "nbytes", [Pathname "path"; BufferIn "content"; Int64 "offset"]), 247, [ProtocolLimitWarning],
4732    [InitBasicFS, Always, TestOutput (
4733       [["write"; "/new"; "new file contents"];
4734        ["pwrite"; "/new"; "data"; "4"];
4735        ["cat"; "/new"]], "new data contents");
4736     InitBasicFS, Always, TestOutput (
4737       [["write"; "/new"; "new file contents"];
4738        ["pwrite"; "/new"; "is extended"; "9"];
4739        ["cat"; "/new"]], "new file is extended");
4740     InitBasicFS, Always, TestOutput (
4741       [["write"; "/new"; "new file contents"];
4742        ["pwrite"; "/new"; ""; "4"];
4743        ["cat"; "/new"]], "new file contents")],
4744    "write to part of a file",
4745    "\
4746 This command writes to part of a file.  It writes the data
4747 buffer C<content> to the file C<path> starting at offset C<offset>.
4748
4749 This command implements the L<pwrite(2)> system call, and like
4750 that system call it may not write the full data requested.  The
4751 return value is the number of bytes that were actually written
4752 to the file.  This could even be 0, although short writes are
4753 unlikely for regular files in ordinary circumstances.
4754
4755 See also C<guestfs_pread>.");
4756
4757   ("resize2fs_size", (RErr, [Device "device"; Int64 "size"]), 248, [],
4758    [],
4759    "resize an ext2, ext3 or ext4 filesystem (with size)",
4760    "\
4761 This command is the same as C<guestfs_resize2fs> except that it
4762 allows you to specify the new size (in bytes) explicitly.");
4763
4764   ("pvresize_size", (RErr, [Device "device"; Int64 "size"]), 249, [Optional "lvm2"],
4765    [],
4766    "resize an LVM physical volume (with size)",
4767    "\
4768 This command is the same as C<guestfs_pvresize> except that it
4769 allows you to specify the new size (in bytes) explicitly.");
4770
4771   ("ntfsresize_size", (RErr, [Device "device"; Int64 "size"]), 250, [Optional "ntfsprogs"],
4772    [],
4773    "resize an NTFS filesystem (with size)",
4774    "\
4775 This command is the same as C<guestfs_ntfsresize> except that it
4776 allows you to specify the new size (in bytes) explicitly.");
4777
4778   ("available_all_groups", (RStringList "groups", []), 251, [],
4779    [InitNone, Always, TestRun [["available_all_groups"]]],
4780    "return a list of all optional groups",
4781    "\
4782 This command returns a list of all optional groups that this
4783 daemon knows about.  Note this returns both supported and unsupported
4784 groups.  To find out which ones the daemon can actually support
4785 you have to call C<guestfs_available> on each member of the
4786 returned list.
4787
4788 See also C<guestfs_available> and L<guestfs(3)/AVAILABILITY>.");
4789
4790   ("fallocate64", (RErr, [Pathname "path"; Int64 "len"]), 252, [],
4791    [InitBasicFS, Always, TestOutputStruct (
4792       [["fallocate64"; "/a"; "1000000"];
4793        ["stat"; "/a"]], [CompareWithInt ("size", 1_000_000)])],
4794    "preallocate a file in the guest filesystem",
4795    "\
4796 This command preallocates a file (containing zero bytes) named
4797 C<path> of size C<len> bytes.  If the file exists already, it
4798 is overwritten.
4799
4800 Note that this call allocates disk blocks for the file.
4801 To create a sparse file use C<guestfs_truncate_size> instead.
4802
4803 The deprecated call C<guestfs_fallocate> does the same,
4804 but owing to an oversight it only allowed 30 bit lengths
4805 to be specified, effectively limiting the maximum size
4806 of files created through that call to 1GB.
4807
4808 Do not confuse this with the guestfish-specific
4809 C<alloc> and C<sparse> commands which create
4810 a file in the host and attach it as a device.");
4811
4812   ("vfs_label", (RString "label", [Device "device"]), 253, [],
4813    [InitBasicFS, Always, TestOutput (
4814        [["set_e2label"; "/dev/sda1"; "LTEST"];
4815         ["vfs_label"; "/dev/sda1"]], "LTEST")],
4816    "get the filesystem label",
4817    "\
4818 This returns the filesystem label of the filesystem on
4819 C<device>.
4820
4821 If the filesystem is unlabeled, this returns the empty string.");
4822
4823   ("vfs_uuid", (RString "uuid", [Device "device"]), 254, [],
4824    (let uuid = uuidgen () in
4825     [InitBasicFS, Always, TestOutput (
4826        [["set_e2uuid"; "/dev/sda1"; uuid];
4827         ["vfs_uuid"; "/dev/sda1"]], uuid)]),
4828    "get the filesystem UUID",
4829    "\
4830 This returns the filesystem UUID of the filesystem on
4831 C<device>.
4832
4833 If the filesystem does not have a UUID, this returns the empty string.");
4834
4835 ]
4836
4837 let all_functions = non_daemon_functions @ daemon_functions
4838
4839 (* In some places we want the functions to be displayed sorted
4840  * alphabetically, so this is useful:
4841  *)
4842 let all_functions_sorted =
4843   List.sort (fun (n1,_,_,_,_,_,_) (n2,_,_,_,_,_,_) ->
4844                compare n1 n2) all_functions
4845
4846 (* This is used to generate the src/MAX_PROC_NR file which
4847  * contains the maximum procedure number, a surrogate for the
4848  * ABI version number.  See src/Makefile.am for the details.
4849  *)
4850 let max_proc_nr =
4851   let proc_nrs = List.map (
4852     fun (_, _, proc_nr, _, _, _, _) -> proc_nr
4853   ) daemon_functions in
4854   List.fold_left max 0 proc_nrs
4855
4856 (* Field types for structures. *)
4857 type field =
4858   | FChar                       (* C 'char' (really, a 7 bit byte). *)
4859   | FString                     (* nul-terminated ASCII string, NOT NULL. *)
4860   | FBuffer                     (* opaque buffer of bytes, (char *, int) pair *)
4861   | FUInt32
4862   | FInt32
4863   | FUInt64
4864   | FInt64
4865   | FBytes                      (* Any int measure that counts bytes. *)
4866   | FUUID                       (* 32 bytes long, NOT nul-terminated. *)
4867   | FOptPercent                 (* [0..100], or -1 meaning "not present". *)
4868
4869 (* Because we generate extra parsing code for LVM command line tools,
4870  * we have to pull out the LVM columns separately here.
4871  *)
4872 let lvm_pv_cols = [
4873   "pv_name", FString;
4874   "pv_uuid", FUUID;
4875   "pv_fmt", FString;
4876   "pv_size", FBytes;
4877   "dev_size", FBytes;
4878   "pv_free", FBytes;
4879   "pv_used", FBytes;
4880   "pv_attr", FString (* XXX *);
4881   "pv_pe_count", FInt64;
4882   "pv_pe_alloc_count", FInt64;
4883   "pv_tags", FString;
4884   "pe_start", FBytes;
4885   "pv_mda_count", FInt64;
4886   "pv_mda_free", FBytes;
4887   (* Not in Fedora 10:
4888      "pv_mda_size", FBytes;
4889   *)
4890 ]
4891 let lvm_vg_cols = [
4892   "vg_name", FString;
4893   "vg_uuid", FUUID;
4894   "vg_fmt", FString;
4895   "vg_attr", FString (* XXX *);
4896   "vg_size", FBytes;
4897   "vg_free", FBytes;
4898   "vg_sysid", FString;
4899   "vg_extent_size", FBytes;
4900   "vg_extent_count", FInt64;
4901   "vg_free_count", FInt64;
4902   "max_lv", FInt64;
4903   "max_pv", FInt64;
4904   "pv_count", FInt64;
4905   "lv_count", FInt64;
4906   "snap_count", FInt64;
4907   "vg_seqno", FInt64;
4908   "vg_tags", FString;
4909   "vg_mda_count", FInt64;
4910   "vg_mda_free", FBytes;
4911   (* Not in Fedora 10:
4912      "vg_mda_size", FBytes;
4913   *)
4914 ]
4915 let lvm_lv_cols = [
4916   "lv_name", FString;
4917   "lv_uuid", FUUID;
4918   "lv_attr", FString (* XXX *);
4919   "lv_major", FInt64;
4920   "lv_minor", FInt64;
4921   "lv_kernel_major", FInt64;
4922   "lv_kernel_minor", FInt64;
4923   "lv_size", FBytes;
4924   "seg_count", FInt64;
4925   "origin", FString;
4926   "snap_percent", FOptPercent;
4927   "copy_percent", FOptPercent;
4928   "move_pv", FString;
4929   "lv_tags", FString;
4930   "mirror_log", FString;
4931   "modules", FString;
4932 ]
4933
4934 (* Names and fields in all structures (in RStruct and RStructList)
4935  * that we support.
4936  *)
4937 let structs = [
4938   (* The old RIntBool return type, only ever used for aug_defnode.  Do
4939    * not use this struct in any new code.
4940    *)
4941   "int_bool", [
4942     "i", FInt32;                (* for historical compatibility *)
4943     "b", FInt32;                (* for historical compatibility *)
4944   ];
4945
4946   (* LVM PVs, VGs, LVs. *)
4947   "lvm_pv", lvm_pv_cols;
4948   "lvm_vg", lvm_vg_cols;
4949   "lvm_lv", lvm_lv_cols;
4950
4951   (* Column names and types from stat structures.
4952    * NB. Can't use things like 'st_atime' because glibc header files
4953    * define some of these as macros.  Ugh.
4954    *)
4955   "stat", [
4956     "dev", FInt64;
4957     "ino", FInt64;
4958     "mode", FInt64;
4959     "nlink", FInt64;
4960     "uid", FInt64;
4961     "gid", FInt64;
4962     "rdev", FInt64;
4963     "size", FInt64;
4964     "blksize", FInt64;
4965     "blocks", FInt64;
4966     "atime", FInt64;
4967     "mtime", FInt64;
4968     "ctime", FInt64;
4969   ];
4970   "statvfs", [
4971     "bsize", FInt64;
4972     "frsize", FInt64;
4973     "blocks", FInt64;
4974     "bfree", FInt64;
4975     "bavail", FInt64;
4976     "files", FInt64;
4977     "ffree", FInt64;
4978     "favail", FInt64;
4979     "fsid", FInt64;
4980     "flag", FInt64;
4981     "namemax", FInt64;
4982   ];
4983
4984   (* Column names in dirent structure. *)
4985   "dirent", [
4986     "ino", FInt64;
4987     (* 'b' 'c' 'd' 'f' (FIFO) 'l' 'r' (regular file) 's' 'u' '?' *)
4988     "ftyp", FChar;
4989     "name", FString;
4990   ];
4991
4992   (* Version numbers. *)
4993   "version", [
4994     "major", FInt64;
4995     "minor", FInt64;
4996     "release", FInt64;
4997     "extra", FString;
4998   ];
4999
5000   (* Extended attribute. *)
5001   "xattr", [
5002     "attrname", FString;
5003     "attrval", FBuffer;
5004   ];
5005
5006   (* Inotify events. *)
5007   "inotify_event", [
5008     "in_wd", FInt64;
5009     "in_mask", FUInt32;
5010     "in_cookie", FUInt32;
5011     "in_name", FString;
5012   ];
5013
5014   (* Partition table entry. *)
5015   "partition", [
5016     "part_num", FInt32;
5017     "part_start", FBytes;
5018     "part_end", FBytes;
5019     "part_size", FBytes;
5020   ];
5021 ] (* end of structs *)
5022
5023 (* Ugh, Java has to be different ..
5024  * These names are also used by the Haskell bindings.
5025  *)
5026 let java_structs = [
5027   "int_bool", "IntBool";
5028   "lvm_pv", "PV";
5029   "lvm_vg", "VG";
5030   "lvm_lv", "LV";
5031   "stat", "Stat";
5032   "statvfs", "StatVFS";
5033   "dirent", "Dirent";
5034   "version", "Version";
5035   "xattr", "XAttr";
5036   "inotify_event", "INotifyEvent";
5037   "partition", "Partition";
5038 ]
5039
5040 (* What structs are actually returned. *)
5041 type rstructs_used_t = RStructOnly | RStructListOnly | RStructAndList
5042
5043 (* Returns a list of RStruct/RStructList structs that are returned
5044  * by any function.  Each element of returned list is a pair:
5045  *
5046  * (structname, RStructOnly)
5047  *    == there exists function which returns RStruct (_, structname)
5048  * (structname, RStructListOnly)
5049  *    == there exists function which returns RStructList (_, structname)
5050  * (structname, RStructAndList)
5051  *    == there are functions returning both RStruct (_, structname)
5052  *                                      and RStructList (_, structname)
5053  *)
5054 let rstructs_used_by functions =
5055   (* ||| is a "logical OR" for rstructs_used_t *)
5056   let (|||) a b =
5057     match a, b with
5058     | RStructAndList, _
5059     | _, RStructAndList -> RStructAndList
5060     | RStructOnly, RStructListOnly
5061     | RStructListOnly, RStructOnly -> RStructAndList
5062     | RStructOnly, RStructOnly -> RStructOnly
5063     | RStructListOnly, RStructListOnly -> RStructListOnly
5064   in
5065
5066   let h = Hashtbl.create 13 in
5067
5068   (* if elem->oldv exists, update entry using ||| operator,
5069    * else just add elem->newv to the hash
5070    *)
5071   let update elem newv =
5072     try  let oldv = Hashtbl.find h elem in
5073          Hashtbl.replace h elem (newv ||| oldv)
5074     with Not_found -> Hashtbl.add h elem newv
5075   in
5076
5077   List.iter (
5078     fun (_, style, _, _, _, _, _) ->
5079       match fst style with
5080       | RStruct (_, structname) -> update structname RStructOnly
5081       | RStructList (_, structname) -> update structname RStructListOnly
5082       | _ -> ()
5083   ) functions;
5084
5085   (* return key->values as a list of (key,value) *)
5086   Hashtbl.fold (fun key value xs -> (key, value) :: xs) h []
5087
5088 (* Used for testing language bindings. *)
5089 type callt =
5090   | CallString of string
5091   | CallOptString of string option
5092   | CallStringList of string list
5093   | CallInt of int
5094   | CallInt64 of int64
5095   | CallBool of bool
5096   | CallBuffer of string
5097
5098 (* Used to memoize the result of pod2text. *)
5099 let pod2text_memo_filename = "src/.pod2text.data"
5100 let pod2text_memo : ((int * string * string), string list) Hashtbl.t =
5101   try
5102     let chan = open_in pod2text_memo_filename in
5103     let v = input_value chan in
5104     close_in chan;
5105     v
5106   with
5107     _ -> Hashtbl.create 13
5108 let pod2text_memo_updated () =
5109   let chan = open_out pod2text_memo_filename in
5110   output_value chan pod2text_memo;
5111   close_out chan
5112
5113 (* Useful functions.
5114  * Note we don't want to use any external OCaml libraries which
5115  * makes this a bit harder than it should be.
5116  *)
5117 module StringMap = Map.Make (String)
5118
5119 let failwithf fs = ksprintf failwith fs
5120
5121 let unique = let i = ref 0 in fun () -> incr i; !i
5122
5123 let replace_char s c1 c2 =
5124   let s2 = String.copy s in
5125   let r = ref false in
5126   for i = 0 to String.length s2 - 1 do
5127     if String.unsafe_get s2 i = c1 then (
5128       String.unsafe_set s2 i c2;
5129       r := true
5130     )
5131   done;
5132   if not !r then s else s2
5133
5134 let isspace c =
5135   c = ' '
5136   (* || c = '\f' *) || c = '\n' || c = '\r' || c = '\t' (* || c = '\v' *)
5137
5138 let triml ?(test = isspace) str =
5139   let i = ref 0 in
5140   let n = ref (String.length str) in
5141   while !n > 0 && test str.[!i]; do
5142     decr n;
5143     incr i
5144   done;
5145   if !i = 0 then str
5146   else String.sub str !i !n
5147
5148 let trimr ?(test = isspace) str =
5149   let n = ref (String.length str) in
5150   while !n > 0 && test str.[!n-1]; do
5151     decr n
5152   done;
5153   if !n = String.length str then str
5154   else String.sub str 0 !n
5155
5156 let trim ?(test = isspace) str =
5157   trimr ~test (triml ~test str)
5158
5159 let rec find s sub =
5160   let len = String.length s in
5161   let sublen = String.length sub in
5162   let rec loop i =
5163     if i <= len-sublen then (
5164       let rec loop2 j =
5165         if j < sublen then (
5166           if s.[i+j] = sub.[j] then loop2 (j+1)
5167           else -1
5168         ) else
5169           i (* found *)
5170       in
5171       let r = loop2 0 in
5172       if r = -1 then loop (i+1) else r
5173     ) else
5174       -1 (* not found *)
5175   in
5176   loop 0
5177
5178 let rec replace_str s s1 s2 =
5179   let len = String.length s in
5180   let sublen = String.length s1 in
5181   let i = find s s1 in
5182   if i = -1 then s
5183   else (
5184     let s' = String.sub s 0 i in
5185     let s'' = String.sub s (i+sublen) (len-i-sublen) in
5186     s' ^ s2 ^ replace_str s'' s1 s2
5187   )
5188
5189 let rec string_split sep str =
5190   let len = String.length str in
5191   let seplen = String.length sep in
5192   let i = find str sep in
5193   if i = -1 then [str]
5194   else (
5195     let s' = String.sub str 0 i in
5196     let s'' = String.sub str (i+seplen) (len-i-seplen) in
5197     s' :: string_split sep s''
5198   )
5199
5200 let files_equal n1 n2 =
5201   let cmd = sprintf "cmp -s %s %s" (Filename.quote n1) (Filename.quote n2) in
5202   match Sys.command cmd with
5203   | 0 -> true
5204   | 1 -> false
5205   | i -> failwithf "%s: failed with error code %d" cmd i
5206
5207 let rec filter_map f = function
5208   | [] -> []
5209   | x :: xs ->
5210       match f x with
5211       | Some y -> y :: filter_map f xs
5212       | None -> filter_map f xs
5213
5214 let rec find_map f = function
5215   | [] -> raise Not_found
5216   | x :: xs ->
5217       match f x with
5218       | Some y -> y
5219       | None -> find_map f xs
5220
5221 let iteri f xs =
5222   let rec loop i = function
5223     | [] -> ()
5224     | x :: xs -> f i x; loop (i+1) xs
5225   in
5226   loop 0 xs
5227
5228 let mapi f xs =
5229   let rec loop i = function
5230     | [] -> []
5231     | x :: xs -> let r = f i x in r :: loop (i+1) xs
5232   in
5233   loop 0 xs
5234
5235 let count_chars c str =
5236   let count = ref 0 in
5237   for i = 0 to String.length str - 1 do
5238     if c = String.unsafe_get str i then incr count
5239   done;
5240   !count
5241
5242 let explode str =
5243   let r = ref [] in
5244   for i = 0 to String.length str - 1 do
5245     let c = String.unsafe_get str i in
5246     r := c :: !r;
5247   done;
5248   List.rev !r
5249
5250 let map_chars f str =
5251   List.map f (explode str)
5252
5253 let name_of_argt = function
5254   | Pathname n | Device n | Dev_or_Path n | String n | OptString n
5255   | StringList n | DeviceList n | Bool n | Int n | Int64 n
5256   | FileIn n | FileOut n | BufferIn n -> n
5257
5258 let java_name_of_struct typ =
5259   try List.assoc typ java_structs
5260   with Not_found ->
5261     failwithf
5262       "java_name_of_struct: no java_structs entry corresponding to %s" typ
5263
5264 let cols_of_struct typ =
5265   try List.assoc typ structs
5266   with Not_found ->
5267     failwithf "cols_of_struct: unknown struct %s" typ
5268
5269 let seq_of_test = function
5270   | TestRun s | TestOutput (s, _) | TestOutputList (s, _)
5271   | TestOutputListOfDevices (s, _)
5272   | TestOutputInt (s, _) | TestOutputIntOp (s, _, _)
5273   | TestOutputTrue s | TestOutputFalse s
5274   | TestOutputLength (s, _) | TestOutputBuffer (s, _)
5275   | TestOutputStruct (s, _)
5276   | TestLastFail s -> s
5277
5278 (* Handling for function flags. *)
5279 let protocol_limit_warning =
5280   "Because of the message protocol, there is a transfer limit
5281 of somewhere between 2MB and 4MB.  See L<guestfs(3)/PROTOCOL LIMITS>."
5282
5283 let danger_will_robinson =
5284   "B<This command is dangerous.  Without careful use you
5285 can easily destroy all your data>."
5286
5287 let deprecation_notice flags =
5288   try
5289     let alt =
5290       find_map (function DeprecatedBy str -> Some str | _ -> None) flags in
5291     let txt =
5292       sprintf "This function is deprecated.
5293 In new code, use the C<%s> call instead.
5294
5295 Deprecated functions will not be removed from the API, but the
5296 fact that they are deprecated indicates that there are problems
5297 with correct use of these functions." alt in
5298     Some txt
5299   with
5300     Not_found -> None
5301
5302 (* Create list of optional groups. *)
5303 let optgroups =
5304   let h = Hashtbl.create 13 in
5305   List.iter (
5306     fun (name, _, _, flags, _, _, _) ->
5307       List.iter (
5308         function
5309         | Optional group ->
5310             let names = try Hashtbl.find h group with Not_found -> [] in
5311             Hashtbl.replace h group (name :: names)
5312         | _ -> ()
5313       ) flags
5314   ) daemon_functions;
5315   let groups = Hashtbl.fold (fun k _ ks -> k :: ks) h [] in
5316   let groups =
5317     List.map (
5318       fun group -> group, List.sort compare (Hashtbl.find h group)
5319     ) groups in
5320   List.sort (fun x y -> compare (fst x) (fst y)) groups
5321
5322 (* Check function names etc. for consistency. *)
5323 let check_functions () =
5324   let contains_uppercase str =
5325     let len = String.length str in
5326     let rec loop i =
5327       if i >= len then false
5328       else (
5329         let c = str.[i] in
5330         if c >= 'A' && c <= 'Z' then true
5331         else loop (i+1)
5332       )
5333     in
5334     loop 0
5335   in
5336
5337   (* Check function names. *)
5338   List.iter (
5339     fun (name, _, _, _, _, _, _) ->
5340       if String.length name >= 7 && String.sub name 0 7 = "guestfs" then
5341         failwithf "function name %s does not need 'guestfs' prefix" name;
5342       if name = "" then
5343         failwithf "function name is empty";
5344       if name.[0] < 'a' || name.[0] > 'z' then
5345         failwithf "function name %s must start with lowercase a-z" name;
5346       if String.contains name '-' then
5347         failwithf "function name %s should not contain '-', use '_' instead."
5348           name
5349   ) all_functions;
5350
5351   (* Check function parameter/return names. *)
5352   List.iter (
5353     fun (name, style, _, _, _, _, _) ->
5354       let check_arg_ret_name n =
5355         if contains_uppercase n then
5356           failwithf "%s param/ret %s should not contain uppercase chars"
5357             name n;
5358         if String.contains n '-' || String.contains n '_' then
5359           failwithf "%s param/ret %s should not contain '-' or '_'"
5360             name n;
5361         if n = "value" then
5362           failwithf "%s has a param/ret called 'value', which causes conflicts in the OCaml bindings, use something like 'val' or a more descriptive name" name;
5363         if n = "int" || n = "char" || n = "short" || n = "long" then
5364           failwithf "%s has a param/ret which conflicts with a C type (eg. 'int', 'char' etc.)" name;
5365         if n = "i" || n = "n" then
5366           failwithf "%s has a param/ret called 'i' or 'n', which will cause some conflicts in the generated code" name;
5367         if n = "argv" || n = "args" then
5368           failwithf "%s has a param/ret called 'argv' or 'args', which will cause some conflicts in the generated code" name;
5369
5370         (* List Haskell, OCaml and C keywords here.
5371          * http://www.haskell.org/haskellwiki/Keywords
5372          * http://caml.inria.fr/pub/docs/manual-ocaml/lex.html#operator-char
5373          * http://en.wikipedia.org/wiki/C_syntax#Reserved_keywords
5374          * Formatted via: cat c haskell ocaml|sort -u|grep -vE '_|^val$' \
5375          *   |perl -pe 's/(.+)/"$1";/'|fmt -70
5376          * Omitting _-containing words, since they're handled above.
5377          * Omitting the OCaml reserved word, "val", is ok,
5378          * and saves us from renaming several parameters.
5379          *)
5380         let reserved = [
5381           "and"; "as"; "asr"; "assert"; "auto"; "begin"; "break"; "case";
5382           "char"; "class"; "const"; "constraint"; "continue"; "data";
5383           "default"; "deriving"; "do"; "done"; "double"; "downto"; "else";
5384           "end"; "enum"; "exception"; "extern"; "external"; "false"; "float";
5385           "for"; "forall"; "foreign"; "fun"; "function"; "functor"; "goto";
5386           "hiding"; "if"; "import"; "in"; "include"; "infix"; "infixl";
5387           "infixr"; "inherit"; "initializer"; "inline"; "instance"; "int";
5388           "interface";
5389           "land"; "lazy"; "let"; "long"; "lor"; "lsl"; "lsr"; "lxor";
5390           "match"; "mdo"; "method"; "mod"; "module"; "mutable"; "new";
5391           "newtype"; "object"; "of"; "open"; "or"; "private"; "qualified";
5392           "rec"; "register"; "restrict"; "return"; "short"; "sig"; "signed";
5393           "sizeof"; "static"; "struct"; "switch"; "then"; "to"; "true"; "try";
5394           "type"; "typedef"; "union"; "unsigned"; "virtual"; "void";
5395           "volatile"; "when"; "where"; "while";
5396           ] in
5397         if List.mem n reserved then
5398           failwithf "%s has param/ret using reserved word %s" name n;
5399       in
5400
5401       (match fst style with
5402        | RErr -> ()
5403        | RInt n | RInt64 n | RBool n
5404        | RConstString n | RConstOptString n | RString n
5405        | RStringList n | RStruct (n, _) | RStructList (n, _)
5406        | RHashtable n | RBufferOut n ->
5407            check_arg_ret_name n
5408       );
5409       List.iter (fun arg -> check_arg_ret_name (name_of_argt arg)) (snd style)
5410   ) all_functions;
5411
5412   (* Check short descriptions. *)
5413   List.iter (
5414     fun (name, _, _, _, _, shortdesc, _) ->
5415       if shortdesc.[0] <> Char.lowercase shortdesc.[0] then
5416         failwithf "short description of %s should begin with lowercase." name;
5417       let c = shortdesc.[String.length shortdesc-1] in
5418       if c = '\n' || c = '.' then
5419         failwithf "short description of %s should not end with . or \\n." name
5420   ) all_functions;
5421
5422   (* Check long descriptions. *)
5423   List.iter (
5424     fun (name, _, _, _, _, _, longdesc) ->
5425       if longdesc.[String.length longdesc-1] = '\n' then
5426         failwithf "long description of %s should not end with \\n." name
5427   ) all_functions;
5428
5429   (* Check proc_nrs. *)
5430   List.iter (
5431     fun (name, _, proc_nr, _, _, _, _) ->
5432       if proc_nr <= 0 then
5433         failwithf "daemon function %s should have proc_nr > 0" name
5434   ) daemon_functions;
5435
5436   List.iter (
5437     fun (name, _, proc_nr, _, _, _, _) ->
5438       if proc_nr <> -1 then
5439         failwithf "non-daemon function %s should have proc_nr -1" name
5440   ) non_daemon_functions;
5441
5442   let proc_nrs =
5443     List.map (fun (name, _, proc_nr, _, _, _, _) -> name, proc_nr)
5444       daemon_functions in
5445   let proc_nrs =
5446     List.sort (fun (_,nr1) (_,nr2) -> compare nr1 nr2) proc_nrs in
5447   let rec loop = function
5448     | [] -> ()
5449     | [_] -> ()
5450     | (name1,nr1) :: ((name2,nr2) :: _ as rest) when nr1 < nr2 ->
5451         loop rest
5452     | (name1,nr1) :: (name2,nr2) :: _ ->
5453         failwithf "%s and %s have conflicting procedure numbers (%d, %d)"
5454           name1 name2 nr1 nr2
5455   in
5456   loop proc_nrs;
5457
5458   (* Check tests. *)
5459   List.iter (
5460     function
5461       (* Ignore functions that have no tests.  We generate a
5462        * warning when the user does 'make check' instead.
5463        *)
5464     | name, _, _, _, [], _, _ -> ()
5465     | name, _, _, _, tests, _, _ ->
5466         let funcs =
5467           List.map (
5468             fun (_, _, test) ->
5469               match seq_of_test test with
5470               | [] ->
5471                   failwithf "%s has a test containing an empty sequence" name
5472               | cmds -> List.map List.hd cmds
5473           ) tests in
5474         let funcs = List.flatten funcs in
5475
5476         let tested = List.mem name funcs in
5477
5478         if not tested then
5479           failwithf "function %s has tests but does not test itself" name
5480   ) all_functions
5481
5482 (* 'pr' prints to the current output file. *)
5483 let chan = ref Pervasives.stdout
5484 let lines = ref 0
5485 let pr fs =
5486   ksprintf
5487     (fun str ->
5488        let i = count_chars '\n' str in
5489        lines := !lines + i;
5490        output_string !chan str
5491     ) fs
5492
5493 let copyright_years =
5494   let this_year = 1900 + (localtime (time ())).tm_year in
5495   if this_year > 2009 then sprintf "2009-%04d" this_year else "2009"
5496
5497 (* Generate a header block in a number of standard styles. *)
5498 type comment_style =
5499     CStyle | CPlusPlusStyle | HashStyle | OCamlStyle | HaskellStyle
5500 type license = GPLv2plus | LGPLv2plus
5501
5502 let generate_header ?(extra_inputs = []) comment license =
5503   let inputs = "src/generator.ml" :: extra_inputs in
5504   let c = match comment with
5505     | CStyle ->         pr "/* "; " *"
5506     | CPlusPlusStyle -> pr "// "; "//"
5507     | HashStyle ->      pr "# ";  "#"
5508     | OCamlStyle ->     pr "(* "; " *"
5509     | HaskellStyle ->   pr "{- "; "  " in
5510   pr "libguestfs generated file\n";
5511   pr "%s WARNING: THIS FILE IS GENERATED FROM:\n" c;
5512   List.iter (pr "%s   %s\n" c) inputs;
5513   pr "%s ANY CHANGES YOU MAKE TO THIS FILE WILL BE LOST.\n" c;
5514   pr "%s\n" c;
5515   pr "%s Copyright (C) %s Red Hat Inc.\n" c copyright_years;
5516   pr "%s\n" c;
5517   (match license with
5518    | GPLv2plus ->
5519        pr "%s This program is free software; you can redistribute it and/or modify\n" c;
5520        pr "%s it under the terms of the GNU General Public License as published by\n" c;
5521        pr "%s the Free Software Foundation; either version 2 of the License, or\n" c;
5522        pr "%s (at your option) any later version.\n" c;
5523        pr "%s\n" c;
5524        pr "%s This program is distributed in the hope that it will be useful,\n" c;
5525        pr "%s but WITHOUT ANY WARRANTY; without even the implied warranty of\n" c;
5526        pr "%s MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the\n" c;
5527        pr "%s GNU General Public License for more details.\n" c;
5528        pr "%s\n" c;
5529        pr "%s You should have received a copy of the GNU General Public License along\n" c;
5530        pr "%s with this program; if not, write to the Free Software Foundation, Inc.,\n" c;
5531        pr "%s 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA.\n" c;
5532
5533    | LGPLv2plus ->
5534        pr "%s This library is free software; you can redistribute it and/or\n" c;
5535        pr "%s modify it under the terms of the GNU Lesser General Public\n" c;
5536        pr "%s License as published by the Free Software Foundation; either\n" c;
5537        pr "%s version 2 of the License, or (at your option) any later version.\n" c;
5538        pr "%s\n" c;
5539        pr "%s This library is distributed in the hope that it will be useful,\n" c;
5540        pr "%s but WITHOUT ANY WARRANTY; without even the implied warranty of\n" c;
5541        pr "%s MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU\n" c;
5542        pr "%s Lesser General Public License for more details.\n" c;
5543        pr "%s\n" c;
5544        pr "%s You should have received a copy of the GNU Lesser General Public\n" c;
5545        pr "%s License along with this library; if not, write to the Free Software\n" c;
5546        pr "%s Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA\n" c;
5547   );
5548   (match comment with
5549    | CStyle -> pr " */\n"
5550    | CPlusPlusStyle
5551    | HashStyle -> ()
5552    | OCamlStyle -> pr " *)\n"
5553    | HaskellStyle -> pr "-}\n"
5554   );
5555   pr "\n"
5556
5557 (* Start of main code generation functions below this line. *)
5558
5559 (* Generate the pod documentation for the C API. *)
5560 let rec generate_actions_pod () =
5561   List.iter (
5562     fun (shortname, style, _, flags, _, _, longdesc) ->
5563       if not (List.mem NotInDocs flags) then (
5564         let name = "guestfs_" ^ shortname in
5565         pr "=head2 %s\n\n" name;
5566         pr " ";
5567         generate_prototype ~extern:false ~handle:"g" name style;
5568         pr "\n\n";
5569         pr "%s\n\n" longdesc;
5570         (match fst style with
5571          | RErr ->
5572              pr "This function returns 0 on success or -1 on error.\n\n"
5573          | RInt _ ->
5574              pr "On error this function returns -1.\n\n"
5575          | RInt64 _ ->
5576              pr "On error this function returns -1.\n\n"
5577          | RBool _ ->
5578              pr "This function returns a C truth value on success or -1 on error.\n\n"
5579          | RConstString _ ->
5580              pr "This function returns a string, or NULL on error.
5581 The string is owned by the guest handle and must I<not> be freed.\n\n"
5582          | RConstOptString _ ->
5583              pr "This function returns a string which may be NULL.
5584 There is way to return an error from this function.
5585 The string is owned by the guest handle and must I<not> be freed.\n\n"
5586          | RString _ ->
5587              pr "This function returns a string, or NULL on error.
5588 I<The caller must free the returned string after use>.\n\n"
5589          | RStringList _ ->
5590              pr "This function returns a NULL-terminated array of strings
5591 (like L<environ(3)>), or NULL if there was an error.
5592 I<The caller must free the strings and the array after use>.\n\n"
5593          | RStruct (_, typ) ->
5594              pr "This function returns a C<struct guestfs_%s *>,
5595 or NULL if there was an error.
5596 I<The caller must call C<guestfs_free_%s> after use>.\n\n" typ typ
5597          | RStructList (_, typ) ->
5598              pr "This function returns a C<struct guestfs_%s_list *>
5599 (see E<lt>guestfs-structs.hE<gt>),
5600 or NULL if there was an error.
5601 I<The caller must call C<guestfs_free_%s_list> after use>.\n\n" typ typ
5602          | RHashtable _ ->
5603              pr "This function returns a NULL-terminated array of
5604 strings, or NULL if there was an error.
5605 The array of strings will always have length C<2n+1>, where
5606 C<n> keys and values alternate, followed by the trailing NULL entry.
5607 I<The caller must free the strings and the array after use>.\n\n"
5608          | RBufferOut _ ->
5609              pr "This function returns a buffer, or NULL on error.
5610 The size of the returned buffer is written to C<*size_r>.
5611 I<The caller must free the returned buffer after use>.\n\n"
5612         );
5613         if List.mem ProtocolLimitWarning flags then
5614           pr "%s\n\n" protocol_limit_warning;
5615         if List.mem DangerWillRobinson flags then
5616           pr "%s\n\n" danger_will_robinson;
5617         match deprecation_notice flags with
5618         | None -> ()
5619         | Some txt -> pr "%s\n\n" txt
5620       )
5621   ) all_functions_sorted
5622
5623 and generate_structs_pod () =
5624   (* Structs documentation. *)
5625   List.iter (
5626     fun (typ, cols) ->
5627       pr "=head2 guestfs_%s\n" typ;
5628       pr "\n";
5629       pr " struct guestfs_%s {\n" typ;
5630       List.iter (
5631         function
5632         | name, FChar -> pr "   char %s;\n" name
5633         | name, FUInt32 -> pr "   uint32_t %s;\n" name
5634         | name, FInt32 -> pr "   int32_t %s;\n" name
5635         | name, (FUInt64|FBytes) -> pr "   uint64_t %s;\n" name
5636         | name, FInt64 -> pr "   int64_t %s;\n" name
5637         | name, FString -> pr "   char *%s;\n" name
5638         | name, FBuffer ->
5639             pr "   /* The next two fields describe a byte array. */\n";
5640             pr "   uint32_t %s_len;\n" name;
5641             pr "   char *%s;\n" name
5642         | name, FUUID ->
5643             pr "   /* The next field is NOT nul-terminated, be careful when printing it: */\n";
5644             pr "   char %s[32];\n" name
5645         | name, FOptPercent ->
5646             pr "   /* The next field is [0..100] or -1 meaning 'not present': */\n";
5647             pr "   float %s;\n" name
5648       ) cols;
5649       pr " };\n";
5650       pr " \n";
5651       pr " struct guestfs_%s_list {\n" typ;
5652       pr "   uint32_t len; /* Number of elements in list. */\n";
5653       pr "   struct guestfs_%s *val; /* Elements. */\n" typ;
5654       pr " };\n";
5655       pr " \n";
5656       pr " void guestfs_free_%s (struct guestfs_free_%s *);\n" typ typ;
5657       pr " void guestfs_free_%s_list (struct guestfs_free_%s_list *);\n"
5658         typ typ;
5659       pr "\n"
5660   ) structs
5661
5662 and generate_availability_pod () =
5663   (* Availability documentation. *)
5664   pr "=over 4\n";
5665   pr "\n";
5666   List.iter (
5667     fun (group, functions) ->
5668       pr "=item B<%s>\n" group;
5669       pr "\n";
5670       pr "The following functions:\n";
5671       List.iter (pr "L</guestfs_%s>\n") functions;
5672       pr "\n"
5673   ) optgroups;
5674   pr "=back\n";
5675   pr "\n"
5676
5677 (* Generate the protocol (XDR) file, 'guestfs_protocol.x' and
5678  * indirectly 'guestfs_protocol.h' and 'guestfs_protocol.c'.
5679  *
5680  * We have to use an underscore instead of a dash because otherwise
5681  * rpcgen generates incorrect code.
5682  *
5683  * This header is NOT exported to clients, but see also generate_structs_h.
5684  *)
5685 and generate_xdr () =
5686   generate_header CStyle LGPLv2plus;
5687
5688   (* This has to be defined to get around a limitation in Sun's rpcgen. *)
5689   pr "typedef string str<>;\n";
5690   pr "\n";
5691
5692   (* Internal structures. *)
5693   List.iter (
5694     function
5695     | typ, cols ->
5696         pr "struct guestfs_int_%s {\n" typ;
5697         List.iter (function
5698                    | name, FChar -> pr "  char %s;\n" name
5699                    | name, FString -> pr "  string %s<>;\n" name
5700                    | name, FBuffer -> pr "  opaque %s<>;\n" name
5701                    | name, FUUID -> pr "  opaque %s[32];\n" name
5702                    | name, (FInt32|FUInt32) -> pr "  int %s;\n" name
5703                    | name, (FInt64|FUInt64|FBytes) -> pr "  hyper %s;\n" name
5704                    | name, FOptPercent -> pr "  float %s;\n" name
5705                   ) cols;
5706         pr "};\n";
5707         pr "\n";
5708         pr "typedef struct guestfs_int_%s guestfs_int_%s_list<>;\n" typ typ;
5709         pr "\n";
5710   ) structs;
5711
5712   List.iter (
5713     fun (shortname, style, _, _, _, _, _) ->
5714       let name = "guestfs_" ^ shortname in
5715
5716       (match snd style with
5717        | [] -> ()
5718        | args ->
5719            pr "struct %s_args {\n" name;
5720            List.iter (
5721              function
5722              | Pathname n | Device n | Dev_or_Path n | String n ->
5723                  pr "  string %s<>;\n" n
5724              | OptString n -> pr "  str *%s;\n" n
5725              | StringList n | DeviceList n -> pr "  str %s<>;\n" n
5726              | Bool n -> pr "  bool %s;\n" n
5727              | Int n -> pr "  int %s;\n" n
5728              | Int64 n -> pr "  hyper %s;\n" n
5729              | BufferIn n ->
5730                  pr "  opaque %s<>;\n" n
5731              | FileIn _ | FileOut _ -> ()
5732            ) args;
5733            pr "};\n\n"
5734       );
5735       (match fst style with
5736        | RErr -> ()
5737        | RInt n ->
5738            pr "struct %s_ret {\n" name;
5739            pr "  int %s;\n" n;
5740            pr "};\n\n"
5741        | RInt64 n ->
5742            pr "struct %s_ret {\n" name;
5743            pr "  hyper %s;\n" n;
5744            pr "};\n\n"
5745        | RBool n ->
5746            pr "struct %s_ret {\n" name;
5747            pr "  bool %s;\n" n;
5748            pr "};\n\n"
5749        | RConstString _ | RConstOptString _ ->
5750            failwithf "RConstString|RConstOptString cannot be used by daemon functions"
5751        | RString n ->
5752            pr "struct %s_ret {\n" name;
5753            pr "  string %s<>;\n" n;
5754            pr "};\n\n"
5755        | RStringList n ->
5756            pr "struct %s_ret {\n" name;
5757            pr "  str %s<>;\n" n;
5758            pr "};\n\n"
5759        | RStruct (n, typ) ->
5760            pr "struct %s_ret {\n" name;
5761            pr "  guestfs_int_%s %s;\n" typ n;
5762            pr "};\n\n"
5763        | RStructList (n, typ) ->
5764            pr "struct %s_ret {\n" name;
5765            pr "  guestfs_int_%s_list %s;\n" typ n;
5766            pr "};\n\n"
5767        | RHashtable n ->
5768            pr "struct %s_ret {\n" name;
5769            pr "  str %s<>;\n" n;
5770            pr "};\n\n"
5771        | RBufferOut n ->
5772            pr "struct %s_ret {\n" name;
5773            pr "  opaque %s<>;\n" n;
5774            pr "};\n\n"
5775       );
5776   ) daemon_functions;
5777
5778   (* Table of procedure numbers. *)
5779   pr "enum guestfs_procedure {\n";
5780   List.iter (
5781     fun (shortname, _, proc_nr, _, _, _, _) ->
5782       pr "  GUESTFS_PROC_%s = %d,\n" (String.uppercase shortname) proc_nr
5783   ) daemon_functions;
5784   pr "  GUESTFS_PROC_NR_PROCS\n";
5785   pr "};\n";
5786   pr "\n";
5787
5788   (* Having to choose a maximum message size is annoying for several
5789    * reasons (it limits what we can do in the API), but it (a) makes
5790    * the protocol a lot simpler, and (b) provides a bound on the size
5791    * of the daemon which operates in limited memory space.
5792    *)
5793   pr "const GUESTFS_MESSAGE_MAX = %d;\n" (4 * 1024 * 1024);
5794   pr "\n";
5795
5796   (* Message header, etc. *)
5797   pr "\
5798 /* The communication protocol is now documented in the guestfs(3)
5799  * manpage.
5800  */
5801
5802 const GUESTFS_PROGRAM = 0x2000F5F5;
5803 const GUESTFS_PROTOCOL_VERSION = 1;
5804
5805 /* These constants must be larger than any possible message length. */
5806 const GUESTFS_LAUNCH_FLAG = 0xf5f55ff5;
5807 const GUESTFS_CANCEL_FLAG = 0xffffeeee;
5808
5809 enum guestfs_message_direction {
5810   GUESTFS_DIRECTION_CALL = 0,        /* client -> daemon */
5811   GUESTFS_DIRECTION_REPLY = 1        /* daemon -> client */
5812 };
5813
5814 enum guestfs_message_status {
5815   GUESTFS_STATUS_OK = 0,
5816   GUESTFS_STATUS_ERROR = 1
5817 };
5818
5819 const GUESTFS_ERROR_LEN = 256;
5820
5821 struct guestfs_message_error {
5822   string error_message<GUESTFS_ERROR_LEN>;
5823 };
5824
5825 struct guestfs_message_header {
5826   unsigned prog;                     /* GUESTFS_PROGRAM */
5827   unsigned vers;                     /* GUESTFS_PROTOCOL_VERSION */
5828   guestfs_procedure proc;            /* GUESTFS_PROC_x */
5829   guestfs_message_direction direction;
5830   unsigned serial;                   /* message serial number */
5831   guestfs_message_status status;
5832 };
5833
5834 const GUESTFS_MAX_CHUNK_SIZE = 8192;
5835
5836 struct guestfs_chunk {
5837   int cancel;                        /* if non-zero, transfer is cancelled */
5838   /* data size is 0 bytes if the transfer has finished successfully */
5839   opaque data<GUESTFS_MAX_CHUNK_SIZE>;
5840 };
5841 "
5842
5843 (* Generate the guestfs-structs.h file. *)
5844 and generate_structs_h () =
5845   generate_header CStyle LGPLv2plus;
5846
5847   (* This is a public exported header file containing various
5848    * structures.  The structures are carefully written to have
5849    * exactly the same in-memory format as the XDR structures that
5850    * we use on the wire to the daemon.  The reason for creating
5851    * copies of these structures here is just so we don't have to
5852    * export the whole of guestfs_protocol.h (which includes much
5853    * unrelated and XDR-dependent stuff that we don't want to be
5854    * public, or required by clients).
5855    *
5856    * To reiterate, we will pass these structures to and from the
5857    * client with a simple assignment or memcpy, so the format
5858    * must be identical to what rpcgen / the RFC defines.
5859    *)
5860
5861   (* Public structures. *)
5862   List.iter (
5863     fun (typ, cols) ->
5864       pr "struct guestfs_%s {\n" typ;
5865       List.iter (
5866         function
5867         | name, FChar -> pr "  char %s;\n" name
5868         | name, FString -> pr "  char *%s;\n" name
5869         | name, FBuffer ->
5870             pr "  uint32_t %s_len;\n" name;
5871             pr "  char *%s;\n" name
5872         | name, FUUID -> pr "  char %s[32]; /* this is NOT nul-terminated, be careful when printing */\n" name
5873         | name, FUInt32 -> pr "  uint32_t %s;\n" name
5874         | name, FInt32 -> pr "  int32_t %s;\n" name
5875         | name, (FUInt64|FBytes) -> pr "  uint64_t %s;\n" name
5876         | name, FInt64 -> pr "  int64_t %s;\n" name
5877         | name, FOptPercent -> pr "  float %s; /* [0..100] or -1 */\n" name
5878       ) cols;
5879       pr "};\n";
5880       pr "\n";
5881       pr "struct guestfs_%s_list {\n" typ;
5882       pr "  uint32_t len;\n";
5883       pr "  struct guestfs_%s *val;\n" typ;
5884       pr "};\n";
5885       pr "\n";
5886       pr "extern void guestfs_free_%s (struct guestfs_%s *);\n" typ typ;
5887       pr "extern void guestfs_free_%s_list (struct guestfs_%s_list *);\n" typ typ;
5888       pr "\n"
5889   ) structs
5890
5891 (* Generate the guestfs-actions.h file. *)
5892 and generate_actions_h () =
5893   generate_header CStyle LGPLv2plus;
5894   List.iter (
5895     fun (shortname, style, _, _, _, _, _) ->
5896       let name = "guestfs_" ^ shortname in
5897       generate_prototype ~single_line:true ~newline:true ~handle:"g"
5898         name style
5899   ) all_functions
5900
5901 (* Generate the guestfs-internal-actions.h file. *)
5902 and generate_internal_actions_h () =
5903   generate_header CStyle LGPLv2plus;
5904   List.iter (
5905     fun (shortname, style, _, _, _, _, _) ->
5906       let name = "guestfs__" ^ shortname in
5907       generate_prototype ~single_line:true ~newline:true ~handle:"g"
5908         name style
5909   ) non_daemon_functions
5910
5911 (* Generate the client-side dispatch stubs. *)
5912 and generate_client_actions () =
5913   generate_header CStyle LGPLv2plus;
5914
5915   pr "\
5916 #include <stdio.h>
5917 #include <stdlib.h>
5918 #include <stdint.h>
5919 #include <string.h>
5920 #include <inttypes.h>
5921
5922 #include \"guestfs.h\"
5923 #include \"guestfs-internal.h\"
5924 #include \"guestfs-internal-actions.h\"
5925 #include \"guestfs_protocol.h\"
5926
5927 #define error guestfs_error
5928 //#define perrorf guestfs_perrorf
5929 #define safe_malloc guestfs_safe_malloc
5930 #define safe_realloc guestfs_safe_realloc
5931 //#define safe_strdup guestfs_safe_strdup
5932 #define safe_memdup guestfs_safe_memdup
5933
5934 /* Check the return message from a call for validity. */
5935 static int
5936 check_reply_header (guestfs_h *g,
5937                     const struct guestfs_message_header *hdr,
5938                     unsigned int proc_nr, unsigned int serial)
5939 {
5940   if (hdr->prog != GUESTFS_PROGRAM) {
5941     error (g, \"wrong program (%%d/%%d)\", hdr->prog, GUESTFS_PROGRAM);
5942     return -1;
5943   }
5944   if (hdr->vers != GUESTFS_PROTOCOL_VERSION) {
5945     error (g, \"wrong protocol version (%%d/%%d)\",
5946            hdr->vers, GUESTFS_PROTOCOL_VERSION);
5947     return -1;
5948   }
5949   if (hdr->direction != GUESTFS_DIRECTION_REPLY) {
5950     error (g, \"unexpected message direction (%%d/%%d)\",
5951            hdr->direction, GUESTFS_DIRECTION_REPLY);
5952     return -1;
5953   }
5954   if (hdr->proc != proc_nr) {
5955     error (g, \"unexpected procedure number (%%d/%%d)\", hdr->proc, proc_nr);
5956     return -1;
5957   }
5958   if (hdr->serial != serial) {
5959     error (g, \"unexpected serial (%%d/%%d)\", hdr->serial, serial);
5960     return -1;
5961   }
5962
5963   return 0;
5964 }
5965
5966 /* Check we are in the right state to run a high-level action. */
5967 static int
5968 check_state (guestfs_h *g, const char *caller)
5969 {
5970   if (!guestfs__is_ready (g)) {
5971     if (guestfs__is_config (g) || guestfs__is_launching (g))
5972       error (g, \"%%s: call launch before using this function\\n(in guestfish, don't forget to use the 'run' command)\",
5973         caller);
5974     else
5975       error (g, \"%%s called from the wrong state, %%d != READY\",
5976         caller, guestfs__get_state (g));
5977     return -1;
5978   }
5979   return 0;
5980 }
5981
5982 ";
5983
5984   let error_code_of = function
5985     | RErr | RInt _ | RInt64 _ | RBool _ -> "-1"
5986     | RConstString _ | RConstOptString _
5987     | RString _ | RStringList _
5988     | RStruct _ | RStructList _
5989     | RHashtable _ | RBufferOut _ -> "NULL"
5990   in
5991
5992   (* Generate code to check String-like parameters are not passed in
5993    * as NULL (returning an error if they are).
5994    *)
5995   let check_null_strings shortname style =
5996     let pr_newline = ref false in
5997     List.iter (
5998       function
5999       (* parameters which should not be NULL *)
6000       | String n
6001       | Device n
6002       | Pathname n
6003       | Dev_or_Path n
6004       | FileIn n
6005       | FileOut n
6006       | BufferIn n
6007       | StringList n
6008       | DeviceList n ->
6009           pr "  if (%s == NULL) {\n" n;
6010           pr "    error (g, \"%%s: %%s: parameter cannot be NULL\",\n";
6011           pr "           \"%s\", \"%s\");\n" shortname n;
6012           pr "    return %s;\n" (error_code_of (fst style));
6013           pr "  }\n";
6014           pr_newline := true
6015
6016       (* can be NULL *)
6017       | OptString _
6018
6019       (* not applicable *)
6020       | Bool _
6021       | Int _
6022       | Int64 _ -> ()
6023     ) (snd style);
6024
6025     if !pr_newline then pr "\n";
6026   in
6027
6028   (* Generate code to generate guestfish call traces. *)
6029   let trace_call shortname style =
6030     pr "  if (guestfs__get_trace (g)) {\n";
6031
6032     let needs_i =
6033       List.exists (function
6034                    | StringList _ | DeviceList _ -> true
6035                    | _ -> false) (snd style) in
6036     if needs_i then (
6037       pr "    size_t i;\n";
6038       pr "\n"
6039     );
6040
6041     pr "    printf (\"%s\");\n" shortname;
6042     List.iter (
6043       function
6044       | String n                        (* strings *)
6045       | Device n
6046       | Pathname n
6047       | Dev_or_Path n
6048       | FileIn n
6049       | FileOut n
6050       | BufferIn n ->
6051           (* guestfish doesn't support string escaping, so neither do we *)
6052           pr "    printf (\" \\\"%%s\\\"\", %s);\n" n
6053       | OptString n ->                  (* string option *)
6054           pr "    if (%s) printf (\" \\\"%%s\\\"\", %s);\n" n n;
6055           pr "    else printf (\" null\");\n"
6056       | StringList n
6057       | DeviceList n ->                 (* string list *)
6058           pr "    putchar (' ');\n";
6059           pr "    putchar ('\"');\n";
6060           pr "    for (i = 0; %s[i]; ++i) {\n" n;
6061           pr "      if (i > 0) putchar (' ');\n";
6062           pr "      fputs (%s[i], stdout);\n" n;
6063           pr "    }\n";
6064           pr "    putchar ('\"');\n";
6065       | Bool n ->                       (* boolean *)
6066           pr "    fputs (%s ? \" true\" : \" false\", stdout);\n" n
6067       | Int n ->                        (* int *)
6068           pr "    printf (\" %%d\", %s);\n" n
6069       | Int64 n ->
6070           pr "    printf (\" %%\" PRIi64, %s);\n" n
6071     ) (snd style);
6072     pr "    putchar ('\\n');\n";
6073     pr "  }\n";
6074     pr "\n";
6075   in
6076
6077   (* For non-daemon functions, generate a wrapper around each function. *)
6078   List.iter (
6079     fun (shortname, style, _, _, _, _, _) ->
6080       let name = "guestfs_" ^ shortname in
6081
6082       generate_prototype ~extern:false ~semicolon:false ~newline:true
6083         ~handle:"g" name style;
6084       pr "{\n";
6085       check_null_strings shortname style;
6086       trace_call shortname style;
6087       pr "  return guestfs__%s " shortname;
6088       generate_c_call_args ~handle:"g" style;
6089       pr ";\n";
6090       pr "}\n";
6091       pr "\n"
6092   ) non_daemon_functions;
6093
6094   (* Client-side stubs for each function. *)
6095   List.iter (
6096     fun (shortname, style, _, _, _, _, _) ->
6097       let name = "guestfs_" ^ shortname in
6098       let error_code = error_code_of (fst style) in
6099
6100       (* Generate the action stub. *)
6101       generate_prototype ~extern:false ~semicolon:false ~newline:true
6102         ~handle:"g" name style;
6103
6104       pr "{\n";
6105
6106       (match snd style with
6107        | [] -> ()
6108        | _ -> pr "  struct %s_args args;\n" name
6109       );
6110
6111       pr "  guestfs_message_header hdr;\n";
6112       pr "  guestfs_message_error err;\n";
6113       let has_ret =
6114         match fst style with
6115         | RErr -> false
6116         | RConstString _ | RConstOptString _ ->
6117             failwithf "RConstString|RConstOptString cannot be used by daemon functions"
6118         | RInt _ | RInt64 _
6119         | RBool _ | RString _ | RStringList _
6120         | RStruct _ | RStructList _
6121         | RHashtable _ | RBufferOut _ ->
6122             pr "  struct %s_ret ret;\n" name;
6123             true in
6124
6125       pr "  int serial;\n";
6126       pr "  int r;\n";
6127       pr "\n";
6128       check_null_strings shortname style;
6129       trace_call shortname style;
6130       pr "  if (check_state (g, \"%s\") == -1) return %s;\n"
6131         shortname error_code;
6132       pr "  guestfs___set_busy (g);\n";
6133       pr "\n";
6134
6135       (* Send the main header and arguments. *)
6136       (match snd style with
6137        | [] ->
6138            pr "  serial = guestfs___send (g, GUESTFS_PROC_%s, NULL, NULL);\n"
6139              (String.uppercase shortname)
6140        | args ->
6141            List.iter (
6142              function
6143              | Pathname n | Device n | Dev_or_Path n | String n ->
6144                  pr "  args.%s = (char *) %s;\n" n n
6145              | OptString n ->
6146                  pr "  args.%s = %s ? (char **) &%s : NULL;\n" n n n
6147              | StringList n | DeviceList n ->
6148                  pr "  args.%s.%s_val = (char **) %s;\n" n n n;
6149                  pr "  for (args.%s.%s_len = 0; %s[args.%s.%s_len]; args.%s.%s_len++) ;\n" n n n n n n n;
6150              | Bool n ->
6151                  pr "  args.%s = %s;\n" n n
6152              | Int n ->
6153                  pr "  args.%s = %s;\n" n n
6154              | Int64 n ->
6155                  pr "  args.%s = %s;\n" n n
6156              | FileIn _ | FileOut _ -> ()
6157              | BufferIn n ->
6158                  pr "  /* Just catch grossly large sizes. XDR encoding will make this precise. */\n";
6159                  pr "  if (%s_size >= GUESTFS_MESSAGE_MAX) {\n" n;
6160                  pr "    error (g, \"%%s: size of input buffer too large\", \"%s\");\n"
6161                    shortname;
6162                  pr "    guestfs___end_busy (g);\n";
6163                  pr "    return %s;\n" error_code;
6164                  pr "  }\n";
6165                  pr "  args.%s.%s_val = (char *) %s;\n" n n n;
6166                  pr "  args.%s.%s_len = %s_size;\n" n n n
6167            ) args;
6168            pr "  serial = guestfs___send (g, GUESTFS_PROC_%s,\n"
6169              (String.uppercase shortname);
6170            pr "        (xdrproc_t) xdr_%s_args, (char *) &args);\n"
6171              name;
6172       );
6173       pr "  if (serial == -1) {\n";
6174       pr "    guestfs___end_busy (g);\n";
6175       pr "    return %s;\n" error_code;
6176       pr "  }\n";
6177       pr "\n";
6178
6179       (* Send any additional files (FileIn) requested. *)
6180       let need_read_reply_label = ref false in
6181       List.iter (
6182         function
6183         | FileIn n ->
6184             pr "  r = guestfs___send_file (g, %s);\n" n;
6185             pr "  if (r == -1) {\n";
6186             pr "    guestfs___end_busy (g);\n";
6187             pr "    return %s;\n" error_code;
6188             pr "  }\n";
6189             pr "  if (r == -2) /* daemon cancelled */\n";
6190             pr "    goto read_reply;\n";
6191             need_read_reply_label := true;
6192             pr "\n";
6193         | _ -> ()
6194       ) (snd style);
6195
6196       (* Wait for the reply from the remote end. *)
6197       if !need_read_reply_label then pr " read_reply:\n";
6198       pr "  memset (&hdr, 0, sizeof hdr);\n";
6199       pr "  memset (&err, 0, sizeof err);\n";
6200       if has_ret then pr "  memset (&ret, 0, sizeof ret);\n";
6201       pr "\n";
6202       pr "  r = guestfs___recv (g, \"%s\", &hdr, &err,\n        " shortname;
6203       if not has_ret then
6204         pr "NULL, NULL"
6205       else
6206         pr "(xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret" shortname;
6207       pr ");\n";
6208
6209       pr "  if (r == -1) {\n";
6210       pr "    guestfs___end_busy (g);\n";
6211       pr "    return %s;\n" error_code;
6212       pr "  }\n";
6213       pr "\n";
6214
6215       pr "  if (check_reply_header (g, &hdr, GUESTFS_PROC_%s, serial) == -1) {\n"
6216         (String.uppercase shortname);
6217       pr "    guestfs___end_busy (g);\n";
6218       pr "    return %s;\n" error_code;
6219       pr "  }\n";
6220       pr "\n";
6221
6222       pr "  if (hdr.status == GUESTFS_STATUS_ERROR) {\n";
6223       pr "    error (g, \"%%s: %%s\", \"%s\", err.error_message);\n" shortname;
6224       pr "    free (err.error_message);\n";
6225       pr "    guestfs___end_busy (g);\n";
6226       pr "    return %s;\n" error_code;
6227       pr "  }\n";
6228       pr "\n";
6229
6230       (* Expecting to receive further files (FileOut)? *)
6231       List.iter (
6232         function
6233         | FileOut n ->
6234             pr "  if (guestfs___recv_file (g, %s) == -1) {\n" n;
6235             pr "    guestfs___end_busy (g);\n";
6236             pr "    return %s;\n" error_code;
6237             pr "  }\n";
6238             pr "\n";
6239         | _ -> ()
6240       ) (snd style);
6241
6242       pr "  guestfs___end_busy (g);\n";
6243
6244       (match fst style with
6245        | RErr -> pr "  return 0;\n"
6246        | RInt n | RInt64 n | RBool n ->
6247            pr "  return ret.%s;\n" n
6248        | RConstString _ | RConstOptString _ ->
6249            failwithf "RConstString|RConstOptString cannot be used by daemon functions"
6250        | RString n ->
6251            pr "  return ret.%s; /* caller will free */\n" n
6252        | RStringList n | RHashtable n ->
6253            pr "  /* caller will free this, but we need to add a NULL entry */\n";
6254            pr "  ret.%s.%s_val =\n" n n;
6255            pr "    safe_realloc (g, ret.%s.%s_val,\n" n n;
6256            pr "                  sizeof (char *) * (ret.%s.%s_len + 1));\n"
6257              n n;
6258            pr "  ret.%s.%s_val[ret.%s.%s_len] = NULL;\n" n n n n;
6259            pr "  return ret.%s.%s_val;\n" n n
6260        | RStruct (n, _) ->
6261            pr "  /* caller will free this */\n";
6262            pr "  return safe_memdup (g, &ret.%s, sizeof (ret.%s));\n" n n
6263        | RStructList (n, _) ->
6264            pr "  /* caller will free this */\n";
6265            pr "  return safe_memdup (g, &ret.%s, sizeof (ret.%s));\n" n n
6266        | RBufferOut n ->
6267            pr "  /* RBufferOut is tricky: If the buffer is zero-length, then\n";
6268            pr "   * _val might be NULL here.  To make the API saner for\n";
6269            pr "   * callers, we turn this case into a unique pointer (using\n";
6270            pr "   * malloc(1)).\n";
6271            pr "   */\n";
6272            pr "  if (ret.%s.%s_len > 0) {\n" n n;
6273            pr "    *size_r = ret.%s.%s_len;\n" n n;
6274            pr "    return ret.%s.%s_val; /* caller will free */\n" n n;
6275            pr "  } else {\n";
6276            pr "    free (ret.%s.%s_val);\n" n n;
6277            pr "    char *p = safe_malloc (g, 1);\n";
6278            pr "    *size_r = ret.%s.%s_len;\n" n n;
6279            pr "    return p;\n";
6280            pr "  }\n";
6281       );
6282
6283       pr "}\n\n"
6284   ) daemon_functions;
6285
6286   (* Functions to free structures. *)
6287   pr "/* Structure-freeing functions.  These rely on the fact that the\n";
6288   pr " * structure format is identical to the XDR format.  See note in\n";
6289   pr " * generator.ml.\n";
6290   pr " */\n";
6291   pr "\n";
6292
6293   List.iter (
6294     fun (typ, _) ->
6295       pr "void\n";
6296       pr "guestfs_free_%s (struct guestfs_%s *x)\n" typ typ;
6297       pr "{\n";
6298       pr "  xdr_free ((xdrproc_t) xdr_guestfs_int_%s, (char *) x);\n" typ;
6299       pr "  free (x);\n";
6300       pr "}\n";
6301       pr "\n";
6302
6303       pr "void\n";
6304       pr "guestfs_free_%s_list (struct guestfs_%s_list *x)\n" typ typ;
6305       pr "{\n";
6306       pr "  xdr_free ((xdrproc_t) xdr_guestfs_int_%s_list, (char *) x);\n" typ;
6307       pr "  free (x);\n";
6308       pr "}\n";
6309       pr "\n";
6310
6311   ) structs;
6312
6313 (* Generate daemon/actions.h. *)
6314 and generate_daemon_actions_h () =
6315   generate_header CStyle GPLv2plus;
6316
6317   pr "#include \"../src/guestfs_protocol.h\"\n";
6318   pr "\n";
6319
6320   List.iter (
6321     fun (name, style, _, _, _, _, _) ->
6322       generate_prototype
6323         ~single_line:true ~newline:true ~in_daemon:true ~prefix:"do_"
6324         name style;
6325   ) daemon_functions
6326
6327 (* Generate the linker script which controls the visibility of
6328  * symbols in the public ABI and ensures no other symbols get
6329  * exported accidentally.
6330  *)
6331 and generate_linker_script () =
6332   generate_header HashStyle GPLv2plus;
6333
6334   let globals = [
6335     "guestfs_create";
6336     "guestfs_close";
6337     "guestfs_get_error_handler";
6338     "guestfs_get_out_of_memory_handler";
6339     "guestfs_last_error";
6340     "guestfs_set_close_callback";
6341     "guestfs_set_error_handler";
6342     "guestfs_set_launch_done_callback";
6343     "guestfs_set_log_message_callback";
6344     "guestfs_set_out_of_memory_handler";
6345     "guestfs_set_subprocess_quit_callback";
6346
6347     (* Unofficial parts of the API: the bindings code use these
6348      * functions, so it is useful to export them.
6349      *)
6350     "guestfs_safe_calloc";
6351     "guestfs_safe_malloc";
6352     "guestfs_safe_strdup";
6353     "guestfs_safe_memdup";
6354   ] in
6355   let functions =
6356     List.map (fun (name, _, _, _, _, _, _) -> "guestfs_" ^ name)
6357       all_functions in
6358   let structs =
6359     List.concat (
6360       List.map (fun (typ, _) ->
6361                   ["guestfs_free_" ^ typ; "guestfs_free_" ^ typ ^ "_list"])
6362         structs
6363     ) in
6364   let globals = List.sort compare (globals @ functions @ structs) in
6365
6366   pr "{\n";
6367   pr "    global:\n";
6368   List.iter (pr "        %s;\n") globals;
6369   pr "\n";
6370
6371   pr "    local:\n";
6372   pr "        *;\n";
6373   pr "};\n"
6374
6375 (* Generate the server-side stubs. *)
6376 and generate_daemon_actions () =
6377   generate_header CStyle GPLv2plus;
6378
6379   pr "#include <config.h>\n";
6380   pr "\n";
6381   pr "#include <stdio.h>\n";
6382   pr "#include <stdlib.h>\n";
6383   pr "#include <string.h>\n";
6384   pr "#include <inttypes.h>\n";
6385   pr "#include <rpc/types.h>\n";
6386   pr "#include <rpc/xdr.h>\n";
6387   pr "\n";
6388   pr "#include \"daemon.h\"\n";
6389   pr "#include \"c-ctype.h\"\n";
6390   pr "#include \"../src/guestfs_protocol.h\"\n";
6391   pr "#include \"actions.h\"\n";
6392   pr "\n";
6393
6394   List.iter (
6395     fun (name, style, _, _, _, _, _) ->
6396       (* Generate server-side stubs. *)
6397       pr "static void %s_stub (XDR *xdr_in)\n" name;
6398       pr "{\n";
6399       let error_code =
6400         match fst style with
6401         | RErr | RInt _ -> pr "  int r;\n"; "-1"
6402         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
6403         | RBool _ -> pr "  int r;\n"; "-1"
6404         | RConstString _ | RConstOptString _ ->
6405             failwithf "RConstString|RConstOptString cannot be used by daemon functions"
6406         | RString _ -> pr "  char *r;\n"; "NULL"
6407         | RStringList _ | RHashtable _ -> pr "  char **r;\n"; "NULL"
6408         | RStruct (_, typ) -> pr "  guestfs_int_%s *r;\n" typ; "NULL"
6409         | RStructList (_, typ) -> pr "  guestfs_int_%s_list *r;\n" typ; "NULL"
6410         | RBufferOut _ ->
6411             pr "  size_t size = 1;\n";
6412             pr "  char *r;\n";
6413             "NULL" in
6414
6415       (match snd style with
6416        | [] -> ()
6417        | args ->
6418            pr "  struct guestfs_%s_args args;\n" name;
6419            List.iter (
6420              function
6421              | Device n | Dev_or_Path n
6422              | Pathname n
6423              | String n -> ()
6424              | OptString n -> pr "  char *%s;\n" n
6425              | StringList n | DeviceList n -> pr "  char **%s;\n" n
6426              | Bool n -> pr "  int %s;\n" n
6427              | Int n -> pr "  int %s;\n" n
6428              | Int64 n -> pr "  int64_t %s;\n" n
6429              | FileIn _ | FileOut _ -> ()
6430              | BufferIn n ->
6431                  pr "  const char *%s;\n" n;
6432                  pr "  size_t %s_size;\n" n
6433            ) args
6434       );
6435       pr "\n";
6436
6437       let is_filein =
6438         List.exists (function FileIn _ -> true | _ -> false) (snd style) in
6439
6440       (match snd style with
6441        | [] -> ()
6442        | args ->
6443            pr "  memset (&args, 0, sizeof args);\n";
6444            pr "\n";
6445            pr "  if (!xdr_guestfs_%s_args (xdr_in, &args)) {\n" name;
6446            if is_filein then
6447              pr "    if (cancel_receive () != -2)\n";
6448            pr "      reply_with_error (\"daemon failed to decode procedure arguments\");\n";
6449            pr "    goto done;\n";
6450            pr "  }\n";
6451            let pr_args n =
6452              pr "  char *%s = args.%s;\n" n n
6453            in
6454            let pr_list_handling_code n =
6455              pr "  %s = realloc (args.%s.%s_val,\n" n n n;
6456              pr "                sizeof (char *) * (args.%s.%s_len+1));\n" n n;
6457              pr "  if (%s == NULL) {\n" n;
6458              if is_filein then
6459                pr "    if (cancel_receive () != -2)\n";
6460              pr "      reply_with_perror (\"realloc\");\n";
6461              pr "    goto done;\n";
6462              pr "  }\n";
6463              pr "  %s[args.%s.%s_len] = NULL;\n" n n n;
6464              pr "  args.%s.%s_val = %s;\n" n n n;
6465            in
6466            List.iter (
6467              function
6468              | Pathname n ->
6469                  pr_args n;
6470                  pr "  ABS_PATH (%s, %s, goto done);\n"
6471                    n (if is_filein then "cancel_receive ()" else "0");
6472              | Device n ->
6473                  pr_args n;
6474                  pr "  RESOLVE_DEVICE (%s, %s, goto done);\n"
6475                    n (if is_filein then "cancel_receive ()" else "0");
6476              | Dev_or_Path n ->
6477                  pr_args n;
6478                  pr "  REQUIRE_ROOT_OR_RESOLVE_DEVICE (%s, %s, goto done);\n"
6479                    n (if is_filein then "cancel_receive ()" else "0");
6480              | String n -> pr_args n
6481              | OptString n -> pr "  %s = args.%s ? *args.%s : NULL;\n" n n n
6482              | StringList n ->
6483                  pr_list_handling_code n;
6484              | DeviceList n ->
6485                  pr_list_handling_code n;
6486                  pr "  /* Ensure that each is a device,\n";
6487                  pr "   * and perform device name translation.\n";
6488                  pr "   */\n";
6489                  pr "  {\n";
6490                  pr "    size_t i;\n";
6491                  pr "    for (i = 0; %s[i] != NULL; ++i)\n" n;
6492                  pr "      RESOLVE_DEVICE (%s[i], %s, goto done);\n" n
6493                    (if is_filein then "cancel_receive ()" else "0");
6494                  pr "  }\n";
6495              | Bool n -> pr "  %s = args.%s;\n" n n
6496              | Int n -> pr "  %s = args.%s;\n" n n
6497              | Int64 n -> pr "  %s = args.%s;\n" n n
6498              | FileIn _ | FileOut _ -> ()
6499              | BufferIn n ->
6500                  pr "  %s = args.%s.%s_val;\n" n n n;
6501                  pr "  %s_size = args.%s.%s_len;\n" n n n
6502            ) args;
6503            pr "\n"
6504       );
6505
6506       (* this is used at least for do_equal *)
6507       if List.exists (function Pathname _ -> true | _ -> false) (snd style) then (
6508         (* Emit NEED_ROOT just once, even when there are two or
6509            more Pathname args *)
6510         pr "  NEED_ROOT (%s, goto done);\n"
6511           (if is_filein then "cancel_receive ()" else "0");
6512       );
6513
6514       (* Don't want to call the impl with any FileIn or FileOut
6515        * parameters, since these go "outside" the RPC protocol.
6516        *)
6517       let args' =
6518         List.filter (function FileIn _ | FileOut _ -> false | _ -> true)
6519           (snd style) in
6520       pr "  r = do_%s " name;
6521       generate_c_call_args (fst style, args');
6522       pr ";\n";
6523
6524       (match fst style with
6525        | RErr | RInt _ | RInt64 _ | RBool _
6526        | RConstString _ | RConstOptString _
6527        | RString _ | RStringList _ | RHashtable _
6528        | RStruct (_, _) | RStructList (_, _) ->
6529            pr "  if (r == %s)\n" error_code;
6530            pr "    /* do_%s has already called reply_with_error */\n" name;
6531            pr "    goto done;\n";
6532            pr "\n"
6533        | RBufferOut _ ->
6534            pr "  /* size == 0 && r == NULL could be a non-error case (just\n";
6535            pr "   * an ordinary zero-length buffer), so be careful ...\n";
6536            pr "   */\n";
6537            pr "  if (size == 1 && r == %s)\n" error_code;
6538            pr "    /* do_%s has already called reply_with_error */\n" name;
6539            pr "    goto done;\n";
6540            pr "\n"
6541       );
6542
6543       (* If there are any FileOut parameters, then the impl must
6544        * send its own reply.
6545        *)
6546       let no_reply =
6547         List.exists (function FileOut _ -> true | _ -> false) (snd style) in
6548       if no_reply then
6549         pr "  /* do_%s has already sent a reply */\n" name
6550       else (
6551         match fst style with
6552         | RErr -> pr "  reply (NULL, NULL);\n"
6553         | RInt n | RInt64 n | RBool n ->
6554             pr "  struct guestfs_%s_ret ret;\n" name;
6555             pr "  ret.%s = r;\n" n;
6556             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
6557               name
6558         | RConstString _ | RConstOptString _ ->
6559             failwithf "RConstString|RConstOptString cannot be used by daemon functions"
6560         | RString n ->
6561             pr "  struct guestfs_%s_ret ret;\n" name;
6562             pr "  ret.%s = r;\n" n;
6563             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
6564               name;
6565             pr "  free (r);\n"
6566         | RStringList n | RHashtable n ->
6567             pr "  struct guestfs_%s_ret ret;\n" name;
6568             pr "  ret.%s.%s_len = count_strings (r);\n" n n;
6569             pr "  ret.%s.%s_val = r;\n" n n;
6570             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
6571               name;
6572             pr "  free_strings (r);\n"
6573         | RStruct (n, _) ->
6574             pr "  struct guestfs_%s_ret ret;\n" name;
6575             pr "  ret.%s = *r;\n" n;
6576             pr "  reply ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
6577               name;
6578             pr "  xdr_free ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
6579               name
6580         | RStructList (n, _) ->
6581             pr "  struct guestfs_%s_ret ret;\n" name;
6582             pr "  ret.%s = *r;\n" n;
6583             pr "  reply ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
6584               name;
6585             pr "  xdr_free ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
6586               name
6587         | RBufferOut n ->
6588             pr "  struct guestfs_%s_ret ret;\n" name;
6589             pr "  ret.%s.%s_val = r;\n" n n;
6590             pr "  ret.%s.%s_len = size;\n" n n;
6591             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
6592               name;
6593             pr "  free (r);\n"
6594       );
6595
6596       (* Free the args. *)
6597       pr "done:\n";
6598       (match snd style with
6599        | [] -> ()
6600        | _ ->
6601            pr "  xdr_free ((xdrproc_t) xdr_guestfs_%s_args, (char *) &args);\n"
6602              name
6603       );
6604       pr "  return;\n";
6605       pr "}\n\n";
6606   ) daemon_functions;
6607
6608   (* Dispatch function. *)
6609   pr "void dispatch_incoming_message (XDR *xdr_in)\n";
6610   pr "{\n";
6611   pr "  switch (proc_nr) {\n";
6612
6613   List.iter (
6614     fun (name, style, _, _, _, _, _) ->
6615       pr "    case GUESTFS_PROC_%s:\n" (String.uppercase name);
6616       pr "      %s_stub (xdr_in);\n" name;
6617       pr "      break;\n"
6618   ) daemon_functions;
6619
6620   pr "    default:\n";
6621   pr "      reply_with_error (\"dispatch_incoming_message: unknown procedure number %%d, set LIBGUESTFS_PATH to point to the matching libguestfs appliance directory\", proc_nr);\n";
6622   pr "  }\n";
6623   pr "}\n";
6624   pr "\n";
6625
6626   (* LVM columns and tokenization functions. *)
6627   (* XXX This generates crap code.  We should rethink how we
6628    * do this parsing.
6629    *)
6630   List.iter (
6631     function
6632     | typ, cols ->
6633         pr "static const char *lvm_%s_cols = \"%s\";\n"
6634           typ (String.concat "," (List.map fst cols));
6635         pr "\n";
6636
6637         pr "static int lvm_tokenize_%s (char *str, guestfs_int_lvm_%s *r)\n" typ typ;
6638         pr "{\n";
6639         pr "  char *tok, *p, *next;\n";
6640         pr "  size_t i, j;\n";
6641         pr "\n";
6642         (*
6643           pr "  fprintf (stderr, \"%%s: <<%%s>>\\n\", __func__, str);\n";
6644           pr "\n";
6645         *)
6646         pr "  if (!str) {\n";
6647         pr "    fprintf (stderr, \"%%s: failed: passed a NULL string\\n\", __func__);\n";
6648         pr "    return -1;\n";
6649         pr "  }\n";
6650         pr "  if (!*str || c_isspace (*str)) {\n";
6651         pr "    fprintf (stderr, \"%%s: failed: passed a empty string or one beginning with whitespace\\n\", __func__);\n";
6652         pr "    return -1;\n";
6653         pr "  }\n";
6654         pr "  tok = str;\n";
6655         List.iter (
6656           fun (name, coltype) ->
6657             pr "  if (!tok) {\n";
6658             pr "    fprintf (stderr, \"%%s: failed: string finished early, around token %%s\\n\", __func__, \"%s\");\n" name;
6659             pr "    return -1;\n";
6660             pr "  }\n";
6661             pr "  p = strchrnul (tok, ',');\n";
6662             pr "  if (*p) next = p+1; else next = NULL;\n";
6663             pr "  *p = '\\0';\n";
6664             (match coltype with
6665              | FString ->
6666                  pr "  r->%s = strdup (tok);\n" name;
6667                  pr "  if (r->%s == NULL) {\n" name;
6668                  pr "    perror (\"strdup\");\n";
6669                  pr "    return -1;\n";
6670                  pr "  }\n"
6671              | FUUID ->
6672                  pr "  for (i = j = 0; i < 32; ++j) {\n";
6673                  pr "    if (tok[j] == '\\0') {\n";
6674                  pr "      fprintf (stderr, \"%%s: failed to parse UUID from '%%s'\\n\", __func__, tok);\n";
6675                  pr "      return -1;\n";
6676                  pr "    } else if (tok[j] != '-')\n";
6677                  pr "      r->%s[i++] = tok[j];\n" name;
6678                  pr "  }\n";
6679              | FBytes ->
6680                  pr "  if (sscanf (tok, \"%%\"SCNu64, &r->%s) != 1) {\n" name;
6681                  pr "    fprintf (stderr, \"%%s: failed to parse size '%%s' from token %%s\\n\", __func__, tok, \"%s\");\n" name;
6682                  pr "    return -1;\n";
6683                  pr "  }\n";
6684              | FInt64 ->
6685                  pr "  if (sscanf (tok, \"%%\"SCNi64, &r->%s) != 1) {\n" name;
6686                  pr "    fprintf (stderr, \"%%s: failed to parse int '%%s' from token %%s\\n\", __func__, tok, \"%s\");\n" name;
6687                  pr "    return -1;\n";
6688                  pr "  }\n";
6689              | FOptPercent ->
6690                  pr "  if (tok[0] == '\\0')\n";
6691                  pr "    r->%s = -1;\n" name;
6692                  pr "  else if (sscanf (tok, \"%%f\", &r->%s) != 1) {\n" name;
6693                  pr "    fprintf (stderr, \"%%s: failed to parse float '%%s' from token %%s\\n\", __func__, tok, \"%s\");\n" name;
6694                  pr "    return -1;\n";
6695                  pr "  }\n";
6696              | FBuffer | FInt32 | FUInt32 | FUInt64 | FChar ->
6697                  assert false (* can never be an LVM column *)
6698             );
6699             pr "  tok = next;\n";
6700         ) cols;
6701
6702         pr "  if (tok != NULL) {\n";
6703         pr "    fprintf (stderr, \"%%s: failed: extra tokens at end of string\\n\", __func__);\n";
6704         pr "    return -1;\n";
6705         pr "  }\n";
6706         pr "  return 0;\n";
6707         pr "}\n";
6708         pr "\n";
6709
6710         pr "guestfs_int_lvm_%s_list *\n" typ;
6711         pr "parse_command_line_%ss (void)\n" typ;
6712         pr "{\n";
6713         pr "  char *out, *err;\n";
6714         pr "  char *p, *pend;\n";
6715         pr "  int r, i;\n";
6716         pr "  guestfs_int_lvm_%s_list *ret;\n" typ;
6717         pr "  void *newp;\n";
6718         pr "\n";
6719         pr "  ret = malloc (sizeof *ret);\n";
6720         pr "  if (!ret) {\n";
6721         pr "    reply_with_perror (\"malloc\");\n";
6722         pr "    return NULL;\n";
6723         pr "  }\n";
6724         pr "\n";
6725         pr "  ret->guestfs_int_lvm_%s_list_len = 0;\n" typ;
6726         pr "  ret->guestfs_int_lvm_%s_list_val = NULL;\n" typ;
6727         pr "\n";
6728         pr "  r = command (&out, &err,\n";
6729         pr "           \"lvm\", \"%ss\",\n" typ;
6730         pr "           \"-o\", lvm_%s_cols, \"--unbuffered\", \"--noheadings\",\n" typ;
6731         pr "           \"--nosuffix\", \"--separator\", \",\", \"--units\", \"b\", NULL);\n";
6732         pr "  if (r == -1) {\n";
6733         pr "    reply_with_error (\"%%s\", err);\n";
6734         pr "    free (out);\n";
6735         pr "    free (err);\n";
6736         pr "    free (ret);\n";
6737         pr "    return NULL;\n";
6738         pr "  }\n";
6739         pr "\n";
6740         pr "  free (err);\n";
6741         pr "\n";
6742         pr "  /* Tokenize each line of the output. */\n";
6743         pr "  p = out;\n";
6744         pr "  i = 0;\n";
6745         pr "  while (p) {\n";
6746         pr "    pend = strchr (p, '\\n');       /* Get the next line of output. */\n";
6747         pr "    if (pend) {\n";
6748         pr "      *pend = '\\0';\n";
6749         pr "      pend++;\n";
6750         pr "    }\n";
6751         pr "\n";
6752         pr "    while (*p && c_isspace (*p))    /* Skip any leading whitespace. */\n";
6753         pr "      p++;\n";
6754         pr "\n";
6755         pr "    if (!*p) {                      /* Empty line?  Skip it. */\n";
6756         pr "      p = pend;\n";
6757         pr "      continue;\n";
6758         pr "    }\n";
6759         pr "\n";
6760         pr "    /* Allocate some space to store this next entry. */\n";
6761         pr "    newp = realloc (ret->guestfs_int_lvm_%s_list_val,\n" typ;
6762         pr "                sizeof (guestfs_int_lvm_%s) * (i+1));\n" typ;
6763         pr "    if (newp == NULL) {\n";
6764         pr "      reply_with_perror (\"realloc\");\n";
6765         pr "      free (ret->guestfs_int_lvm_%s_list_val);\n" typ;
6766         pr "      free (ret);\n";
6767         pr "      free (out);\n";
6768         pr "      return NULL;\n";
6769         pr "    }\n";
6770         pr "    ret->guestfs_int_lvm_%s_list_val = newp;\n" typ;
6771         pr "\n";
6772         pr "    /* Tokenize the next entry. */\n";
6773         pr "    r = lvm_tokenize_%s (p, &ret->guestfs_int_lvm_%s_list_val[i]);\n" typ typ;
6774         pr "    if (r == -1) {\n";
6775         pr "      reply_with_error (\"failed to parse output of '%ss' command\");\n" typ;
6776         pr "      free (ret->guestfs_int_lvm_%s_list_val);\n" typ;
6777         pr "      free (ret);\n";
6778         pr "      free (out);\n";
6779         pr "      return NULL;\n";
6780         pr "    }\n";
6781         pr "\n";
6782         pr "    ++i;\n";
6783         pr "    p = pend;\n";
6784         pr "  }\n";
6785         pr "\n";
6786         pr "  ret->guestfs_int_lvm_%s_list_len = i;\n" typ;
6787         pr "\n";
6788         pr "  free (out);\n";
6789         pr "  return ret;\n";
6790         pr "}\n"
6791
6792   ) ["pv", lvm_pv_cols; "vg", lvm_vg_cols; "lv", lvm_lv_cols]
6793
6794 (* Generate a list of function names, for debugging in the daemon.. *)
6795 and generate_daemon_names () =
6796   generate_header CStyle GPLv2plus;
6797
6798   pr "#include <config.h>\n";
6799   pr "\n";
6800   pr "#include \"daemon.h\"\n";
6801   pr "\n";
6802
6803   pr "/* This array is indexed by proc_nr.  See guestfs_protocol.x. */\n";
6804   pr "const char *function_names[] = {\n";
6805   List.iter (
6806     fun (name, _, proc_nr, _, _, _, _) -> pr "  [%d] = \"%s\",\n" proc_nr name
6807   ) daemon_functions;
6808   pr "};\n";
6809
6810 (* Generate the optional groups for the daemon to implement
6811  * guestfs_available.
6812  *)
6813 and generate_daemon_optgroups_c () =
6814   generate_header CStyle GPLv2plus;
6815
6816   pr "#include <config.h>\n";
6817   pr "\n";
6818   pr "#include \"daemon.h\"\n";
6819   pr "#include \"optgroups.h\"\n";
6820   pr "\n";
6821
6822   pr "struct optgroup optgroups[] = {\n";
6823   List.iter (
6824     fun (group, _) ->
6825       pr "  { \"%s\", optgroup_%s_available },\n" group group
6826   ) optgroups;
6827   pr "  { NULL, NULL }\n";
6828   pr "};\n"
6829
6830 and generate_daemon_optgroups_h () =
6831   generate_header CStyle GPLv2plus;
6832
6833   List.iter (
6834     fun (group, _) ->
6835       pr "extern int optgroup_%s_available (void);\n" group
6836   ) optgroups
6837
6838 (* Generate the tests. *)
6839 and generate_tests () =
6840   generate_header CStyle GPLv2plus;
6841
6842   pr "\
6843 #include <stdio.h>
6844 #include <stdlib.h>
6845 #include <string.h>
6846 #include <unistd.h>
6847 #include <sys/types.h>
6848 #include <fcntl.h>
6849
6850 #include \"guestfs.h\"
6851 #include \"guestfs-internal.h\"
6852
6853 static guestfs_h *g;
6854 static int suppress_error = 0;
6855
6856 static void print_error (guestfs_h *g, void *data, const char *msg)
6857 {
6858   if (!suppress_error)
6859     fprintf (stderr, \"%%s\\n\", msg);
6860 }
6861
6862 /* FIXME: nearly identical code appears in fish.c */
6863 static void print_strings (char *const *argv)
6864 {
6865   size_t argc;
6866
6867   for (argc = 0; argv[argc] != NULL; ++argc)
6868     printf (\"\\t%%s\\n\", argv[argc]);
6869 }
6870
6871 /*
6872 static void print_table (char const *const *argv)
6873 {
6874   size_t i;
6875
6876   for (i = 0; argv[i] != NULL; i += 2)
6877     printf (\"%%s: %%s\\n\", argv[i], argv[i+1]);
6878 }
6879 */
6880
6881 static int
6882 is_available (const char *group)
6883 {
6884   const char *groups[] = { group, NULL };
6885   int r;
6886
6887   suppress_error = 1;
6888   r = guestfs_available (g, (char **) groups);
6889   suppress_error = 0;
6890
6891   return r == 0;
6892 }
6893
6894 static void
6895 incr (guestfs_h *g, void *iv)
6896 {
6897   int *i = (int *) iv;
6898   (*i)++;
6899 }
6900
6901 ";
6902
6903   (* Generate a list of commands which are not tested anywhere. *)
6904   pr "static void no_test_warnings (void)\n";
6905   pr "{\n";
6906
6907   let hash : (string, bool) Hashtbl.t = Hashtbl.create 13 in
6908   List.iter (
6909     fun (_, _, _, _, tests, _, _) ->
6910       let tests = filter_map (
6911         function
6912         | (_, (Always|If _|Unless _|IfAvailable _), test) -> Some test
6913         | (_, Disabled, _) -> None
6914       ) tests in
6915       let seq = List.concat (List.map seq_of_test tests) in
6916       let cmds_tested = List.map List.hd seq in
6917       List.iter (fun cmd -> Hashtbl.replace hash cmd true) cmds_tested
6918   ) all_functions;
6919
6920   List.iter (
6921     fun (name, _, _, _, _, _, _) ->
6922       if not (Hashtbl.mem hash name) then
6923         pr "  fprintf (stderr, \"warning: \\\"guestfs_%s\\\" has no tests\\n\");\n" name
6924   ) all_functions;
6925
6926   pr "}\n";
6927   pr "\n";
6928
6929   (* Generate the actual tests.  Note that we generate the tests
6930    * in reverse order, deliberately, so that (in general) the
6931    * newest tests run first.  This makes it quicker and easier to
6932    * debug them.
6933    *)
6934   let test_names =
6935     List.map (
6936       fun (name, _, _, flags, tests, _, _) ->
6937         mapi (generate_one_test name flags) tests
6938     ) (List.rev all_functions) in
6939   let test_names = List.concat test_names in
6940   let nr_tests = List.length test_names in
6941
6942   pr "\
6943 int main (int argc, char *argv[])
6944 {
6945   char c = 0;
6946   unsigned long int n_failed = 0;
6947   const char *filename;
6948   int fd;
6949   int nr_tests, test_num = 0;
6950
6951   setbuf (stdout, NULL);
6952
6953   no_test_warnings ();
6954
6955   g = guestfs_create ();
6956   if (g == NULL) {
6957     printf (\"guestfs_create FAILED\\n\");
6958     exit (EXIT_FAILURE);
6959   }
6960
6961   guestfs_set_error_handler (g, print_error, NULL);
6962
6963   guestfs_set_path (g, \"../appliance\");
6964
6965   filename = \"test1.img\";
6966   fd = open (filename, O_WRONLY|O_CREAT|O_NOCTTY|O_NONBLOCK|O_TRUNC, 0666);
6967   if (fd == -1) {
6968     perror (filename);
6969     exit (EXIT_FAILURE);
6970   }
6971   if (lseek (fd, %d, SEEK_SET) == -1) {
6972     perror (\"lseek\");
6973     close (fd);
6974     unlink (filename);
6975     exit (EXIT_FAILURE);
6976   }
6977   if (write (fd, &c, 1) == -1) {
6978     perror (\"write\");
6979     close (fd);
6980     unlink (filename);
6981     exit (EXIT_FAILURE);
6982   }
6983   if (close (fd) == -1) {
6984     perror (filename);
6985     unlink (filename);
6986     exit (EXIT_FAILURE);
6987   }
6988   if (guestfs_add_drive (g, filename) == -1) {
6989     printf (\"guestfs_add_drive %%s FAILED\\n\", filename);
6990     exit (EXIT_FAILURE);
6991   }
6992
6993   filename = \"test2.img\";
6994   fd = open (filename, O_WRONLY|O_CREAT|O_NOCTTY|O_NONBLOCK|O_TRUNC, 0666);
6995   if (fd == -1) {
6996     perror (filename);
6997     exit (EXIT_FAILURE);
6998   }
6999   if (lseek (fd, %d, SEEK_SET) == -1) {
7000     perror (\"lseek\");
7001     close (fd);
7002     unlink (filename);
7003     exit (EXIT_FAILURE);
7004   }
7005   if (write (fd, &c, 1) == -1) {
7006     perror (\"write\");
7007     close (fd);
7008     unlink (filename);
7009     exit (EXIT_FAILURE);
7010   }
7011   if (close (fd) == -1) {
7012     perror (filename);
7013     unlink (filename);
7014     exit (EXIT_FAILURE);
7015   }
7016   if (guestfs_add_drive (g, filename) == -1) {
7017     printf (\"guestfs_add_drive %%s FAILED\\n\", filename);
7018     exit (EXIT_FAILURE);
7019   }
7020
7021   filename = \"test3.img\";
7022   fd = open (filename, O_WRONLY|O_CREAT|O_NOCTTY|O_NONBLOCK|O_TRUNC, 0666);
7023   if (fd == -1) {
7024     perror (filename);
7025     exit (EXIT_FAILURE);
7026   }
7027   if (lseek (fd, %d, SEEK_SET) == -1) {
7028     perror (\"lseek\");
7029     close (fd);
7030     unlink (filename);
7031     exit (EXIT_FAILURE);
7032   }
7033   if (write (fd, &c, 1) == -1) {
7034     perror (\"write\");
7035     close (fd);
7036     unlink (filename);
7037     exit (EXIT_FAILURE);
7038   }
7039   if (close (fd) == -1) {
7040     perror (filename);
7041     unlink (filename);
7042     exit (EXIT_FAILURE);
7043   }
7044   if (guestfs_add_drive (g, filename) == -1) {
7045     printf (\"guestfs_add_drive %%s FAILED\\n\", filename);
7046     exit (EXIT_FAILURE);
7047   }
7048
7049   if (guestfs_add_drive_ro (g, \"../images/test.iso\") == -1) {
7050     printf (\"guestfs_add_drive_ro ../images/test.iso FAILED\\n\");
7051     exit (EXIT_FAILURE);
7052   }
7053
7054   /* Set a timeout in case qemu hangs during launch (RHBZ#505329). */
7055   alarm (600);
7056
7057   if (guestfs_launch (g) == -1) {
7058     printf (\"guestfs_launch FAILED\\n\");
7059     exit (EXIT_FAILURE);
7060   }
7061
7062   /* Cancel previous alarm. */
7063   alarm (0);
7064
7065   nr_tests = %d;
7066
7067 " (500 * 1024 * 1024) (50 * 1024 * 1024) (10 * 1024 * 1024) nr_tests;
7068
7069   iteri (
7070     fun i test_name ->
7071       pr "  test_num++;\n";
7072       pr "  if (guestfs_get_verbose (g))\n";
7073       pr "    printf (\"-------------------------------------------------------------------------------\\n\");\n";
7074       pr "  printf (\"%%3d/%%3d %s\\n\", test_num, nr_tests);\n" test_name;
7075       pr "  if (%s () == -1) {\n" test_name;
7076       pr "    printf (\"%s FAILED\\n\");\n" test_name;
7077       pr "    n_failed++;\n";
7078       pr "  }\n";
7079   ) test_names;
7080   pr "\n";
7081
7082   pr "  /* Check close callback is called. */
7083   int close_sentinel = 1;
7084   guestfs_set_close_callback (g, incr, &close_sentinel);
7085
7086   guestfs_close (g);
7087
7088   if (close_sentinel != 2) {
7089     fprintf (stderr, \"close callback was not called\\n\");
7090     exit (EXIT_FAILURE);
7091   }
7092
7093   unlink (\"test1.img\");
7094   unlink (\"test2.img\");
7095   unlink (\"test3.img\");
7096
7097 ";
7098
7099   pr "  if (n_failed > 0) {\n";
7100   pr "    printf (\"***** %%lu / %%d tests FAILED *****\\n\", n_failed, nr_tests);\n";
7101   pr "    exit (EXIT_FAILURE);\n";
7102   pr "  }\n";
7103   pr "\n";
7104
7105   pr "  exit (EXIT_SUCCESS);\n";
7106   pr "}\n"
7107
7108 and generate_one_test name flags i (init, prereq, test) =
7109   let test_name = sprintf "test_%s_%d" name i in
7110
7111   pr "\
7112 static int %s_skip (void)
7113 {
7114   const char *str;
7115
7116   str = getenv (\"TEST_ONLY\");
7117   if (str)
7118     return strstr (str, \"%s\") == NULL;
7119   str = getenv (\"SKIP_%s\");
7120   if (str && STREQ (str, \"1\")) return 1;
7121   str = getenv (\"SKIP_TEST_%s\");
7122   if (str && STREQ (str, \"1\")) return 1;
7123   return 0;
7124 }
7125
7126 " test_name name (String.uppercase test_name) (String.uppercase name);
7127
7128   (match prereq with
7129    | Disabled | Always | IfAvailable _ -> ()
7130    | If code | Unless code ->
7131        pr "static int %s_prereq (void)\n" test_name;
7132        pr "{\n";
7133        pr "  %s\n" code;
7134        pr "}\n";
7135        pr "\n";
7136   );
7137
7138   pr "\
7139 static int %s (void)
7140 {
7141   if (%s_skip ()) {
7142     printf (\"        %%s skipped (reason: environment variable set)\\n\", \"%s\");
7143     return 0;
7144   }
7145
7146 " test_name test_name test_name;
7147
7148   (* Optional functions should only be tested if the relevant
7149    * support is available in the daemon.
7150    *)
7151   List.iter (
7152     function
7153     | Optional group ->
7154         pr "  if (!is_available (\"%s\")) {\n" group;
7155         pr "    printf (\"        %%s skipped (reason: group %%s not available in daemon)\\n\", \"%s\", \"%s\");\n" test_name group;
7156         pr "    return 0;\n";
7157         pr "  }\n";
7158     | _ -> ()
7159   ) flags;
7160
7161   (match prereq with
7162    | Disabled ->
7163        pr "  printf (\"        %%s skipped (reason: test disabled in generator)\\n\", \"%s\");\n" test_name
7164    | If _ ->
7165        pr "  if (! %s_prereq ()) {\n" test_name;
7166        pr "    printf (\"        %%s skipped (reason: test prerequisite)\\n\", \"%s\");\n" test_name;
7167        pr "    return 0;\n";
7168        pr "  }\n";
7169        pr "\n";
7170        generate_one_test_body name i test_name init test;
7171    | Unless _ ->
7172        pr "  if (%s_prereq ()) {\n" test_name;
7173        pr "    printf (\"        %%s skipped (reason: test prerequisite)\\n\", \"%s\");\n" test_name;
7174        pr "    return 0;\n";
7175        pr "  }\n";
7176        pr "\n";
7177        generate_one_test_body name i test_name init test;
7178    | IfAvailable group ->
7179        pr "  if (!is_available (\"%s\")) {\n" group;
7180        pr "    printf (\"        %%s skipped (reason: %%s not available)\\n\", \"%s\", \"%s\");\n" test_name group;
7181        pr "    return 0;\n";
7182        pr "  }\n";
7183        pr "\n";
7184        generate_one_test_body name i test_name init test;
7185    | Always ->
7186        generate_one_test_body name i test_name init test
7187   );
7188
7189   pr "  return 0;\n";
7190   pr "}\n";
7191   pr "\n";
7192   test_name
7193
7194 and generate_one_test_body name i test_name init test =
7195   (match init with
7196    | InitNone (* XXX at some point, InitNone and InitEmpty became
7197                * folded together as the same thing.  Really we should
7198                * make InitNone do nothing at all, but the tests may
7199                * need to be checked to make sure this is OK.
7200                *)
7201    | InitEmpty ->
7202        pr "  /* InitNone|InitEmpty for %s */\n" test_name;
7203        List.iter (generate_test_command_call test_name)
7204          [["blockdev_setrw"; "/dev/sda"];
7205           ["umount_all"];
7206           ["lvm_remove_all"]]
7207    | InitPartition ->
7208        pr "  /* InitPartition for %s: create /dev/sda1 */\n" test_name;
7209        List.iter (generate_test_command_call test_name)
7210          [["blockdev_setrw"; "/dev/sda"];
7211           ["umount_all"];
7212           ["lvm_remove_all"];
7213           ["part_disk"; "/dev/sda"; "mbr"]]
7214    | InitBasicFS ->
7215        pr "  /* InitBasicFS for %s: create ext2 on /dev/sda1 */\n" test_name;
7216        List.iter (generate_test_command_call test_name)
7217          [["blockdev_setrw"; "/dev/sda"];
7218           ["umount_all"];
7219           ["lvm_remove_all"];
7220           ["part_disk"; "/dev/sda"; "mbr"];
7221           ["mkfs"; "ext2"; "/dev/sda1"];
7222           ["mount_options"; ""; "/dev/sda1"; "/"]]
7223    | InitBasicFSonLVM ->
7224        pr "  /* InitBasicFSonLVM for %s: create ext2 on /dev/VG/LV */\n"
7225          test_name;
7226        List.iter (generate_test_command_call test_name)
7227          [["blockdev_setrw"; "/dev/sda"];
7228           ["umount_all"];
7229           ["lvm_remove_all"];
7230           ["part_disk"; "/dev/sda"; "mbr"];
7231           ["pvcreate"; "/dev/sda1"];
7232           ["vgcreate"; "VG"; "/dev/sda1"];
7233           ["lvcreate"; "LV"; "VG"; "8"];
7234           ["mkfs"; "ext2"; "/dev/VG/LV"];
7235           ["mount_options"; ""; "/dev/VG/LV"; "/"]]
7236    | InitISOFS ->
7237        pr "  /* InitISOFS for %s */\n" test_name;
7238        List.iter (generate_test_command_call test_name)
7239          [["blockdev_setrw"; "/dev/sda"];
7240           ["umount_all"];
7241           ["lvm_remove_all"];
7242           ["mount_ro"; "/dev/sdd"; "/"]]
7243   );
7244
7245   let get_seq_last = function
7246     | [] ->
7247         failwithf "%s: you cannot use [] (empty list) when expecting a command"
7248           test_name
7249     | seq ->
7250         let seq = List.rev seq in
7251         List.rev (List.tl seq), List.hd seq
7252   in
7253
7254   match test with
7255   | TestRun seq ->
7256       pr "  /* TestRun for %s (%d) */\n" name i;
7257       List.iter (generate_test_command_call test_name) seq
7258   | TestOutput (seq, expected) ->
7259       pr "  /* TestOutput for %s (%d) */\n" name i;
7260       pr "  const char *expected = \"%s\";\n" (c_quote expected);
7261       let seq, last = get_seq_last seq in
7262       let test () =
7263         pr "    if (STRNEQ (r, expected)) {\n";
7264         pr "      fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r);\n" test_name;
7265         pr "      return -1;\n";
7266         pr "    }\n"
7267       in
7268       List.iter (generate_test_command_call test_name) seq;
7269       generate_test_command_call ~test test_name last
7270   | TestOutputList (seq, expected) ->
7271       pr "  /* TestOutputList for %s (%d) */\n" name i;
7272       let seq, last = get_seq_last seq in
7273       let test () =
7274         iteri (
7275           fun i str ->
7276             pr "    if (!r[%d]) {\n" i;
7277             pr "      fprintf (stderr, \"%s: short list returned from command\\n\");\n" test_name;
7278             pr "      print_strings (r);\n";
7279             pr "      return -1;\n";
7280             pr "    }\n";
7281             pr "    {\n";
7282             pr "      const char *expected = \"%s\";\n" (c_quote str);
7283             pr "      if (STRNEQ (r[%d], expected)) {\n" i;
7284             pr "        fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r[%d]);\n" test_name i;
7285             pr "        return -1;\n";
7286             pr "      }\n";
7287             pr "    }\n"
7288         ) expected;
7289         pr "    if (r[%d] != NULL) {\n" (List.length expected);
7290         pr "      fprintf (stderr, \"%s: extra elements returned from command\\n\");\n"
7291           test_name;
7292         pr "      print_strings (r);\n";
7293         pr "      return -1;\n";
7294         pr "    }\n"
7295       in
7296       List.iter (generate_test_command_call test_name) seq;
7297       generate_test_command_call ~test test_name last
7298   | TestOutputListOfDevices (seq, expected) ->
7299       pr "  /* TestOutputListOfDevices for %s (%d) */\n" name i;
7300       let seq, last = get_seq_last seq in
7301       let test () =
7302         iteri (
7303           fun i str ->
7304             pr "    if (!r[%d]) {\n" i;
7305             pr "      fprintf (stderr, \"%s: short list returned from command\\n\");\n" test_name;
7306             pr "      print_strings (r);\n";
7307             pr "      return -1;\n";
7308             pr "    }\n";
7309             pr "    {\n";
7310             pr "      const char *expected = \"%s\";\n" (c_quote str);
7311             pr "      r[%d][5] = 's';\n" i;
7312             pr "      if (STRNEQ (r[%d], expected)) {\n" i;
7313             pr "        fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r[%d]);\n" test_name i;
7314             pr "        return -1;\n";
7315             pr "      }\n";
7316             pr "    }\n"
7317         ) expected;
7318         pr "    if (r[%d] != NULL) {\n" (List.length expected);
7319         pr "      fprintf (stderr, \"%s: extra elements returned from command\\n\");\n"
7320           test_name;
7321         pr "      print_strings (r);\n";
7322         pr "      return -1;\n";
7323         pr "    }\n"
7324       in
7325       List.iter (generate_test_command_call test_name) seq;
7326       generate_test_command_call ~test test_name last
7327   | TestOutputInt (seq, expected) ->
7328       pr "  /* TestOutputInt for %s (%d) */\n" name i;
7329       let seq, last = get_seq_last seq in
7330       let test () =
7331         pr "    if (r != %d) {\n" expected;
7332         pr "      fprintf (stderr, \"%s: expected %d but got %%d\\n\","
7333           test_name expected;
7334         pr "               (int) r);\n";
7335         pr "      return -1;\n";
7336         pr "    }\n"
7337       in
7338       List.iter (generate_test_command_call test_name) seq;
7339       generate_test_command_call ~test test_name last
7340   | TestOutputIntOp (seq, op, expected) ->
7341       pr "  /* TestOutputIntOp for %s (%d) */\n" name i;
7342       let seq, last = get_seq_last seq in
7343       let test () =
7344         pr "    if (! (r %s %d)) {\n" op expected;
7345         pr "      fprintf (stderr, \"%s: expected %s %d but got %%d\\n\","
7346           test_name op expected;
7347         pr "               (int) r);\n";
7348         pr "      return -1;\n";
7349         pr "    }\n"
7350       in
7351       List.iter (generate_test_command_call test_name) seq;
7352       generate_test_command_call ~test test_name last
7353   | TestOutputTrue seq ->
7354       pr "  /* TestOutputTrue for %s (%d) */\n" name i;
7355       let seq, last = get_seq_last seq in
7356       let test () =
7357         pr "    if (!r) {\n";
7358         pr "      fprintf (stderr, \"%s: expected true, got false\\n\");\n"
7359           test_name;
7360         pr "      return -1;\n";
7361         pr "    }\n"
7362       in
7363       List.iter (generate_test_command_call test_name) seq;
7364       generate_test_command_call ~test test_name last
7365   | TestOutputFalse seq ->
7366       pr "  /* TestOutputFalse for %s (%d) */\n" name i;
7367       let seq, last = get_seq_last seq in
7368       let test () =
7369         pr "    if (r) {\n";
7370         pr "      fprintf (stderr, \"%s: expected false, got true\\n\");\n"
7371           test_name;
7372         pr "      return -1;\n";
7373         pr "    }\n"
7374       in
7375       List.iter (generate_test_command_call test_name) seq;
7376       generate_test_command_call ~test test_name last
7377   | TestOutputLength (seq, expected) ->
7378       pr "  /* TestOutputLength for %s (%d) */\n" name i;
7379       let seq, last = get_seq_last seq in
7380       let test () =
7381         pr "    int j;\n";
7382         pr "    for (j = 0; j < %d; ++j)\n" expected;
7383         pr "      if (r[j] == NULL) {\n";
7384         pr "        fprintf (stderr, \"%s: short list returned\\n\");\n"
7385           test_name;
7386         pr "        print_strings (r);\n";
7387         pr "        return -1;\n";
7388         pr "      }\n";
7389         pr "    if (r[j] != NULL) {\n";
7390         pr "      fprintf (stderr, \"%s: long list returned\\n\");\n"
7391           test_name;
7392         pr "      print_strings (r);\n";
7393         pr "      return -1;\n";
7394         pr "    }\n"
7395       in
7396       List.iter (generate_test_command_call test_name) seq;
7397       generate_test_command_call ~test test_name last
7398   | TestOutputBuffer (seq, expected) ->
7399       pr "  /* TestOutputBuffer for %s (%d) */\n" name i;
7400       pr "  const char *expected = \"%s\";\n" (c_quote expected);
7401       let seq, last = get_seq_last seq in
7402       let len = String.length expected in
7403       let test () =
7404         pr "    if (size != %d) {\n" len;
7405         pr "      fprintf (stderr, \"%s: returned size of buffer wrong, expected %d but got %%zu\\n\", size);\n" test_name len;
7406         pr "      return -1;\n";
7407         pr "    }\n";
7408         pr "    if (STRNEQLEN (r, expected, size)) {\n";
7409         pr "      fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r);\n" test_name;
7410         pr "      return -1;\n";
7411         pr "    }\n"
7412       in
7413       List.iter (generate_test_command_call test_name) seq;
7414       generate_test_command_call ~test test_name last
7415   | TestOutputStruct (seq, checks) ->
7416       pr "  /* TestOutputStruct for %s (%d) */\n" name i;
7417       let seq, last = get_seq_last seq in
7418       let test () =
7419         List.iter (
7420           function
7421           | CompareWithInt (field, expected) ->
7422               pr "    if (r->%s != %d) {\n" field expected;
7423               pr "      fprintf (stderr, \"%s: %s was %%d, expected %d\\n\",\n"
7424                 test_name field expected;
7425               pr "               (int) r->%s);\n" field;
7426               pr "      return -1;\n";
7427               pr "    }\n"
7428           | CompareWithIntOp (field, op, expected) ->
7429               pr "    if (!(r->%s %s %d)) {\n" field op expected;
7430               pr "      fprintf (stderr, \"%s: %s was %%d, expected %s %d\\n\",\n"
7431                 test_name field op expected;
7432               pr "               (int) r->%s);\n" field;
7433               pr "      return -1;\n";
7434               pr "    }\n"
7435           | CompareWithString (field, expected) ->
7436               pr "    if (STRNEQ (r->%s, \"%s\")) {\n" field expected;
7437               pr "      fprintf (stderr, \"%s: %s was \"%%s\", expected \"%s\"\\n\",\n"
7438                 test_name field expected;
7439               pr "               r->%s);\n" field;
7440               pr "      return -1;\n";
7441               pr "    }\n"
7442           | CompareFieldsIntEq (field1, field2) ->
7443               pr "    if (r->%s != r->%s) {\n" field1 field2;
7444               pr "      fprintf (stderr, \"%s: %s (%%d) <> %s (%%d)\\n\",\n"
7445                 test_name field1 field2;
7446               pr "               (int) r->%s, (int) r->%s);\n" field1 field2;
7447               pr "      return -1;\n";
7448               pr "    }\n"
7449           | CompareFieldsStrEq (field1, field2) ->
7450               pr "    if (STRNEQ (r->%s, r->%s)) {\n" field1 field2;
7451               pr "      fprintf (stderr, \"%s: %s (\"%%s\") <> %s (\"%%s\")\\n\",\n"
7452                 test_name field1 field2;
7453               pr "               r->%s, r->%s);\n" field1 field2;
7454               pr "      return -1;\n";
7455               pr "    }\n"
7456         ) checks
7457       in
7458       List.iter (generate_test_command_call test_name) seq;
7459       generate_test_command_call ~test test_name last
7460   | TestLastFail seq ->
7461       pr "  /* TestLastFail for %s (%d) */\n" name i;
7462       let seq, last = get_seq_last seq in
7463       List.iter (generate_test_command_call test_name) seq;
7464       generate_test_command_call test_name ~expect_error:true last
7465
7466 (* Generate the code to run a command, leaving the result in 'r'.
7467  * If you expect to get an error then you should set expect_error:true.
7468  *)
7469 and generate_test_command_call ?(expect_error = false) ?test test_name cmd =
7470   match cmd with
7471   | [] -> assert false
7472   | name :: args ->
7473       (* Look up the command to find out what args/ret it has. *)
7474       let style =
7475         try
7476           let _, style, _, _, _, _, _ =
7477             List.find (fun (n, _, _, _, _, _, _) -> n = name) all_functions in
7478           style
7479         with Not_found ->
7480           failwithf "%s: in test, command %s was not found" test_name name in
7481
7482       if List.length (snd style) <> List.length args then
7483         failwithf "%s: in test, wrong number of args given to %s"
7484           test_name name;
7485
7486       pr "  {\n";
7487
7488       List.iter (
7489         function
7490         | OptString n, "NULL" -> ()
7491         | Pathname n, arg
7492         | Device n, arg
7493         | Dev_or_Path n, arg
7494         | String n, arg
7495         | OptString n, arg ->
7496             pr "    const char *%s = \"%s\";\n" n (c_quote arg);
7497         | BufferIn n, arg ->
7498             pr "    const char *%s = \"%s\";\n" n (c_quote arg);
7499             pr "    size_t %s_size = %d;\n" n (String.length arg)
7500         | Int _, _
7501         | Int64 _, _
7502         | Bool _, _
7503         | FileIn _, _ | FileOut _, _ -> ()
7504         | StringList n, "" | DeviceList n, "" ->
7505             pr "    const char *const %s[1] = { NULL };\n" n
7506         | StringList n, arg | DeviceList n, arg ->
7507             let strs = string_split " " arg in
7508             iteri (
7509               fun i str ->
7510                 pr "    const char *%s_%d = \"%s\";\n" n i (c_quote str);
7511             ) strs;
7512             pr "    const char *const %s[] = {\n" n;
7513             iteri (
7514               fun i _ -> pr "      %s_%d,\n" n i
7515             ) strs;
7516             pr "      NULL\n";
7517             pr "    };\n";
7518       ) (List.combine (snd style) args);
7519
7520       let error_code =
7521         match fst style with
7522         | RErr | RInt _ | RBool _ -> pr "    int r;\n"; "-1"
7523         | RInt64 _ -> pr "    int64_t r;\n"; "-1"
7524         | RConstString _ | RConstOptString _ ->
7525             pr "    const char *r;\n"; "NULL"
7526         | RString _ -> pr "    char *r;\n"; "NULL"
7527         | RStringList _ | RHashtable _ ->
7528             pr "    char **r;\n";
7529             pr "    size_t i;\n";
7530             "NULL"
7531         | RStruct (_, typ) ->
7532             pr "    struct guestfs_%s *r;\n" typ; "NULL"
7533         | RStructList (_, typ) ->
7534             pr "    struct guestfs_%s_list *r;\n" typ; "NULL"
7535         | RBufferOut _ ->
7536             pr "    char *r;\n";
7537             pr "    size_t size;\n";
7538             "NULL" in
7539
7540       pr "    suppress_error = %d;\n" (if expect_error then 1 else 0);
7541       pr "    r = guestfs_%s (g" name;
7542
7543       (* Generate the parameters. *)
7544       List.iter (
7545         function
7546         | OptString _, "NULL" -> pr ", NULL"
7547         | Pathname n, _
7548         | Device n, _ | Dev_or_Path n, _
7549         | String n, _
7550         | OptString n, _ ->
7551             pr ", %s" n
7552         | BufferIn n, _ ->
7553             pr ", %s, %s_size" n n
7554         | FileIn _, arg | FileOut _, arg ->
7555             pr ", \"%s\"" (c_quote arg)
7556         | StringList n, _ | DeviceList n, _ ->
7557             pr ", (char **) %s" n
7558         | Int _, arg ->
7559             let i =
7560               try int_of_string arg
7561               with Failure "int_of_string" ->
7562                 failwithf "%s: expecting an int, but got '%s'" test_name arg in
7563             pr ", %d" i
7564         | Int64 _, arg ->
7565             let i =
7566               try Int64.of_string arg
7567               with Failure "int_of_string" ->
7568                 failwithf "%s: expecting an int64, but got '%s'" test_name arg in
7569             pr ", %Ld" i
7570         | Bool _, arg ->
7571             let b = bool_of_string arg in pr ", %d" (if b then 1 else 0)
7572       ) (List.combine (snd style) args);
7573
7574       (match fst style with
7575        | RBufferOut _ -> pr ", &size"
7576        | _ -> ()
7577       );
7578
7579       pr ");\n";
7580
7581       if not expect_error then
7582         pr "    if (r == %s)\n" error_code
7583       else
7584         pr "    if (r != %s)\n" error_code;
7585       pr "      return -1;\n";
7586
7587       (* Insert the test code. *)
7588       (match test with
7589        | None -> ()
7590        | Some f -> f ()
7591       );
7592
7593       (match fst style with
7594        | RErr | RInt _ | RInt64 _ | RBool _
7595        | RConstString _ | RConstOptString _ -> ()
7596        | RString _ | RBufferOut _ -> pr "    free (r);\n"
7597        | RStringList _ | RHashtable _ ->
7598            pr "    for (i = 0; r[i] != NULL; ++i)\n";
7599            pr "      free (r[i]);\n";
7600            pr "    free (r);\n"
7601        | RStruct (_, typ) ->
7602            pr "    guestfs_free_%s (r);\n" typ
7603        | RStructList (_, typ) ->
7604            pr "    guestfs_free_%s_list (r);\n" typ
7605       );
7606
7607       pr "  }\n"
7608
7609 and c_quote str =
7610   let str = replace_str str "\r" "\\r" in
7611   let str = replace_str str "\n" "\\n" in
7612   let str = replace_str str "\t" "\\t" in
7613   let str = replace_str str "\000" "\\0" in
7614   str
7615
7616 (* Generate a lot of different functions for guestfish. *)
7617 and generate_fish_cmds () =
7618   generate_header CStyle GPLv2plus;
7619
7620   let all_functions =
7621     List.filter (
7622       fun (_, _, _, flags, _, _, _) -> not (List.mem NotInFish flags)
7623     ) all_functions in
7624   let all_functions_sorted =
7625     List.filter (
7626       fun (_, _, _, flags, _, _, _) -> not (List.mem NotInFish flags)
7627     ) all_functions_sorted in
7628
7629   pr "#include <config.h>\n";
7630   pr "\n";
7631   pr "#include <stdio.h>\n";
7632   pr "#include <stdlib.h>\n";
7633   pr "#include <string.h>\n";
7634   pr "#include <inttypes.h>\n";
7635   pr "\n";
7636   pr "#include <guestfs.h>\n";
7637   pr "#include \"c-ctype.h\"\n";
7638   pr "#include \"full-write.h\"\n";
7639   pr "#include \"xstrtol.h\"\n";
7640   pr "#include \"fish.h\"\n";
7641   pr "\n";
7642   pr "/* Valid suffixes allowed for numbers.  See Gnulib xstrtol function. */\n";
7643   pr "static const char *xstrtol_suffixes = \"0kKMGTPEZY\";\n";
7644   pr "\n";
7645
7646   (* list_commands function, which implements guestfish -h *)
7647   pr "void list_commands (void)\n";
7648   pr "{\n";
7649   pr "  printf (\"    %%-16s     %%s\\n\", _(\"Command\"), _(\"Description\"));\n";
7650   pr "  list_builtin_commands ();\n";
7651   List.iter (
7652     fun (name, _, _, flags, _, shortdesc, _) ->
7653       let name = replace_char name '_' '-' in
7654       pr "  printf (\"%%-20s %%s\\n\", \"%s\", _(\"%s\"));\n"
7655         name shortdesc
7656   ) all_functions_sorted;
7657   pr "  printf (\"    %%s\\n\",";
7658   pr "          _(\"Use -h <cmd> / help <cmd> to show detailed help for a command.\"));\n";
7659   pr "}\n";
7660   pr "\n";
7661
7662   (* display_command function, which implements guestfish -h cmd *)
7663   pr "int display_command (const char *cmd)\n";
7664   pr "{\n";
7665   List.iter (
7666     fun (name, style, _, flags, _, shortdesc, longdesc) ->
7667       let name2 = replace_char name '_' '-' in
7668       let alias =
7669         try find_map (function FishAlias n -> Some n | _ -> None) flags
7670         with Not_found -> name in
7671       let longdesc = replace_str longdesc "C<guestfs_" "C<" in
7672       let synopsis =
7673         match snd style with
7674         | [] -> name2
7675         | args ->
7676             sprintf "%s %s"
7677               name2 (String.concat " " (List.map name_of_argt args)) in
7678
7679       let warnings =
7680         if List.mem ProtocolLimitWarning flags then
7681           ("\n\n" ^ protocol_limit_warning)
7682         else "" in
7683
7684       (* For DangerWillRobinson commands, we should probably have
7685        * guestfish prompt before allowing you to use them (especially
7686        * in interactive mode). XXX
7687        *)
7688       let warnings =
7689         warnings ^
7690           if List.mem DangerWillRobinson flags then
7691             ("\n\n" ^ danger_will_robinson)
7692           else "" in
7693
7694       let warnings =
7695         warnings ^
7696           match deprecation_notice flags with
7697           | None -> ""
7698           | Some txt -> "\n\n" ^ txt in
7699
7700       let describe_alias =
7701         if name <> alias then
7702           sprintf "\n\nYou can use '%s' as an alias for this command." alias
7703         else "" in
7704
7705       pr "  if (";
7706       pr "STRCASEEQ (cmd, \"%s\")" name;
7707       if name <> name2 then
7708         pr " || STRCASEEQ (cmd, \"%s\")" name2;
7709       if name <> alias then
7710         pr " || STRCASEEQ (cmd, \"%s\")" alias;
7711       pr ") {\n";
7712       pr "    pod2text (\"%s\", _(\"%s\"), %S);\n"
7713         name2 shortdesc
7714         ("=head1 SYNOPSIS\n\n " ^ synopsis ^ "\n\n" ^
7715          "=head1 DESCRIPTION\n\n" ^
7716          longdesc ^ warnings ^ describe_alias);
7717       pr "    return 0;\n";
7718       pr "  }\n";
7719       pr "  else\n"
7720   ) all_functions;
7721   pr "    return display_builtin_command (cmd);\n";
7722   pr "}\n";
7723   pr "\n";
7724
7725   let emit_print_list_function typ =
7726     pr "static void print_%s_list (struct guestfs_%s_list *%ss)\n"
7727       typ typ typ;
7728     pr "{\n";
7729     pr "  unsigned int i;\n";
7730     pr "\n";
7731     pr "  for (i = 0; i < %ss->len; ++i) {\n" typ;
7732     pr "    printf (\"[%%d] = {\\n\", i);\n";
7733     pr "    print_%s_indent (&%ss->val[i], \"  \");\n" typ typ;
7734     pr "    printf (\"}\\n\");\n";
7735     pr "  }\n";
7736     pr "}\n";
7737     pr "\n";
7738   in
7739
7740   (* print_* functions *)
7741   List.iter (
7742     fun (typ, cols) ->
7743       let needs_i =
7744         List.exists (function (_, (FUUID|FBuffer)) -> true | _ -> false) cols in
7745
7746       pr "static void print_%s_indent (struct guestfs_%s *%s, const char *indent)\n" typ typ typ;
7747       pr "{\n";
7748       if needs_i then (
7749         pr "  unsigned int i;\n";
7750         pr "\n"
7751       );
7752       List.iter (
7753         function
7754         | name, FString ->
7755             pr "  printf (\"%%s%s: %%s\\n\", indent, %s->%s);\n" name typ name
7756         | name, FUUID ->
7757             pr "  printf (\"%%s%s: \", indent);\n" name;
7758             pr "  for (i = 0; i < 32; ++i)\n";
7759             pr "    printf (\"%%c\", %s->%s[i]);\n" typ name;
7760             pr "  printf (\"\\n\");\n"
7761         | name, FBuffer ->
7762             pr "  printf (\"%%s%s: \", indent);\n" name;
7763             pr "  for (i = 0; i < %s->%s_len; ++i)\n" typ name;
7764             pr "    if (c_isprint (%s->%s[i]))\n" typ name;
7765             pr "      printf (\"%%c\", %s->%s[i]);\n" typ name;
7766             pr "    else\n";
7767             pr "      printf (\"\\\\x%%02x\", %s->%s[i]);\n" typ name;
7768             pr "  printf (\"\\n\");\n"
7769         | name, (FUInt64|FBytes) ->
7770             pr "  printf (\"%%s%s: %%\" PRIu64 \"\\n\", indent, %s->%s);\n"
7771               name typ name
7772         | name, FInt64 ->
7773             pr "  printf (\"%%s%s: %%\" PRIi64 \"\\n\", indent, %s->%s);\n"
7774               name typ name
7775         | name, FUInt32 ->
7776             pr "  printf (\"%%s%s: %%\" PRIu32 \"\\n\", indent, %s->%s);\n"
7777               name typ name
7778         | name, FInt32 ->
7779             pr "  printf (\"%%s%s: %%\" PRIi32 \"\\n\", indent, %s->%s);\n"
7780               name typ name
7781         | name, FChar ->
7782             pr "  printf (\"%%s%s: %%c\\n\", indent, %s->%s);\n"
7783               name typ name
7784         | name, FOptPercent ->
7785             pr "  if (%s->%s >= 0) printf (\"%%s%s: %%g %%%%\\n\", indent, %s->%s);\n"
7786               typ name name typ name;
7787             pr "  else printf (\"%%s%s: \\n\", indent);\n" name
7788       ) cols;
7789       pr "}\n";
7790       pr "\n";
7791   ) structs;
7792
7793   (* Emit a print_TYPE_list function definition only if that function is used. *)
7794   List.iter (
7795     function
7796     | typ, (RStructListOnly | RStructAndList) ->
7797         (* generate the function for typ *)
7798         emit_print_list_function typ
7799     | typ, _ -> () (* empty *)
7800   ) (rstructs_used_by all_functions);
7801
7802   (* Emit a print_TYPE function definition only if that function is used. *)
7803   List.iter (
7804     function
7805     | typ, (RStructOnly | RStructAndList) ->
7806         pr "static void print_%s (struct guestfs_%s *%s)\n" typ typ typ;
7807         pr "{\n";
7808         pr "  print_%s_indent (%s, \"\");\n" typ typ;
7809         pr "}\n";
7810         pr "\n";
7811     | typ, _ -> () (* empty *)
7812   ) (rstructs_used_by all_functions);
7813
7814   (* run_<action> actions *)
7815   List.iter (
7816     fun (name, style, _, flags, _, _, _) ->
7817       pr "static int run_%s (const char *cmd, int argc, char *argv[])\n" name;
7818       pr "{\n";
7819       (match fst style with
7820        | RErr
7821        | RInt _
7822        | RBool _ -> pr "  int r;\n"
7823        | RInt64 _ -> pr "  int64_t r;\n"
7824        | RConstString _ | RConstOptString _ -> pr "  const char *r;\n"
7825        | RString _ -> pr "  char *r;\n"
7826        | RStringList _ | RHashtable _ -> pr "  char **r;\n"
7827        | RStruct (_, typ) -> pr "  struct guestfs_%s *r;\n" typ
7828        | RStructList (_, typ) -> pr "  struct guestfs_%s_list *r;\n" typ
7829        | RBufferOut _ ->
7830            pr "  char *r;\n";
7831            pr "  size_t size;\n";
7832       );
7833       List.iter (
7834         function
7835         | Device n
7836         | String n
7837         | OptString n -> pr "  const char *%s;\n" n
7838         | Pathname n
7839         | Dev_or_Path n
7840         | FileIn n
7841         | FileOut n -> pr "  char *%s;\n" n
7842         | BufferIn n ->
7843             pr "  const char *%s;\n" n;
7844             pr "  size_t %s_size;\n" n
7845         | StringList n | DeviceList n -> pr "  char **%s;\n" n
7846         | Bool n -> pr "  int %s;\n" n
7847         | Int n -> pr "  int %s;\n" n
7848         | Int64 n -> pr "  int64_t %s;\n" n
7849       ) (snd style);
7850
7851       (* Check and convert parameters. *)
7852       let argc_expected = List.length (snd style) in
7853       pr "  if (argc != %d) {\n" argc_expected;
7854       pr "    fprintf (stderr, _(\"%%s should have %%d parameter(s)\\n\"), cmd, %d);\n"
7855         argc_expected;
7856       pr "    fprintf (stderr, _(\"type 'help %%s' for help on %%s\\n\"), cmd, cmd);\n";
7857       pr "    return -1;\n";
7858       pr "  }\n";
7859
7860       let parse_integer fn fntyp rtyp range name i =
7861         pr "  {\n";
7862         pr "    strtol_error xerr;\n";
7863         pr "    %s r;\n" fntyp;
7864         pr "\n";
7865         pr "    xerr = %s (argv[%d], NULL, 0, &r, xstrtol_suffixes);\n" fn i;
7866         pr "    if (xerr != LONGINT_OK) {\n";
7867         pr "      fprintf (stderr,\n";
7868         pr "               _(\"%%s: %%s: invalid integer parameter (%%s returned %%d)\\n\"),\n";
7869         pr "               cmd, \"%s\", \"%s\", xerr);\n" name fn;
7870         pr "      return -1;\n";
7871         pr "    }\n";
7872         (match range with
7873          | None -> ()
7874          | Some (min, max, comment) ->
7875              pr "    /* %s */\n" comment;
7876              pr "    if (r < %s || r > %s) {\n" min max;
7877              pr "      fprintf (stderr, _(\"%%s: %%s: integer out of range\\n\"), cmd, \"%s\");\n"
7878                name;
7879              pr "      return -1;\n";
7880              pr "    }\n";
7881              pr "    /* The check above should ensure this assignment does not overflow. */\n";
7882         );
7883         pr "    %s = r;\n" name;
7884         pr "  }\n";
7885       in
7886
7887       iteri (
7888         fun i ->
7889           function
7890           | Device name
7891           | String name ->
7892               pr "  %s = argv[%d];\n" name i
7893           | Pathname name
7894           | Dev_or_Path name ->
7895               pr "  %s = resolve_win_path (argv[%d]);\n" name i;
7896               pr "  if (%s == NULL) return -1;\n" name
7897           | OptString name ->
7898               pr "  %s = STRNEQ (argv[%d], \"\") ? argv[%d] : NULL;\n"
7899                 name i i
7900           | BufferIn name ->
7901               pr "  %s = argv[%d];\n" name i;
7902               pr "  %s_size = strlen (argv[%d]);\n" name i
7903           | FileIn name ->
7904               pr "  %s = file_in (argv[%d]);\n" name i;
7905               pr "  if (%s == NULL) return -1;\n" name
7906           | FileOut name ->
7907               pr "  %s = file_out (argv[%d]);\n" name i;
7908               pr "  if (%s == NULL) return -1;\n" name
7909           | StringList name | DeviceList name ->
7910               pr "  %s = parse_string_list (argv[%d]);\n" name i;
7911               pr "  if (%s == NULL) return -1;\n" name;
7912           | Bool name ->
7913               pr "  %s = is_true (argv[%d]) ? 1 : 0;\n" name i
7914           | Int name ->
7915               let range =
7916                 let min = "(-(2LL<<30))"
7917                 and max = "((2LL<<30)-1)"
7918                 and comment =
7919                   "The Int type in the generator is a signed 31 bit int." in
7920                 Some (min, max, comment) in
7921               parse_integer "xstrtoll" "long long" "int" range name i
7922           | Int64 name ->
7923               parse_integer "xstrtoll" "long long" "int64_t" None name i
7924       ) (snd style);
7925
7926       (* Call C API function. *)
7927       pr "  r = guestfs_%s " name;
7928       generate_c_call_args ~handle:"g" style;
7929       pr ";\n";
7930
7931       List.iter (
7932         function
7933         | Device name | String name
7934         | OptString name | Bool name
7935         | Int name | Int64 name
7936         | BufferIn name -> ()
7937         | Pathname name | Dev_or_Path name | FileOut name ->
7938             pr "  free (%s);\n" name
7939         | FileIn name ->
7940             pr "  free_file_in (%s);\n" name
7941         | StringList name | DeviceList name ->
7942             pr "  free_strings (%s);\n" name
7943       ) (snd style);
7944
7945       (* Any output flags? *)
7946       let fish_output =
7947         let flags = filter_map (
7948           function FishOutput flag -> Some flag | _ -> None
7949         ) flags in
7950         match flags with
7951         | [] -> None
7952         | [f] -> Some f
7953         | _ ->
7954             failwithf "%s: more than one FishOutput flag is not allowed" name in
7955
7956       (* Check return value for errors and display command results. *)
7957       (match fst style with
7958        | RErr -> pr "  return r;\n"
7959        | RInt _ ->
7960            pr "  if (r == -1) return -1;\n";
7961            (match fish_output with
7962             | None ->
7963                 pr "  printf (\"%%d\\n\", r);\n";
7964             | Some FishOutputOctal ->
7965                 pr "  printf (\"%%s%%o\\n\", r != 0 ? \"0\" : \"\", r);\n";
7966             | Some FishOutputHexadecimal ->
7967                 pr "  printf (\"%%s%%x\\n\", r != 0 ? \"0x\" : \"\", r);\n");
7968            pr "  return 0;\n"
7969        | RInt64 _ ->
7970            pr "  if (r == -1) return -1;\n";
7971            (match fish_output with
7972             | None ->
7973                 pr "  printf (\"%%\" PRIi64 \"\\n\", r);\n";
7974             | Some FishOutputOctal ->
7975                 pr "  printf (\"%%s%%\" PRIo64 \"\\n\", r != 0 ? \"0\" : \"\", r);\n";
7976             | Some FishOutputHexadecimal ->
7977                 pr "  printf (\"%%s%%\" PRIx64 \"\\n\", r != 0 ? \"0x\" : \"\", r);\n");
7978            pr "  return 0;\n"
7979        | RBool _ ->
7980            pr "  if (r == -1) return -1;\n";
7981            pr "  if (r) printf (\"true\\n\"); else printf (\"false\\n\");\n";
7982            pr "  return 0;\n"
7983        | RConstString _ ->
7984            pr "  if (r == NULL) return -1;\n";
7985            pr "  printf (\"%%s\\n\", r);\n";
7986            pr "  return 0;\n"
7987        | RConstOptString _ ->
7988            pr "  printf (\"%%s\\n\", r ? : \"(null)\");\n";
7989            pr "  return 0;\n"
7990        | RString _ ->
7991            pr "  if (r == NULL) return -1;\n";
7992            pr "  printf (\"%%s\\n\", r);\n";
7993            pr "  free (r);\n";
7994            pr "  return 0;\n"
7995        | RStringList _ ->
7996            pr "  if (r == NULL) return -1;\n";
7997            pr "  print_strings (r);\n";
7998            pr "  free_strings (r);\n";
7999            pr "  return 0;\n"
8000        | RStruct (_, typ) ->
8001            pr "  if (r == NULL) return -1;\n";
8002            pr "  print_%s (r);\n" typ;
8003            pr "  guestfs_free_%s (r);\n" typ;
8004            pr "  return 0;\n"
8005        | RStructList (_, typ) ->
8006            pr "  if (r == NULL) return -1;\n";
8007            pr "  print_%s_list (r);\n" typ;
8008            pr "  guestfs_free_%s_list (r);\n" typ;
8009            pr "  return 0;\n"
8010        | RHashtable _ ->
8011            pr "  if (r == NULL) return -1;\n";
8012            pr "  print_table (r);\n";
8013            pr "  free_strings (r);\n";
8014            pr "  return 0;\n"
8015        | RBufferOut _ ->
8016            pr "  if (r == NULL) return -1;\n";
8017            pr "  if (full_write (1, r, size) != size) {\n";
8018            pr "    perror (\"write\");\n";
8019            pr "    free (r);\n";
8020            pr "    return -1;\n";
8021            pr "  }\n";
8022            pr "  free (r);\n";
8023            pr "  return 0;\n"
8024       );
8025       pr "}\n";
8026       pr "\n"
8027   ) all_functions;
8028
8029   (* run_action function *)
8030   pr "int run_action (const char *cmd, int argc, char *argv[])\n";
8031   pr "{\n";
8032   List.iter (
8033     fun (name, _, _, flags, _, _, _) ->
8034       let name2 = replace_char name '_' '-' in
8035       let alias =
8036         try find_map (function FishAlias n -> Some n | _ -> None) flags
8037         with Not_found -> name in
8038       pr "  if (";
8039       pr "STRCASEEQ (cmd, \"%s\")" name;
8040       if name <> name2 then
8041         pr " || STRCASEEQ (cmd, \"%s\")" name2;
8042       if name <> alias then
8043         pr " || STRCASEEQ (cmd, \"%s\")" alias;
8044       pr ")\n";
8045       pr "    return run_%s (cmd, argc, argv);\n" name;
8046       pr "  else\n";
8047   ) all_functions;
8048   pr "    {\n";
8049   pr "      fprintf (stderr, _(\"%%s: unknown command\\n\"), cmd);\n";
8050   pr "      if (command_num == 1)\n";
8051   pr "        extended_help_message ();\n";
8052   pr "      return -1;\n";
8053   pr "    }\n";
8054   pr "  return 0;\n";
8055   pr "}\n";
8056   pr "\n"
8057
8058 (* Readline completion for guestfish. *)
8059 and generate_fish_completion () =
8060   generate_header CStyle GPLv2plus;
8061
8062   let all_functions =
8063     List.filter (
8064       fun (_, _, _, flags, _, _, _) -> not (List.mem NotInFish flags)
8065     ) all_functions in
8066
8067   pr "\
8068 #include <config.h>
8069
8070 #include <stdio.h>
8071 #include <stdlib.h>
8072 #include <string.h>
8073
8074 #ifdef HAVE_LIBREADLINE
8075 #include <readline/readline.h>
8076 #endif
8077
8078 #include \"fish.h\"
8079
8080 #ifdef HAVE_LIBREADLINE
8081
8082 static const char *const commands[] = {
8083   BUILTIN_COMMANDS_FOR_COMPLETION,
8084 ";
8085
8086   (* Get the commands, including the aliases.  They don't need to be
8087    * sorted - the generator() function just does a dumb linear search.
8088    *)
8089   let commands =
8090     List.map (
8091       fun (name, _, _, flags, _, _, _) ->
8092         let name2 = replace_char name '_' '-' in
8093         let alias =
8094           try find_map (function FishAlias n -> Some n | _ -> None) flags
8095           with Not_found -> name in
8096
8097         if name <> alias then [name2; alias] else [name2]
8098     ) all_functions in
8099   let commands = List.flatten commands in
8100
8101   List.iter (pr "  \"%s\",\n") commands;
8102
8103   pr "  NULL
8104 };
8105
8106 static char *
8107 generator (const char *text, int state)
8108 {
8109   static size_t index, len;
8110   const char *name;
8111
8112   if (!state) {
8113     index = 0;
8114     len = strlen (text);
8115   }
8116
8117   rl_attempted_completion_over = 1;
8118
8119   while ((name = commands[index]) != NULL) {
8120     index++;
8121     if (STRCASEEQLEN (name, text, len))
8122       return strdup (name);
8123   }
8124
8125   return NULL;
8126 }
8127
8128 #endif /* HAVE_LIBREADLINE */
8129
8130 #ifdef HAVE_RL_COMPLETION_MATCHES
8131 #define RL_COMPLETION_MATCHES rl_completion_matches
8132 #else
8133 #ifdef HAVE_COMPLETION_MATCHES
8134 #define RL_COMPLETION_MATCHES completion_matches
8135 #endif
8136 #endif /* else just fail if we don't have either symbol */
8137
8138 char **
8139 do_completion (const char *text, int start, int end)
8140 {
8141   char **matches = NULL;
8142
8143 #ifdef HAVE_LIBREADLINE
8144   rl_completion_append_character = ' ';
8145
8146   if (start == 0)
8147     matches = RL_COMPLETION_MATCHES (text, generator);
8148   else if (complete_dest_paths)
8149     matches = RL_COMPLETION_MATCHES (text, complete_dest_paths_generator);
8150 #endif
8151
8152   return matches;
8153 }
8154 ";
8155
8156 (* Generate the POD documentation for guestfish. *)
8157 and generate_fish_actions_pod () =
8158   let all_functions_sorted =
8159     List.filter (
8160       fun (_, _, _, flags, _, _, _) ->
8161         not (List.mem NotInFish flags || List.mem NotInDocs flags)
8162     ) all_functions_sorted in
8163
8164   let rex = Str.regexp "C<guestfs_\\([^>]+\\)>" in
8165
8166   List.iter (
8167     fun (name, style, _, flags, _, _, longdesc) ->
8168       let longdesc =
8169         Str.global_substitute rex (
8170           fun s ->
8171             let sub =
8172               try Str.matched_group 1 s
8173               with Not_found ->
8174                 failwithf "error substituting C<guestfs_...> in longdesc of function %s" name in
8175             "C<" ^ replace_char sub '_' '-' ^ ">"
8176         ) longdesc in
8177       let name = replace_char name '_' '-' in
8178       let alias =
8179         try find_map (function FishAlias n -> Some n | _ -> None) flags
8180         with Not_found -> name in
8181
8182       pr "=head2 %s" name;
8183       if name <> alias then
8184         pr " | %s" alias;
8185       pr "\n";
8186       pr "\n";
8187       pr " %s" name;
8188       List.iter (
8189         function
8190         | Pathname n | Device n | Dev_or_Path n | String n -> pr " %s" n
8191         | OptString n -> pr " %s" n
8192         | StringList n | DeviceList n -> pr " '%s ...'" n
8193         | Bool _ -> pr " true|false"
8194         | Int n -> pr " %s" n
8195         | Int64 n -> pr " %s" n
8196         | FileIn n | FileOut n -> pr " (%s|-)" n
8197         | BufferIn n -> pr " %s" n
8198       ) (snd style);
8199       pr "\n";
8200       pr "\n";
8201       pr "%s\n\n" longdesc;
8202
8203       if List.exists (function FileIn _ | FileOut _ -> true
8204                       | _ -> false) (snd style) then
8205         pr "Use C<-> instead of a filename to read/write from stdin/stdout.\n\n";
8206
8207       if List.mem ProtocolLimitWarning flags then
8208         pr "%s\n\n" protocol_limit_warning;
8209
8210       if List.mem DangerWillRobinson flags then
8211         pr "%s\n\n" danger_will_robinson;
8212
8213       match deprecation_notice flags with
8214       | None -> ()
8215       | Some txt -> pr "%s\n\n" txt
8216   ) all_functions_sorted
8217
8218 (* Generate a C function prototype. *)
8219 and generate_prototype ?(extern = true) ?(static = false) ?(semicolon = true)
8220     ?(single_line = false) ?(newline = false) ?(in_daemon = false)
8221     ?(prefix = "")
8222     ?handle name style =
8223   if extern then pr "extern ";
8224   if static then pr "static ";
8225   (match fst style with
8226    | RErr -> pr "int "
8227    | RInt _ -> pr "int "
8228    | RInt64 _ -> pr "int64_t "
8229    | RBool _ -> pr "int "
8230    | RConstString _ | RConstOptString _ -> pr "const char *"
8231    | RString _ | RBufferOut _ -> pr "char *"
8232    | RStringList _ | RHashtable _ -> pr "char **"
8233    | RStruct (_, typ) ->
8234        if not in_daemon then pr "struct guestfs_%s *" typ
8235        else pr "guestfs_int_%s *" typ
8236    | RStructList (_, typ) ->
8237        if not in_daemon then pr "struct guestfs_%s_list *" typ
8238        else pr "guestfs_int_%s_list *" typ
8239   );
8240   let is_RBufferOut = match fst style with RBufferOut _ -> true | _ -> false in
8241   pr "%s%s (" prefix name;
8242   if handle = None && List.length (snd style) = 0 && not is_RBufferOut then
8243     pr "void"
8244   else (
8245     let comma = ref false in
8246     (match handle with
8247      | None -> ()
8248      | Some handle -> pr "guestfs_h *%s" handle; comma := true
8249     );
8250     let next () =
8251       if !comma then (
8252         if single_line then pr ", " else pr ",\n\t\t"
8253       );
8254       comma := true
8255     in
8256     List.iter (
8257       function
8258       | Pathname n
8259       | Device n | Dev_or_Path n
8260       | String n
8261       | OptString n ->
8262           next ();
8263           pr "const char *%s" n
8264       | StringList n | DeviceList n ->
8265           next ();
8266           pr "char *const *%s" n
8267       | Bool n -> next (); pr "int %s" n
8268       | Int n -> next (); pr "int %s" n
8269       | Int64 n -> next (); pr "int64_t %s" n
8270       | FileIn n
8271       | FileOut n ->
8272           if not in_daemon then (next (); pr "const char *%s" n)
8273       | BufferIn n ->
8274           next ();
8275           pr "const char *%s" n;
8276           next ();
8277           pr "size_t %s_size" n
8278     ) (snd style);
8279     if is_RBufferOut then (next (); pr "size_t *size_r");
8280   );
8281   pr ")";
8282   if semicolon then pr ";";
8283   if newline then pr "\n"
8284
8285 (* Generate C call arguments, eg "(handle, foo, bar)" *)
8286 and generate_c_call_args ?handle ?(decl = false) style =
8287   pr "(";
8288   let comma = ref false in
8289   let next () =
8290     if !comma then pr ", ";
8291     comma := true
8292   in
8293   (match handle with
8294    | None -> ()
8295    | Some handle -> pr "%s" handle; comma := true
8296   );
8297   List.iter (
8298     function
8299     | BufferIn n ->
8300         next ();
8301         pr "%s, %s_size" n n
8302     | arg ->
8303         next ();
8304         pr "%s" (name_of_argt arg)
8305   ) (snd style);
8306   (* For RBufferOut calls, add implicit &size parameter. *)
8307   if not decl then (
8308     match fst style with
8309     | RBufferOut _ ->
8310         next ();
8311         pr "&size"
8312     | _ -> ()
8313   );
8314   pr ")"
8315
8316 (* Generate the OCaml bindings interface. *)
8317 and generate_ocaml_mli () =
8318   generate_header OCamlStyle LGPLv2plus;
8319
8320   pr "\
8321 (** For API documentation you should refer to the C API
8322     in the guestfs(3) manual page.  The OCaml API uses almost
8323     exactly the same calls. *)
8324
8325 type t
8326 (** A [guestfs_h] handle. *)
8327
8328 exception Error of string
8329 (** This exception is raised when there is an error. *)
8330
8331 exception Handle_closed of string
8332 (** This exception is raised if you use a {!Guestfs.t} handle
8333     after calling {!close} on it.  The string is the name of
8334     the function. *)
8335
8336 val create : unit -> t
8337 (** Create a {!Guestfs.t} handle. *)
8338
8339 val close : t -> unit
8340 (** Close the {!Guestfs.t} handle and free up all resources used
8341     by it immediately.
8342
8343     Handles are closed by the garbage collector when they become
8344     unreferenced, but callers can call this in order to provide
8345     predictable cleanup. *)
8346
8347 ";
8348   generate_ocaml_structure_decls ();
8349
8350   (* The actions. *)
8351   List.iter (
8352     fun (name, style, _, _, _, shortdesc, _) ->
8353       generate_ocaml_prototype name style;
8354       pr "(** %s *)\n" shortdesc;
8355       pr "\n"
8356   ) all_functions_sorted
8357
8358 (* Generate the OCaml bindings implementation. *)
8359 and generate_ocaml_ml () =
8360   generate_header OCamlStyle LGPLv2plus;
8361
8362   pr "\
8363 type t
8364
8365 exception Error of string
8366 exception Handle_closed of string
8367
8368 external create : unit -> t = \"ocaml_guestfs_create\"
8369 external close : t -> unit = \"ocaml_guestfs_close\"
8370
8371 (* Give the exceptions names, so they can be raised from the C code. *)
8372 let () =
8373   Callback.register_exception \"ocaml_guestfs_error\" (Error \"\");
8374   Callback.register_exception \"ocaml_guestfs_closed\" (Handle_closed \"\")
8375
8376 ";
8377
8378   generate_ocaml_structure_decls ();
8379
8380   (* The actions. *)
8381   List.iter (
8382     fun (name, style, _, _, _, shortdesc, _) ->
8383       generate_ocaml_prototype ~is_external:true name style;
8384   ) all_functions_sorted
8385
8386 (* Generate the OCaml bindings C implementation. *)
8387 and generate_ocaml_c () =
8388   generate_header CStyle LGPLv2plus;
8389
8390   pr "\
8391 #include <stdio.h>
8392 #include <stdlib.h>
8393 #include <string.h>
8394
8395 #include <caml/config.h>
8396 #include <caml/alloc.h>
8397 #include <caml/callback.h>
8398 #include <caml/fail.h>
8399 #include <caml/memory.h>
8400 #include <caml/mlvalues.h>
8401 #include <caml/signals.h>
8402
8403 #include \"guestfs.h\"
8404
8405 #include \"guestfs_c.h\"
8406
8407 /* Copy a hashtable of string pairs into an assoc-list.  We return
8408  * the list in reverse order, but hashtables aren't supposed to be
8409  * ordered anyway.
8410  */
8411 static CAMLprim value
8412 copy_table (char * const * argv)
8413 {
8414   CAMLparam0 ();
8415   CAMLlocal5 (rv, pairv, kv, vv, cons);
8416   size_t i;
8417
8418   rv = Val_int (0);
8419   for (i = 0; argv[i] != NULL; i += 2) {
8420     kv = caml_copy_string (argv[i]);
8421     vv = caml_copy_string (argv[i+1]);
8422     pairv = caml_alloc (2, 0);
8423     Store_field (pairv, 0, kv);
8424     Store_field (pairv, 1, vv);
8425     cons = caml_alloc (2, 0);
8426     Store_field (cons, 1, rv);
8427     rv = cons;
8428     Store_field (cons, 0, pairv);
8429   }
8430
8431   CAMLreturn (rv);
8432 }
8433
8434 ";
8435
8436   (* Struct copy functions. *)
8437
8438   let emit_ocaml_copy_list_function typ =
8439     pr "static CAMLprim value\n";
8440     pr "copy_%s_list (const struct guestfs_%s_list *%ss)\n" typ typ typ;
8441     pr "{\n";
8442     pr "  CAMLparam0 ();\n";
8443     pr "  CAMLlocal2 (rv, v);\n";
8444     pr "  unsigned int i;\n";
8445     pr "\n";
8446     pr "  if (%ss->len == 0)\n" typ;
8447     pr "    CAMLreturn (Atom (0));\n";
8448     pr "  else {\n";
8449     pr "    rv = caml_alloc (%ss->len, 0);\n" typ;
8450     pr "    for (i = 0; i < %ss->len; ++i) {\n" typ;
8451     pr "      v = copy_%s (&%ss->val[i]);\n" typ typ;
8452     pr "      caml_modify (&Field (rv, i), v);\n";
8453     pr "    }\n";
8454     pr "    CAMLreturn (rv);\n";
8455     pr "  }\n";
8456     pr "}\n";
8457     pr "\n";
8458   in
8459
8460   List.iter (
8461     fun (typ, cols) ->
8462       let has_optpercent_col =
8463         List.exists (function (_, FOptPercent) -> true | _ -> false) cols in
8464
8465       pr "static CAMLprim value\n";
8466       pr "copy_%s (const struct guestfs_%s *%s)\n" typ typ typ;
8467       pr "{\n";
8468       pr "  CAMLparam0 ();\n";
8469       if has_optpercent_col then
8470         pr "  CAMLlocal3 (rv, v, v2);\n"
8471       else
8472         pr "  CAMLlocal2 (rv, v);\n";
8473       pr "\n";
8474       pr "  rv = caml_alloc (%d, 0);\n" (List.length cols);
8475       iteri (
8476         fun i col ->
8477           (match col with
8478            | name, FString ->
8479                pr "  v = caml_copy_string (%s->%s);\n" typ name
8480            | name, FBuffer ->
8481                pr "  v = caml_alloc_string (%s->%s_len);\n" typ name;
8482                pr "  memcpy (String_val (v), %s->%s, %s->%s_len);\n"
8483                  typ name typ name
8484            | name, FUUID ->
8485                pr "  v = caml_alloc_string (32);\n";
8486                pr "  memcpy (String_val (v), %s->%s, 32);\n" typ name
8487            | name, (FBytes|FInt64|FUInt64) ->
8488                pr "  v = caml_copy_int64 (%s->%s);\n" typ name
8489            | name, (FInt32|FUInt32) ->
8490                pr "  v = caml_copy_int32 (%s->%s);\n" typ name
8491            | name, FOptPercent ->
8492                pr "  if (%s->%s >= 0) { /* Some %s */\n" typ name name;
8493                pr "    v2 = caml_copy_double (%s->%s);\n" typ name;
8494                pr "    v = caml_alloc (1, 0);\n";
8495                pr "    Store_field (v, 0, v2);\n";
8496                pr "  } else /* None */\n";
8497                pr "    v = Val_int (0);\n";
8498            | name, FChar ->
8499                pr "  v = Val_int (%s->%s);\n" typ name
8500           );
8501           pr "  Store_field (rv, %d, v);\n" i
8502       ) cols;
8503       pr "  CAMLreturn (rv);\n";
8504       pr "}\n";
8505       pr "\n";
8506   ) structs;
8507
8508   (* Emit a copy_TYPE_list function definition only if that function is used. *)
8509   List.iter (
8510     function
8511     | typ, (RStructListOnly | RStructAndList) ->
8512         (* generate the function for typ *)
8513         emit_ocaml_copy_list_function typ
8514     | typ, _ -> () (* empty *)
8515   ) (rstructs_used_by all_functions);
8516
8517   (* The wrappers. *)
8518   List.iter (
8519     fun (name, style, _, _, _, _, _) ->
8520       pr "/* Automatically generated wrapper for function\n";
8521       pr " * ";
8522       generate_ocaml_prototype name style;
8523       pr " */\n";
8524       pr "\n";
8525
8526       let params =
8527         "gv" :: List.map (fun arg -> name_of_argt arg ^ "v") (snd style) in
8528
8529       let needs_extra_vs =
8530         match fst style with RConstOptString _ -> true | _ -> false in
8531
8532       pr "/* Emit prototype to appease gcc's -Wmissing-prototypes. */\n";
8533       pr "CAMLprim value ocaml_guestfs_%s (value %s" name (List.hd params);
8534       List.iter (pr ", value %s") (List.tl params); pr ");\n";
8535       pr "\n";
8536
8537       pr "CAMLprim value\n";
8538       pr "ocaml_guestfs_%s (value %s" name (List.hd params);
8539       List.iter (pr ", value %s") (List.tl params);
8540       pr ")\n";
8541       pr "{\n";
8542
8543       (match params with
8544        | [p1; p2; p3; p4; p5] ->
8545            pr "  CAMLparam5 (%s);\n" (String.concat ", " params)
8546        | p1 :: p2 :: p3 :: p4 :: p5 :: rest ->
8547            pr "  CAMLparam5 (%s);\n" (String.concat ", " [p1; p2; p3; p4; p5]);
8548            pr "  CAMLxparam%d (%s);\n"
8549              (List.length rest) (String.concat ", " rest)
8550        | ps ->
8551            pr "  CAMLparam%d (%s);\n" (List.length ps) (String.concat ", " ps)
8552       );
8553       if not needs_extra_vs then
8554         pr "  CAMLlocal1 (rv);\n"
8555       else
8556         pr "  CAMLlocal3 (rv, v, v2);\n";
8557       pr "\n";
8558
8559       pr "  guestfs_h *g = Guestfs_val (gv);\n";
8560       pr "  if (g == NULL)\n";
8561       pr "    ocaml_guestfs_raise_closed (\"%s\");\n" name;
8562       pr "\n";
8563
8564       List.iter (
8565         function
8566         | Pathname n
8567         | Device n | Dev_or_Path n
8568         | String n
8569         | FileIn n
8570         | FileOut n ->
8571             (* Copy strings in case the GC moves them: RHBZ#604691 *)
8572             pr "  char *%s = guestfs_safe_strdup (g, String_val (%sv));\n" n n
8573         | OptString n ->
8574             pr "  char *%s =\n" n;
8575             pr "    %sv != Val_int (0) ?" n;
8576             pr "      guestfs_safe_strdup (g, String_val (Field (%sv, 0))) : NULL;\n" n
8577         | BufferIn n ->
8578             pr "  size_t %s_size = caml_string_length (%sv);\n" n n;
8579             pr "  char *%s = guestfs_safe_memdup (g, String_val (%sv), %s_size);\n" n n n
8580         | StringList n | DeviceList n ->
8581             pr "  char **%s = ocaml_guestfs_strings_val (g, %sv);\n" n n
8582         | Bool n ->
8583             pr "  int %s = Bool_val (%sv);\n" n n
8584         | Int n ->
8585             pr "  int %s = Int_val (%sv);\n" n n
8586         | Int64 n ->
8587             pr "  int64_t %s = Int64_val (%sv);\n" n n
8588       ) (snd style);
8589       let error_code =
8590         match fst style with
8591         | RErr -> pr "  int r;\n"; "-1"
8592         | RInt _ -> pr "  int r;\n"; "-1"
8593         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
8594         | RBool _ -> pr "  int r;\n"; "-1"
8595         | RConstString _ | RConstOptString _ ->
8596             pr "  const char *r;\n"; "NULL"
8597         | RString _ -> pr "  char *r;\n"; "NULL"
8598         | RStringList _ ->
8599             pr "  size_t i;\n";
8600             pr "  char **r;\n";
8601             "NULL"
8602         | RStruct (_, typ) ->
8603             pr "  struct guestfs_%s *r;\n" typ; "NULL"
8604         | RStructList (_, typ) ->
8605             pr "  struct guestfs_%s_list *r;\n" typ; "NULL"
8606         | RHashtable _ ->
8607             pr "  size_t i;\n";
8608             pr "  char **r;\n";
8609             "NULL"
8610         | RBufferOut _ ->
8611             pr "  char *r;\n";
8612             pr "  size_t size;\n";
8613             "NULL" in
8614       pr "\n";
8615
8616       pr "  caml_enter_blocking_section ();\n";
8617       pr "  r = guestfs_%s " name;
8618       generate_c_call_args ~handle:"g" style;
8619       pr ";\n";
8620       pr "  caml_leave_blocking_section ();\n";
8621
8622       (* Free strings if we copied them above. *)
8623       List.iter (
8624         function
8625         | Pathname n | Device n | Dev_or_Path n | String n | OptString n
8626         | FileIn n | FileOut n | BufferIn n ->
8627             pr "  free (%s);\n" n
8628         | StringList n | DeviceList n ->
8629             pr "  ocaml_guestfs_free_strings (%s);\n" n;
8630         | Bool _ | Int _ | Int64 _ -> ()
8631       ) (snd style);
8632
8633       pr "  if (r == %s)\n" error_code;
8634       pr "    ocaml_guestfs_raise_error (g, \"%s\");\n" name;
8635       pr "\n";
8636
8637       (match fst style with
8638        | RErr -> pr "  rv = Val_unit;\n"
8639        | RInt _ -> pr "  rv = Val_int (r);\n"
8640        | RInt64 _ ->
8641            pr "  rv = caml_copy_int64 (r);\n"
8642        | RBool _ -> pr "  rv = Val_bool (r);\n"
8643        | RConstString _ ->
8644            pr "  rv = caml_copy_string (r);\n"
8645        | RConstOptString _ ->
8646            pr "  if (r) { /* Some string */\n";
8647            pr "    v = caml_alloc (1, 0);\n";
8648            pr "    v2 = caml_copy_string (r);\n";
8649            pr "    Store_field (v, 0, v2);\n";
8650            pr "  } else /* None */\n";
8651            pr "    v = Val_int (0);\n";
8652        | RString _ ->
8653            pr "  rv = caml_copy_string (r);\n";
8654            pr "  free (r);\n"
8655        | RStringList _ ->
8656            pr "  rv = caml_copy_string_array ((const char **) r);\n";
8657            pr "  for (i = 0; r[i] != NULL; ++i) free (r[i]);\n";
8658            pr "  free (r);\n"
8659        | RStruct (_, typ) ->
8660            pr "  rv = copy_%s (r);\n" typ;
8661            pr "  guestfs_free_%s (r);\n" typ;
8662        | RStructList (_, typ) ->
8663            pr "  rv = copy_%s_list (r);\n" typ;
8664            pr "  guestfs_free_%s_list (r);\n" typ;
8665        | RHashtable _ ->
8666            pr "  rv = copy_table (r);\n";
8667            pr "  for (i = 0; r[i] != NULL; ++i) free (r[i]);\n";
8668            pr "  free (r);\n";
8669        | RBufferOut _ ->
8670            pr "  rv = caml_alloc_string (size);\n";
8671            pr "  memcpy (String_val (rv), r, size);\n";
8672       );
8673
8674       pr "  CAMLreturn (rv);\n";
8675       pr "}\n";
8676       pr "\n";
8677
8678       if List.length params > 5 then (
8679         pr "/* Emit prototype to appease gcc's -Wmissing-prototypes. */\n";
8680         pr "CAMLprim value ";
8681         pr "ocaml_guestfs_%s_byte (value *argv, int argn);\n" name;
8682         pr "CAMLprim value\n";
8683         pr "ocaml_guestfs_%s_byte (value *argv, int argn)\n" name;
8684         pr "{\n";
8685         pr "  return ocaml_guestfs_%s (argv[0]" name;
8686         iteri (fun i _ -> pr ", argv[%d]" i) (List.tl params);
8687         pr ");\n";
8688         pr "}\n";
8689         pr "\n"
8690       )
8691   ) all_functions_sorted
8692
8693 and generate_ocaml_structure_decls () =
8694   List.iter (
8695     fun (typ, cols) ->
8696       pr "type %s = {\n" typ;
8697       List.iter (
8698         function
8699         | name, FString -> pr "  %s : string;\n" name
8700         | name, FBuffer -> pr "  %s : string;\n" name
8701         | name, FUUID -> pr "  %s : string;\n" name
8702         | name, (FBytes|FInt64|FUInt64) -> pr "  %s : int64;\n" name
8703         | name, (FInt32|FUInt32) -> pr "  %s : int32;\n" name
8704         | name, FChar -> pr "  %s : char;\n" name
8705         | name, FOptPercent -> pr "  %s : float option;\n" name
8706       ) cols;
8707       pr "}\n";
8708       pr "\n"
8709   ) structs
8710
8711 and generate_ocaml_prototype ?(is_external = false) name style =
8712   if is_external then pr "external " else pr "val ";
8713   pr "%s : t -> " name;
8714   List.iter (
8715     function
8716     | Pathname _ | Device _ | Dev_or_Path _ | String _ | FileIn _ | FileOut _
8717     | BufferIn _ -> pr "string -> "
8718     | OptString _ -> pr "string option -> "
8719     | StringList _ | DeviceList _ -> pr "string array -> "
8720     | Bool _ -> pr "bool -> "
8721     | Int _ -> pr "int -> "
8722     | Int64 _ -> pr "int64 -> "
8723   ) (snd style);
8724   (match fst style with
8725    | RErr -> pr "unit" (* all errors are turned into exceptions *)
8726    | RInt _ -> pr "int"
8727    | RInt64 _ -> pr "int64"
8728    | RBool _ -> pr "bool"
8729    | RConstString _ -> pr "string"
8730    | RConstOptString _ -> pr "string option"
8731    | RString _ | RBufferOut _ -> pr "string"
8732    | RStringList _ -> pr "string array"
8733    | RStruct (_, typ) -> pr "%s" typ
8734    | RStructList (_, typ) -> pr "%s array" typ
8735    | RHashtable _ -> pr "(string * string) list"
8736   );
8737   if is_external then (
8738     pr " = ";
8739     if List.length (snd style) + 1 > 5 then
8740       pr "\"ocaml_guestfs_%s_byte\" " name;
8741     pr "\"ocaml_guestfs_%s\"" name
8742   );
8743   pr "\n"
8744
8745 (* Generate Perl xs code, a sort of crazy variation of C with macros. *)
8746 and generate_perl_xs () =
8747   generate_header CStyle LGPLv2plus;
8748
8749   pr "\
8750 #include \"EXTERN.h\"
8751 #include \"perl.h\"
8752 #include \"XSUB.h\"
8753
8754 #include <guestfs.h>
8755
8756 #ifndef PRId64
8757 #define PRId64 \"lld\"
8758 #endif
8759
8760 static SV *
8761 my_newSVll(long long val) {
8762 #ifdef USE_64_BIT_ALL
8763   return newSViv(val);
8764 #else
8765   char buf[100];
8766   int len;
8767   len = snprintf(buf, 100, \"%%\" PRId64, val);
8768   return newSVpv(buf, len);
8769 #endif
8770 }
8771
8772 #ifndef PRIu64
8773 #define PRIu64 \"llu\"
8774 #endif
8775
8776 static SV *
8777 my_newSVull(unsigned long long val) {
8778 #ifdef USE_64_BIT_ALL
8779   return newSVuv(val);
8780 #else
8781   char buf[100];
8782   int len;
8783   len = snprintf(buf, 100, \"%%\" PRIu64, val);
8784   return newSVpv(buf, len);
8785 #endif
8786 }
8787
8788 /* http://www.perlmonks.org/?node_id=680842 */
8789 static char **
8790 XS_unpack_charPtrPtr (SV *arg) {
8791   char **ret;
8792   AV *av;
8793   I32 i;
8794
8795   if (!arg || !SvOK (arg) || !SvROK (arg) || SvTYPE (SvRV (arg)) != SVt_PVAV)
8796     croak (\"array reference expected\");
8797
8798   av = (AV *)SvRV (arg);
8799   ret = malloc ((av_len (av) + 1 + 1) * sizeof (char *));
8800   if (!ret)
8801     croak (\"malloc failed\");
8802
8803   for (i = 0; i <= av_len (av); i++) {
8804     SV **elem = av_fetch (av, i, 0);
8805
8806     if (!elem || !*elem)
8807       croak (\"missing element in list\");
8808
8809     ret[i] = SvPV_nolen (*elem);
8810   }
8811
8812   ret[i] = NULL;
8813
8814   return ret;
8815 }
8816
8817 MODULE = Sys::Guestfs  PACKAGE = Sys::Guestfs
8818
8819 PROTOTYPES: ENABLE
8820
8821 guestfs_h *
8822 _create ()
8823    CODE:
8824       RETVAL = guestfs_create ();
8825       if (!RETVAL)
8826         croak (\"could not create guestfs handle\");
8827       guestfs_set_error_handler (RETVAL, NULL, NULL);
8828  OUTPUT:
8829       RETVAL
8830
8831 void
8832 DESTROY (sv)
8833       SV *sv;
8834  PPCODE:
8835       /* For the 'g' argument above we do the conversion explicitly and
8836        * don't rely on the typemap, because if the handle has been
8837        * explicitly closed we don't want the typemap conversion to
8838        * display an error.
8839        */
8840       HV *hv = (HV *) SvRV (sv);
8841       SV **svp = hv_fetch (hv, \"_g\", 2, 0);
8842       if (svp != NULL) {
8843         guestfs_h *g = (guestfs_h *) SvIV (*svp);
8844         assert (g != NULL);
8845         guestfs_close (g);
8846       }
8847
8848 void
8849 close (g)
8850       guestfs_h *g;
8851  PPCODE:
8852       guestfs_close (g);
8853       /* Avoid double-free in DESTROY method. */
8854       HV *hv = (HV *) SvRV (ST(0));
8855       (void) hv_delete (hv, \"_g\", 2, G_DISCARD);
8856
8857 ";
8858
8859   List.iter (
8860     fun (name, style, _, _, _, _, _) ->
8861       (match fst style with
8862        | RErr -> pr "void\n"
8863        | RInt _ -> pr "SV *\n"
8864        | RInt64 _ -> pr "SV *\n"
8865        | RBool _ -> pr "SV *\n"
8866        | RConstString _ -> pr "SV *\n"
8867        | RConstOptString _ -> pr "SV *\n"
8868        | RString _ -> pr "SV *\n"
8869        | RBufferOut _ -> pr "SV *\n"
8870        | RStringList _
8871        | RStruct _ | RStructList _
8872        | RHashtable _ ->
8873            pr "void\n" (* all lists returned implictly on the stack *)
8874       );
8875       (* Call and arguments. *)
8876       pr "%s (g" name;
8877       List.iter (
8878         fun arg -> pr ", %s" (name_of_argt arg)
8879       ) (snd style);
8880       pr ")\n";
8881       pr "      guestfs_h *g;\n";
8882       iteri (
8883         fun i ->
8884           function
8885           | Pathname n | Device n | Dev_or_Path n | String n
8886           | FileIn n | FileOut n ->
8887               pr "      char *%s;\n" n
8888           | BufferIn n ->
8889               pr "      char *%s;\n" n;
8890               pr "      size_t %s_size = SvCUR (ST(%d));\n" n (i+1)
8891           | OptString n ->
8892               (* http://www.perlmonks.org/?node_id=554277
8893                * Note that the implicit handle argument means we have
8894                * to add 1 to the ST(x) operator.
8895                *)
8896               pr "      char *%s = SvOK(ST(%d)) ? SvPV_nolen(ST(%d)) : NULL;\n" n (i+1) (i+1)
8897           | StringList n | DeviceList n -> pr "      char **%s;\n" n
8898           | Bool n -> pr "      int %s;\n" n
8899           | Int n -> pr "      int %s;\n" n
8900           | Int64 n -> pr "      int64_t %s;\n" n
8901       ) (snd style);
8902
8903       let do_cleanups () =
8904         List.iter (
8905           function
8906           | Pathname _ | Device _ | Dev_or_Path _ | String _ | OptString _
8907           | Bool _ | Int _ | Int64 _
8908           | FileIn _ | FileOut _
8909           | BufferIn _ -> ()
8910           | StringList n | DeviceList n -> pr "      free (%s);\n" n
8911         ) (snd style)
8912       in
8913
8914       (* Code. *)
8915       (match fst style with
8916        | RErr ->
8917            pr "PREINIT:\n";
8918            pr "      int r;\n";
8919            pr " PPCODE:\n";
8920            pr "      r = guestfs_%s " name;
8921            generate_c_call_args ~handle:"g" style;
8922            pr ";\n";
8923            do_cleanups ();
8924            pr "      if (r == -1)\n";
8925            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
8926        | RInt n
8927        | RBool n ->
8928            pr "PREINIT:\n";
8929            pr "      int %s;\n" n;
8930            pr "   CODE:\n";
8931            pr "      %s = guestfs_%s " n name;
8932            generate_c_call_args ~handle:"g" style;
8933            pr ";\n";
8934            do_cleanups ();
8935            pr "      if (%s == -1)\n" n;
8936            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
8937            pr "      RETVAL = newSViv (%s);\n" n;
8938            pr " OUTPUT:\n";
8939            pr "      RETVAL\n"
8940        | RInt64 n ->
8941            pr "PREINIT:\n";
8942            pr "      int64_t %s;\n" n;
8943            pr "   CODE:\n";
8944            pr "      %s = guestfs_%s " n name;
8945            generate_c_call_args ~handle:"g" style;
8946            pr ";\n";
8947            do_cleanups ();
8948            pr "      if (%s == -1)\n" n;
8949            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
8950            pr "      RETVAL = my_newSVll (%s);\n" n;
8951            pr " OUTPUT:\n";
8952            pr "      RETVAL\n"
8953        | RConstString n ->
8954            pr "PREINIT:\n";
8955            pr "      const char *%s;\n" n;
8956            pr "   CODE:\n";
8957            pr "      %s = guestfs_%s " n name;
8958            generate_c_call_args ~handle:"g" style;
8959            pr ";\n";
8960            do_cleanups ();
8961            pr "      if (%s == NULL)\n" n;
8962            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
8963            pr "      RETVAL = newSVpv (%s, 0);\n" n;
8964            pr " OUTPUT:\n";
8965            pr "      RETVAL\n"
8966        | RConstOptString n ->
8967            pr "PREINIT:\n";
8968            pr "      const char *%s;\n" n;
8969            pr "   CODE:\n";
8970            pr "      %s = guestfs_%s " n name;
8971            generate_c_call_args ~handle:"g" style;
8972            pr ";\n";
8973            do_cleanups ();
8974            pr "      if (%s == NULL)\n" n;
8975            pr "        RETVAL = &PL_sv_undef;\n";
8976            pr "      else\n";
8977            pr "        RETVAL = newSVpv (%s, 0);\n" n;
8978            pr " OUTPUT:\n";
8979            pr "      RETVAL\n"
8980        | RString n ->
8981            pr "PREINIT:\n";
8982            pr "      char *%s;\n" n;
8983            pr "   CODE:\n";
8984            pr "      %s = guestfs_%s " n name;
8985            generate_c_call_args ~handle:"g" style;
8986            pr ";\n";
8987            do_cleanups ();
8988            pr "      if (%s == NULL)\n" n;
8989            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
8990            pr "      RETVAL = newSVpv (%s, 0);\n" n;
8991            pr "      free (%s);\n" n;
8992            pr " OUTPUT:\n";
8993            pr "      RETVAL\n"
8994        | RStringList n | RHashtable n ->
8995            pr "PREINIT:\n";
8996            pr "      char **%s;\n" n;
8997            pr "      size_t i, n;\n";
8998            pr " PPCODE:\n";
8999            pr "      %s = guestfs_%s " n name;
9000            generate_c_call_args ~handle:"g" style;
9001            pr ";\n";
9002            do_cleanups ();
9003            pr "      if (%s == NULL)\n" n;
9004            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9005            pr "      for (n = 0; %s[n] != NULL; ++n) /**/;\n" n;
9006            pr "      EXTEND (SP, n);\n";
9007            pr "      for (i = 0; i < n; ++i) {\n";
9008            pr "        PUSHs (sv_2mortal (newSVpv (%s[i], 0)));\n" n;
9009            pr "        free (%s[i]);\n" n;
9010            pr "      }\n";
9011            pr "      free (%s);\n" n;
9012        | RStruct (n, typ) ->
9013            let cols = cols_of_struct typ in
9014            generate_perl_struct_code typ cols name style n do_cleanups
9015        | RStructList (n, typ) ->
9016            let cols = cols_of_struct typ in
9017            generate_perl_struct_list_code typ cols name style n do_cleanups
9018        | RBufferOut n ->
9019            pr "PREINIT:\n";
9020            pr "      char *%s;\n" n;
9021            pr "      size_t size;\n";
9022            pr "   CODE:\n";
9023            pr "      %s = guestfs_%s " n name;
9024            generate_c_call_args ~handle:"g" style;
9025            pr ";\n";
9026            do_cleanups ();
9027            pr "      if (%s == NULL)\n" n;
9028            pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9029            pr "      RETVAL = newSVpvn (%s, size);\n" n;
9030            pr "      free (%s);\n" n;
9031            pr " OUTPUT:\n";
9032            pr "      RETVAL\n"
9033       );
9034
9035       pr "\n"
9036   ) all_functions
9037
9038 and generate_perl_struct_list_code typ cols name style n do_cleanups =
9039   pr "PREINIT:\n";
9040   pr "      struct guestfs_%s_list *%s;\n" typ n;
9041   pr "      size_t i;\n";
9042   pr "      HV *hv;\n";
9043   pr " PPCODE:\n";
9044   pr "      %s = guestfs_%s " n name;
9045   generate_c_call_args ~handle:"g" style;
9046   pr ";\n";
9047   do_cleanups ();
9048   pr "      if (%s == NULL)\n" n;
9049   pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9050   pr "      EXTEND (SP, %s->len);\n" n;
9051   pr "      for (i = 0; i < %s->len; ++i) {\n" n;
9052   pr "        hv = newHV ();\n";
9053   List.iter (
9054     function
9055     | name, FString ->
9056         pr "        (void) hv_store (hv, \"%s\", %d, newSVpv (%s->val[i].%s, 0), 0);\n"
9057           name (String.length name) n name
9058     | name, FUUID ->
9059         pr "        (void) hv_store (hv, \"%s\", %d, newSVpv (%s->val[i].%s, 32), 0);\n"
9060           name (String.length name) n name
9061     | name, FBuffer ->
9062         pr "        (void) hv_store (hv, \"%s\", %d, newSVpvn (%s->val[i].%s, %s->val[i].%s_len), 0);\n"
9063           name (String.length name) n name n name
9064     | name, (FBytes|FUInt64) ->
9065         pr "        (void) hv_store (hv, \"%s\", %d, my_newSVull (%s->val[i].%s), 0);\n"
9066           name (String.length name) n name
9067     | name, FInt64 ->
9068         pr "        (void) hv_store (hv, \"%s\", %d, my_newSVll (%s->val[i].%s), 0);\n"
9069           name (String.length name) n name
9070     | name, (FInt32|FUInt32) ->
9071         pr "        (void) hv_store (hv, \"%s\", %d, newSVnv (%s->val[i].%s), 0);\n"
9072           name (String.length name) n name
9073     | name, FChar ->
9074         pr "        (void) hv_store (hv, \"%s\", %d, newSVpv (&%s->val[i].%s, 1), 0);\n"
9075           name (String.length name) n name
9076     | name, FOptPercent ->
9077         pr "        (void) hv_store (hv, \"%s\", %d, newSVnv (%s->val[i].%s), 0);\n"
9078           name (String.length name) n name
9079   ) cols;
9080   pr "        PUSHs (sv_2mortal (newRV ((SV *) hv)));\n";
9081   pr "      }\n";
9082   pr "      guestfs_free_%s_list (%s);\n" typ n
9083
9084 and generate_perl_struct_code typ cols name style n do_cleanups =
9085   pr "PREINIT:\n";
9086   pr "      struct guestfs_%s *%s;\n" typ n;
9087   pr " PPCODE:\n";
9088   pr "      %s = guestfs_%s " n name;
9089   generate_c_call_args ~handle:"g" style;
9090   pr ";\n";
9091   do_cleanups ();
9092   pr "      if (%s == NULL)\n" n;
9093   pr "        croak (\"%%s\", guestfs_last_error (g));\n";
9094   pr "      EXTEND (SP, 2 * %d);\n" (List.length cols);
9095   List.iter (
9096     fun ((name, _) as col) ->
9097       pr "      PUSHs (sv_2mortal (newSVpv (\"%s\", 0)));\n" name;
9098
9099       match col with
9100       | name, FString ->
9101           pr "      PUSHs (sv_2mortal (newSVpv (%s->%s, 0)));\n"
9102             n name
9103       | name, FBuffer ->
9104           pr "      PUSHs (sv_2mortal (newSVpvn (%s->%s, %s->%s_len)));\n"
9105             n name n name
9106       | name, FUUID ->
9107           pr "      PUSHs (sv_2mortal (newSVpv (%s->%s, 32)));\n"
9108             n name
9109       | name, (FBytes|FUInt64) ->
9110           pr "      PUSHs (sv_2mortal (my_newSVull (%s->%s)));\n"
9111             n name
9112       | name, FInt64 ->
9113           pr "      PUSHs (sv_2mortal (my_newSVll (%s->%s)));\n"
9114             n name
9115       | name, (FInt32|FUInt32) ->
9116           pr "      PUSHs (sv_2mortal (newSVnv (%s->%s)));\n"
9117             n name
9118       | name, FChar ->
9119           pr "      PUSHs (sv_2mortal (newSVpv (&%s->%s, 1)));\n"
9120             n name
9121       | name, FOptPercent ->
9122           pr "      PUSHs (sv_2mortal (newSVnv (%s->%s)));\n"
9123             n name
9124   ) cols;
9125   pr "      free (%s);\n" n
9126
9127 (* Generate Sys/Guestfs.pm. *)
9128 and generate_perl_pm () =
9129   generate_header HashStyle LGPLv2plus;
9130
9131   pr "\
9132 =pod
9133
9134 =head1 NAME
9135
9136 Sys::Guestfs - Perl bindings for libguestfs
9137
9138 =head1 SYNOPSIS
9139
9140  use Sys::Guestfs;
9141
9142  my $h = Sys::Guestfs->new ();
9143  $h->add_drive ('guest.img');
9144  $h->launch ();
9145  $h->mount ('/dev/sda1', '/');
9146  $h->touch ('/hello');
9147  $h->sync ();
9148
9149 =head1 DESCRIPTION
9150
9151 The C<Sys::Guestfs> module provides a Perl XS binding to the
9152 libguestfs API for examining and modifying virtual machine
9153 disk images.
9154
9155 Amongst the things this is good for: making batch configuration
9156 changes to guests, getting disk used/free statistics (see also:
9157 virt-df), migrating between virtualization systems (see also:
9158 virt-p2v), performing partial backups, performing partial guest
9159 clones, cloning guests and changing registry/UUID/hostname info, and
9160 much else besides.
9161
9162 Libguestfs uses Linux kernel and qemu code, and can access any type of
9163 guest filesystem that Linux and qemu can, including but not limited
9164 to: ext2/3/4, btrfs, FAT and NTFS, LVM, many different disk partition
9165 schemes, qcow, qcow2, vmdk.
9166
9167 Libguestfs provides ways to enumerate guest storage (eg. partitions,
9168 LVs, what filesystem is in each LV, etc.).  It can also run commands
9169 in the context of the guest.  Also you can access filesystems over
9170 FUSE.
9171
9172 See also L<Sys::Guestfs::Lib(3)> for a set of useful library
9173 functions for using libguestfs from Perl, including integration
9174 with libvirt.
9175
9176 =head1 ERRORS
9177
9178 All errors turn into calls to C<croak> (see L<Carp(3)>).
9179
9180 =head1 METHODS
9181
9182 =over 4
9183
9184 =cut
9185
9186 package Sys::Guestfs;
9187
9188 use strict;
9189 use warnings;
9190
9191 # This version number changes whenever a new function
9192 # is added to the libguestfs API.  It is not directly
9193 # related to the libguestfs version number.
9194 use vars qw($VERSION);
9195 $VERSION = '0.%d';
9196
9197 require XSLoader;
9198 XSLoader::load ('Sys::Guestfs');
9199
9200 =item $h = Sys::Guestfs->new ();
9201
9202 Create a new guestfs handle.
9203
9204 =cut
9205
9206 sub new {
9207   my $proto = shift;
9208   my $class = ref ($proto) || $proto;
9209
9210   my $g = Sys::Guestfs::_create ();
9211   my $self = { _g => $g };
9212   bless $self, $class;
9213   return $self;
9214 }
9215
9216 =item $h->close ();
9217
9218 Explicitly close the guestfs handle.
9219
9220 B<Note:> You should not usually call this function.  The handle will
9221 be closed implicitly when its reference count goes to zero (eg.
9222 when it goes out of scope or the program ends).  This call is
9223 only required in some exceptional cases, such as where the program
9224 may contain cached references to the handle 'somewhere' and you
9225 really have to have the close happen right away.  After calling
9226 C<close> the program must not call any method (including C<close>)
9227 on the handle (but the implicit call to C<DESTROY> that happens
9228 when the final reference is cleaned up is OK).
9229
9230 =cut
9231
9232 " max_proc_nr;
9233
9234   (* Actions.  We only need to print documentation for these as
9235    * they are pulled in from the XS code automatically.
9236    *)
9237   List.iter (
9238     fun (name, style, _, flags, _, _, longdesc) ->
9239       if not (List.mem NotInDocs flags) then (
9240         let longdesc = replace_str longdesc "C<guestfs_" "C<$h-E<gt>" in
9241         pr "=item ";
9242         generate_perl_prototype name style;
9243         pr "\n\n";
9244         pr "%s\n\n" longdesc;
9245         if List.mem ProtocolLimitWarning flags then
9246           pr "%s\n\n" protocol_limit_warning;
9247         if List.mem DangerWillRobinson flags then
9248           pr "%s\n\n" danger_will_robinson;
9249         match deprecation_notice flags with
9250         | None -> ()
9251         | Some txt -> pr "%s\n\n" txt
9252       )
9253   ) all_functions_sorted;
9254
9255   (* End of file. *)
9256   pr "\
9257 =cut
9258
9259 1;
9260
9261 =back
9262
9263 =head1 COPYRIGHT
9264
9265 Copyright (C) %s Red Hat Inc.
9266
9267 =head1 LICENSE
9268
9269 Please see the file COPYING.LIB for the full license.
9270
9271 =head1 SEE ALSO
9272
9273 L<guestfs(3)>,
9274 L<guestfish(1)>,
9275 L<http://libguestfs.org>,
9276 L<Sys::Guestfs::Lib(3)>.
9277
9278 =cut
9279 " copyright_years
9280
9281 and generate_perl_prototype name style =
9282   (match fst style with
9283    | RErr -> ()
9284    | RBool n
9285    | RInt n
9286    | RInt64 n
9287    | RConstString n
9288    | RConstOptString n
9289    | RString n
9290    | RBufferOut n -> pr "$%s = " n
9291    | RStruct (n,_)
9292    | RHashtable n -> pr "%%%s = " n
9293    | RStringList n
9294    | RStructList (n,_) -> pr "@%s = " n
9295   );
9296   pr "$h->%s (" name;
9297   let comma = ref false in
9298   List.iter (
9299     fun arg ->
9300       if !comma then pr ", ";
9301       comma := true;
9302       match arg with
9303       | Pathname n | Device n | Dev_or_Path n | String n
9304       | OptString n | Bool n | Int n | Int64 n | FileIn n | FileOut n
9305       | BufferIn n ->
9306           pr "$%s" n
9307       | StringList n | DeviceList n ->
9308           pr "\\@%s" n
9309   ) (snd style);
9310   pr ");"
9311
9312 (* Generate Python C module. *)
9313 and generate_python_c () =
9314   generate_header CStyle LGPLv2plus;
9315
9316   pr "\
9317 #define PY_SSIZE_T_CLEAN 1
9318 #include <Python.h>
9319
9320 #if PY_VERSION_HEX < 0x02050000
9321 typedef int Py_ssize_t;
9322 #define PY_SSIZE_T_MAX INT_MAX
9323 #define PY_SSIZE_T_MIN INT_MIN
9324 #endif
9325
9326 #include <stdio.h>
9327 #include <stdlib.h>
9328 #include <assert.h>
9329
9330 #include \"guestfs.h\"
9331
9332 typedef struct {
9333   PyObject_HEAD
9334   guestfs_h *g;
9335 } Pyguestfs_Object;
9336
9337 static guestfs_h *
9338 get_handle (PyObject *obj)
9339 {
9340   assert (obj);
9341   assert (obj != Py_None);
9342   return ((Pyguestfs_Object *) obj)->g;
9343 }
9344
9345 static PyObject *
9346 put_handle (guestfs_h *g)
9347 {
9348   assert (g);
9349   return
9350     PyCObject_FromVoidPtrAndDesc ((void *) g, (char *) \"guestfs_h\", NULL);
9351 }
9352
9353 /* This list should be freed (but not the strings) after use. */
9354 static char **
9355 get_string_list (PyObject *obj)
9356 {
9357   size_t i, len;
9358   char **r;
9359
9360   assert (obj);
9361
9362   if (!PyList_Check (obj)) {
9363     PyErr_SetString (PyExc_RuntimeError, \"expecting a list parameter\");
9364     return NULL;
9365   }
9366
9367   Py_ssize_t slen = PyList_Size (obj);
9368   if (slen == -1) {
9369     PyErr_SetString (PyExc_RuntimeError, \"get_string_list: PyList_Size failure\");
9370     return NULL;
9371   }
9372   len = (size_t) slen;
9373   r = malloc (sizeof (char *) * (len+1));
9374   if (r == NULL) {
9375     PyErr_SetString (PyExc_RuntimeError, \"get_string_list: out of memory\");
9376     return NULL;
9377   }
9378
9379   for (i = 0; i < len; ++i)
9380     r[i] = PyString_AsString (PyList_GetItem (obj, i));
9381   r[len] = NULL;
9382
9383   return r;
9384 }
9385
9386 static PyObject *
9387 put_string_list (char * const * const argv)
9388 {
9389   PyObject *list;
9390   int argc, i;
9391
9392   for (argc = 0; argv[argc] != NULL; ++argc)
9393     ;
9394
9395   list = PyList_New (argc);
9396   for (i = 0; i < argc; ++i)
9397     PyList_SetItem (list, i, PyString_FromString (argv[i]));
9398
9399   return list;
9400 }
9401
9402 static PyObject *
9403 put_table (char * const * const argv)
9404 {
9405   PyObject *list, *item;
9406   int argc, i;
9407
9408   for (argc = 0; argv[argc] != NULL; ++argc)
9409     ;
9410
9411   list = PyList_New (argc >> 1);
9412   for (i = 0; i < argc; i += 2) {
9413     item = PyTuple_New (2);
9414     PyTuple_SetItem (item, 0, PyString_FromString (argv[i]));
9415     PyTuple_SetItem (item, 1, PyString_FromString (argv[i+1]));
9416     PyList_SetItem (list, i >> 1, item);
9417   }
9418
9419   return list;
9420 }
9421
9422 static void
9423 free_strings (char **argv)
9424 {
9425   int argc;
9426
9427   for (argc = 0; argv[argc] != NULL; ++argc)
9428     free (argv[argc]);
9429   free (argv);
9430 }
9431
9432 static PyObject *
9433 py_guestfs_create (PyObject *self, PyObject *args)
9434 {
9435   guestfs_h *g;
9436
9437   g = guestfs_create ();
9438   if (g == NULL) {
9439     PyErr_SetString (PyExc_RuntimeError,
9440                      \"guestfs.create: failed to allocate handle\");
9441     return NULL;
9442   }
9443   guestfs_set_error_handler (g, NULL, NULL);
9444   return put_handle (g);
9445 }
9446
9447 static PyObject *
9448 py_guestfs_close (PyObject *self, PyObject *args)
9449 {
9450   PyObject *py_g;
9451   guestfs_h *g;
9452
9453   if (!PyArg_ParseTuple (args, (char *) \"O:guestfs_close\", &py_g))
9454     return NULL;
9455   g = get_handle (py_g);
9456
9457   guestfs_close (g);
9458
9459   Py_INCREF (Py_None);
9460   return Py_None;
9461 }
9462
9463 ";
9464
9465   let emit_put_list_function typ =
9466     pr "static PyObject *\n";
9467     pr "put_%s_list (struct guestfs_%s_list *%ss)\n" typ typ typ;
9468     pr "{\n";
9469     pr "  PyObject *list;\n";
9470     pr "  size_t i;\n";
9471     pr "\n";
9472     pr "  list = PyList_New (%ss->len);\n" typ;
9473     pr "  for (i = 0; i < %ss->len; ++i)\n" typ;
9474     pr "    PyList_SetItem (list, i, put_%s (&%ss->val[i]));\n" typ typ;
9475     pr "  return list;\n";
9476     pr "};\n";
9477     pr "\n"
9478   in
9479
9480   (* Structures, turned into Python dictionaries. *)
9481   List.iter (
9482     fun (typ, cols) ->
9483       pr "static PyObject *\n";
9484       pr "put_%s (struct guestfs_%s *%s)\n" typ typ typ;
9485       pr "{\n";
9486       pr "  PyObject *dict;\n";
9487       pr "\n";
9488       pr "  dict = PyDict_New ();\n";
9489       List.iter (
9490         function
9491         | name, FString ->
9492             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
9493             pr "                        PyString_FromString (%s->%s));\n"
9494               typ name
9495         | name, FBuffer ->
9496             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
9497             pr "                        PyString_FromStringAndSize (%s->%s, %s->%s_len));\n"
9498               typ name typ name
9499         | name, FUUID ->
9500             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
9501             pr "                        PyString_FromStringAndSize (%s->%s, 32));\n"
9502               typ name
9503         | name, (FBytes|FUInt64) ->
9504             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
9505             pr "                        PyLong_FromUnsignedLongLong (%s->%s));\n"
9506               typ name
9507         | name, FInt64 ->
9508             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
9509             pr "                        PyLong_FromLongLong (%s->%s));\n"
9510               typ name
9511         | name, FUInt32 ->
9512             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
9513             pr "                        PyLong_FromUnsignedLong (%s->%s));\n"
9514               typ name
9515         | name, FInt32 ->
9516             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
9517             pr "                        PyLong_FromLong (%s->%s));\n"
9518               typ name
9519         | name, FOptPercent ->
9520             pr "  if (%s->%s >= 0)\n" typ name;
9521             pr "    PyDict_SetItemString (dict, \"%s\",\n" name;
9522             pr "                          PyFloat_FromDouble ((double) %s->%s));\n"
9523               typ name;
9524             pr "  else {\n";
9525             pr "    Py_INCREF (Py_None);\n";
9526             pr "    PyDict_SetItemString (dict, \"%s\", Py_None);\n" name;
9527             pr "  }\n"
9528         | name, FChar ->
9529             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
9530             pr "                        PyString_FromStringAndSize (&dirent->%s, 1));\n" name
9531       ) cols;
9532       pr "  return dict;\n";
9533       pr "};\n";
9534       pr "\n";
9535
9536   ) structs;
9537
9538   (* Emit a put_TYPE_list function definition only if that function is used. *)
9539   List.iter (
9540     function
9541     | typ, (RStructListOnly | RStructAndList) ->
9542         (* generate the function for typ *)
9543         emit_put_list_function typ
9544     | typ, _ -> () (* empty *)
9545   ) (rstructs_used_by all_functions);
9546
9547   (* Python wrapper functions. *)
9548   List.iter (
9549     fun (name, style, _, _, _, _, _) ->
9550       pr "static PyObject *\n";
9551       pr "py_guestfs_%s (PyObject *self, PyObject *args)\n" name;
9552       pr "{\n";
9553
9554       pr "  PyObject *py_g;\n";
9555       pr "  guestfs_h *g;\n";
9556       pr "  PyObject *py_r;\n";
9557
9558       let error_code =
9559         match fst style with
9560         | RErr | RInt _ | RBool _ -> pr "  int r;\n"; "-1"
9561         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
9562         | RConstString _ | RConstOptString _ ->
9563             pr "  const char *r;\n"; "NULL"
9564         | RString _ -> pr "  char *r;\n"; "NULL"
9565         | RStringList _ | RHashtable _ -> pr "  char **r;\n"; "NULL"
9566         | RStruct (_, typ) -> pr "  struct guestfs_%s *r;\n" typ; "NULL"
9567         | RStructList (_, typ) ->
9568             pr "  struct guestfs_%s_list *r;\n" typ; "NULL"
9569         | RBufferOut _ ->
9570             pr "  char *r;\n";
9571             pr "  size_t size;\n";
9572             "NULL" in
9573
9574       List.iter (
9575         function
9576         | Pathname n | Device n | Dev_or_Path n | String n
9577         | FileIn n | FileOut n ->
9578             pr "  const char *%s;\n" n
9579         | OptString n -> pr "  const char *%s;\n" n
9580         | BufferIn n ->
9581             pr "  const char *%s;\n" n;
9582             pr "  Py_ssize_t %s_size;\n" n
9583         | StringList n | DeviceList n ->
9584             pr "  PyObject *py_%s;\n" n;
9585             pr "  char **%s;\n" n
9586         | Bool n -> pr "  int %s;\n" n
9587         | Int n -> pr "  int %s;\n" n
9588         | Int64 n -> pr "  long long %s;\n" n
9589       ) (snd style);
9590
9591       pr "\n";
9592
9593       (* Convert the parameters. *)
9594       pr "  if (!PyArg_ParseTuple (args, (char *) \"O";
9595       List.iter (
9596         function
9597         | Pathname _ | Device _ | Dev_or_Path _ | String _ | FileIn _ | FileOut _ -> pr "s"
9598         | OptString _ -> pr "z"
9599         | StringList _ | DeviceList _ -> pr "O"
9600         | Bool _ -> pr "i" (* XXX Python has booleans? *)
9601         | Int _ -> pr "i"
9602         | Int64 _ -> pr "L" (* XXX Whoever thought it was a good idea to
9603                              * emulate C's int/long/long long in Python?
9604                              *)
9605         | BufferIn _ -> pr "s#"
9606       ) (snd style);
9607       pr ":guestfs_%s\",\n" name;
9608       pr "                         &py_g";
9609       List.iter (
9610         function
9611         | Pathname n | Device n | Dev_or_Path n | String n | FileIn n | FileOut n -> pr ", &%s" n
9612         | OptString n -> pr ", &%s" n
9613         | StringList n | DeviceList n -> pr ", &py_%s" n
9614         | Bool n -> pr ", &%s" n
9615         | Int n -> pr ", &%s" n
9616         | Int64 n -> pr ", &%s" n
9617         | BufferIn n -> pr ", &%s, &%s_size" n n
9618       ) (snd style);
9619
9620       pr "))\n";
9621       pr "    return NULL;\n";
9622
9623       pr "  g = get_handle (py_g);\n";
9624       List.iter (
9625         function
9626         | Pathname _ | Device _ | Dev_or_Path _ | String _
9627         | FileIn _ | FileOut _ | OptString _ | Bool _ | Int _ | Int64 _
9628         | BufferIn _ -> ()
9629         | StringList n | DeviceList n ->
9630             pr "  %s = get_string_list (py_%s);\n" n n;
9631             pr "  if (!%s) return NULL;\n" n
9632       ) (snd style);
9633
9634       pr "\n";
9635
9636       pr "  r = guestfs_%s " name;
9637       generate_c_call_args ~handle:"g" style;
9638       pr ";\n";
9639
9640       List.iter (
9641         function
9642         | Pathname _ | Device _ | Dev_or_Path _ | String _
9643         | FileIn _ | FileOut _ | OptString _ | Bool _ | Int _ | Int64 _
9644         | BufferIn _ -> ()
9645         | StringList n | DeviceList n ->
9646             pr "  free (%s);\n" n
9647       ) (snd style);
9648
9649       pr "  if (r == %s) {\n" error_code;
9650       pr "    PyErr_SetString (PyExc_RuntimeError, guestfs_last_error (g));\n";
9651       pr "    return NULL;\n";
9652       pr "  }\n";
9653       pr "\n";
9654
9655       (match fst style with
9656        | RErr ->
9657            pr "  Py_INCREF (Py_None);\n";
9658            pr "  py_r = Py_None;\n"
9659        | RInt _
9660        | RBool _ -> pr "  py_r = PyInt_FromLong ((long) r);\n"
9661        | RInt64 _ -> pr "  py_r = PyLong_FromLongLong (r);\n"
9662        | RConstString _ -> pr "  py_r = PyString_FromString (r);\n"
9663        | RConstOptString _ ->
9664            pr "  if (r)\n";
9665            pr "    py_r = PyString_FromString (r);\n";
9666            pr "  else {\n";
9667            pr "    Py_INCREF (Py_None);\n";
9668            pr "    py_r = Py_None;\n";
9669            pr "  }\n"
9670        | RString _ ->
9671            pr "  py_r = PyString_FromString (r);\n";
9672            pr "  free (r);\n"
9673        | RStringList _ ->
9674            pr "  py_r = put_string_list (r);\n";
9675            pr "  free_strings (r);\n"
9676        | RStruct (_, typ) ->
9677            pr "  py_r = put_%s (r);\n" typ;
9678            pr "  guestfs_free_%s (r);\n" typ
9679        | RStructList (_, typ) ->
9680            pr "  py_r = put_%s_list (r);\n" typ;
9681            pr "  guestfs_free_%s_list (r);\n" typ
9682        | RHashtable n ->
9683            pr "  py_r = put_table (r);\n";
9684            pr "  free_strings (r);\n"
9685        | RBufferOut _ ->
9686            pr "  py_r = PyString_FromStringAndSize (r, size);\n";
9687            pr "  free (r);\n"
9688       );
9689
9690       pr "  return py_r;\n";
9691       pr "}\n";
9692       pr "\n"
9693   ) all_functions;
9694
9695   (* Table of functions. *)
9696   pr "static PyMethodDef methods[] = {\n";
9697   pr "  { (char *) \"create\", py_guestfs_create, METH_VARARGS, NULL },\n";
9698   pr "  { (char *) \"close\", py_guestfs_close, METH_VARARGS, NULL },\n";
9699   List.iter (
9700     fun (name, _, _, _, _, _, _) ->
9701       pr "  { (char *) \"%s\", py_guestfs_%s, METH_VARARGS, NULL },\n"
9702         name name
9703   ) all_functions;
9704   pr "  { NULL, NULL, 0, NULL }\n";
9705   pr "};\n";
9706   pr "\n";
9707
9708   (* Init function. *)
9709   pr "\
9710 void
9711 initlibguestfsmod (void)
9712 {
9713   static int initialized = 0;
9714
9715   if (initialized) return;
9716   Py_InitModule ((char *) \"libguestfsmod\", methods);
9717   initialized = 1;
9718 }
9719 "
9720
9721 (* Generate Python module. *)
9722 and generate_python_py () =
9723   generate_header HashStyle LGPLv2plus;
9724
9725   pr "\
9726 u\"\"\"Python bindings for libguestfs
9727
9728 import guestfs
9729 g = guestfs.GuestFS ()
9730 g.add_drive (\"guest.img\")
9731 g.launch ()
9732 parts = g.list_partitions ()
9733
9734 The guestfs module provides a Python binding to the libguestfs API
9735 for examining and modifying virtual machine disk images.
9736
9737 Amongst the things this is good for: making batch configuration
9738 changes to guests, getting disk used/free statistics (see also:
9739 virt-df), migrating between virtualization systems (see also:
9740 virt-p2v), performing partial backups, performing partial guest
9741 clones, cloning guests and changing registry/UUID/hostname info, and
9742 much else besides.
9743
9744 Libguestfs uses Linux kernel and qemu code, and can access any type of
9745 guest filesystem that Linux and qemu can, including but not limited
9746 to: ext2/3/4, btrfs, FAT and NTFS, LVM, many different disk partition
9747 schemes, qcow, qcow2, vmdk.
9748
9749 Libguestfs provides ways to enumerate guest storage (eg. partitions,
9750 LVs, what filesystem is in each LV, etc.).  It can also run commands
9751 in the context of the guest.  Also you can access filesystems over
9752 FUSE.
9753
9754 Errors which happen while using the API are turned into Python
9755 RuntimeError exceptions.
9756
9757 To create a guestfs handle you usually have to perform the following
9758 sequence of calls:
9759
9760 # Create the handle, call add_drive at least once, and possibly
9761 # several times if the guest has multiple block devices:
9762 g = guestfs.GuestFS ()
9763 g.add_drive (\"guest.img\")
9764
9765 # Launch the qemu subprocess and wait for it to become ready:
9766 g.launch ()
9767
9768 # Now you can issue commands, for example:
9769 logvols = g.lvs ()
9770
9771 \"\"\"
9772
9773 import libguestfsmod
9774
9775 class GuestFS:
9776     \"\"\"Instances of this class are libguestfs API handles.\"\"\"
9777
9778     def __init__ (self):
9779         \"\"\"Create a new libguestfs handle.\"\"\"
9780         self._o = libguestfsmod.create ()
9781
9782     def __del__ (self):
9783         libguestfsmod.close (self._o)
9784
9785 ";
9786
9787   List.iter (
9788     fun (name, style, _, flags, _, _, longdesc) ->
9789       pr "    def %s " name;
9790       generate_py_call_args ~handle:"self" (snd style);
9791       pr ":\n";
9792
9793       if not (List.mem NotInDocs flags) then (
9794         let doc = replace_str longdesc "C<guestfs_" "C<g." in
9795         let doc =
9796           match fst style with
9797           | RErr | RInt _ | RInt64 _ | RBool _
9798           | RConstOptString _ | RConstString _
9799           | RString _ | RBufferOut _ -> doc
9800           | RStringList _ ->
9801               doc ^ "\n\nThis function returns a list of strings."
9802           | RStruct (_, typ) ->
9803               doc ^ sprintf "\n\nThis function returns a dictionary, with keys matching the various fields in the guestfs_%s structure." typ
9804           | RStructList (_, typ) ->
9805               doc ^ sprintf "\n\nThis function returns a list of %ss.  Each %s is represented as a dictionary." typ typ
9806           | RHashtable _ ->
9807               doc ^ "\n\nThis function returns a dictionary." in
9808         let doc =
9809           if List.mem ProtocolLimitWarning flags then
9810             doc ^ "\n\n" ^ protocol_limit_warning
9811           else doc in
9812         let doc =
9813           if List.mem DangerWillRobinson flags then
9814             doc ^ "\n\n" ^ danger_will_robinson
9815           else doc in
9816         let doc =
9817           match deprecation_notice flags with
9818           | None -> doc
9819           | Some txt -> doc ^ "\n\n" ^ txt in
9820         let doc = pod2text ~width:60 name doc in
9821         let doc = List.map (fun line -> replace_str line "\\" "\\\\") doc in
9822         let doc = String.concat "\n        " doc in
9823         pr "        u\"\"\"%s\"\"\"\n" doc;
9824       );
9825       pr "        return libguestfsmod.%s " name;
9826       generate_py_call_args ~handle:"self._o" (snd style);
9827       pr "\n";
9828       pr "\n";
9829   ) all_functions
9830
9831 (* Generate Python call arguments, eg "(handle, foo, bar)" *)
9832 and generate_py_call_args ~handle args =
9833   pr "(%s" handle;
9834   List.iter (fun arg -> pr ", %s" (name_of_argt arg)) args;
9835   pr ")"
9836
9837 (* Useful if you need the longdesc POD text as plain text.  Returns a
9838  * list of lines.
9839  *
9840  * Because this is very slow (the slowest part of autogeneration),
9841  * we memoize the results.
9842  *)
9843 and pod2text ~width name longdesc =
9844   let key = width, name, longdesc in
9845   try Hashtbl.find pod2text_memo key
9846   with Not_found ->
9847     let filename, chan = Filename.open_temp_file "gen" ".tmp" in
9848     fprintf chan "=head1 %s\n\n%s\n" name longdesc;
9849     close_out chan;
9850     let cmd = sprintf "pod2text -w %d %s" width (Filename.quote filename) in
9851     let chan = open_process_in cmd in
9852     let lines = ref [] in
9853     let rec loop i =
9854       let line = input_line chan in
9855       if i = 1 then             (* discard the first line of output *)
9856         loop (i+1)
9857       else (
9858         let line = triml line in
9859         lines := line :: !lines;
9860         loop (i+1)
9861       ) in
9862     let lines = try loop 1 with End_of_file -> List.rev !lines in
9863     unlink filename;
9864     (match close_process_in chan with
9865      | WEXITED 0 -> ()
9866      | WEXITED i ->
9867          failwithf "pod2text: process exited with non-zero status (%d)" i
9868      | WSIGNALED i | WSTOPPED i ->
9869          failwithf "pod2text: process signalled or stopped by signal %d" i
9870     );
9871     Hashtbl.add pod2text_memo key lines;
9872     pod2text_memo_updated ();
9873     lines
9874
9875 (* Generate ruby bindings. *)
9876 and generate_ruby_c () =
9877   generate_header CStyle LGPLv2plus;
9878
9879   pr "\
9880 #include <stdio.h>
9881 #include <stdlib.h>
9882
9883 #include <ruby.h>
9884
9885 #include \"guestfs.h\"
9886
9887 #include \"extconf.h\"
9888
9889 /* For Ruby < 1.9 */
9890 #ifndef RARRAY_LEN
9891 #define RARRAY_LEN(r) (RARRAY((r))->len)
9892 #endif
9893
9894 static VALUE m_guestfs;                 /* guestfs module */
9895 static VALUE c_guestfs;                 /* guestfs_h handle */
9896 static VALUE e_Error;                   /* used for all errors */
9897
9898 static void ruby_guestfs_free (void *p)
9899 {
9900   if (!p) return;
9901   guestfs_close ((guestfs_h *) p);
9902 }
9903
9904 static VALUE ruby_guestfs_create (VALUE m)
9905 {
9906   guestfs_h *g;
9907
9908   g = guestfs_create ();
9909   if (!g)
9910     rb_raise (e_Error, \"failed to create guestfs handle\");
9911
9912   /* Don't print error messages to stderr by default. */
9913   guestfs_set_error_handler (g, NULL, NULL);
9914
9915   /* Wrap it, and make sure the close function is called when the
9916    * handle goes away.
9917    */
9918   return Data_Wrap_Struct (c_guestfs, NULL, ruby_guestfs_free, g);
9919 }
9920
9921 static VALUE ruby_guestfs_close (VALUE gv)
9922 {
9923   guestfs_h *g;
9924   Data_Get_Struct (gv, guestfs_h, g);
9925
9926   ruby_guestfs_free (g);
9927   DATA_PTR (gv) = NULL;
9928
9929   return Qnil;
9930 }
9931
9932 ";
9933
9934   List.iter (
9935     fun (name, style, _, _, _, _, _) ->
9936       pr "static VALUE ruby_guestfs_%s (VALUE gv" name;
9937       List.iter (fun arg -> pr ", VALUE %sv" (name_of_argt arg)) (snd style);
9938       pr ")\n";
9939       pr "{\n";
9940       pr "  guestfs_h *g;\n";
9941       pr "  Data_Get_Struct (gv, guestfs_h, g);\n";
9942       pr "  if (!g)\n";
9943       pr "    rb_raise (rb_eArgError, \"%%s: used handle after closing it\", \"%s\");\n"
9944         name;
9945       pr "\n";
9946
9947       List.iter (
9948         function
9949         | Pathname n | Device n | Dev_or_Path n | String n | FileIn n | FileOut n ->
9950             pr "  Check_Type (%sv, T_STRING);\n" n;
9951             pr "  const char *%s = StringValueCStr (%sv);\n" n n;
9952             pr "  if (!%s)\n" n;
9953             pr "    rb_raise (rb_eTypeError, \"expected string for parameter %%s of %%s\",\n";
9954             pr "              \"%s\", \"%s\");\n" n name
9955         | BufferIn n ->
9956             pr "  Check_Type (%sv, T_STRING);\n" n;
9957             pr "  const char *%s = RSTRING (%sv)->ptr;\n" n n;
9958             pr "  if (!%s)\n" n;
9959             pr "    rb_raise (rb_eTypeError, \"expected string for parameter %%s of %%s\",\n";
9960             pr "              \"%s\", \"%s\");\n" n name;
9961             pr "  size_t %s_size = RSTRING (%sv)->len;\n" n n
9962         | OptString n ->
9963             pr "  const char *%s = !NIL_P (%sv) ? StringValueCStr (%sv) : NULL;\n" n n n
9964         | StringList n | DeviceList n ->
9965             pr "  char **%s;\n" n;
9966             pr "  Check_Type (%sv, T_ARRAY);\n" n;
9967             pr "  {\n";
9968             pr "    size_t i, len;\n";
9969             pr "    len = RARRAY_LEN (%sv);\n" n;
9970             pr "    %s = guestfs_safe_malloc (g, sizeof (char *) * (len+1));\n"
9971               n;
9972             pr "    for (i = 0; i < len; ++i) {\n";
9973             pr "      VALUE v = rb_ary_entry (%sv, i);\n" n;
9974             pr "      %s[i] = StringValueCStr (v);\n" n;
9975             pr "    }\n";
9976             pr "    %s[len] = NULL;\n" n;
9977             pr "  }\n";
9978         | Bool n ->
9979             pr "  int %s = RTEST (%sv);\n" n n
9980         | Int n ->
9981             pr "  int %s = NUM2INT (%sv);\n" n n
9982         | Int64 n ->
9983             pr "  long long %s = NUM2LL (%sv);\n" n n
9984       ) (snd style);
9985       pr "\n";
9986
9987       let error_code =
9988         match fst style with
9989         | RErr | RInt _ | RBool _ -> pr "  int r;\n"; "-1"
9990         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
9991         | RConstString _ | RConstOptString _ ->
9992             pr "  const char *r;\n"; "NULL"
9993         | RString _ -> pr "  char *r;\n"; "NULL"
9994         | RStringList _ | RHashtable _ -> pr "  char **r;\n"; "NULL"
9995         | RStruct (_, typ) -> pr "  struct guestfs_%s *r;\n" typ; "NULL"
9996         | RStructList (_, typ) ->
9997             pr "  struct guestfs_%s_list *r;\n" typ; "NULL"
9998         | RBufferOut _ ->
9999             pr "  char *r;\n";
10000             pr "  size_t size;\n";
10001             "NULL" in
10002       pr "\n";
10003
10004       pr "  r = guestfs_%s " name;
10005       generate_c_call_args ~handle:"g" style;
10006       pr ";\n";
10007
10008       List.iter (
10009         function
10010         | Pathname _ | Device _ | Dev_or_Path _ | String _
10011         | FileIn _ | FileOut _ | OptString _ | Bool _ | Int _ | Int64 _
10012         | BufferIn _ -> ()
10013         | StringList n | DeviceList n ->
10014             pr "  free (%s);\n" n
10015       ) (snd style);
10016
10017       pr "  if (r == %s)\n" error_code;
10018       pr "    rb_raise (e_Error, \"%%s\", guestfs_last_error (g));\n";
10019       pr "\n";
10020
10021       (match fst style with
10022        | RErr ->
10023            pr "  return Qnil;\n"
10024        | RInt _ | RBool _ ->
10025            pr "  return INT2NUM (r);\n"
10026        | RInt64 _ ->
10027            pr "  return ULL2NUM (r);\n"
10028        | RConstString _ ->
10029            pr "  return rb_str_new2 (r);\n";
10030        | RConstOptString _ ->
10031            pr "  if (r)\n";
10032            pr "    return rb_str_new2 (r);\n";
10033            pr "  else\n";
10034            pr "    return Qnil;\n";
10035        | RString _ ->
10036            pr "  VALUE rv = rb_str_new2 (r);\n";
10037            pr "  free (r);\n";
10038            pr "  return rv;\n";
10039        | RStringList _ ->
10040            pr "  size_t i, len = 0;\n";
10041            pr "  for (i = 0; r[i] != NULL; ++i) len++;\n";
10042            pr "  VALUE rv = rb_ary_new2 (len);\n";
10043            pr "  for (i = 0; r[i] != NULL; ++i) {\n";
10044            pr "    rb_ary_push (rv, rb_str_new2 (r[i]));\n";
10045            pr "    free (r[i]);\n";
10046            pr "  }\n";
10047            pr "  free (r);\n";
10048            pr "  return rv;\n"
10049        | RStruct (_, typ) ->
10050            let cols = cols_of_struct typ in
10051            generate_ruby_struct_code typ cols
10052        | RStructList (_, typ) ->
10053            let cols = cols_of_struct typ in
10054            generate_ruby_struct_list_code typ cols
10055        | RHashtable _ ->
10056            pr "  VALUE rv = rb_hash_new ();\n";
10057            pr "  size_t i;\n";
10058            pr "  for (i = 0; r[i] != NULL; i+=2) {\n";
10059            pr "    rb_hash_aset (rv, rb_str_new2 (r[i]), rb_str_new2 (r[i+1]));\n";
10060            pr "    free (r[i]);\n";
10061            pr "    free (r[i+1]);\n";
10062            pr "  }\n";
10063            pr "  free (r);\n";
10064            pr "  return rv;\n"
10065        | RBufferOut _ ->
10066            pr "  VALUE rv = rb_str_new (r, size);\n";
10067            pr "  free (r);\n";
10068            pr "  return rv;\n";
10069       );
10070
10071       pr "}\n";
10072       pr "\n"
10073   ) all_functions;
10074
10075   pr "\
10076 /* Initialize the module. */
10077 void Init__guestfs ()
10078 {
10079   m_guestfs = rb_define_module (\"Guestfs\");
10080   c_guestfs = rb_define_class_under (m_guestfs, \"Guestfs\", rb_cObject);
10081   e_Error = rb_define_class_under (m_guestfs, \"Error\", rb_eStandardError);
10082
10083   rb_define_module_function (m_guestfs, \"create\", ruby_guestfs_create, 0);
10084   rb_define_method (c_guestfs, \"close\", ruby_guestfs_close, 0);
10085
10086 ";
10087   (* Define the rest of the methods. *)
10088   List.iter (
10089     fun (name, style, _, _, _, _, _) ->
10090       pr "  rb_define_method (c_guestfs, \"%s\",\n" name;
10091       pr "        ruby_guestfs_%s, %d);\n" name (List.length (snd style))
10092   ) all_functions;
10093
10094   pr "}\n"
10095
10096 (* Ruby code to return a struct. *)
10097 and generate_ruby_struct_code typ cols =
10098   pr "  VALUE rv = rb_hash_new ();\n";
10099   List.iter (
10100     function
10101     | name, FString ->
10102         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_str_new2 (r->%s));\n" name name
10103     | name, FBuffer ->
10104         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_str_new (r->%s, r->%s_len));\n" name name name
10105     | name, FUUID ->
10106         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_str_new (r->%s, 32));\n" name name
10107     | name, (FBytes|FUInt64) ->
10108         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), ULL2NUM (r->%s));\n" name name
10109     | name, FInt64 ->
10110         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), LL2NUM (r->%s));\n" name name
10111     | name, FUInt32 ->
10112         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), UINT2NUM (r->%s));\n" name name
10113     | name, FInt32 ->
10114         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), INT2NUM (r->%s));\n" name name
10115     | name, FOptPercent ->
10116         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_dbl2big (r->%s));\n" name name
10117     | name, FChar -> (* XXX wrong? *)
10118         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), ULL2NUM (r->%s));\n" name name
10119   ) cols;
10120   pr "  guestfs_free_%s (r);\n" typ;
10121   pr "  return rv;\n"
10122
10123 (* Ruby code to return a struct list. *)
10124 and generate_ruby_struct_list_code typ cols =
10125   pr "  VALUE rv = rb_ary_new2 (r->len);\n";
10126   pr "  size_t i;\n";
10127   pr "  for (i = 0; i < r->len; ++i) {\n";
10128   pr "    VALUE hv = rb_hash_new ();\n";
10129   List.iter (
10130     function
10131     | name, FString ->
10132         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_str_new2 (r->val[i].%s));\n" name name
10133     | name, FBuffer ->
10134         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_str_new (r->val[i].%s, r->val[i].%s_len));\n" name name name
10135     | name, FUUID ->
10136         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_str_new (r->val[i].%s, 32));\n" name name
10137     | name, (FBytes|FUInt64) ->
10138         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), ULL2NUM (r->val[i].%s));\n" name name
10139     | name, FInt64 ->
10140         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), LL2NUM (r->val[i].%s));\n" name name
10141     | name, FUInt32 ->
10142         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), UINT2NUM (r->val[i].%s));\n" name name
10143     | name, FInt32 ->
10144         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), INT2NUM (r->val[i].%s));\n" name name
10145     | name, FOptPercent ->
10146         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_dbl2big (r->val[i].%s));\n" name name
10147     | name, FChar -> (* XXX wrong? *)
10148         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), ULL2NUM (r->val[i].%s));\n" name name
10149   ) cols;
10150   pr "    rb_ary_push (rv, hv);\n";
10151   pr "  }\n";
10152   pr "  guestfs_free_%s_list (r);\n" typ;
10153   pr "  return rv;\n"
10154
10155 (* Generate Java bindings GuestFS.java file. *)
10156 and generate_java_java () =
10157   generate_header CStyle LGPLv2plus;
10158
10159   pr "\
10160 package com.redhat.et.libguestfs;
10161
10162 import java.util.HashMap;
10163 import com.redhat.et.libguestfs.LibGuestFSException;
10164 import com.redhat.et.libguestfs.PV;
10165 import com.redhat.et.libguestfs.VG;
10166 import com.redhat.et.libguestfs.LV;
10167 import com.redhat.et.libguestfs.Stat;
10168 import com.redhat.et.libguestfs.StatVFS;
10169 import com.redhat.et.libguestfs.IntBool;
10170 import com.redhat.et.libguestfs.Dirent;
10171
10172 /**
10173  * The GuestFS object is a libguestfs handle.
10174  *
10175  * @author rjones
10176  */
10177 public class GuestFS {
10178   // Load the native code.
10179   static {
10180     System.loadLibrary (\"guestfs_jni\");
10181   }
10182
10183   /**
10184    * The native guestfs_h pointer.
10185    */
10186   long g;
10187
10188   /**
10189    * Create a libguestfs handle.
10190    *
10191    * @throws LibGuestFSException
10192    */
10193   public GuestFS () throws LibGuestFSException
10194   {
10195     g = _create ();
10196   }
10197   private native long _create () throws LibGuestFSException;
10198
10199   /**
10200    * Close a libguestfs handle.
10201    *
10202    * You can also leave handles to be collected by the garbage
10203    * collector, but this method ensures that the resources used
10204    * by the handle are freed up immediately.  If you call any
10205    * other methods after closing the handle, you will get an
10206    * exception.
10207    *
10208    * @throws LibGuestFSException
10209    */
10210   public void close () throws LibGuestFSException
10211   {
10212     if (g != 0)
10213       _close (g);
10214     g = 0;
10215   }
10216   private native void _close (long g) throws LibGuestFSException;
10217
10218   public void finalize () throws LibGuestFSException
10219   {
10220     close ();
10221   }
10222
10223 ";
10224
10225   List.iter (
10226     fun (name, style, _, flags, _, shortdesc, longdesc) ->
10227       if not (List.mem NotInDocs flags); then (
10228         let doc = replace_str longdesc "C<guestfs_" "C<g." in
10229         let doc =
10230           if List.mem ProtocolLimitWarning flags then
10231             doc ^ "\n\n" ^ protocol_limit_warning
10232           else doc in
10233         let doc =
10234           if List.mem DangerWillRobinson flags then
10235             doc ^ "\n\n" ^ danger_will_robinson
10236           else doc in
10237         let doc =
10238           match deprecation_notice flags with
10239           | None -> doc
10240           | Some txt -> doc ^ "\n\n" ^ txt in
10241         let doc = pod2text ~width:60 name doc in
10242         let doc = List.map (            (* RHBZ#501883 *)
10243           function
10244           | "" -> "<p>"
10245           | nonempty -> nonempty
10246         ) doc in
10247         let doc = String.concat "\n   * " doc in
10248
10249         pr "  /**\n";
10250         pr "   * %s\n" shortdesc;
10251         pr "   * <p>\n";
10252         pr "   * %s\n" doc;
10253         pr "   * @throws LibGuestFSException\n";
10254         pr "   */\n";
10255         pr "  ";
10256       );
10257       generate_java_prototype ~public:true ~semicolon:false name style;
10258       pr "\n";
10259       pr "  {\n";
10260       pr "    if (g == 0)\n";
10261       pr "      throw new LibGuestFSException (\"%s: handle is closed\");\n"
10262         name;
10263       pr "    ";
10264       if fst style <> RErr then pr "return ";
10265       pr "_%s " name;
10266       generate_java_call_args ~handle:"g" (snd style);
10267       pr ";\n";
10268       pr "  }\n";
10269       pr "  ";
10270       generate_java_prototype ~privat:true ~native:true name style;
10271       pr "\n";
10272       pr "\n";
10273   ) all_functions;
10274
10275   pr "}\n"
10276
10277 (* Generate Java call arguments, eg "(handle, foo, bar)" *)
10278 and generate_java_call_args ~handle args =
10279   pr "(%s" handle;
10280   List.iter (fun arg -> pr ", %s" (name_of_argt arg)) args;
10281   pr ")"
10282
10283 and generate_java_prototype ?(public=false) ?(privat=false) ?(native=false)
10284     ?(semicolon=true) name style =
10285   if privat then pr "private ";
10286   if public then pr "public ";
10287   if native then pr "native ";
10288
10289   (* return type *)
10290   (match fst style with
10291    | RErr -> pr "void ";
10292    | RInt _ -> pr "int ";
10293    | RInt64 _ -> pr "long ";
10294    | RBool _ -> pr "boolean ";
10295    | RConstString _ | RConstOptString _ | RString _
10296    | RBufferOut _ -> pr "String ";
10297    | RStringList _ -> pr "String[] ";
10298    | RStruct (_, typ) ->
10299        let name = java_name_of_struct typ in
10300        pr "%s " name;
10301    | RStructList (_, typ) ->
10302        let name = java_name_of_struct typ in
10303        pr "%s[] " name;
10304    | RHashtable _ -> pr "HashMap<String,String> ";
10305   );
10306
10307   if native then pr "_%s " name else pr "%s " name;
10308   pr "(";
10309   let needs_comma = ref false in
10310   if native then (
10311     pr "long g";
10312     needs_comma := true
10313   );
10314
10315   (* args *)
10316   List.iter (
10317     fun arg ->
10318       if !needs_comma then pr ", ";
10319       needs_comma := true;
10320
10321       match arg with
10322       | Pathname n
10323       | Device n | Dev_or_Path n
10324       | String n
10325       | OptString n
10326       | FileIn n
10327       | FileOut n ->
10328           pr "String %s" n
10329       | BufferIn n ->
10330           pr "byte[] %s" n
10331       | StringList n | DeviceList n ->
10332           pr "String[] %s" n
10333       | Bool n ->
10334           pr "boolean %s" n
10335       | Int n ->
10336           pr "int %s" n
10337       | Int64 n ->
10338           pr "long %s" n
10339   ) (snd style);
10340
10341   pr ")\n";
10342   pr "    throws LibGuestFSException";
10343   if semicolon then pr ";"
10344
10345 and generate_java_struct jtyp cols () =
10346   generate_header CStyle LGPLv2plus;
10347
10348   pr "\
10349 package com.redhat.et.libguestfs;
10350
10351 /**
10352  * Libguestfs %s structure.
10353  *
10354  * @author rjones
10355  * @see GuestFS
10356  */
10357 public class %s {
10358 " jtyp jtyp;
10359
10360   List.iter (
10361     function
10362     | name, FString
10363     | name, FUUID
10364     | name, FBuffer -> pr "  public String %s;\n" name
10365     | name, (FBytes|FUInt64|FInt64) -> pr "  public long %s;\n" name
10366     | name, (FUInt32|FInt32) -> pr "  public int %s;\n" name
10367     | name, FChar -> pr "  public char %s;\n" name
10368     | name, FOptPercent ->
10369         pr "  /* The next field is [0..100] or -1 meaning 'not present': */\n";
10370         pr "  public float %s;\n" name
10371   ) cols;
10372
10373   pr "}\n"
10374
10375 and generate_java_c () =
10376   generate_header CStyle LGPLv2plus;
10377
10378   pr "\
10379 #include <stdio.h>
10380 #include <stdlib.h>
10381 #include <string.h>
10382
10383 #include \"com_redhat_et_libguestfs_GuestFS.h\"
10384 #include \"guestfs.h\"
10385
10386 /* Note that this function returns.  The exception is not thrown
10387  * until after the wrapper function returns.
10388  */
10389 static void
10390 throw_exception (JNIEnv *env, const char *msg)
10391 {
10392   jclass cl;
10393   cl = (*env)->FindClass (env,
10394                           \"com/redhat/et/libguestfs/LibGuestFSException\");
10395   (*env)->ThrowNew (env, cl, msg);
10396 }
10397
10398 JNIEXPORT jlong JNICALL
10399 Java_com_redhat_et_libguestfs_GuestFS__1create
10400   (JNIEnv *env, jobject obj)
10401 {
10402   guestfs_h *g;
10403
10404   g = guestfs_create ();
10405   if (g == NULL) {
10406     throw_exception (env, \"GuestFS.create: failed to allocate handle\");
10407     return 0;
10408   }
10409   guestfs_set_error_handler (g, NULL, NULL);
10410   return (jlong) (long) g;
10411 }
10412
10413 JNIEXPORT void JNICALL
10414 Java_com_redhat_et_libguestfs_GuestFS__1close
10415   (JNIEnv *env, jobject obj, jlong jg)
10416 {
10417   guestfs_h *g = (guestfs_h *) (long) jg;
10418   guestfs_close (g);
10419 }
10420
10421 ";
10422
10423   List.iter (
10424     fun (name, style, _, _, _, _, _) ->
10425       pr "JNIEXPORT ";
10426       (match fst style with
10427        | RErr -> pr "void ";
10428        | RInt _ -> pr "jint ";
10429        | RInt64 _ -> pr "jlong ";
10430        | RBool _ -> pr "jboolean ";
10431        | RConstString _ | RConstOptString _ | RString _
10432        | RBufferOut _ -> pr "jstring ";
10433        | RStruct _ | RHashtable _ ->
10434            pr "jobject ";
10435        | RStringList _ | RStructList _ ->
10436            pr "jobjectArray ";
10437       );
10438       pr "JNICALL\n";
10439       pr "Java_com_redhat_et_libguestfs_GuestFS_";
10440       pr "%s" (replace_str ("_" ^ name) "_" "_1");
10441       pr "\n";
10442       pr "  (JNIEnv *env, jobject obj, jlong jg";
10443       List.iter (
10444         function
10445         | Pathname n
10446         | Device n | Dev_or_Path n
10447         | String n
10448         | OptString n
10449         | FileIn n
10450         | FileOut n ->
10451             pr ", jstring j%s" n
10452         | BufferIn n ->
10453             pr ", jbyteArray j%s" n
10454         | StringList n | DeviceList n ->
10455             pr ", jobjectArray j%s" n
10456         | Bool n ->
10457             pr ", jboolean j%s" n
10458         | Int n ->
10459             pr ", jint j%s" n
10460         | Int64 n ->
10461             pr ", jlong j%s" n
10462       ) (snd style);
10463       pr ")\n";
10464       pr "{\n";
10465       pr "  guestfs_h *g = (guestfs_h *) (long) jg;\n";
10466       let error_code, no_ret =
10467         match fst style with
10468         | RErr -> pr "  int r;\n"; "-1", ""
10469         | RBool _
10470         | RInt _ -> pr "  int r;\n"; "-1", "0"
10471         | RInt64 _ -> pr "  int64_t r;\n"; "-1", "0"
10472         | RConstString _ -> pr "  const char *r;\n"; "NULL", "NULL"
10473         | RConstOptString _ -> pr "  const char *r;\n"; "NULL", "NULL"
10474         | RString _ ->
10475             pr "  jstring jr;\n";
10476             pr "  char *r;\n"; "NULL", "NULL"
10477         | RStringList _ ->
10478             pr "  jobjectArray jr;\n";
10479             pr "  int r_len;\n";
10480             pr "  jclass cl;\n";
10481             pr "  jstring jstr;\n";
10482             pr "  char **r;\n"; "NULL", "NULL"
10483         | RStruct (_, typ) ->
10484             pr "  jobject jr;\n";
10485             pr "  jclass cl;\n";
10486             pr "  jfieldID fl;\n";
10487             pr "  struct guestfs_%s *r;\n" typ; "NULL", "NULL"
10488         | RStructList (_, typ) ->
10489             pr "  jobjectArray jr;\n";
10490             pr "  jclass cl;\n";
10491             pr "  jfieldID fl;\n";
10492             pr "  jobject jfl;\n";
10493             pr "  struct guestfs_%s_list *r;\n" typ; "NULL", "NULL"
10494         | RHashtable _ -> pr "  char **r;\n"; "NULL", "NULL"
10495         | RBufferOut _ ->
10496             pr "  jstring jr;\n";
10497             pr "  char *r;\n";
10498             pr "  size_t size;\n";
10499             "NULL", "NULL" in
10500       List.iter (
10501         function
10502         | Pathname n
10503         | Device n | Dev_or_Path n
10504         | String n
10505         | OptString n
10506         | FileIn n
10507         | FileOut n ->
10508             pr "  const char *%s;\n" n
10509         | BufferIn n ->
10510             pr "  jbyte *%s;\n" n;
10511             pr "  size_t %s_size;\n" n
10512         | StringList n | DeviceList n ->
10513             pr "  int %s_len;\n" n;
10514             pr "  const char **%s;\n" n
10515         | Bool n
10516         | Int n ->
10517             pr "  int %s;\n" n
10518         | Int64 n ->
10519             pr "  int64_t %s;\n" n
10520       ) (snd style);
10521
10522       let needs_i =
10523         (match fst style with
10524          | RStringList _ | RStructList _ -> true
10525          | RErr | RBool _ | RInt _ | RInt64 _ | RConstString _
10526          | RConstOptString _
10527          | RString _ | RBufferOut _ | RStruct _ | RHashtable _ -> false) ||
10528           List.exists (function
10529                        | StringList _ -> true
10530                        | DeviceList _ -> true
10531                        | _ -> false) (snd style) in
10532       if needs_i then
10533         pr "  size_t i;\n";
10534
10535       pr "\n";
10536
10537       (* Get the parameters. *)
10538       List.iter (
10539         function
10540         | Pathname n
10541         | Device n | Dev_or_Path n
10542         | String n
10543         | FileIn n
10544         | FileOut n ->
10545             pr "  %s = (*env)->GetStringUTFChars (env, j%s, NULL);\n" n n
10546         | OptString n ->
10547             (* This is completely undocumented, but Java null becomes
10548              * a NULL parameter.
10549              *)
10550             pr "  %s = j%s ? (*env)->GetStringUTFChars (env, j%s, NULL) : NULL;\n" n n n
10551         | BufferIn n ->
10552             pr "  %s = (*env)->GetByteArrayElements (env, j%s, NULL);\n" n n;
10553             pr "  %s_size = (*env)->GetArrayLength (env, j%s);\n" n n
10554         | StringList n | DeviceList n ->
10555             pr "  %s_len = (*env)->GetArrayLength (env, j%s);\n" n n;
10556             pr "  %s = guestfs_safe_malloc (g, sizeof (char *) * (%s_len+1));\n" n n;
10557             pr "  for (i = 0; i < %s_len; ++i) {\n" n;
10558             pr "    jobject o = (*env)->GetObjectArrayElement (env, j%s, i);\n"
10559               n;
10560             pr "    %s[i] = (*env)->GetStringUTFChars (env, o, NULL);\n" n;
10561             pr "  }\n";
10562             pr "  %s[%s_len] = NULL;\n" n n;
10563         | Bool n
10564         | Int n
10565         | Int64 n ->
10566             pr "  %s = j%s;\n" n n
10567       ) (snd style);
10568
10569       (* Make the call. *)
10570       pr "  r = guestfs_%s " name;
10571       generate_c_call_args ~handle:"g" style;
10572       pr ";\n";
10573
10574       (* Release the parameters. *)
10575       List.iter (
10576         function
10577         | Pathname n
10578         | Device n | Dev_or_Path n
10579         | String n
10580         | FileIn n
10581         | FileOut n ->
10582             pr "  (*env)->ReleaseStringUTFChars (env, j%s, %s);\n" n n
10583         | OptString n ->
10584             pr "  if (j%s)\n" n;
10585             pr "    (*env)->ReleaseStringUTFChars (env, j%s, %s);\n" n n
10586         | BufferIn n ->
10587             pr "  (*env)->ReleaseByteArrayElements (env, j%s, %s, 0);\n" n n
10588         | StringList n | DeviceList n ->
10589             pr "  for (i = 0; i < %s_len; ++i) {\n" n;
10590             pr "    jobject o = (*env)->GetObjectArrayElement (env, j%s, i);\n"
10591               n;
10592             pr "    (*env)->ReleaseStringUTFChars (env, o, %s[i]);\n" n;
10593             pr "  }\n";
10594             pr "  free (%s);\n" n
10595         | Bool n
10596         | Int n
10597         | Int64 n -> ()
10598       ) (snd style);
10599
10600       (* Check for errors. *)
10601       pr "  if (r == %s) {\n" error_code;
10602       pr "    throw_exception (env, guestfs_last_error (g));\n";
10603       pr "    return %s;\n" no_ret;
10604       pr "  }\n";
10605
10606       (* Return value. *)
10607       (match fst style with
10608        | RErr -> ()
10609        | RInt _ -> pr "  return (jint) r;\n"
10610        | RBool _ -> pr "  return (jboolean) r;\n"
10611        | RInt64 _ -> pr "  return (jlong) r;\n"
10612        | RConstString _ -> pr "  return (*env)->NewStringUTF (env, r);\n"
10613        | RConstOptString _ ->
10614            pr "  return (*env)->NewStringUTF (env, r); /* XXX r NULL? */\n"
10615        | RString _ ->
10616            pr "  jr = (*env)->NewStringUTF (env, r);\n";
10617            pr "  free (r);\n";
10618            pr "  return jr;\n"
10619        | RStringList _ ->
10620            pr "  for (r_len = 0; r[r_len] != NULL; ++r_len) ;\n";
10621            pr "  cl = (*env)->FindClass (env, \"java/lang/String\");\n";
10622            pr "  jstr = (*env)->NewStringUTF (env, \"\");\n";
10623            pr "  jr = (*env)->NewObjectArray (env, r_len, cl, jstr);\n";
10624            pr "  for (i = 0; i < r_len; ++i) {\n";
10625            pr "    jstr = (*env)->NewStringUTF (env, r[i]);\n";
10626            pr "    (*env)->SetObjectArrayElement (env, jr, i, jstr);\n";
10627            pr "    free (r[i]);\n";
10628            pr "  }\n";
10629            pr "  free (r);\n";
10630            pr "  return jr;\n"
10631        | RStruct (_, typ) ->
10632            let jtyp = java_name_of_struct typ in
10633            let cols = cols_of_struct typ in
10634            generate_java_struct_return typ jtyp cols
10635        | RStructList (_, typ) ->
10636            let jtyp = java_name_of_struct typ in
10637            let cols = cols_of_struct typ in
10638            generate_java_struct_list_return typ jtyp cols
10639        | RHashtable _ ->
10640            (* XXX *)
10641            pr "  throw_exception (env, \"%s: internal error: please let us know how to make a Java HashMap from JNI bindings!\");\n" name;
10642            pr "  return NULL;\n"
10643        | RBufferOut _ ->
10644            pr "  jr = (*env)->NewStringUTF (env, r); /* XXX size */\n";
10645            pr "  free (r);\n";
10646            pr "  return jr;\n"
10647       );
10648
10649       pr "}\n";
10650       pr "\n"
10651   ) all_functions
10652
10653 and generate_java_struct_return typ jtyp cols =
10654   pr "  cl = (*env)->FindClass (env, \"com/redhat/et/libguestfs/%s\");\n" jtyp;
10655   pr "  jr = (*env)->AllocObject (env, cl);\n";
10656   List.iter (
10657     function
10658     | name, FString ->
10659         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
10660         pr "  (*env)->SetObjectField (env, jr, fl, (*env)->NewStringUTF (env, r->%s));\n" name;
10661     | name, FUUID ->
10662         pr "  {\n";
10663         pr "    char s[33];\n";
10664         pr "    memcpy (s, r->%s, 32);\n" name;
10665         pr "    s[32] = 0;\n";
10666         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
10667         pr "    (*env)->SetObjectField (env, jr, fl, (*env)->NewStringUTF (env, s));\n";
10668         pr "  }\n";
10669     | name, FBuffer ->
10670         pr "  {\n";
10671         pr "    int len = r->%s_len;\n" name;
10672         pr "    char s[len+1];\n";
10673         pr "    memcpy (s, r->%s, len);\n" name;
10674         pr "    s[len] = 0;\n";
10675         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
10676         pr "    (*env)->SetObjectField (env, jr, fl, (*env)->NewStringUTF (env, s));\n";
10677         pr "  }\n";
10678     | name, (FBytes|FUInt64|FInt64) ->
10679         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"J\");\n" name;
10680         pr "  (*env)->SetLongField (env, jr, fl, r->%s);\n" name;
10681     | name, (FUInt32|FInt32) ->
10682         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"I\");\n" name;
10683         pr "  (*env)->SetLongField (env, jr, fl, r->%s);\n" name;
10684     | name, FOptPercent ->
10685         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"F\");\n" name;
10686         pr "  (*env)->SetFloatField (env, jr, fl, r->%s);\n" name;
10687     | name, FChar ->
10688         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"C\");\n" name;
10689         pr "  (*env)->SetLongField (env, jr, fl, r->%s);\n" name;
10690   ) cols;
10691   pr "  free (r);\n";
10692   pr "  return jr;\n"
10693
10694 and generate_java_struct_list_return typ jtyp cols =
10695   pr "  cl = (*env)->FindClass (env, \"com/redhat/et/libguestfs/%s\");\n" jtyp;
10696   pr "  jr = (*env)->NewObjectArray (env, r->len, cl, NULL);\n";
10697   pr "  for (i = 0; i < r->len; ++i) {\n";
10698   pr "    jfl = (*env)->AllocObject (env, cl);\n";
10699   List.iter (
10700     function
10701     | name, FString ->
10702         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
10703         pr "    (*env)->SetObjectField (env, jfl, fl, (*env)->NewStringUTF (env, r->val[i].%s));\n" name;
10704     | name, FUUID ->
10705         pr "    {\n";
10706         pr "      char s[33];\n";
10707         pr "      memcpy (s, r->val[i].%s, 32);\n" name;
10708         pr "      s[32] = 0;\n";
10709         pr "      fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
10710         pr "      (*env)->SetObjectField (env, jfl, fl, (*env)->NewStringUTF (env, s));\n";
10711         pr "    }\n";
10712     | name, FBuffer ->
10713         pr "    {\n";
10714         pr "      int len = r->val[i].%s_len;\n" name;
10715         pr "      char s[len+1];\n";
10716         pr "      memcpy (s, r->val[i].%s, len);\n" name;
10717         pr "      s[len] = 0;\n";
10718         pr "      fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
10719         pr "      (*env)->SetObjectField (env, jfl, fl, (*env)->NewStringUTF (env, s));\n";
10720         pr "    }\n";
10721     | name, (FBytes|FUInt64|FInt64) ->
10722         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"J\");\n" name;
10723         pr "    (*env)->SetLongField (env, jfl, fl, r->val[i].%s);\n" name;
10724     | name, (FUInt32|FInt32) ->
10725         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"I\");\n" name;
10726         pr "    (*env)->SetLongField (env, jfl, fl, r->val[i].%s);\n" name;
10727     | name, FOptPercent ->
10728         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"F\");\n" name;
10729         pr "    (*env)->SetFloatField (env, jfl, fl, r->val[i].%s);\n" name;
10730     | name, FChar ->
10731         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"C\");\n" name;
10732         pr "    (*env)->SetLongField (env, jfl, fl, r->val[i].%s);\n" name;
10733   ) cols;
10734   pr "    (*env)->SetObjectArrayElement (env, jfl, i, jfl);\n";
10735   pr "  }\n";
10736   pr "  guestfs_free_%s_list (r);\n" typ;
10737   pr "  return jr;\n"
10738
10739 and generate_java_makefile_inc () =
10740   generate_header HashStyle GPLv2plus;
10741
10742   pr "java_built_sources = \\\n";
10743   List.iter (
10744     fun (typ, jtyp) ->
10745         pr "\tcom/redhat/et/libguestfs/%s.java \\\n" jtyp;
10746   ) java_structs;
10747   pr "\tcom/redhat/et/libguestfs/GuestFS.java\n"
10748
10749 and generate_haskell_hs () =
10750   generate_header HaskellStyle LGPLv2plus;
10751
10752   (* XXX We only know how to generate partial FFI for Haskell
10753    * at the moment.  Please help out!
10754    *)
10755   let can_generate style =
10756     match style with
10757     | RErr, _
10758     | RInt _, _
10759     | RInt64 _, _ -> true
10760     | RBool _, _
10761     | RConstString _, _
10762     | RConstOptString _, _
10763     | RString _, _
10764     | RStringList _, _
10765     | RStruct _, _
10766     | RStructList _, _
10767     | RHashtable _, _
10768     | RBufferOut _, _ -> false in
10769
10770   pr "\
10771 {-# INCLUDE <guestfs.h> #-}
10772 {-# LANGUAGE ForeignFunctionInterface #-}
10773
10774 module Guestfs (
10775   create";
10776
10777   (* List out the names of the actions we want to export. *)
10778   List.iter (
10779     fun (name, style, _, _, _, _, _) ->
10780       if can_generate style then pr ",\n  %s" name
10781   ) all_functions;
10782
10783   pr "
10784   ) where
10785
10786 -- Unfortunately some symbols duplicate ones already present
10787 -- in Prelude.  We don't know which, so we hard-code a list
10788 -- here.
10789 import Prelude hiding (truncate)
10790
10791 import Foreign
10792 import Foreign.C
10793 import Foreign.C.Types
10794 import IO
10795 import Control.Exception
10796 import Data.Typeable
10797
10798 data GuestfsS = GuestfsS            -- represents the opaque C struct
10799 type GuestfsP = Ptr GuestfsS        -- guestfs_h *
10800 type GuestfsH = ForeignPtr GuestfsS -- guestfs_h * with attached finalizer
10801
10802 -- XXX define properly later XXX
10803 data PV = PV
10804 data VG = VG
10805 data LV = LV
10806 data IntBool = IntBool
10807 data Stat = Stat
10808 data StatVFS = StatVFS
10809 data Hashtable = Hashtable
10810
10811 foreign import ccall unsafe \"guestfs_create\" c_create
10812   :: IO GuestfsP
10813 foreign import ccall unsafe \"&guestfs_close\" c_close
10814   :: FunPtr (GuestfsP -> IO ())
10815 foreign import ccall unsafe \"guestfs_set_error_handler\" c_set_error_handler
10816   :: GuestfsP -> Ptr CInt -> Ptr CInt -> IO ()
10817
10818 create :: IO GuestfsH
10819 create = do
10820   p <- c_create
10821   c_set_error_handler p nullPtr nullPtr
10822   h <- newForeignPtr c_close p
10823   return h
10824
10825 foreign import ccall unsafe \"guestfs_last_error\" c_last_error
10826   :: GuestfsP -> IO CString
10827
10828 -- last_error :: GuestfsH -> IO (Maybe String)
10829 -- last_error h = do
10830 --   str <- withForeignPtr h (\\p -> c_last_error p)
10831 --   maybePeek peekCString str
10832
10833 last_error :: GuestfsH -> IO (String)
10834 last_error h = do
10835   str <- withForeignPtr h (\\p -> c_last_error p)
10836   if (str == nullPtr)
10837     then return \"no error\"
10838     else peekCString str
10839
10840 ";
10841
10842   (* Generate wrappers for each foreign function. *)
10843   List.iter (
10844     fun (name, style, _, _, _, _, _) ->
10845       if can_generate style then (
10846         pr "foreign import ccall unsafe \"guestfs_%s\" c_%s\n" name name;
10847         pr "  :: ";
10848         generate_haskell_prototype ~handle:"GuestfsP" style;
10849         pr "\n";
10850         pr "\n";
10851         pr "%s :: " name;
10852         generate_haskell_prototype ~handle:"GuestfsH" ~hs:true style;
10853         pr "\n";
10854         pr "%s %s = do\n" name
10855           (String.concat " " ("h" :: List.map name_of_argt (snd style)));
10856         pr "  r <- ";
10857         (* Convert pointer arguments using with* functions. *)
10858         List.iter (
10859           function
10860           | FileIn n
10861           | FileOut n
10862           | Pathname n | Device n | Dev_or_Path n | String n ->
10863               pr "withCString %s $ \\%s -> " n n
10864           | BufferIn n ->
10865               pr "withCStringLen %s $ \\(%s, %s_size) -> " n n n
10866           | OptString n -> pr "maybeWith withCString %s $ \\%s -> " n n
10867           | StringList n | DeviceList n -> pr "withMany withCString %s $ \\%s -> withArray0 nullPtr %s $ \\%s -> " n n n n
10868           | Bool _ | Int _ | Int64 _ -> ()
10869         ) (snd style);
10870         (* Convert integer arguments. *)
10871         let args =
10872           List.map (
10873             function
10874             | Bool n -> sprintf "(fromBool %s)" n
10875             | Int n -> sprintf "(fromIntegral %s)" n
10876             | Int64 n -> sprintf "(fromIntegral %s)" n
10877             | FileIn n | FileOut n
10878             | Pathname n | Device n | Dev_or_Path n | String n | OptString n | StringList n | DeviceList n -> n
10879             | BufferIn n -> sprintf "%s (fromIntegral %s_size)" n n
10880           ) (snd style) in
10881         pr "withForeignPtr h (\\p -> c_%s %s)\n" name
10882           (String.concat " " ("p" :: args));
10883         (match fst style with
10884          | RErr | RInt _ | RInt64 _ | RBool _ ->
10885              pr "  if (r == -1)\n";
10886              pr "    then do\n";
10887              pr "      err <- last_error h\n";
10888              pr "      fail err\n";
10889          | RConstString _ | RConstOptString _ | RString _
10890          | RStringList _ | RStruct _
10891          | RStructList _ | RHashtable _ | RBufferOut _ ->
10892              pr "  if (r == nullPtr)\n";
10893              pr "    then do\n";
10894              pr "      err <- last_error h\n";
10895              pr "      fail err\n";
10896         );
10897         (match fst style with
10898          | RErr ->
10899              pr "    else return ()\n"
10900          | RInt _ ->
10901              pr "    else return (fromIntegral r)\n"
10902          | RInt64 _ ->
10903              pr "    else return (fromIntegral r)\n"
10904          | RBool _ ->
10905              pr "    else return (toBool r)\n"
10906          | RConstString _
10907          | RConstOptString _
10908          | RString _
10909          | RStringList _
10910          | RStruct _
10911          | RStructList _
10912          | RHashtable _
10913          | RBufferOut _ ->
10914              pr "    else return ()\n" (* XXXXXXXXXXXXXXXXXXXX *)
10915         );
10916         pr "\n";
10917       )
10918   ) all_functions
10919
10920 and generate_haskell_prototype ~handle ?(hs = false) style =
10921   pr "%s -> " handle;
10922   let string = if hs then "String" else "CString" in
10923   let int = if hs then "Int" else "CInt" in
10924   let bool = if hs then "Bool" else "CInt" in
10925   let int64 = if hs then "Integer" else "Int64" in
10926   List.iter (
10927     fun arg ->
10928       (match arg with
10929        | Pathname _ | Device _ | Dev_or_Path _ | String _ -> pr "%s" string
10930        | BufferIn _ ->
10931            if hs then pr "String"
10932            else pr "CString -> CInt"
10933        | OptString _ -> if hs then pr "Maybe String" else pr "CString"
10934        | StringList _ | DeviceList _ -> if hs then pr "[String]" else pr "Ptr CString"
10935        | Bool _ -> pr "%s" bool
10936        | Int _ -> pr "%s" int
10937        | Int64 _ -> pr "%s" int
10938        | FileIn _ -> pr "%s" string
10939        | FileOut _ -> pr "%s" string
10940       );
10941       pr " -> ";
10942   ) (snd style);
10943   pr "IO (";
10944   (match fst style with
10945    | RErr -> if not hs then pr "CInt"
10946    | RInt _ -> pr "%s" int
10947    | RInt64 _ -> pr "%s" int64
10948    | RBool _ -> pr "%s" bool
10949    | RConstString _ -> pr "%s" string
10950    | RConstOptString _ -> pr "Maybe %s" string
10951    | RString _ -> pr "%s" string
10952    | RStringList _ -> pr "[%s]" string
10953    | RStruct (_, typ) ->
10954        let name = java_name_of_struct typ in
10955        pr "%s" name
10956    | RStructList (_, typ) ->
10957        let name = java_name_of_struct typ in
10958        pr "[%s]" name
10959    | RHashtable _ -> pr "Hashtable"
10960    | RBufferOut _ -> pr "%s" string
10961   );
10962   pr ")"
10963
10964 and generate_csharp () =
10965   generate_header CPlusPlusStyle LGPLv2plus;
10966
10967   (* XXX Make this configurable by the C# assembly users. *)
10968   let library = "libguestfs.so.0" in
10969
10970   pr "\
10971 // These C# bindings are highly experimental at present.
10972 //
10973 // Firstly they only work on Linux (ie. Mono).  In order to get them
10974 // to work on Windows (ie. .Net) you would need to port the library
10975 // itself to Windows first.
10976 //
10977 // The second issue is that some calls are known to be incorrect and
10978 // can cause Mono to segfault.  Particularly: calls which pass or
10979 // return string[], or return any structure value.  This is because
10980 // we haven't worked out the correct way to do this from C#.
10981 //
10982 // The third issue is that when compiling you get a lot of warnings.
10983 // We are not sure whether the warnings are important or not.
10984 //
10985 // Fourthly we do not routinely build or test these bindings as part
10986 // of the make && make check cycle, which means that regressions might
10987 // go unnoticed.
10988 //
10989 // Suggestions and patches are welcome.
10990
10991 // To compile:
10992 //
10993 // gmcs Libguestfs.cs
10994 // mono Libguestfs.exe
10995 //
10996 // (You'll probably want to add a Test class / static main function
10997 // otherwise this won't do anything useful).
10998
10999 using System;
11000 using System.IO;
11001 using System.Runtime.InteropServices;
11002 using System.Runtime.Serialization;
11003 using System.Collections;
11004
11005 namespace Guestfs
11006 {
11007   class Error : System.ApplicationException
11008   {
11009     public Error (string message) : base (message) {}
11010     protected Error (SerializationInfo info, StreamingContext context) {}
11011   }
11012
11013   class Guestfs
11014   {
11015     IntPtr _handle;
11016
11017     [DllImport (\"%s\")]
11018     static extern IntPtr guestfs_create ();
11019
11020     public Guestfs ()
11021     {
11022       _handle = guestfs_create ();
11023       if (_handle == IntPtr.Zero)
11024         throw new Error (\"could not create guestfs handle\");
11025     }
11026
11027     [DllImport (\"%s\")]
11028     static extern void guestfs_close (IntPtr h);
11029
11030     ~Guestfs ()
11031     {
11032       guestfs_close (_handle);
11033     }
11034
11035     [DllImport (\"%s\")]
11036     static extern string guestfs_last_error (IntPtr h);
11037
11038 " library library library;
11039
11040   (* Generate C# structure bindings.  We prefix struct names with
11041    * underscore because C# cannot have conflicting struct names and
11042    * method names (eg. "class stat" and "stat").
11043    *)
11044   List.iter (
11045     fun (typ, cols) ->
11046       pr "    [StructLayout (LayoutKind.Sequential)]\n";
11047       pr "    public class _%s {\n" typ;
11048       List.iter (
11049         function
11050         | name, FChar -> pr "      char %s;\n" name
11051         | name, FString -> pr "      string %s;\n" name
11052         | name, FBuffer ->
11053             pr "      uint %s_len;\n" name;
11054             pr "      string %s;\n" name
11055         | name, FUUID ->
11056             pr "      [MarshalAs (UnmanagedType.ByValTStr, SizeConst=16)]\n";
11057             pr "      string %s;\n" name
11058         | name, FUInt32 -> pr "      uint %s;\n" name
11059         | name, FInt32 -> pr "      int %s;\n" name
11060         | name, (FUInt64|FBytes) -> pr "      ulong %s;\n" name
11061         | name, FInt64 -> pr "      long %s;\n" name
11062         | name, FOptPercent -> pr "      float %s; /* [0..100] or -1 */\n" name
11063       ) cols;
11064       pr "    }\n";
11065       pr "\n"
11066   ) structs;
11067
11068   (* Generate C# function bindings. *)
11069   List.iter (
11070     fun (name, style, _, _, _, shortdesc, _) ->
11071       let rec csharp_return_type () =
11072         match fst style with
11073         | RErr -> "void"
11074         | RBool n -> "bool"
11075         | RInt n -> "int"
11076         | RInt64 n -> "long"
11077         | RConstString n
11078         | RConstOptString n
11079         | RString n
11080         | RBufferOut n -> "string"
11081         | RStruct (_,n) -> "_" ^ n
11082         | RHashtable n -> "Hashtable"
11083         | RStringList n -> "string[]"
11084         | RStructList (_,n) -> sprintf "_%s[]" n
11085
11086       and c_return_type () =
11087         match fst style with
11088         | RErr
11089         | RBool _
11090         | RInt _ -> "int"
11091         | RInt64 _ -> "long"
11092         | RConstString _
11093         | RConstOptString _
11094         | RString _
11095         | RBufferOut _ -> "string"
11096         | RStruct (_,n) -> "_" ^ n
11097         | RHashtable _
11098         | RStringList _ -> "string[]"
11099         | RStructList (_,n) -> sprintf "_%s[]" n
11100
11101       and c_error_comparison () =
11102         match fst style with
11103         | RErr
11104         | RBool _
11105         | RInt _
11106         | RInt64 _ -> "== -1"
11107         | RConstString _
11108         | RConstOptString _
11109         | RString _
11110         | RBufferOut _
11111         | RStruct (_,_)
11112         | RHashtable _
11113         | RStringList _
11114         | RStructList (_,_) -> "== null"
11115
11116       and generate_extern_prototype () =
11117         pr "    static extern %s guestfs_%s (IntPtr h"
11118           (c_return_type ()) name;
11119         List.iter (
11120           function
11121           | Pathname n | Device n | Dev_or_Path n | String n | OptString n
11122           | FileIn n | FileOut n
11123           | BufferIn n ->
11124               pr ", [In] string %s" n
11125           | StringList n | DeviceList n ->
11126               pr ", [In] string[] %s" n
11127           | Bool n ->
11128               pr ", bool %s" n
11129           | Int n ->
11130               pr ", int %s" n
11131           | Int64 n ->
11132               pr ", long %s" n
11133         ) (snd style);
11134         pr ");\n"
11135
11136       and generate_public_prototype () =
11137         pr "    public %s %s (" (csharp_return_type ()) name;
11138         let comma = ref false in
11139         let next () =
11140           if !comma then pr ", ";
11141           comma := true
11142         in
11143         List.iter (
11144           function
11145           | Pathname n | Device n | Dev_or_Path n | String n | OptString n
11146           | FileIn n | FileOut n
11147           | BufferIn n ->
11148               next (); pr "string %s" n
11149           | StringList n | DeviceList n ->
11150               next (); pr "string[] %s" n
11151           | Bool n ->
11152               next (); pr "bool %s" n
11153           | Int n ->
11154               next (); pr "int %s" n
11155           | Int64 n ->
11156               next (); pr "long %s" n
11157         ) (snd style);
11158         pr ")\n"
11159
11160       and generate_call () =
11161         pr "guestfs_%s (_handle" name;
11162         List.iter (fun arg -> pr ", %s" (name_of_argt arg)) (snd style);
11163         pr ");\n";
11164       in
11165
11166       pr "    [DllImport (\"%s\")]\n" library;
11167       generate_extern_prototype ();
11168       pr "\n";
11169       pr "    /// <summary>\n";
11170       pr "    /// %s\n" shortdesc;
11171       pr "    /// </summary>\n";
11172       generate_public_prototype ();
11173       pr "    {\n";
11174       pr "      %s r;\n" (c_return_type ());
11175       pr "      r = ";
11176       generate_call ();
11177       pr "      if (r %s)\n" (c_error_comparison ());
11178       pr "        throw new Error (guestfs_last_error (_handle));\n";
11179       (match fst style with
11180        | RErr -> ()
11181        | RBool _ ->
11182            pr "      return r != 0 ? true : false;\n"
11183        | RHashtable _ ->
11184            pr "      Hashtable rr = new Hashtable ();\n";
11185            pr "      for (size_t i = 0; i < r.Length; i += 2)\n";
11186            pr "        rr.Add (r[i], r[i+1]);\n";
11187            pr "      return rr;\n"
11188        | RInt _ | RInt64 _ | RConstString _ | RConstOptString _
11189        | RString _ | RBufferOut _ | RStruct _ | RStringList _
11190        | RStructList _ ->
11191            pr "      return r;\n"
11192       );
11193       pr "    }\n";
11194       pr "\n";
11195   ) all_functions_sorted;
11196
11197   pr "  }
11198 }
11199 "
11200
11201 and generate_bindtests () =
11202   generate_header CStyle LGPLv2plus;
11203
11204   pr "\
11205 #include <stdio.h>
11206 #include <stdlib.h>
11207 #include <inttypes.h>
11208 #include <string.h>
11209
11210 #include \"guestfs.h\"
11211 #include \"guestfs-internal.h\"
11212 #include \"guestfs-internal-actions.h\"
11213 #include \"guestfs_protocol.h\"
11214
11215 #define error guestfs_error
11216 #define safe_calloc guestfs_safe_calloc
11217 #define safe_malloc guestfs_safe_malloc
11218
11219 static void
11220 print_strings (char *const *argv)
11221 {
11222   size_t argc;
11223
11224   printf (\"[\");
11225   for (argc = 0; argv[argc] != NULL; ++argc) {
11226     if (argc > 0) printf (\", \");
11227     printf (\"\\\"%%s\\\"\", argv[argc]);
11228   }
11229   printf (\"]\\n\");
11230 }
11231
11232 /* The test0 function prints its parameters to stdout. */
11233 ";
11234
11235   let test0, tests =
11236     match test_functions with
11237     | [] -> assert false
11238     | test0 :: tests -> test0, tests in
11239
11240   let () =
11241     let (name, style, _, _, _, _, _) = test0 in
11242     generate_prototype ~extern:false ~semicolon:false ~newline:true
11243       ~handle:"g" ~prefix:"guestfs__" name style;
11244     pr "{\n";
11245     List.iter (
11246       function
11247       | Pathname n
11248       | Device n | Dev_or_Path n
11249       | String n
11250       | FileIn n
11251       | FileOut n -> pr "  printf (\"%%s\\n\", %s);\n" n
11252       | BufferIn n ->
11253           pr "  {\n";
11254           pr "    size_t i;\n";
11255           pr "    for (i = 0; i < %s_size; ++i)\n" n;
11256           pr "      printf (\"<%%02x>\", %s[i]);\n" n;
11257           pr "    printf (\"\\n\");\n";
11258           pr "  }\n";
11259       | OptString n -> pr "  printf (\"%%s\\n\", %s ? %s : \"null\");\n" n n
11260       | StringList n | DeviceList n -> pr "  print_strings (%s);\n" n
11261       | Bool n -> pr "  printf (\"%%s\\n\", %s ? \"true\" : \"false\");\n" n
11262       | Int n -> pr "  printf (\"%%d\\n\", %s);\n" n
11263       | Int64 n -> pr "  printf (\"%%\" PRIi64 \"\\n\", %s);\n" n
11264     ) (snd style);
11265     pr "  /* Java changes stdout line buffering so we need this: */\n";
11266     pr "  fflush (stdout);\n";
11267     pr "  return 0;\n";
11268     pr "}\n";
11269     pr "\n" in
11270
11271   List.iter (
11272     fun (name, style, _, _, _, _, _) ->
11273       if String.sub name (String.length name - 3) 3 <> "err" then (
11274         pr "/* Test normal return. */\n";
11275         generate_prototype ~extern:false ~semicolon:false ~newline:true
11276           ~handle:"g" ~prefix:"guestfs__" name style;
11277         pr "{\n";
11278         (match fst style with
11279          | RErr ->
11280              pr "  return 0;\n"
11281          | RInt _ ->
11282              pr "  int r;\n";
11283              pr "  sscanf (val, \"%%d\", &r);\n";
11284              pr "  return r;\n"
11285          | RInt64 _ ->
11286              pr "  int64_t r;\n";
11287              pr "  sscanf (val, \"%%\" SCNi64, &r);\n";
11288              pr "  return r;\n"
11289          | RBool _ ->
11290              pr "  return STREQ (val, \"true\");\n"
11291          | RConstString _
11292          | RConstOptString _ ->
11293              (* Can't return the input string here.  Return a static
11294               * string so we ensure we get a segfault if the caller
11295               * tries to free it.
11296               *)
11297              pr "  return \"static string\";\n"
11298          | RString _ ->
11299              pr "  return strdup (val);\n"
11300          | RStringList _ ->
11301              pr "  char **strs;\n";
11302              pr "  int n, i;\n";
11303              pr "  sscanf (val, \"%%d\", &n);\n";
11304              pr "  strs = safe_malloc (g, (n+1) * sizeof (char *));\n";
11305              pr "  for (i = 0; i < n; ++i) {\n";
11306              pr "    strs[i] = safe_malloc (g, 16);\n";
11307              pr "    snprintf (strs[i], 16, \"%%d\", i);\n";
11308              pr "  }\n";
11309              pr "  strs[n] = NULL;\n";
11310              pr "  return strs;\n"
11311          | RStruct (_, typ) ->
11312              pr "  struct guestfs_%s *r;\n" typ;
11313              pr "  r = safe_calloc (g, sizeof *r, 1);\n";
11314              pr "  return r;\n"
11315          | RStructList (_, typ) ->
11316              pr "  struct guestfs_%s_list *r;\n" typ;
11317              pr "  r = safe_calloc (g, sizeof *r, 1);\n";
11318              pr "  sscanf (val, \"%%d\", &r->len);\n";
11319              pr "  r->val = safe_calloc (g, r->len, sizeof *r->val);\n";
11320              pr "  return r;\n"
11321          | RHashtable _ ->
11322              pr "  char **strs;\n";
11323              pr "  int n, i;\n";
11324              pr "  sscanf (val, \"%%d\", &n);\n";
11325              pr "  strs = safe_malloc (g, (n*2+1) * sizeof (*strs));\n";
11326              pr "  for (i = 0; i < n; ++i) {\n";
11327              pr "    strs[i*2] = safe_malloc (g, 16);\n";
11328              pr "    strs[i*2+1] = safe_malloc (g, 16);\n";
11329              pr "    snprintf (strs[i*2], 16, \"%%d\", i);\n";
11330              pr "    snprintf (strs[i*2+1], 16, \"%%d\", i);\n";
11331              pr "  }\n";
11332              pr "  strs[n*2] = NULL;\n";
11333              pr "  return strs;\n"
11334          | RBufferOut _ ->
11335              pr "  return strdup (val);\n"
11336         );
11337         pr "}\n";
11338         pr "\n"
11339       ) else (
11340         pr "/* Test error return. */\n";
11341         generate_prototype ~extern:false ~semicolon:false ~newline:true
11342           ~handle:"g" ~prefix:"guestfs__" name style;
11343         pr "{\n";
11344         pr "  error (g, \"error\");\n";
11345         (match fst style with
11346          | RErr | RInt _ | RInt64 _ | RBool _ ->
11347              pr "  return -1;\n"
11348          | RConstString _ | RConstOptString _
11349          | RString _ | RStringList _ | RStruct _
11350          | RStructList _
11351          | RHashtable _
11352          | RBufferOut _ ->
11353              pr "  return NULL;\n"
11354         );
11355         pr "}\n";
11356         pr "\n"
11357       )
11358   ) tests
11359
11360 and generate_ocaml_bindtests () =
11361   generate_header OCamlStyle GPLv2plus;
11362
11363   pr "\
11364 let () =
11365   let g = Guestfs.create () in
11366 ";
11367
11368   let mkargs args =
11369     String.concat " " (
11370       List.map (
11371         function
11372         | CallString s -> "\"" ^ s ^ "\""
11373         | CallOptString None -> "None"
11374         | CallOptString (Some s) -> sprintf "(Some \"%s\")" s
11375         | CallStringList xs ->
11376             "[|" ^ String.concat ";" (List.map (sprintf "\"%s\"") xs) ^ "|]"
11377         | CallInt i when i >= 0 -> string_of_int i
11378         | CallInt i (* when i < 0 *) -> "(" ^ string_of_int i ^ ")"
11379         | CallInt64 i when i >= 0L -> Int64.to_string i ^ "L"
11380         | CallInt64 i (* when i < 0L *) -> "(" ^ Int64.to_string i ^ "L)"
11381         | CallBool b -> string_of_bool b
11382         | CallBuffer s -> sprintf "%S" s
11383       ) args
11384     )
11385   in
11386
11387   generate_lang_bindtests (
11388     fun f args -> pr "  Guestfs.%s g %s;\n" f (mkargs args)
11389   );
11390
11391   pr "print_endline \"EOF\"\n"
11392
11393 and generate_perl_bindtests () =
11394   pr "#!/usr/bin/perl -w\n";
11395   generate_header HashStyle GPLv2plus;
11396
11397   pr "\
11398 use strict;
11399
11400 use Sys::Guestfs;
11401
11402 my $g = Sys::Guestfs->new ();
11403 ";
11404
11405   let mkargs args =
11406     String.concat ", " (
11407       List.map (
11408         function
11409         | CallString s -> "\"" ^ s ^ "\""
11410         | CallOptString None -> "undef"
11411         | CallOptString (Some s) -> sprintf "\"%s\"" s
11412         | CallStringList xs ->
11413             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
11414         | CallInt i -> string_of_int i
11415         | CallInt64 i -> Int64.to_string i
11416         | CallBool b -> if b then "1" else "0"
11417         | CallBuffer s -> "\"" ^ c_quote s ^ "\""
11418       ) args
11419     )
11420   in
11421
11422   generate_lang_bindtests (
11423     fun f args -> pr "$g->%s (%s);\n" f (mkargs args)
11424   );
11425
11426   pr "print \"EOF\\n\"\n"
11427
11428 and generate_python_bindtests () =
11429   generate_header HashStyle GPLv2plus;
11430
11431   pr "\
11432 import guestfs
11433
11434 g = guestfs.GuestFS ()
11435 ";
11436
11437   let mkargs args =
11438     String.concat ", " (
11439       List.map (
11440         function
11441         | CallString s -> "\"" ^ s ^ "\""
11442         | CallOptString None -> "None"
11443         | CallOptString (Some s) -> sprintf "\"%s\"" s
11444         | CallStringList xs ->
11445             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
11446         | CallInt i -> string_of_int i
11447         | CallInt64 i -> Int64.to_string i
11448         | CallBool b -> if b then "1" else "0"
11449         | CallBuffer s -> "\"" ^ c_quote s ^ "\""
11450       ) args
11451     )
11452   in
11453
11454   generate_lang_bindtests (
11455     fun f args -> pr "g.%s (%s)\n" f (mkargs args)
11456   );
11457
11458   pr "print \"EOF\"\n"
11459
11460 and generate_ruby_bindtests () =
11461   generate_header HashStyle GPLv2plus;
11462
11463   pr "\
11464 require 'guestfs'
11465
11466 g = Guestfs::create()
11467 ";
11468
11469   let mkargs args =
11470     String.concat ", " (
11471       List.map (
11472         function
11473         | CallString s -> "\"" ^ s ^ "\""
11474         | CallOptString None -> "nil"
11475         | CallOptString (Some s) -> sprintf "\"%s\"" s
11476         | CallStringList xs ->
11477             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
11478         | CallInt i -> string_of_int i
11479         | CallInt64 i -> Int64.to_string i
11480         | CallBool b -> string_of_bool b
11481         | CallBuffer s -> "\"" ^ c_quote s ^ "\""
11482       ) args
11483     )
11484   in
11485
11486   generate_lang_bindtests (
11487     fun f args -> pr "g.%s(%s)\n" f (mkargs args)
11488   );
11489
11490   pr "print \"EOF\\n\"\n"
11491
11492 and generate_java_bindtests () =
11493   generate_header CStyle GPLv2plus;
11494
11495   pr "\
11496 import com.redhat.et.libguestfs.*;
11497
11498 public class Bindtests {
11499     public static void main (String[] argv)
11500     {
11501         try {
11502             GuestFS g = new GuestFS ();
11503 ";
11504
11505   let mkargs args =
11506     String.concat ", " (
11507       List.map (
11508         function
11509         | CallString s -> "\"" ^ s ^ "\""
11510         | CallOptString None -> "null"
11511         | CallOptString (Some s) -> sprintf "\"%s\"" s
11512         | CallStringList xs ->
11513             "new String[]{" ^
11514               String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "}"
11515         | CallInt i -> string_of_int i
11516         | CallInt64 i -> Int64.to_string i
11517         | CallBool b -> string_of_bool b
11518         | CallBuffer s ->
11519             "new byte[] { " ^ String.concat "," (
11520               map_chars (fun c -> string_of_int (Char.code c)) s
11521             ) ^ " }"
11522       ) args
11523     )
11524   in
11525
11526   generate_lang_bindtests (
11527     fun f args -> pr "            g.%s (%s);\n" f (mkargs args)
11528   );
11529
11530   pr "
11531             System.out.println (\"EOF\");
11532         }
11533         catch (Exception exn) {
11534             System.err.println (exn);
11535             System.exit (1);
11536         }
11537     }
11538 }
11539 "
11540
11541 and generate_haskell_bindtests () =
11542   generate_header HaskellStyle GPLv2plus;
11543
11544   pr "\
11545 module Bindtests where
11546 import qualified Guestfs
11547
11548 main = do
11549   g <- Guestfs.create
11550 ";
11551
11552   let mkargs args =
11553     String.concat " " (
11554       List.map (
11555         function
11556         | CallString s -> "\"" ^ s ^ "\""
11557         | CallOptString None -> "Nothing"
11558         | CallOptString (Some s) -> sprintf "(Just \"%s\")" s
11559         | CallStringList xs ->
11560             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
11561         | CallInt i when i < 0 -> "(" ^ string_of_int i ^ ")"
11562         | CallInt i -> string_of_int i
11563         | CallInt64 i when i < 0L -> "(" ^ Int64.to_string i ^ ")"
11564         | CallInt64 i -> Int64.to_string i
11565         | CallBool true -> "True"
11566         | CallBool false -> "False"
11567         | CallBuffer s -> "\"" ^ c_quote s ^ "\""
11568       ) args
11569     )
11570   in
11571
11572   generate_lang_bindtests (
11573     fun f args -> pr "  Guestfs.%s g %s\n" f (mkargs args)
11574   );
11575
11576   pr "  putStrLn \"EOF\"\n"
11577
11578 (* Language-independent bindings tests - we do it this way to
11579  * ensure there is parity in testing bindings across all languages.
11580  *)
11581 and generate_lang_bindtests call =
11582   call "test0" [CallString "abc"; CallOptString (Some "def");
11583                 CallStringList []; CallBool false;
11584                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
11585                 CallBuffer "abc\000abc"];
11586   call "test0" [CallString "abc"; CallOptString None;
11587                 CallStringList []; CallBool false;
11588                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
11589                 CallBuffer "abc\000abc"];
11590   call "test0" [CallString ""; CallOptString (Some "def");
11591                 CallStringList []; CallBool false;
11592                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
11593                 CallBuffer "abc\000abc"];
11594   call "test0" [CallString ""; CallOptString (Some "");
11595                 CallStringList []; CallBool false;
11596                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
11597                 CallBuffer "abc\000abc"];
11598   call "test0" [CallString "abc"; CallOptString (Some "def");
11599                 CallStringList ["1"]; CallBool false;
11600                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
11601                 CallBuffer "abc\000abc"];
11602   call "test0" [CallString "abc"; CallOptString (Some "def");
11603                 CallStringList ["1"; "2"]; CallBool false;
11604                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
11605                 CallBuffer "abc\000abc"];
11606   call "test0" [CallString "abc"; CallOptString (Some "def");
11607                 CallStringList ["1"]; CallBool true;
11608                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456";
11609                 CallBuffer "abc\000abc"];
11610   call "test0" [CallString "abc"; CallOptString (Some "def");
11611                 CallStringList ["1"]; CallBool false;
11612                 CallInt (-1); CallInt64 (-1L); CallString "123"; CallString "456";
11613                 CallBuffer "abc\000abc"];
11614   call "test0" [CallString "abc"; CallOptString (Some "def");
11615                 CallStringList ["1"]; CallBool false;
11616                 CallInt (-2); CallInt64 (-2L); CallString "123"; CallString "456";
11617                 CallBuffer "abc\000abc"];
11618   call "test0" [CallString "abc"; CallOptString (Some "def");
11619                 CallStringList ["1"]; CallBool false;
11620                 CallInt 1; CallInt64 1L; CallString "123"; CallString "456";
11621                 CallBuffer "abc\000abc"];
11622   call "test0" [CallString "abc"; CallOptString (Some "def");
11623                 CallStringList ["1"]; CallBool false;
11624                 CallInt 2; CallInt64 2L; CallString "123"; CallString "456";
11625                 CallBuffer "abc\000abc"];
11626   call "test0" [CallString "abc"; CallOptString (Some "def");
11627                 CallStringList ["1"]; CallBool false;
11628                 CallInt 4095; CallInt64 4095L; CallString "123"; CallString "456";
11629                 CallBuffer "abc\000abc"];
11630   call "test0" [CallString "abc"; CallOptString (Some "def");
11631                 CallStringList ["1"]; CallBool false;
11632                 CallInt 0; CallInt64 0L; CallString ""; CallString "";
11633                 CallBuffer "abc\000abc"]
11634
11635 (* XXX Add here tests of the return and error functions. *)
11636
11637 (* Code to generator bindings for virt-inspector.  Currently only
11638  * implemented for OCaml code (for virt-p2v 2.0).
11639  *)
11640 let rng_input = "inspector/virt-inspector.rng"
11641
11642 (* Read the input file and parse it into internal structures.  This is
11643  * by no means a complete RELAX NG parser, but is just enough to be
11644  * able to parse the specific input file.
11645  *)
11646 type rng =
11647   | Element of string * rng list        (* <element name=name/> *)
11648   | Attribute of string * rng list        (* <attribute name=name/> *)
11649   | Interleave of rng list                (* <interleave/> *)
11650   | ZeroOrMore of rng                        (* <zeroOrMore/> *)
11651   | OneOrMore of rng                        (* <oneOrMore/> *)
11652   | Optional of rng                        (* <optional/> *)
11653   | Choice of string list                (* <choice><value/>*</choice> *)
11654   | Value of string                        (* <value>str</value> *)
11655   | Text                                (* <text/> *)
11656
11657 let rec string_of_rng = function
11658   | Element (name, xs) ->
11659       "Element (\"" ^ name ^ "\", (" ^ string_of_rng_list xs ^ "))"
11660   | Attribute (name, xs) ->
11661       "Attribute (\"" ^ name ^ "\", (" ^ string_of_rng_list xs ^ "))"
11662   | Interleave xs -> "Interleave (" ^ string_of_rng_list xs ^ ")"
11663   | ZeroOrMore rng -> "ZeroOrMore (" ^ string_of_rng rng ^ ")"
11664   | OneOrMore rng -> "OneOrMore (" ^ string_of_rng rng ^ ")"
11665   | Optional rng -> "Optional (" ^ string_of_rng rng ^ ")"
11666   | Choice values -> "Choice [" ^ String.concat ", " values ^ "]"
11667   | Value value -> "Value \"" ^ value ^ "\""
11668   | Text -> "Text"
11669
11670 and string_of_rng_list xs =
11671   String.concat ", " (List.map string_of_rng xs)
11672
11673 let rec parse_rng ?defines context = function
11674   | [] -> []
11675   | Xml.Element ("element", ["name", name], children) :: rest ->
11676       Element (name, parse_rng ?defines context children)
11677       :: parse_rng ?defines context rest
11678   | Xml.Element ("attribute", ["name", name], children) :: rest ->
11679       Attribute (name, parse_rng ?defines context children)
11680       :: parse_rng ?defines context rest
11681   | Xml.Element ("interleave", [], children) :: rest ->
11682       Interleave (parse_rng ?defines context children)
11683       :: parse_rng ?defines context rest
11684   | Xml.Element ("zeroOrMore", [], [child]) :: rest ->
11685       let rng = parse_rng ?defines context [child] in
11686       (match rng with
11687        | [child] -> ZeroOrMore child :: parse_rng ?defines context rest
11688        | _ ->
11689            failwithf "%s: <zeroOrMore> contains more than one child element"
11690              context
11691       )
11692   | Xml.Element ("oneOrMore", [], [child]) :: rest ->
11693       let rng = parse_rng ?defines context [child] in
11694       (match rng with
11695        | [child] -> OneOrMore child :: parse_rng ?defines context rest
11696        | _ ->
11697            failwithf "%s: <oneOrMore> contains more than one child element"
11698              context
11699       )
11700   | Xml.Element ("optional", [], [child]) :: rest ->
11701       let rng = parse_rng ?defines context [child] in
11702       (match rng with
11703        | [child] -> Optional child :: parse_rng ?defines context rest
11704        | _ ->
11705            failwithf "%s: <optional> contains more than one child element"
11706              context
11707       )
11708   | Xml.Element ("choice", [], children) :: rest ->
11709       let values = List.map (
11710         function Xml.Element ("value", [], [Xml.PCData value]) -> value
11711         | _ ->
11712             failwithf "%s: can't handle anything except <value> in <choice>"
11713               context
11714       ) children in
11715       Choice values
11716       :: parse_rng ?defines context rest
11717   | Xml.Element ("value", [], [Xml.PCData value]) :: rest ->
11718       Value value :: parse_rng ?defines context rest
11719   | Xml.Element ("text", [], []) :: rest ->
11720       Text :: parse_rng ?defines context rest
11721   | Xml.Element ("ref", ["name", name], []) :: rest ->
11722       (* Look up the reference.  Because of limitations in this parser,
11723        * we can't handle arbitrarily nested <ref> yet.  You can only
11724        * use <ref> from inside <start>.
11725        *)
11726       (match defines with
11727        | None ->
11728            failwithf "%s: contains <ref>, but no refs are defined yet" context
11729        | Some map ->
11730            let rng = StringMap.find name map in
11731            rng @ parse_rng ?defines context rest
11732       )
11733   | x :: _ ->
11734       failwithf "%s: can't handle '%s' in schema" context (Xml.to_string x)
11735
11736 let grammar =
11737   let xml = Xml.parse_file rng_input in
11738   match xml with
11739   | Xml.Element ("grammar", _,
11740                  Xml.Element ("start", _, gram) :: defines) ->
11741       (* The <define/> elements are referenced in the <start> section,
11742        * so build a map of those first.
11743        *)
11744       let defines = List.fold_left (
11745         fun map ->
11746           function Xml.Element ("define", ["name", name], defn) ->
11747             StringMap.add name defn map
11748           | _ ->
11749               failwithf "%s: expected <define name=name/>" rng_input
11750       ) StringMap.empty defines in
11751       let defines = StringMap.mapi parse_rng defines in
11752
11753       (* Parse the <start> clause, passing the defines. *)
11754       parse_rng ~defines "<start>" gram
11755   | _ ->
11756       failwithf "%s: input is not <grammar><start/><define>*</grammar>"
11757         rng_input
11758
11759 let name_of_field = function
11760   | Element (name, _) | Attribute (name, _)
11761   | ZeroOrMore (Element (name, _))
11762   | OneOrMore (Element (name, _))
11763   | Optional (Element (name, _)) -> name
11764   | Optional (Attribute (name, _)) -> name
11765   | Text -> (* an unnamed field in an element *)
11766       "data"
11767   | rng ->
11768       failwithf "name_of_field failed at: %s" (string_of_rng rng)
11769
11770 (* At the moment this function only generates OCaml types.  However we
11771  * should parameterize it later so it can generate types/structs in a
11772  * variety of languages.
11773  *)
11774 let generate_types xs =
11775   (* A simple type is one that can be printed out directly, eg.
11776    * "string option".  A complex type is one which has a name and has
11777    * to be defined via another toplevel definition, eg. a struct.
11778    *
11779    * generate_type generates code for either simple or complex types.
11780    * In the simple case, it returns the string ("string option").  In
11781    * the complex case, it returns the name ("mountpoint").  In the
11782    * complex case it has to print out the definition before returning,
11783    * so it should only be called when we are at the beginning of a
11784    * new line (BOL context).
11785    *)
11786   let rec generate_type = function
11787     | Text ->                                (* string *)
11788         "string", true
11789     | Choice values ->                        (* [`val1|`val2|...] *)
11790         "[" ^ String.concat "|" (List.map ((^)"`") values) ^ "]", true
11791     | ZeroOrMore rng ->                        (* <rng> list *)
11792         let t, is_simple = generate_type rng in
11793         t ^ " list (* 0 or more *)", is_simple
11794     | OneOrMore rng ->                        (* <rng> list *)
11795         let t, is_simple = generate_type rng in
11796         t ^ " list (* 1 or more *)", is_simple
11797                                         (* virt-inspector hack: bool *)
11798     | Optional (Attribute (name, [Value "1"])) ->
11799         "bool", true
11800     | Optional rng ->                        (* <rng> list *)
11801         let t, is_simple = generate_type rng in
11802         t ^ " option", is_simple
11803                                         (* type name = { fields ... } *)
11804     | Element (name, fields) when is_attrs_interleave fields ->
11805         generate_type_struct name (get_attrs_interleave fields)
11806     | Element (name, [field])                (* type name = field *)
11807     | Attribute (name, [field]) ->
11808         let t, is_simple = generate_type field in
11809         if is_simple then (t, true)
11810         else (
11811           pr "type %s = %s\n" name t;
11812           name, false
11813         )
11814     | Element (name, fields) ->              (* type name = { fields ... } *)
11815         generate_type_struct name fields
11816     | rng ->
11817         failwithf "generate_type failed at: %s" (string_of_rng rng)
11818
11819   and is_attrs_interleave = function
11820     | [Interleave _] -> true
11821     | Attribute _ :: fields -> is_attrs_interleave fields
11822     | Optional (Attribute _) :: fields -> is_attrs_interleave fields
11823     | _ -> false
11824
11825   and get_attrs_interleave = function
11826     | [Interleave fields] -> fields
11827     | ((Attribute _) as field) :: fields
11828     | ((Optional (Attribute _)) as field) :: fields ->
11829         field :: get_attrs_interleave fields
11830     | _ -> assert false
11831
11832   and generate_types xs =
11833     List.iter (fun x -> ignore (generate_type x)) xs
11834
11835   and generate_type_struct name fields =
11836     (* Calculate the types of the fields first.  We have to do this
11837      * before printing anything so we are still in BOL context.
11838      *)
11839     let types = List.map fst (List.map generate_type fields) in
11840
11841     (* Special case of a struct containing just a string and another
11842      * field.  Turn it into an assoc list.
11843      *)
11844     match types with
11845     | ["string"; other] ->
11846         let fname1, fname2 =
11847           match fields with
11848           | [f1; f2] -> name_of_field f1, name_of_field f2
11849           | _ -> assert false in
11850         pr "type %s = string * %s (* %s -> %s *)\n" name other fname1 fname2;
11851         name, false
11852
11853     | types ->
11854         pr "type %s = {\n" name;
11855         List.iter (
11856           fun (field, ftype) ->
11857             let fname = name_of_field field in
11858             pr "  %s_%s : %s;\n" name fname ftype
11859         ) (List.combine fields types);
11860         pr "}\n";
11861         (* Return the name of this type, and
11862          * false because it's not a simple type.
11863          *)
11864         name, false
11865   in
11866
11867   generate_types xs
11868
11869 let generate_parsers xs =
11870   (* As for generate_type above, generate_parser makes a parser for
11871    * some type, and returns the name of the parser it has generated.
11872    * Because it (may) need to print something, it should always be
11873    * called in BOL context.
11874    *)
11875   let rec generate_parser = function
11876     | Text ->                                (* string *)
11877         "string_child_or_empty"
11878     | Choice values ->                        (* [`val1|`val2|...] *)
11879         sprintf "(fun x -> match Xml.pcdata (first_child x) with %s | str -> failwith (\"unexpected field value: \" ^ str))"
11880           (String.concat "|"
11881              (List.map (fun v -> sprintf "%S -> `%s" v v) values))
11882     | ZeroOrMore rng ->                        (* <rng> list *)
11883         let pa = generate_parser rng in
11884         sprintf "(fun x -> List.map %s (Xml.children x))" pa
11885     | OneOrMore rng ->                        (* <rng> list *)
11886         let pa = generate_parser rng in
11887         sprintf "(fun x -> List.map %s (Xml.children x))" pa
11888                                         (* virt-inspector hack: bool *)
11889     | Optional (Attribute (name, [Value "1"])) ->
11890         sprintf "(fun x -> try ignore (Xml.attrib x %S); true with Xml.No_attribute _ -> false)" name
11891     | Optional rng ->                        (* <rng> list *)
11892         let pa = generate_parser rng in
11893         sprintf "(function None -> None | Some x -> Some (%s x))" pa
11894                                         (* type name = { fields ... } *)
11895     | Element (name, fields) when is_attrs_interleave fields ->
11896         generate_parser_struct name (get_attrs_interleave fields)
11897     | Element (name, [field]) ->        (* type name = field *)
11898         let pa = generate_parser field in
11899         let parser_name = sprintf "parse_%s_%d" name (unique ()) in
11900         pr "let %s =\n" parser_name;
11901         pr "  %s\n" pa;
11902         pr "let parse_%s = %s\n" name parser_name;
11903         parser_name
11904     | Attribute (name, [field]) ->
11905         let pa = generate_parser field in
11906         let parser_name = sprintf "parse_%s_%d" name (unique ()) in
11907         pr "let %s =\n" parser_name;
11908         pr "  %s\n" pa;
11909         pr "let parse_%s = %s\n" name parser_name;
11910         parser_name
11911     | Element (name, fields) ->              (* type name = { fields ... } *)
11912         generate_parser_struct name ([], fields)
11913     | rng ->
11914         failwithf "generate_parser failed at: %s" (string_of_rng rng)
11915
11916   and is_attrs_interleave = function
11917     | [Interleave _] -> true
11918     | Attribute _ :: fields -> is_attrs_interleave fields
11919     | Optional (Attribute _) :: fields -> is_attrs_interleave fields
11920     | _ -> false
11921
11922   and get_attrs_interleave = function
11923     | [Interleave fields] -> [], fields
11924     | ((Attribute _) as field) :: fields
11925     | ((Optional (Attribute _)) as field) :: fields ->
11926         let attrs, interleaves = get_attrs_interleave fields in
11927         (field :: attrs), interleaves
11928     | _ -> assert false
11929
11930   and generate_parsers xs =
11931     List.iter (fun x -> ignore (generate_parser x)) xs
11932
11933   and generate_parser_struct name (attrs, interleaves) =
11934     (* Generate parsers for the fields first.  We have to do this
11935      * before printing anything so we are still in BOL context.
11936      *)
11937     let fields = attrs @ interleaves in
11938     let pas = List.map generate_parser fields in
11939
11940     (* Generate an intermediate tuple from all the fields first.
11941      * If the type is just a string + another field, then we will
11942      * return this directly, otherwise it is turned into a record.
11943      *
11944      * RELAX NG note: This code treats <interleave> and plain lists of
11945      * fields the same.  In other words, it doesn't bother enforcing
11946      * any ordering of fields in the XML.
11947      *)
11948     pr "let parse_%s x =\n" name;
11949     pr "  let t = (\n    ";
11950     let comma = ref false in
11951     List.iter (
11952       fun x ->
11953         if !comma then pr ",\n    ";
11954         comma := true;
11955         match x with
11956         | Optional (Attribute (fname, [field])), pa ->
11957             pr "%s x" pa
11958         | Optional (Element (fname, [field])), pa ->
11959             pr "%s (optional_child %S x)" pa fname
11960         | Attribute (fname, [Text]), _ ->
11961             pr "attribute %S x" fname
11962         | (ZeroOrMore _ | OneOrMore _), pa ->
11963             pr "%s x" pa
11964         | Text, pa ->
11965             pr "%s x" pa
11966         | (field, pa) ->
11967             let fname = name_of_field field in
11968             pr "%s (child %S x)" pa fname
11969     ) (List.combine fields pas);
11970     pr "\n  ) in\n";
11971
11972     (match fields with
11973      | [Element (_, [Text]) | Attribute (_, [Text]); _] ->
11974          pr "  t\n"
11975
11976      | _ ->
11977          pr "  (Obj.magic t : %s)\n" name
11978 (*
11979          List.iter (
11980            function
11981            | (Optional (Attribute (fname, [field])), pa) ->
11982                pr "  %s_%s =\n" name fname;
11983                pr "    %s x;\n" pa
11984            | (Optional (Element (fname, [field])), pa) ->
11985                pr "  %s_%s =\n" name fname;
11986                pr "    (let x = optional_child %S x in\n" fname;
11987                pr "     %s x);\n" pa
11988            | (field, pa) ->
11989                let fname = name_of_field field in
11990                pr "  %s_%s =\n" name fname;
11991                pr "    (let x = child %S x in\n" fname;
11992                pr "     %s x);\n" pa
11993          ) (List.combine fields pas);
11994          pr "}\n"
11995 *)
11996     );
11997     sprintf "parse_%s" name
11998   in
11999
12000   generate_parsers xs
12001
12002 (* Generate ocaml/guestfs_inspector.mli. *)
12003 let generate_ocaml_inspector_mli () =
12004   generate_header ~extra_inputs:[rng_input] OCamlStyle LGPLv2plus;
12005
12006   pr "\
12007 (** This is an OCaml language binding to the external [virt-inspector]
12008     program.
12009
12010     For more information, please read the man page [virt-inspector(1)].
12011 *)
12012
12013 ";
12014
12015   generate_types grammar;
12016   pr "(** The nested information returned from the {!inspect} function. *)\n";
12017   pr "\n";
12018
12019   pr "\
12020 val inspect : ?connect:string -> ?xml:string -> string list -> operatingsystems
12021 (** To inspect a libvirt domain called [name], pass a singleton
12022     list: [inspect [name]].  When using libvirt only, you may
12023     optionally pass a libvirt URI using [inspect ~connect:uri ...].
12024
12025     To inspect a disk image or images, pass a list of the filenames
12026     of the disk images: [inspect filenames]
12027
12028     This function inspects the given guest or disk images and
12029     returns a list of operating system(s) found and a large amount
12030     of information about them.  In the vast majority of cases,
12031     a virtual machine only contains a single operating system.
12032
12033     If the optional [~xml] parameter is given, then this function
12034     skips running the external virt-inspector program and just
12035     parses the given XML directly (which is expected to be XML
12036     produced from a previous run of virt-inspector).  The list of
12037     names and connect URI are ignored in this case.
12038
12039     This function can throw a wide variety of exceptions, for example
12040     if the external virt-inspector program cannot be found, or if
12041     it doesn't generate valid XML.
12042 *)
12043 "
12044
12045 (* Generate ocaml/guestfs_inspector.ml. *)
12046 let generate_ocaml_inspector_ml () =
12047   generate_header ~extra_inputs:[rng_input] OCamlStyle LGPLv2plus;
12048
12049   pr "open Unix\n";
12050   pr "\n";
12051
12052   generate_types grammar;
12053   pr "\n";
12054
12055   pr "\
12056 (* Misc functions which are used by the parser code below. *)
12057 let first_child = function
12058   | Xml.Element (_, _, c::_) -> c
12059   | Xml.Element (name, _, []) ->
12060       failwith (\"expected <\" ^ name ^ \"/> to have a child node\")
12061   | Xml.PCData str ->
12062       failwith (\"expected XML tag, but read PCDATA '\" ^ str ^ \"' instead\")
12063
12064 let string_child_or_empty = function
12065   | Xml.Element (_, _, [Xml.PCData s]) -> s
12066   | Xml.Element (_, _, []) -> \"\"
12067   | Xml.Element (x, _, _) ->
12068       failwith (\"expected XML tag with a single PCDATA child, but got \" ^
12069                 x ^ \" instead\")
12070   | Xml.PCData str ->
12071       failwith (\"expected XML tag, but read PCDATA '\" ^ str ^ \"' instead\")
12072
12073 let optional_child name xml =
12074   let children = Xml.children xml in
12075   try
12076     Some (List.find (function
12077                      | Xml.Element (n, _, _) when n = name -> true
12078                      | _ -> false) children)
12079   with
12080     Not_found -> None
12081
12082 let child name xml =
12083   match optional_child name xml with
12084   | Some c -> c
12085   | None ->
12086       failwith (\"mandatory field <\" ^ name ^ \"/> missing in XML output\")
12087
12088 let attribute name xml =
12089   try Xml.attrib xml name
12090   with Xml.No_attribute _ ->
12091     failwith (\"mandatory attribute \" ^ name ^ \" missing in XML output\")
12092
12093 ";
12094
12095   generate_parsers grammar;
12096   pr "\n";
12097
12098   pr "\
12099 (* Run external virt-inspector, then use parser to parse the XML. *)
12100 let inspect ?connect ?xml names =
12101   let xml =
12102     match xml with
12103     | None ->
12104         if names = [] then invalid_arg \"inspect: no names given\";
12105         let cmd = [ \"virt-inspector\"; \"--xml\" ] @
12106           (match connect with None -> [] | Some uri -> [ \"--connect\"; uri ]) @
12107           names in
12108         let cmd = List.map Filename.quote cmd in
12109         let cmd = String.concat \" \" cmd in
12110         let chan = open_process_in cmd in
12111         let xml = Xml.parse_in chan in
12112         (match close_process_in chan with
12113          | WEXITED 0 -> ()
12114          | WEXITED _ -> failwith \"external virt-inspector command failed\"
12115          | WSIGNALED i | WSTOPPED i ->
12116              failwith (\"external virt-inspector command died or stopped on sig \" ^
12117                        string_of_int i)
12118         );
12119         xml
12120     | Some doc ->
12121         Xml.parse_string doc in
12122   parse_operatingsystems xml
12123 "
12124
12125 and generate_max_proc_nr () =
12126   pr "%d\n" max_proc_nr
12127
12128 let output_to filename k =
12129   let filename_new = filename ^ ".new" in
12130   chan := open_out filename_new;
12131   k ();
12132   close_out !chan;
12133   chan := Pervasives.stdout;
12134
12135   (* Is the new file different from the current file? *)
12136   if Sys.file_exists filename && files_equal filename filename_new then
12137     unlink filename_new                 (* same, so skip it *)
12138   else (
12139     (* different, overwrite old one *)
12140     (try chmod filename 0o644 with Unix_error _ -> ());
12141     rename filename_new filename;
12142     chmod filename 0o444;
12143     printf "written %s\n%!" filename;
12144   )
12145
12146 let perror msg = function
12147   | Unix_error (err, _, _) ->
12148       eprintf "%s: %s\n" msg (error_message err)
12149   | exn ->
12150       eprintf "%s: %s\n" msg (Printexc.to_string exn)
12151
12152 (* Main program. *)
12153 let () =
12154   let lock_fd =
12155     try openfile "HACKING" [O_RDWR] 0
12156     with
12157     | Unix_error (ENOENT, _, _) ->
12158         eprintf "\
12159 You are probably running this from the wrong directory.
12160 Run it from the top source directory using the command
12161   src/generator.ml
12162 ";
12163         exit 1
12164     | exn ->
12165         perror "open: HACKING" exn;
12166         exit 1 in
12167
12168   (* Acquire a lock so parallel builds won't try to run the generator
12169    * twice at the same time.  Subsequent builds will wait for the first
12170    * one to finish.  Note the lock is released implicitly when the
12171    * program exits.
12172    *)
12173   (try lockf lock_fd F_LOCK 1
12174    with exn ->
12175      perror "lock: HACKING" exn;
12176      exit 1);
12177
12178   check_functions ();
12179
12180   output_to "src/guestfs_protocol.x" generate_xdr;
12181   output_to "src/guestfs-structs.h" generate_structs_h;
12182   output_to "src/guestfs-actions.h" generate_actions_h;
12183   output_to "src/guestfs-internal-actions.h" generate_internal_actions_h;
12184   output_to "src/guestfs-actions.c" generate_client_actions;
12185   output_to "src/guestfs-bindtests.c" generate_bindtests;
12186   output_to "src/guestfs-structs.pod" generate_structs_pod;
12187   output_to "src/guestfs-actions.pod" generate_actions_pod;
12188   output_to "src/guestfs-availability.pod" generate_availability_pod;
12189   output_to "src/MAX_PROC_NR" generate_max_proc_nr;
12190   output_to "src/libguestfs.syms" generate_linker_script;
12191   output_to "daemon/actions.h" generate_daemon_actions_h;
12192   output_to "daemon/stubs.c" generate_daemon_actions;
12193   output_to "daemon/names.c" generate_daemon_names;
12194   output_to "daemon/optgroups.c" generate_daemon_optgroups_c;
12195   output_to "daemon/optgroups.h" generate_daemon_optgroups_h;
12196   output_to "capitests/tests.c" generate_tests;
12197   output_to "fish/cmds.c" generate_fish_cmds;
12198   output_to "fish/completion.c" generate_fish_completion;
12199   output_to "fish/guestfish-actions.pod" generate_fish_actions_pod;
12200   output_to "ocaml/guestfs.mli" generate_ocaml_mli;
12201   output_to "ocaml/guestfs.ml" generate_ocaml_ml;
12202   output_to "ocaml/guestfs_c_actions.c" generate_ocaml_c;
12203   output_to "ocaml/bindtests.ml" generate_ocaml_bindtests;
12204   output_to "ocaml/guestfs_inspector.mli" generate_ocaml_inspector_mli;
12205   output_to "ocaml/guestfs_inspector.ml" generate_ocaml_inspector_ml;
12206   output_to "perl/Guestfs.xs" generate_perl_xs;
12207   output_to "perl/lib/Sys/Guestfs.pm" generate_perl_pm;
12208   output_to "perl/bindtests.pl" generate_perl_bindtests;
12209   output_to "python/guestfs-py.c" generate_python_c;
12210   output_to "python/guestfs.py" generate_python_py;
12211   output_to "python/bindtests.py" generate_python_bindtests;
12212   output_to "ruby/ext/guestfs/_guestfs.c" generate_ruby_c;
12213   output_to "ruby/bindtests.rb" generate_ruby_bindtests;
12214   output_to "java/com/redhat/et/libguestfs/GuestFS.java" generate_java_java;
12215
12216   List.iter (
12217     fun (typ, jtyp) ->
12218       let cols = cols_of_struct typ in
12219       let filename = sprintf "java/com/redhat/et/libguestfs/%s.java" jtyp in
12220       output_to filename (generate_java_struct jtyp cols);
12221   ) java_structs;
12222
12223   output_to "java/Makefile.inc" generate_java_makefile_inc;
12224   output_to "java/com_redhat_et_libguestfs_GuestFS.c" generate_java_c;
12225   output_to "java/Bindtests.java" generate_java_bindtests;
12226   output_to "haskell/Guestfs.hs" generate_haskell_hs;
12227   output_to "haskell/Bindtests.hs" generate_haskell_bindtests;
12228   output_to "csharp/Libguestfs.cs" generate_csharp;
12229
12230   (* Always generate this file last, and unconditionally.  It's used
12231    * by the Makefile to know when we must re-run the generator.
12232    *)
12233   let chan = open_out "src/stamp-generator" in
12234   fprintf chan "1\n";
12235   close_out chan;
12236
12237   printf "generated %d lines of code\n" !lines