generated code: Set copyright years to 2009-xxxx when current year > 2009.
[libguestfs.git] / src / generator.ml
1 #!/usr/bin/env ocaml
2 (* libguestfs
3  * Copyright (C) 2009-2010 Red Hat Inc.
4  *
5  * This program is free software; you can redistribute it and/or modify
6  * it under the terms of the GNU General Public License as published by
7  * the Free Software Foundation; either version 2 of the License, or
8  * (at your option) any later version.
9  *
10  * This program is distributed in the hope that it will be useful,
11  * but WITHOUT ANY WARRANTY; without even the implied warranty of
12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
13  * GNU General Public License for more details.
14  *
15  * You should have received a copy of the GNU General Public License
16  * along with this program; if not, write to the Free Software
17  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
18  *)
19
20 (* This script generates a large amount of code and documentation for
21  * all the daemon actions.
22  * 
23  * To add a new action there are only two files you need to change,
24  * this one to describe the interface (see the big table of
25  * 'daemon_functions' below), and daemon/<somefile>.c to write the
26  * implementation.
27  * 
28  * After editing this file, run it (./src/generator.ml) to regenerate
29  * all the output files.  'make' will rerun this automatically when
30  * necessary.  Note that if you are using a separate build directory
31  * you must run generator.ml from the _source_ directory.
32  * 
33  * IMPORTANT: This script should NOT print any warnings.  If it prints
34  * warnings, you should treat them as errors.
35  *
36  * OCaml tips:
37  * (1) In emacs, install tuareg-mode to display and format OCaml code
38  * correctly.  'vim' comes with a good OCaml editing mode by default.
39  * (2) Read the resources at http://ocaml-tutorial.org/
40  *)
41
42 #load "unix.cma";;
43 #load "str.cma";;
44 #directory "+xml-light";;
45 #load "xml-light.cma";;
46
47 open Unix
48 open Printf
49
50 type style = ret * args
51 and ret =
52     (* "RErr" as a return value means an int used as a simple error
53      * indication, ie. 0 or -1.
54      *)
55   | RErr
56
57     (* "RInt" as a return value means an int which is -1 for error
58      * or any value >= 0 on success.  Only use this for smallish
59      * positive ints (0 <= i < 2^30).
60      *)
61   | RInt of string
62
63     (* "RInt64" is the same as RInt, but is guaranteed to be able
64      * to return a full 64 bit value, _except_ that -1 means error
65      * (so -1 cannot be a valid, non-error return value).
66      *)
67   | RInt64 of string
68
69     (* "RBool" is a bool return value which can be true/false or
70      * -1 for error.
71      *)
72   | RBool of string
73
74     (* "RConstString" is a string that refers to a constant value.
75      * The return value must NOT be NULL (since NULL indicates
76      * an error).
77      *
78      * Try to avoid using this.  In particular you cannot use this
79      * for values returned from the daemon, because there is no
80      * thread-safe way to return them in the C API.
81      *)
82   | RConstString of string
83
84     (* "RConstOptString" is an even more broken version of
85      * "RConstString".  The returned string may be NULL and there
86      * is no way to return an error indication.  Avoid using this!
87      *)
88   | RConstOptString of string
89
90     (* "RString" is a returned string.  It must NOT be NULL, since
91      * a NULL return indicates an error.  The caller frees this.
92      *)
93   | RString of string
94
95     (* "RStringList" is a list of strings.  No string in the list
96      * can be NULL.  The caller frees the strings and the array.
97      *)
98   | RStringList of string
99
100     (* "RStruct" is a function which returns a single named structure
101      * or an error indication (in C, a struct, and in other languages
102      * with varying representations, but usually very efficient).  See
103      * after the function list below for the structures.
104      *)
105   | RStruct of string * string          (* name of retval, name of struct *)
106
107     (* "RStructList" is a function which returns either a list/array
108      * of structures (could be zero-length), or an error indication.
109      *)
110   | RStructList of string * string      (* name of retval, name of struct *)
111
112     (* Key-value pairs of untyped strings.  Turns into a hashtable or
113      * dictionary in languages which support it.  DON'T use this as a
114      * general "bucket" for results.  Prefer a stronger typed return
115      * value if one is available, or write a custom struct.  Don't use
116      * this if the list could potentially be very long, since it is
117      * inefficient.  Keys should be unique.  NULLs are not permitted.
118      *)
119   | RHashtable of string
120
121     (* "RBufferOut" is handled almost exactly like RString, but
122      * it allows the string to contain arbitrary 8 bit data including
123      * ASCII NUL.  In the C API this causes an implicit extra parameter
124      * to be added of type <size_t *size_r>.  The extra parameter
125      * returns the actual size of the return buffer in bytes.
126      *
127      * Other programming languages support strings with arbitrary 8 bit
128      * data.
129      *
130      * At the RPC layer we have to use the opaque<> type instead of
131      * string<>.  Returned data is still limited to the max message
132      * size (ie. ~ 2 MB).
133      *)
134   | RBufferOut of string
135
136 and args = argt list    (* Function parameters, guestfs handle is implicit. *)
137
138     (* Note in future we should allow a "variable args" parameter as
139      * the final parameter, to allow commands like
140      *   chmod mode file [file(s)...]
141      * This is not implemented yet, but many commands (such as chmod)
142      * are currently defined with the argument order keeping this future
143      * possibility in mind.
144      *)
145 and argt =
146   | String of string    (* const char *name, cannot be NULL *)
147   | Device of string    (* /dev device name, cannot be NULL *)
148   | Pathname of string  (* file name, cannot be NULL *)
149   | Dev_or_Path of string (* /dev device name or Pathname, cannot be NULL *)
150   | OptString of string (* const char *name, may be NULL *)
151   | StringList of string(* list of strings (each string cannot be NULL) *)
152   | DeviceList of string(* list of Device names (each cannot be NULL) *)
153   | Bool of string      (* boolean *)
154   | Int of string       (* int (smallish ints, signed, <= 31 bits) *)
155   | Int64 of string     (* any 64 bit int *)
156     (* These are treated as filenames (simple string parameters) in
157      * the C API and bindings.  But in the RPC protocol, we transfer
158      * the actual file content up to or down from the daemon.
159      * FileIn: local machine -> daemon (in request)
160      * FileOut: daemon -> local machine (in reply)
161      * In guestfish (only), the special name "-" means read from
162      * stdin or write to stdout.
163      *)
164   | FileIn of string
165   | FileOut of string
166 (* Not implemented:
167     (* Opaque buffer which can contain arbitrary 8 bit data.
168      * In the C API, this is expressed as <char *, int> pair.
169      * Most other languages have a string type which can contain
170      * ASCII NUL.  We use whatever type is appropriate for each
171      * language.
172      * Buffers are limited by the total message size.  To transfer
173      * large blocks of data, use FileIn/FileOut parameters instead.
174      * To return an arbitrary buffer, use RBufferOut.
175      *)
176   | BufferIn of string
177 *)
178
179 type flags =
180   | ProtocolLimitWarning  (* display warning about protocol size limits *)
181   | DangerWillRobinson    (* flags particularly dangerous commands *)
182   | FishAlias of string   (* provide an alias for this cmd in guestfish *)
183   | FishAction of string  (* call this function in guestfish *)
184   | NotInFish             (* do not export via guestfish *)
185   | NotInDocs             (* do not add this function to documentation *)
186   | DeprecatedBy of string (* function is deprecated, use .. instead *)
187   | Optional of string    (* function is part of an optional group *)
188
189 (* You can supply zero or as many tests as you want per API call.
190  *
191  * Note that the test environment has 3 block devices, of size 500MB,
192  * 50MB and 10MB (respectively /dev/sda, /dev/sdb, /dev/sdc), and
193  * a fourth ISO block device with some known files on it (/dev/sdd).
194  *
195  * Note for partitioning purposes, the 500MB device has 1015 cylinders.
196  * Number of cylinders was 63 for IDE emulated disks with precisely
197  * the same size.  How exactly this is calculated is a mystery.
198  *
199  * The ISO block device (/dev/sdd) comes from images/test.iso.
200  *
201  * To be able to run the tests in a reasonable amount of time,
202  * the virtual machine and block devices are reused between tests.
203  * So don't try testing kill_subprocess :-x
204  *
205  * Between each test we blockdev-setrw, umount-all, lvm-remove-all.
206  *
207  * Don't assume anything about the previous contents of the block
208  * devices.  Use 'Init*' to create some initial scenarios.
209  *
210  * You can add a prerequisite clause to any individual test.  This
211  * is a run-time check, which, if it fails, causes the test to be
212  * skipped.  Useful if testing a command which might not work on
213  * all variations of libguestfs builds.  A test that has prerequisite
214  * of 'Always' is run unconditionally.
215  *
216  * In addition, packagers can skip individual tests by setting the
217  * environment variables:     eg:
218  *   SKIP_TEST_<CMD>_<NUM>=1  SKIP_TEST_COMMAND_3=1  (skips test #3 of command)
219  *   SKIP_TEST_<CMD>=1        SKIP_TEST_ZEROFREE=1   (skips all zerofree tests)
220  *)
221 type tests = (test_init * test_prereq * test) list
222 and test =
223     (* Run the command sequence and just expect nothing to fail. *)
224   | TestRun of seq
225
226     (* Run the command sequence and expect the output of the final
227      * command to be the string.
228      *)
229   | TestOutput of seq * string
230
231     (* Run the command sequence and expect the output of the final
232      * command to be the list of strings.
233      *)
234   | TestOutputList of seq * string list
235
236     (* Run the command sequence and expect the output of the final
237      * command to be the list of block devices (could be either
238      * "/dev/sd.." or "/dev/hd.." form - we don't check the 5th
239      * character of each string).
240      *)
241   | TestOutputListOfDevices of seq * string list
242
243     (* Run the command sequence and expect the output of the final
244      * command to be the integer.
245      *)
246   | TestOutputInt of seq * int
247
248     (* Run the command sequence and expect the output of the final
249      * command to be <op> <int>, eg. ">=", "1".
250      *)
251   | TestOutputIntOp of seq * string * int
252
253     (* Run the command sequence and expect the output of the final
254      * command to be a true value (!= 0 or != NULL).
255      *)
256   | TestOutputTrue of seq
257
258     (* Run the command sequence and expect the output of the final
259      * command to be a false value (== 0 or == NULL, but not an error).
260      *)
261   | TestOutputFalse of seq
262
263     (* Run the command sequence and expect the output of the final
264      * command to be a list of the given length (but don't care about
265      * content).
266      *)
267   | TestOutputLength of seq * int
268
269     (* Run the command sequence and expect the output of the final
270      * command to be a buffer (RBufferOut), ie. string + size.
271      *)
272   | TestOutputBuffer of seq * string
273
274     (* Run the command sequence and expect the output of the final
275      * command to be a structure.
276      *)
277   | TestOutputStruct of seq * test_field_compare list
278
279     (* Run the command sequence and expect the final command (only)
280      * to fail.
281      *)
282   | TestLastFail of seq
283
284 and test_field_compare =
285   | CompareWithInt of string * int
286   | CompareWithIntOp of string * string * int
287   | CompareWithString of string * string
288   | CompareFieldsIntEq of string * string
289   | CompareFieldsStrEq of string * string
290
291 (* Test prerequisites. *)
292 and test_prereq =
293     (* Test always runs. *)
294   | Always
295
296     (* Test is currently disabled - eg. it fails, or it tests some
297      * unimplemented feature.
298      *)
299   | Disabled
300
301     (* 'string' is some C code (a function body) that should return
302      * true or false.  The test will run if the code returns true.
303      *)
304   | If of string
305
306     (* As for 'If' but the test runs _unless_ the code returns true. *)
307   | Unless of string
308
309 (* Some initial scenarios for testing. *)
310 and test_init =
311     (* Do nothing, block devices could contain random stuff including
312      * LVM PVs, and some filesystems might be mounted.  This is usually
313      * a bad idea.
314      *)
315   | InitNone
316
317     (* Block devices are empty and no filesystems are mounted. *)
318   | InitEmpty
319
320     (* /dev/sda contains a single partition /dev/sda1, with random
321      * content.  /dev/sdb and /dev/sdc may have random content.
322      * No LVM.
323      *)
324   | InitPartition
325
326     (* /dev/sda contains a single partition /dev/sda1, which is formatted
327      * as ext2, empty [except for lost+found] and mounted on /.
328      * /dev/sdb and /dev/sdc may have random content.
329      * No LVM.
330      *)
331   | InitBasicFS
332
333     (* /dev/sda:
334      *   /dev/sda1 (is a PV):
335      *     /dev/VG/LV (size 8MB):
336      *       formatted as ext2, empty [except for lost+found], mounted on /
337      * /dev/sdb and /dev/sdc may have random content.
338      *)
339   | InitBasicFSonLVM
340
341     (* /dev/sdd (the ISO, see images/ directory in source)
342      * is mounted on /
343      *)
344   | InitISOFS
345
346 (* Sequence of commands for testing. *)
347 and seq = cmd list
348 and cmd = string list
349
350 (* Note about long descriptions: When referring to another
351  * action, use the format C<guestfs_other> (ie. the full name of
352  * the C function).  This will be replaced as appropriate in other
353  * language bindings.
354  *
355  * Apart from that, long descriptions are just perldoc paragraphs.
356  *)
357
358 (* Generate a random UUID (used in tests). *)
359 let uuidgen () =
360   let chan = open_process_in "uuidgen" in
361   let uuid = input_line chan in
362   (match close_process_in chan with
363    | WEXITED 0 -> ()
364    | WEXITED _ ->
365        failwith "uuidgen: process exited with non-zero status"
366    | WSIGNALED _ | WSTOPPED _ ->
367        failwith "uuidgen: process signalled or stopped by signal"
368   );
369   uuid
370
371 (* These test functions are used in the language binding tests. *)
372
373 let test_all_args = [
374   String "str";
375   OptString "optstr";
376   StringList "strlist";
377   Bool "b";
378   Int "integer";
379   Int64 "integer64";
380   FileIn "filein";
381   FileOut "fileout";
382 ]
383
384 let test_all_rets = [
385   (* except for RErr, which is tested thoroughly elsewhere *)
386   "test0rint",         RInt "valout";
387   "test0rint64",       RInt64 "valout";
388   "test0rbool",        RBool "valout";
389   "test0rconststring", RConstString "valout";
390   "test0rconstoptstring", RConstOptString "valout";
391   "test0rstring",      RString "valout";
392   "test0rstringlist",  RStringList "valout";
393   "test0rstruct",      RStruct ("valout", "lvm_pv");
394   "test0rstructlist",  RStructList ("valout", "lvm_pv");
395   "test0rhashtable",   RHashtable "valout";
396 ]
397
398 let test_functions = [
399   ("test0", (RErr, test_all_args), -1, [NotInFish; NotInDocs],
400    [],
401    "internal test function - do not use",
402    "\
403 This is an internal test function which is used to test whether
404 the automatically generated bindings can handle every possible
405 parameter type correctly.
406
407 It echos the contents of each parameter to stdout.
408
409 You probably don't want to call this function.");
410 ] @ List.flatten (
411   List.map (
412     fun (name, ret) ->
413       [(name, (ret, [String "val"]), -1, [NotInFish; NotInDocs],
414         [],
415         "internal test function - do not use",
416         "\
417 This is an internal test function which is used to test whether
418 the automatically generated bindings can handle every possible
419 return type correctly.
420
421 It converts string C<val> to the return type.
422
423 You probably don't want to call this function.");
424        (name ^ "err", (ret, []), -1, [NotInFish; NotInDocs],
425         [],
426         "internal test function - do not use",
427         "\
428 This is an internal test function which is used to test whether
429 the automatically generated bindings can handle every possible
430 return type correctly.
431
432 This function always returns an error.
433
434 You probably don't want to call this function.")]
435   ) test_all_rets
436 )
437
438 (* non_daemon_functions are any functions which don't get processed
439  * in the daemon, eg. functions for setting and getting local
440  * configuration values.
441  *)
442
443 let non_daemon_functions = test_functions @ [
444   ("launch", (RErr, []), -1, [FishAlias "run"; FishAction "launch"],
445    [],
446    "launch the qemu subprocess",
447    "\
448 Internally libguestfs is implemented by running a virtual machine
449 using L<qemu(1)>.
450
451 You should call this after configuring the handle
452 (eg. adding drives) but before performing any actions.");
453
454   ("wait_ready", (RErr, []), -1, [NotInFish],
455    [],
456    "wait until the qemu subprocess launches (no op)",
457    "\
458 This function is a no op.
459
460 In versions of the API E<lt> 1.0.71 you had to call this function
461 just after calling C<guestfs_launch> to wait for the launch
462 to complete.  However this is no longer necessary because
463 C<guestfs_launch> now does the waiting.
464
465 If you see any calls to this function in code then you can just
466 remove them, unless you want to retain compatibility with older
467 versions of the API.");
468
469   ("kill_subprocess", (RErr, []), -1, [],
470    [],
471    "kill the qemu subprocess",
472    "\
473 This kills the qemu subprocess.  You should never need to call this.");
474
475   ("add_drive", (RErr, [String "filename"]), -1, [FishAlias "add"],
476    [],
477    "add an image to examine or modify",
478    "\
479 This function adds a virtual machine disk image C<filename> to the
480 guest.  The first time you call this function, the disk appears as IDE
481 disk 0 (C</dev/sda>) in the guest, the second time as C</dev/sdb>, and
482 so on.
483
484 You don't necessarily need to be root when using libguestfs.  However
485 you obviously do need sufficient permissions to access the filename
486 for whatever operations you want to perform (ie. read access if you
487 just want to read the image or write access if you want to modify the
488 image).
489
490 This is equivalent to the qemu parameter
491 C<-drive file=filename,cache=off,if=...>.
492 C<cache=off> is omitted in cases where it is not supported by
493 the underlying filesystem.
494
495 Note that this call checks for the existence of C<filename>.  This
496 stops you from specifying other types of drive which are supported
497 by qemu such as C<nbd:> and C<http:> URLs.  To specify those, use
498 the general C<guestfs_config> call instead.");
499
500   ("add_cdrom", (RErr, [String "filename"]), -1, [FishAlias "cdrom"],
501    [],
502    "add a CD-ROM disk image to examine",
503    "\
504 This function adds a virtual CD-ROM disk image to the guest.
505
506 This is equivalent to the qemu parameter C<-cdrom filename>.
507
508 Note that this call checks for the existence of C<filename>.  This
509 stops you from specifying other types of drive which are supported
510 by qemu such as C<nbd:> and C<http:> URLs.  To specify those, use
511 the general C<guestfs_config> call instead.");
512
513   ("add_drive_ro", (RErr, [String "filename"]), -1, [FishAlias "add-ro"],
514    [],
515    "add a drive in snapshot mode (read-only)",
516    "\
517 This adds a drive in snapshot mode, making it effectively
518 read-only.
519
520 Note that writes to the device are allowed, and will be seen for
521 the duration of the guestfs handle, but they are written
522 to a temporary file which is discarded as soon as the guestfs
523 handle is closed.  We don't currently have any method to enable
524 changes to be committed, although qemu can support this.
525
526 This is equivalent to the qemu parameter
527 C<-drive file=filename,snapshot=on,if=...>.
528
529 Note that this call checks for the existence of C<filename>.  This
530 stops you from specifying other types of drive which are supported
531 by qemu such as C<nbd:> and C<http:> URLs.  To specify those, use
532 the general C<guestfs_config> call instead.");
533
534   ("config", (RErr, [String "qemuparam"; OptString "qemuvalue"]), -1, [],
535    [],
536    "add qemu parameters",
537    "\
538 This can be used to add arbitrary qemu command line parameters
539 of the form C<-param value>.  Actually it's not quite arbitrary - we
540 prevent you from setting some parameters which would interfere with
541 parameters that we use.
542
543 The first character of C<param> string must be a C<-> (dash).
544
545 C<value> can be NULL.");
546
547   ("set_qemu", (RErr, [String "qemu"]), -1, [FishAlias "qemu"],
548    [],
549    "set the qemu binary",
550    "\
551 Set the qemu binary that we will use.
552
553 The default is chosen when the library was compiled by the
554 configure script.
555
556 You can also override this by setting the C<LIBGUESTFS_QEMU>
557 environment variable.
558
559 Setting C<qemu> to C<NULL> restores the default qemu binary.");
560
561   ("get_qemu", (RConstString "qemu", []), -1, [],
562    [InitNone, Always, TestRun (
563       [["get_qemu"]])],
564    "get the qemu binary",
565    "\
566 Return the current qemu binary.
567
568 This is always non-NULL.  If it wasn't set already, then this will
569 return the default qemu binary name.");
570
571   ("set_path", (RErr, [String "searchpath"]), -1, [FishAlias "path"],
572    [],
573    "set the search path",
574    "\
575 Set the path that libguestfs searches for kernel and initrd.img.
576
577 The default is C<$libdir/guestfs> unless overridden by setting
578 C<LIBGUESTFS_PATH> environment variable.
579
580 Setting C<path> to C<NULL> restores the default path.");
581
582   ("get_path", (RConstString "path", []), -1, [],
583    [InitNone, Always, TestRun (
584       [["get_path"]])],
585    "get the search path",
586    "\
587 Return the current search path.
588
589 This is always non-NULL.  If it wasn't set already, then this will
590 return the default path.");
591
592   ("set_append", (RErr, [OptString "append"]), -1, [FishAlias "append"],
593    [],
594    "add options to kernel command line",
595    "\
596 This function is used to add additional options to the
597 guest kernel command line.
598
599 The default is C<NULL> unless overridden by setting
600 C<LIBGUESTFS_APPEND> environment variable.
601
602 Setting C<append> to C<NULL> means I<no> additional options
603 are passed (libguestfs always adds a few of its own).");
604
605   ("get_append", (RConstOptString "append", []), -1, [],
606    (* This cannot be tested with the current framework.  The
607     * function can return NULL in normal operations, which the
608     * test framework interprets as an error.
609     *)
610    [],
611    "get the additional kernel options",
612    "\
613 Return the additional kernel options which are added to the
614 guest kernel command line.
615
616 If C<NULL> then no options are added.");
617
618   ("set_autosync", (RErr, [Bool "autosync"]), -1, [FishAlias "autosync"],
619    [],
620    "set autosync mode",
621    "\
622 If C<autosync> is true, this enables autosync.  Libguestfs will make a
623 best effort attempt to run C<guestfs_umount_all> followed by
624 C<guestfs_sync> when the handle is closed
625 (also if the program exits without closing handles).
626
627 This is disabled by default (except in guestfish where it is
628 enabled by default).");
629
630   ("get_autosync", (RBool "autosync", []), -1, [],
631    [InitNone, Always, TestRun (
632       [["get_autosync"]])],
633    "get autosync mode",
634    "\
635 Get the autosync flag.");
636
637   ("set_verbose", (RErr, [Bool "verbose"]), -1, [FishAlias "verbose"],
638    [],
639    "set verbose mode",
640    "\
641 If C<verbose> is true, this turns on verbose messages (to C<stderr>).
642
643 Verbose messages are disabled unless the environment variable
644 C<LIBGUESTFS_DEBUG> is defined and set to C<1>.");
645
646   ("get_verbose", (RBool "verbose", []), -1, [],
647    [],
648    "get verbose mode",
649    "\
650 This returns the verbose messages flag.");
651
652   ("is_ready", (RBool "ready", []), -1, [],
653    [InitNone, Always, TestOutputTrue (
654       [["is_ready"]])],
655    "is ready to accept commands",
656    "\
657 This returns true iff this handle is ready to accept commands
658 (in the C<READY> state).
659
660 For more information on states, see L<guestfs(3)>.");
661
662   ("is_config", (RBool "config", []), -1, [],
663    [InitNone, Always, TestOutputFalse (
664       [["is_config"]])],
665    "is in configuration state",
666    "\
667 This returns true iff this handle is being configured
668 (in the C<CONFIG> state).
669
670 For more information on states, see L<guestfs(3)>.");
671
672   ("is_launching", (RBool "launching", []), -1, [],
673    [InitNone, Always, TestOutputFalse (
674       [["is_launching"]])],
675    "is launching subprocess",
676    "\
677 This returns true iff this handle is launching the subprocess
678 (in the C<LAUNCHING> state).
679
680 For more information on states, see L<guestfs(3)>.");
681
682   ("is_busy", (RBool "busy", []), -1, [],
683    [InitNone, Always, TestOutputFalse (
684       [["is_busy"]])],
685    "is busy processing a command",
686    "\
687 This returns true iff this handle is busy processing a command
688 (in the C<BUSY> state).
689
690 For more information on states, see L<guestfs(3)>.");
691
692   ("get_state", (RInt "state", []), -1, [],
693    [],
694    "get the current state",
695    "\
696 This returns the current state as an opaque integer.  This is
697 only useful for printing debug and internal error messages.
698
699 For more information on states, see L<guestfs(3)>.");
700
701   ("set_memsize", (RErr, [Int "memsize"]), -1, [FishAlias "memsize"],
702    [InitNone, Always, TestOutputInt (
703       [["set_memsize"; "500"];
704        ["get_memsize"]], 500)],
705    "set memory allocated to the qemu subprocess",
706    "\
707 This sets the memory size in megabytes allocated to the
708 qemu subprocess.  This only has any effect if called before
709 C<guestfs_launch>.
710
711 You can also change this by setting the environment
712 variable C<LIBGUESTFS_MEMSIZE> before the handle is
713 created.
714
715 For more information on the architecture of libguestfs,
716 see L<guestfs(3)>.");
717
718   ("get_memsize", (RInt "memsize", []), -1, [],
719    [InitNone, Always, TestOutputIntOp (
720       [["get_memsize"]], ">=", 256)],
721    "get memory allocated to the qemu subprocess",
722    "\
723 This gets the memory size in megabytes allocated to the
724 qemu subprocess.
725
726 If C<guestfs_set_memsize> was not called
727 on this handle, and if C<LIBGUESTFS_MEMSIZE> was not set,
728 then this returns the compiled-in default value for memsize.
729
730 For more information on the architecture of libguestfs,
731 see L<guestfs(3)>.");
732
733   ("get_pid", (RInt "pid", []), -1, [FishAlias "pid"],
734    [InitNone, Always, TestOutputIntOp (
735       [["get_pid"]], ">=", 1)],
736    "get PID of qemu subprocess",
737    "\
738 Return the process ID of the qemu subprocess.  If there is no
739 qemu subprocess, then this will return an error.
740
741 This is an internal call used for debugging and testing.");
742
743   ("version", (RStruct ("version", "version"), []), -1, [],
744    [InitNone, Always, TestOutputStruct (
745       [["version"]], [CompareWithInt ("major", 1)])],
746    "get the library version number",
747    "\
748 Return the libguestfs version number that the program is linked
749 against.
750
751 Note that because of dynamic linking this is not necessarily
752 the version of libguestfs that you compiled against.  You can
753 compile the program, and then at runtime dynamically link
754 against a completely different C<libguestfs.so> library.
755
756 This call was added in version C<1.0.58>.  In previous
757 versions of libguestfs there was no way to get the version
758 number.  From C code you can use ELF weak linking tricks to find out if
759 this symbol exists (if it doesn't, then it's an earlier version).
760
761 The call returns a structure with four elements.  The first
762 three (C<major>, C<minor> and C<release>) are numbers and
763 correspond to the usual version triplet.  The fourth element
764 (C<extra>) is a string and is normally empty, but may be
765 used for distro-specific information.
766
767 To construct the original version string:
768 C<$major.$minor.$release$extra>
769
770 I<Note:> Don't use this call to test for availability
771 of features.  Distro backports makes this unreliable.  Use
772 C<guestfs_available> instead.");
773
774   ("set_selinux", (RErr, [Bool "selinux"]), -1, [FishAlias "selinux"],
775    [InitNone, Always, TestOutputTrue (
776       [["set_selinux"; "true"];
777        ["get_selinux"]])],
778    "set SELinux enabled or disabled at appliance boot",
779    "\
780 This sets the selinux flag that is passed to the appliance
781 at boot time.  The default is C<selinux=0> (disabled).
782
783 Note that if SELinux is enabled, it is always in
784 Permissive mode (C<enforcing=0>).
785
786 For more information on the architecture of libguestfs,
787 see L<guestfs(3)>.");
788
789   ("get_selinux", (RBool "selinux", []), -1, [],
790    [],
791    "get SELinux enabled flag",
792    "\
793 This returns the current setting of the selinux flag which
794 is passed to the appliance at boot time.  See C<guestfs_set_selinux>.
795
796 For more information on the architecture of libguestfs,
797 see L<guestfs(3)>.");
798
799   ("set_trace", (RErr, [Bool "trace"]), -1, [FishAlias "trace"],
800    [InitNone, Always, TestOutputFalse (
801       [["set_trace"; "false"];
802        ["get_trace"]])],
803    "enable or disable command traces",
804    "\
805 If the command trace flag is set to 1, then commands are
806 printed on stdout before they are executed in a format
807 which is very similar to the one used by guestfish.  In
808 other words, you can run a program with this enabled, and
809 you will get out a script which you can feed to guestfish
810 to perform the same set of actions.
811
812 If you want to trace C API calls into libguestfs (and
813 other libraries) then possibly a better way is to use
814 the external ltrace(1) command.
815
816 Command traces are disabled unless the environment variable
817 C<LIBGUESTFS_TRACE> is defined and set to C<1>.");
818
819   ("get_trace", (RBool "trace", []), -1, [],
820    [],
821    "get command trace enabled flag",
822    "\
823 Return the command trace flag.");
824
825   ("set_direct", (RErr, [Bool "direct"]), -1, [FishAlias "direct"],
826    [InitNone, Always, TestOutputFalse (
827       [["set_direct"; "false"];
828        ["get_direct"]])],
829    "enable or disable direct appliance mode",
830    "\
831 If the direct appliance mode flag is enabled, then stdin and
832 stdout are passed directly through to the appliance once it
833 is launched.
834
835 One consequence of this is that log messages aren't caught
836 by the library and handled by C<guestfs_set_log_message_callback>,
837 but go straight to stdout.
838
839 You probably don't want to use this unless you know what you
840 are doing.
841
842 The default is disabled.");
843
844   ("get_direct", (RBool "direct", []), -1, [],
845    [],
846    "get direct appliance mode flag",
847    "\
848 Return the direct appliance mode flag.");
849
850   ("set_recovery_proc", (RErr, [Bool "recoveryproc"]), -1, [FishAlias "recovery-proc"],
851    [InitNone, Always, TestOutputTrue (
852       [["set_recovery_proc"; "true"];
853        ["get_recovery_proc"]])],
854    "enable or disable the recovery process",
855    "\
856 If this is called with the parameter C<false> then
857 C<guestfs_launch> does not create a recovery process.  The
858 purpose of the recovery process is to stop runaway qemu
859 processes in the case where the main program aborts abruptly.
860
861 This only has any effect if called before C<guestfs_launch>,
862 and the default is true.
863
864 About the only time when you would want to disable this is
865 if the main process will fork itself into the background
866 (\"daemonize\" itself).  In this case the recovery process
867 thinks that the main program has disappeared and so kills
868 qemu, which is not very helpful.");
869
870   ("get_recovery_proc", (RBool "recoveryproc", []), -1, [],
871    [],
872    "get recovery process enabled flag",
873    "\
874 Return the recovery process enabled flag.");
875
876 ]
877
878 (* daemon_functions are any functions which cause some action
879  * to take place in the daemon.
880  *)
881
882 let daemon_functions = [
883   ("mount", (RErr, [Device "device"; String "mountpoint"]), 1, [],
884    [InitEmpty, Always, TestOutput (
885       [["part_disk"; "/dev/sda"; "mbr"];
886        ["mkfs"; "ext2"; "/dev/sda1"];
887        ["mount"; "/dev/sda1"; "/"];
888        ["write_file"; "/new"; "new file contents"; "0"];
889        ["cat"; "/new"]], "new file contents")],
890    "mount a guest disk at a position in the filesystem",
891    "\
892 Mount a guest disk at a position in the filesystem.  Block devices
893 are named C</dev/sda>, C</dev/sdb> and so on, as they were added to
894 the guest.  If those block devices contain partitions, they will have
895 the usual names (eg. C</dev/sda1>).  Also LVM C</dev/VG/LV>-style
896 names can be used.
897
898 The rules are the same as for L<mount(2)>:  A filesystem must
899 first be mounted on C</> before others can be mounted.  Other
900 filesystems can only be mounted on directories which already
901 exist.
902
903 The mounted filesystem is writable, if we have sufficient permissions
904 on the underlying device.
905
906 The filesystem options C<sync> and C<noatime> are set with this
907 call, in order to improve reliability.");
908
909   ("sync", (RErr, []), 2, [],
910    [ InitEmpty, Always, TestRun [["sync"]]],
911    "sync disks, writes are flushed through to the disk image",
912    "\
913 This syncs the disk, so that any writes are flushed through to the
914 underlying disk image.
915
916 You should always call this if you have modified a disk image, before
917 closing the handle.");
918
919   ("touch", (RErr, [Pathname "path"]), 3, [],
920    [InitBasicFS, Always, TestOutputTrue (
921       [["touch"; "/new"];
922        ["exists"; "/new"]])],
923    "update file timestamps or create a new file",
924    "\
925 Touch acts like the L<touch(1)> command.  It can be used to
926 update the timestamps on a file, or, if the file does not exist,
927 to create a new zero-length file.");
928
929   ("cat", (RString "content", [Pathname "path"]), 4, [ProtocolLimitWarning],
930    [InitISOFS, Always, TestOutput (
931       [["cat"; "/known-2"]], "abcdef\n")],
932    "list the contents of a file",
933    "\
934 Return the contents of the file named C<path>.
935
936 Note that this function cannot correctly handle binary files
937 (specifically, files containing C<\\0> character which is treated
938 as end of string).  For those you need to use the C<guestfs_read_file>
939 or C<guestfs_download> functions which have a more complex interface.");
940
941   ("ll", (RString "listing", [Pathname "directory"]), 5, [],
942    [], (* XXX Tricky to test because it depends on the exact format
943         * of the 'ls -l' command, which changes between F10 and F11.
944         *)
945    "list the files in a directory (long format)",
946    "\
947 List the files in C<directory> (relative to the root directory,
948 there is no cwd) in the format of 'ls -la'.
949
950 This command is mostly useful for interactive sessions.  It
951 is I<not> intended that you try to parse the output string.");
952
953   ("ls", (RStringList "listing", [Pathname "directory"]), 6, [],
954    [InitBasicFS, Always, TestOutputList (
955       [["touch"; "/new"];
956        ["touch"; "/newer"];
957        ["touch"; "/newest"];
958        ["ls"; "/"]], ["lost+found"; "new"; "newer"; "newest"])],
959    "list the files in a directory",
960    "\
961 List the files in C<directory> (relative to the root directory,
962 there is no cwd).  The '.' and '..' entries are not returned, but
963 hidden files are shown.
964
965 This command is mostly useful for interactive sessions.  Programs
966 should probably use C<guestfs_readdir> instead.");
967
968   ("list_devices", (RStringList "devices", []), 7, [],
969    [InitEmpty, Always, TestOutputListOfDevices (
970       [["list_devices"]], ["/dev/sda"; "/dev/sdb"; "/dev/sdc"; "/dev/sdd"])],
971    "list the block devices",
972    "\
973 List all the block devices.
974
975 The full block device names are returned, eg. C</dev/sda>");
976
977   ("list_partitions", (RStringList "partitions", []), 8, [],
978    [InitBasicFS, Always, TestOutputListOfDevices (
979       [["list_partitions"]], ["/dev/sda1"]);
980     InitEmpty, Always, TestOutputListOfDevices (
981       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
982        ["list_partitions"]], ["/dev/sda1"; "/dev/sda2"; "/dev/sda3"])],
983    "list the partitions",
984    "\
985 List all the partitions detected on all block devices.
986
987 The full partition device names are returned, eg. C</dev/sda1>
988
989 This does not return logical volumes.  For that you will need to
990 call C<guestfs_lvs>.");
991
992   ("pvs", (RStringList "physvols", []), 9, [Optional "lvm2"],
993    [InitBasicFSonLVM, Always, TestOutputListOfDevices (
994       [["pvs"]], ["/dev/sda1"]);
995     InitEmpty, Always, TestOutputListOfDevices (
996       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
997        ["pvcreate"; "/dev/sda1"];
998        ["pvcreate"; "/dev/sda2"];
999        ["pvcreate"; "/dev/sda3"];
1000        ["pvs"]], ["/dev/sda1"; "/dev/sda2"; "/dev/sda3"])],
1001    "list the LVM physical volumes (PVs)",
1002    "\
1003 List all the physical volumes detected.  This is the equivalent
1004 of the L<pvs(8)> command.
1005
1006 This returns a list of just the device names that contain
1007 PVs (eg. C</dev/sda2>).
1008
1009 See also C<guestfs_pvs_full>.");
1010
1011   ("vgs", (RStringList "volgroups", []), 10, [Optional "lvm2"],
1012    [InitBasicFSonLVM, Always, TestOutputList (
1013       [["vgs"]], ["VG"]);
1014     InitEmpty, Always, TestOutputList (
1015       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1016        ["pvcreate"; "/dev/sda1"];
1017        ["pvcreate"; "/dev/sda2"];
1018        ["pvcreate"; "/dev/sda3"];
1019        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1020        ["vgcreate"; "VG2"; "/dev/sda3"];
1021        ["vgs"]], ["VG1"; "VG2"])],
1022    "list the LVM volume groups (VGs)",
1023    "\
1024 List all the volumes groups detected.  This is the equivalent
1025 of the L<vgs(8)> command.
1026
1027 This returns a list of just the volume group names that were
1028 detected (eg. C<VolGroup00>).
1029
1030 See also C<guestfs_vgs_full>.");
1031
1032   ("lvs", (RStringList "logvols", []), 11, [Optional "lvm2"],
1033    [InitBasicFSonLVM, Always, TestOutputList (
1034       [["lvs"]], ["/dev/VG/LV"]);
1035     InitEmpty, Always, TestOutputList (
1036       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1037        ["pvcreate"; "/dev/sda1"];
1038        ["pvcreate"; "/dev/sda2"];
1039        ["pvcreate"; "/dev/sda3"];
1040        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1041        ["vgcreate"; "VG2"; "/dev/sda3"];
1042        ["lvcreate"; "LV1"; "VG1"; "50"];
1043        ["lvcreate"; "LV2"; "VG1"; "50"];
1044        ["lvcreate"; "LV3"; "VG2"; "50"];
1045        ["lvs"]], ["/dev/VG1/LV1"; "/dev/VG1/LV2"; "/dev/VG2/LV3"])],
1046    "list the LVM logical volumes (LVs)",
1047    "\
1048 List all the logical volumes detected.  This is the equivalent
1049 of the L<lvs(8)> command.
1050
1051 This returns a list of the logical volume device names
1052 (eg. C</dev/VolGroup00/LogVol00>).
1053
1054 See also C<guestfs_lvs_full>.");
1055
1056   ("pvs_full", (RStructList ("physvols", "lvm_pv"), []), 12, [Optional "lvm2"],
1057    [], (* XXX how to test? *)
1058    "list the LVM physical volumes (PVs)",
1059    "\
1060 List all the physical volumes detected.  This is the equivalent
1061 of the L<pvs(8)> command.  The \"full\" version includes all fields.");
1062
1063   ("vgs_full", (RStructList ("volgroups", "lvm_vg"), []), 13, [Optional "lvm2"],
1064    [], (* XXX how to test? *)
1065    "list the LVM volume groups (VGs)",
1066    "\
1067 List all the volumes groups detected.  This is the equivalent
1068 of the L<vgs(8)> command.  The \"full\" version includes all fields.");
1069
1070   ("lvs_full", (RStructList ("logvols", "lvm_lv"), []), 14, [Optional "lvm2"],
1071    [], (* XXX how to test? *)
1072    "list the LVM logical volumes (LVs)",
1073    "\
1074 List all the logical volumes detected.  This is the equivalent
1075 of the L<lvs(8)> command.  The \"full\" version includes all fields.");
1076
1077   ("read_lines", (RStringList "lines", [Pathname "path"]), 15, [],
1078    [InitISOFS, Always, TestOutputList (
1079       [["read_lines"; "/known-4"]], ["abc"; "def"; "ghi"]);
1080     InitISOFS, Always, TestOutputList (
1081       [["read_lines"; "/empty"]], [])],
1082    "read file as lines",
1083    "\
1084 Return the contents of the file named C<path>.
1085
1086 The file contents are returned as a list of lines.  Trailing
1087 C<LF> and C<CRLF> character sequences are I<not> returned.
1088
1089 Note that this function cannot correctly handle binary files
1090 (specifically, files containing C<\\0> character which is treated
1091 as end of line).  For those you need to use the C<guestfs_read_file>
1092 function which has a more complex interface.");
1093
1094   ("aug_init", (RErr, [Pathname "root"; Int "flags"]), 16, [Optional "augeas"],
1095    [], (* XXX Augeas code needs tests. *)
1096    "create a new Augeas handle",
1097    "\
1098 Create a new Augeas handle for editing configuration files.
1099 If there was any previous Augeas handle associated with this
1100 guestfs session, then it is closed.
1101
1102 You must call this before using any other C<guestfs_aug_*>
1103 commands.
1104
1105 C<root> is the filesystem root.  C<root> must not be NULL,
1106 use C</> instead.
1107
1108 The flags are the same as the flags defined in
1109 E<lt>augeas.hE<gt>, the logical I<or> of the following
1110 integers:
1111
1112 =over 4
1113
1114 =item C<AUG_SAVE_BACKUP> = 1
1115
1116 Keep the original file with a C<.augsave> extension.
1117
1118 =item C<AUG_SAVE_NEWFILE> = 2
1119
1120 Save changes into a file with extension C<.augnew>, and
1121 do not overwrite original.  Overrides C<AUG_SAVE_BACKUP>.
1122
1123 =item C<AUG_TYPE_CHECK> = 4
1124
1125 Typecheck lenses (can be expensive).
1126
1127 =item C<AUG_NO_STDINC> = 8
1128
1129 Do not use standard load path for modules.
1130
1131 =item C<AUG_SAVE_NOOP> = 16
1132
1133 Make save a no-op, just record what would have been changed.
1134
1135 =item C<AUG_NO_LOAD> = 32
1136
1137 Do not load the tree in C<guestfs_aug_init>.
1138
1139 =back
1140
1141 To close the handle, you can call C<guestfs_aug_close>.
1142
1143 To find out more about Augeas, see L<http://augeas.net/>.");
1144
1145   ("aug_close", (RErr, []), 26, [Optional "augeas"],
1146    [], (* XXX Augeas code needs tests. *)
1147    "close the current Augeas handle",
1148    "\
1149 Close the current Augeas handle and free up any resources
1150 used by it.  After calling this, you have to call
1151 C<guestfs_aug_init> again before you can use any other
1152 Augeas functions.");
1153
1154   ("aug_defvar", (RInt "nrnodes", [String "name"; OptString "expr"]), 17, [Optional "augeas"],
1155    [], (* XXX Augeas code needs tests. *)
1156    "define an Augeas variable",
1157    "\
1158 Defines an Augeas variable C<name> whose value is the result
1159 of evaluating C<expr>.  If C<expr> is NULL, then C<name> is
1160 undefined.
1161
1162 On success this returns the number of nodes in C<expr>, or
1163 C<0> if C<expr> evaluates to something which is not a nodeset.");
1164
1165   ("aug_defnode", (RStruct ("nrnodescreated", "int_bool"), [String "name"; String "expr"; String "val"]), 18, [Optional "augeas"],
1166    [], (* XXX Augeas code needs tests. *)
1167    "define an Augeas node",
1168    "\
1169 Defines a variable C<name> whose value is the result of
1170 evaluating C<expr>.
1171
1172 If C<expr> evaluates to an empty nodeset, a node is created,
1173 equivalent to calling C<guestfs_aug_set> C<expr>, C<value>.
1174 C<name> will be the nodeset containing that single node.
1175
1176 On success this returns a pair containing the
1177 number of nodes in the nodeset, and a boolean flag
1178 if a node was created.");
1179
1180   ("aug_get", (RString "val", [String "augpath"]), 19, [Optional "augeas"],
1181    [], (* XXX Augeas code needs tests. *)
1182    "look up the value of an Augeas path",
1183    "\
1184 Look up the value associated with C<path>.  If C<path>
1185 matches exactly one node, the C<value> is returned.");
1186
1187   ("aug_set", (RErr, [String "augpath"; String "val"]), 20, [Optional "augeas"],
1188    [], (* XXX Augeas code needs tests. *)
1189    "set Augeas path to value",
1190    "\
1191 Set the value associated with C<path> to C<value>.");
1192
1193   ("aug_insert", (RErr, [String "augpath"; String "label"; Bool "before"]), 21, [Optional "augeas"],
1194    [], (* XXX Augeas code needs tests. *)
1195    "insert a sibling Augeas node",
1196    "\
1197 Create a new sibling C<label> for C<path>, inserting it into
1198 the tree before or after C<path> (depending on the boolean
1199 flag C<before>).
1200
1201 C<path> must match exactly one existing node in the tree, and
1202 C<label> must be a label, ie. not contain C</>, C<*> or end
1203 with a bracketed index C<[N]>.");
1204
1205   ("aug_rm", (RInt "nrnodes", [String "augpath"]), 22, [Optional "augeas"],
1206    [], (* XXX Augeas code needs tests. *)
1207    "remove an Augeas path",
1208    "\
1209 Remove C<path> and all of its children.
1210
1211 On success this returns the number of entries which were removed.");
1212
1213   ("aug_mv", (RErr, [String "src"; String "dest"]), 23, [Optional "augeas"],
1214    [], (* XXX Augeas code needs tests. *)
1215    "move Augeas node",
1216    "\
1217 Move the node C<src> to C<dest>.  C<src> must match exactly
1218 one node.  C<dest> is overwritten if it exists.");
1219
1220   ("aug_match", (RStringList "matches", [String "augpath"]), 24, [Optional "augeas"],
1221    [], (* XXX Augeas code needs tests. *)
1222    "return Augeas nodes which match augpath",
1223    "\
1224 Returns a list of paths which match the path expression C<path>.
1225 The returned paths are sufficiently qualified so that they match
1226 exactly one node in the current tree.");
1227
1228   ("aug_save", (RErr, []), 25, [Optional "augeas"],
1229    [], (* XXX Augeas code needs tests. *)
1230    "write all pending Augeas changes to disk",
1231    "\
1232 This writes all pending changes to disk.
1233
1234 The flags which were passed to C<guestfs_aug_init> affect exactly
1235 how files are saved.");
1236
1237   ("aug_load", (RErr, []), 27, [Optional "augeas"],
1238    [], (* XXX Augeas code needs tests. *)
1239    "load files into the tree",
1240    "\
1241 Load files into the tree.
1242
1243 See C<aug_load> in the Augeas documentation for the full gory
1244 details.");
1245
1246   ("aug_ls", (RStringList "matches", [String "augpath"]), 28, [Optional "augeas"],
1247    [], (* XXX Augeas code needs tests. *)
1248    "list Augeas nodes under augpath",
1249    "\
1250 This is just a shortcut for listing C<guestfs_aug_match>
1251 C<path/*> and sorting the resulting nodes into alphabetical order.");
1252
1253   ("rm", (RErr, [Pathname "path"]), 29, [],
1254    [InitBasicFS, Always, TestRun
1255       [["touch"; "/new"];
1256        ["rm"; "/new"]];
1257     InitBasicFS, Always, TestLastFail
1258       [["rm"; "/new"]];
1259     InitBasicFS, Always, TestLastFail
1260       [["mkdir"; "/new"];
1261        ["rm"; "/new"]]],
1262    "remove a file",
1263    "\
1264 Remove the single file C<path>.");
1265
1266   ("rmdir", (RErr, [Pathname "path"]), 30, [],
1267    [InitBasicFS, Always, TestRun
1268       [["mkdir"; "/new"];
1269        ["rmdir"; "/new"]];
1270     InitBasicFS, Always, TestLastFail
1271       [["rmdir"; "/new"]];
1272     InitBasicFS, Always, TestLastFail
1273       [["touch"; "/new"];
1274        ["rmdir"; "/new"]]],
1275    "remove a directory",
1276    "\
1277 Remove the single directory C<path>.");
1278
1279   ("rm_rf", (RErr, [Pathname "path"]), 31, [],
1280    [InitBasicFS, Always, TestOutputFalse
1281       [["mkdir"; "/new"];
1282        ["mkdir"; "/new/foo"];
1283        ["touch"; "/new/foo/bar"];
1284        ["rm_rf"; "/new"];
1285        ["exists"; "/new"]]],
1286    "remove a file or directory recursively",
1287    "\
1288 Remove the file or directory C<path>, recursively removing the
1289 contents if its a directory.  This is like the C<rm -rf> shell
1290 command.");
1291
1292   ("mkdir", (RErr, [Pathname "path"]), 32, [],
1293    [InitBasicFS, Always, TestOutputTrue
1294       [["mkdir"; "/new"];
1295        ["is_dir"; "/new"]];
1296     InitBasicFS, Always, TestLastFail
1297       [["mkdir"; "/new/foo/bar"]]],
1298    "create a directory",
1299    "\
1300 Create a directory named C<path>.");
1301
1302   ("mkdir_p", (RErr, [Pathname "path"]), 33, [],
1303    [InitBasicFS, Always, TestOutputTrue
1304       [["mkdir_p"; "/new/foo/bar"];
1305        ["is_dir"; "/new/foo/bar"]];
1306     InitBasicFS, Always, TestOutputTrue
1307       [["mkdir_p"; "/new/foo/bar"];
1308        ["is_dir"; "/new/foo"]];
1309     InitBasicFS, Always, TestOutputTrue
1310       [["mkdir_p"; "/new/foo/bar"];
1311        ["is_dir"; "/new"]];
1312     (* Regression tests for RHBZ#503133: *)
1313     InitBasicFS, Always, TestRun
1314       [["mkdir"; "/new"];
1315        ["mkdir_p"; "/new"]];
1316     InitBasicFS, Always, TestLastFail
1317       [["touch"; "/new"];
1318        ["mkdir_p"; "/new"]]],
1319    "create a directory and parents",
1320    "\
1321 Create a directory named C<path>, creating any parent directories
1322 as necessary.  This is like the C<mkdir -p> shell command.");
1323
1324   ("chmod", (RErr, [Int "mode"; Pathname "path"]), 34, [],
1325    [], (* XXX Need stat command to test *)
1326    "change file mode",
1327    "\
1328 Change the mode (permissions) of C<path> to C<mode>.  Only
1329 numeric modes are supported.");
1330
1331   ("chown", (RErr, [Int "owner"; Int "group"; Pathname "path"]), 35, [],
1332    [], (* XXX Need stat command to test *)
1333    "change file owner and group",
1334    "\
1335 Change the file owner to C<owner> and group to C<group>.
1336
1337 Only numeric uid and gid are supported.  If you want to use
1338 names, you will need to locate and parse the password file
1339 yourself (Augeas support makes this relatively easy).");
1340
1341   ("exists", (RBool "existsflag", [Pathname "path"]), 36, [],
1342    [InitISOFS, Always, TestOutputTrue (
1343       [["exists"; "/empty"]]);
1344     InitISOFS, Always, TestOutputTrue (
1345       [["exists"; "/directory"]])],
1346    "test if file or directory exists",
1347    "\
1348 This returns C<true> if and only if there is a file, directory
1349 (or anything) with the given C<path> name.
1350
1351 See also C<guestfs_is_file>, C<guestfs_is_dir>, C<guestfs_stat>.");
1352
1353   ("is_file", (RBool "fileflag", [Pathname "path"]), 37, [],
1354    [InitISOFS, Always, TestOutputTrue (
1355       [["is_file"; "/known-1"]]);
1356     InitISOFS, Always, TestOutputFalse (
1357       [["is_file"; "/directory"]])],
1358    "test if file exists",
1359    "\
1360 This returns C<true> if and only if there is a file
1361 with the given C<path> name.  Note that it returns false for
1362 other objects like directories.
1363
1364 See also C<guestfs_stat>.");
1365
1366   ("is_dir", (RBool "dirflag", [Pathname "path"]), 38, [],
1367    [InitISOFS, Always, TestOutputFalse (
1368       [["is_dir"; "/known-3"]]);
1369     InitISOFS, Always, TestOutputTrue (
1370       [["is_dir"; "/directory"]])],
1371    "test if file exists",
1372    "\
1373 This returns C<true> if and only if there is a directory
1374 with the given C<path> name.  Note that it returns false for
1375 other objects like files.
1376
1377 See also C<guestfs_stat>.");
1378
1379   ("pvcreate", (RErr, [Device "device"]), 39, [Optional "lvm2"],
1380    [InitEmpty, Always, TestOutputListOfDevices (
1381       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1382        ["pvcreate"; "/dev/sda1"];
1383        ["pvcreate"; "/dev/sda2"];
1384        ["pvcreate"; "/dev/sda3"];
1385        ["pvs"]], ["/dev/sda1"; "/dev/sda2"; "/dev/sda3"])],
1386    "create an LVM physical volume",
1387    "\
1388 This creates an LVM physical volume on the named C<device>,
1389 where C<device> should usually be a partition name such
1390 as C</dev/sda1>.");
1391
1392   ("vgcreate", (RErr, [String "volgroup"; DeviceList "physvols"]), 40, [Optional "lvm2"],
1393    [InitEmpty, Always, TestOutputList (
1394       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1395        ["pvcreate"; "/dev/sda1"];
1396        ["pvcreate"; "/dev/sda2"];
1397        ["pvcreate"; "/dev/sda3"];
1398        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1399        ["vgcreate"; "VG2"; "/dev/sda3"];
1400        ["vgs"]], ["VG1"; "VG2"])],
1401    "create an LVM volume group",
1402    "\
1403 This creates an LVM volume group called C<volgroup>
1404 from the non-empty list of physical volumes C<physvols>.");
1405
1406   ("lvcreate", (RErr, [String "logvol"; String "volgroup"; Int "mbytes"]), 41, [Optional "lvm2"],
1407    [InitEmpty, Always, TestOutputList (
1408       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1409        ["pvcreate"; "/dev/sda1"];
1410        ["pvcreate"; "/dev/sda2"];
1411        ["pvcreate"; "/dev/sda3"];
1412        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1413        ["vgcreate"; "VG2"; "/dev/sda3"];
1414        ["lvcreate"; "LV1"; "VG1"; "50"];
1415        ["lvcreate"; "LV2"; "VG1"; "50"];
1416        ["lvcreate"; "LV3"; "VG2"; "50"];
1417        ["lvcreate"; "LV4"; "VG2"; "50"];
1418        ["lvcreate"; "LV5"; "VG2"; "50"];
1419        ["lvs"]],
1420       ["/dev/VG1/LV1"; "/dev/VG1/LV2";
1421        "/dev/VG2/LV3"; "/dev/VG2/LV4"; "/dev/VG2/LV5"])],
1422    "create an LVM volume group",
1423    "\
1424 This creates an LVM volume group called C<logvol>
1425 on the volume group C<volgroup>, with C<size> megabytes.");
1426
1427   ("mkfs", (RErr, [String "fstype"; Device "device"]), 42, [],
1428    [InitEmpty, Always, TestOutput (
1429       [["part_disk"; "/dev/sda"; "mbr"];
1430        ["mkfs"; "ext2"; "/dev/sda1"];
1431        ["mount"; "/dev/sda1"; "/"];
1432        ["write_file"; "/new"; "new file contents"; "0"];
1433        ["cat"; "/new"]], "new file contents")],
1434    "make a filesystem",
1435    "\
1436 This creates a filesystem on C<device> (usually a partition
1437 or LVM logical volume).  The filesystem type is C<fstype>, for
1438 example C<ext3>.");
1439
1440   ("sfdisk", (RErr, [Device "device";
1441                      Int "cyls"; Int "heads"; Int "sectors";
1442                      StringList "lines"]), 43, [DangerWillRobinson],
1443    [],
1444    "create partitions on a block device",
1445    "\
1446 This is a direct interface to the L<sfdisk(8)> program for creating
1447 partitions on block devices.
1448
1449 C<device> should be a block device, for example C</dev/sda>.
1450
1451 C<cyls>, C<heads> and C<sectors> are the number of cylinders, heads
1452 and sectors on the device, which are passed directly to sfdisk as
1453 the I<-C>, I<-H> and I<-S> parameters.  If you pass C<0> for any
1454 of these, then the corresponding parameter is omitted.  Usually for
1455 'large' disks, you can just pass C<0> for these, but for small
1456 (floppy-sized) disks, sfdisk (or rather, the kernel) cannot work
1457 out the right geometry and you will need to tell it.
1458
1459 C<lines> is a list of lines that we feed to C<sfdisk>.  For more
1460 information refer to the L<sfdisk(8)> manpage.
1461
1462 To create a single partition occupying the whole disk, you would
1463 pass C<lines> as a single element list, when the single element being
1464 the string C<,> (comma).
1465
1466 See also: C<guestfs_sfdisk_l>, C<guestfs_sfdisk_N>,
1467 C<guestfs_part_init>");
1468
1469   ("write_file", (RErr, [Pathname "path"; String "content"; Int "size"]), 44, [ProtocolLimitWarning],
1470    [InitBasicFS, Always, TestOutput (
1471       [["write_file"; "/new"; "new file contents"; "0"];
1472        ["cat"; "/new"]], "new file contents");
1473     InitBasicFS, Always, TestOutput (
1474       [["write_file"; "/new"; "\nnew file contents\n"; "0"];
1475        ["cat"; "/new"]], "\nnew file contents\n");
1476     InitBasicFS, Always, TestOutput (
1477       [["write_file"; "/new"; "\n\n"; "0"];
1478        ["cat"; "/new"]], "\n\n");
1479     InitBasicFS, Always, TestOutput (
1480       [["write_file"; "/new"; ""; "0"];
1481        ["cat"; "/new"]], "");
1482     InitBasicFS, Always, TestOutput (
1483       [["write_file"; "/new"; "\n\n\n"; "0"];
1484        ["cat"; "/new"]], "\n\n\n");
1485     InitBasicFS, Always, TestOutput (
1486       [["write_file"; "/new"; "\n"; "0"];
1487        ["cat"; "/new"]], "\n")],
1488    "create a file",
1489    "\
1490 This call creates a file called C<path>.  The contents of the
1491 file is the string C<content> (which can contain any 8 bit data),
1492 with length C<size>.
1493
1494 As a special case, if C<size> is C<0>
1495 then the length is calculated using C<strlen> (so in this case
1496 the content cannot contain embedded ASCII NULs).
1497
1498 I<NB.> Owing to a bug, writing content containing ASCII NUL
1499 characters does I<not> work, even if the length is specified.
1500 We hope to resolve this bug in a future version.  In the meantime
1501 use C<guestfs_upload>.");
1502
1503   ("umount", (RErr, [String "pathordevice"]), 45, [FishAlias "unmount"],
1504    [InitEmpty, Always, TestOutputListOfDevices (
1505       [["part_disk"; "/dev/sda"; "mbr"];
1506        ["mkfs"; "ext2"; "/dev/sda1"];
1507        ["mount"; "/dev/sda1"; "/"];
1508        ["mounts"]], ["/dev/sda1"]);
1509     InitEmpty, Always, TestOutputList (
1510       [["part_disk"; "/dev/sda"; "mbr"];
1511        ["mkfs"; "ext2"; "/dev/sda1"];
1512        ["mount"; "/dev/sda1"; "/"];
1513        ["umount"; "/"];
1514        ["mounts"]], [])],
1515    "unmount a filesystem",
1516    "\
1517 This unmounts the given filesystem.  The filesystem may be
1518 specified either by its mountpoint (path) or the device which
1519 contains the filesystem.");
1520
1521   ("mounts", (RStringList "devices", []), 46, [],
1522    [InitBasicFS, Always, TestOutputListOfDevices (
1523       [["mounts"]], ["/dev/sda1"])],
1524    "show mounted filesystems",
1525    "\
1526 This returns the list of currently mounted filesystems.  It returns
1527 the list of devices (eg. C</dev/sda1>, C</dev/VG/LV>).
1528
1529 Some internal mounts are not shown.
1530
1531 See also: C<guestfs_mountpoints>");
1532
1533   ("umount_all", (RErr, []), 47, [FishAlias "unmount-all"],
1534    [InitBasicFS, Always, TestOutputList (
1535       [["umount_all"];
1536        ["mounts"]], []);
1537     (* check that umount_all can unmount nested mounts correctly: *)
1538     InitEmpty, Always, TestOutputList (
1539       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1540        ["mkfs"; "ext2"; "/dev/sda1"];
1541        ["mkfs"; "ext2"; "/dev/sda2"];
1542        ["mkfs"; "ext2"; "/dev/sda3"];
1543        ["mount"; "/dev/sda1"; "/"];
1544        ["mkdir"; "/mp1"];
1545        ["mount"; "/dev/sda2"; "/mp1"];
1546        ["mkdir"; "/mp1/mp2"];
1547        ["mount"; "/dev/sda3"; "/mp1/mp2"];
1548        ["mkdir"; "/mp1/mp2/mp3"];
1549        ["umount_all"];
1550        ["mounts"]], [])],
1551    "unmount all filesystems",
1552    "\
1553 This unmounts all mounted filesystems.
1554
1555 Some internal mounts are not unmounted by this call.");
1556
1557   ("lvm_remove_all", (RErr, []), 48, [DangerWillRobinson; Optional "lvm2"],
1558    [],
1559    "remove all LVM LVs, VGs and PVs",
1560    "\
1561 This command removes all LVM logical volumes, volume groups
1562 and physical volumes.");
1563
1564   ("file", (RString "description", [Dev_or_Path "path"]), 49, [],
1565    [InitISOFS, Always, TestOutput (
1566       [["file"; "/empty"]], "empty");
1567     InitISOFS, Always, TestOutput (
1568       [["file"; "/known-1"]], "ASCII text");
1569     InitISOFS, Always, TestLastFail (
1570       [["file"; "/notexists"]])],
1571    "determine file type",
1572    "\
1573 This call uses the standard L<file(1)> command to determine
1574 the type or contents of the file.  This also works on devices,
1575 for example to find out whether a partition contains a filesystem.
1576
1577 This call will also transparently look inside various types
1578 of compressed file.
1579
1580 The exact command which runs is C<file -zbsL path>.  Note in
1581 particular that the filename is not prepended to the output
1582 (the C<-b> option).");
1583
1584   ("command", (RString "output", [StringList "arguments"]), 50, [ProtocolLimitWarning],
1585    [InitBasicFS, Always, TestOutput (
1586       [["upload"; "test-command"; "/test-command"];
1587        ["chmod"; "0o755"; "/test-command"];
1588        ["command"; "/test-command 1"]], "Result1");
1589     InitBasicFS, Always, TestOutput (
1590       [["upload"; "test-command"; "/test-command"];
1591        ["chmod"; "0o755"; "/test-command"];
1592        ["command"; "/test-command 2"]], "Result2\n");
1593     InitBasicFS, Always, TestOutput (
1594       [["upload"; "test-command"; "/test-command"];
1595        ["chmod"; "0o755"; "/test-command"];
1596        ["command"; "/test-command 3"]], "\nResult3");
1597     InitBasicFS, Always, TestOutput (
1598       [["upload"; "test-command"; "/test-command"];
1599        ["chmod"; "0o755"; "/test-command"];
1600        ["command"; "/test-command 4"]], "\nResult4\n");
1601     InitBasicFS, Always, TestOutput (
1602       [["upload"; "test-command"; "/test-command"];
1603        ["chmod"; "0o755"; "/test-command"];
1604        ["command"; "/test-command 5"]], "\nResult5\n\n");
1605     InitBasicFS, Always, TestOutput (
1606       [["upload"; "test-command"; "/test-command"];
1607        ["chmod"; "0o755"; "/test-command"];
1608        ["command"; "/test-command 6"]], "\n\nResult6\n\n");
1609     InitBasicFS, Always, TestOutput (
1610       [["upload"; "test-command"; "/test-command"];
1611        ["chmod"; "0o755"; "/test-command"];
1612        ["command"; "/test-command 7"]], "");
1613     InitBasicFS, Always, TestOutput (
1614       [["upload"; "test-command"; "/test-command"];
1615        ["chmod"; "0o755"; "/test-command"];
1616        ["command"; "/test-command 8"]], "\n");
1617     InitBasicFS, Always, TestOutput (
1618       [["upload"; "test-command"; "/test-command"];
1619        ["chmod"; "0o755"; "/test-command"];
1620        ["command"; "/test-command 9"]], "\n\n");
1621     InitBasicFS, Always, TestOutput (
1622       [["upload"; "test-command"; "/test-command"];
1623        ["chmod"; "0o755"; "/test-command"];
1624        ["command"; "/test-command 10"]], "Result10-1\nResult10-2\n");
1625     InitBasicFS, Always, TestOutput (
1626       [["upload"; "test-command"; "/test-command"];
1627        ["chmod"; "0o755"; "/test-command"];
1628        ["command"; "/test-command 11"]], "Result11-1\nResult11-2");
1629     InitBasicFS, Always, TestLastFail (
1630       [["upload"; "test-command"; "/test-command"];
1631        ["chmod"; "0o755"; "/test-command"];
1632        ["command"; "/test-command"]])],
1633    "run a command from the guest filesystem",
1634    "\
1635 This call runs a command from the guest filesystem.  The
1636 filesystem must be mounted, and must contain a compatible
1637 operating system (ie. something Linux, with the same
1638 or compatible processor architecture).
1639
1640 The single parameter is an argv-style list of arguments.
1641 The first element is the name of the program to run.
1642 Subsequent elements are parameters.  The list must be
1643 non-empty (ie. must contain a program name).  Note that
1644 the command runs directly, and is I<not> invoked via
1645 the shell (see C<guestfs_sh>).
1646
1647 The return value is anything printed to I<stdout> by
1648 the command.
1649
1650 If the command returns a non-zero exit status, then
1651 this function returns an error message.  The error message
1652 string is the content of I<stderr> from the command.
1653
1654 The C<$PATH> environment variable will contain at least
1655 C</usr/bin> and C</bin>.  If you require a program from
1656 another location, you should provide the full path in the
1657 first parameter.
1658
1659 Shared libraries and data files required by the program
1660 must be available on filesystems which are mounted in the
1661 correct places.  It is the caller's responsibility to ensure
1662 all filesystems that are needed are mounted at the right
1663 locations.");
1664
1665   ("command_lines", (RStringList "lines", [StringList "arguments"]), 51, [ProtocolLimitWarning],
1666    [InitBasicFS, Always, TestOutputList (
1667       [["upload"; "test-command"; "/test-command"];
1668        ["chmod"; "0o755"; "/test-command"];
1669        ["command_lines"; "/test-command 1"]], ["Result1"]);
1670     InitBasicFS, Always, TestOutputList (
1671       [["upload"; "test-command"; "/test-command"];
1672        ["chmod"; "0o755"; "/test-command"];
1673        ["command_lines"; "/test-command 2"]], ["Result2"]);
1674     InitBasicFS, Always, TestOutputList (
1675       [["upload"; "test-command"; "/test-command"];
1676        ["chmod"; "0o755"; "/test-command"];
1677        ["command_lines"; "/test-command 3"]], ["";"Result3"]);
1678     InitBasicFS, Always, TestOutputList (
1679       [["upload"; "test-command"; "/test-command"];
1680        ["chmod"; "0o755"; "/test-command"];
1681        ["command_lines"; "/test-command 4"]], ["";"Result4"]);
1682     InitBasicFS, Always, TestOutputList (
1683       [["upload"; "test-command"; "/test-command"];
1684        ["chmod"; "0o755"; "/test-command"];
1685        ["command_lines"; "/test-command 5"]], ["";"Result5";""]);
1686     InitBasicFS, Always, TestOutputList (
1687       [["upload"; "test-command"; "/test-command"];
1688        ["chmod"; "0o755"; "/test-command"];
1689        ["command_lines"; "/test-command 6"]], ["";"";"Result6";""]);
1690     InitBasicFS, Always, TestOutputList (
1691       [["upload"; "test-command"; "/test-command"];
1692        ["chmod"; "0o755"; "/test-command"];
1693        ["command_lines"; "/test-command 7"]], []);
1694     InitBasicFS, Always, TestOutputList (
1695       [["upload"; "test-command"; "/test-command"];
1696        ["chmod"; "0o755"; "/test-command"];
1697        ["command_lines"; "/test-command 8"]], [""]);
1698     InitBasicFS, Always, TestOutputList (
1699       [["upload"; "test-command"; "/test-command"];
1700        ["chmod"; "0o755"; "/test-command"];
1701        ["command_lines"; "/test-command 9"]], ["";""]);
1702     InitBasicFS, Always, TestOutputList (
1703       [["upload"; "test-command"; "/test-command"];
1704        ["chmod"; "0o755"; "/test-command"];
1705        ["command_lines"; "/test-command 10"]], ["Result10-1";"Result10-2"]);
1706     InitBasicFS, Always, TestOutputList (
1707       [["upload"; "test-command"; "/test-command"];
1708        ["chmod"; "0o755"; "/test-command"];
1709        ["command_lines"; "/test-command 11"]], ["Result11-1";"Result11-2"])],
1710    "run a command, returning lines",
1711    "\
1712 This is the same as C<guestfs_command>, but splits the
1713 result into a list of lines.
1714
1715 See also: C<guestfs_sh_lines>");
1716
1717   ("stat", (RStruct ("statbuf", "stat"), [Pathname "path"]), 52, [],
1718    [InitISOFS, Always, TestOutputStruct (
1719       [["stat"; "/empty"]], [CompareWithInt ("size", 0)])],
1720    "get file information",
1721    "\
1722 Returns file information for the given C<path>.
1723
1724 This is the same as the C<stat(2)> system call.");
1725
1726   ("lstat", (RStruct ("statbuf", "stat"), [Pathname "path"]), 53, [],
1727    [InitISOFS, Always, TestOutputStruct (
1728       [["lstat"; "/empty"]], [CompareWithInt ("size", 0)])],
1729    "get file information for a symbolic link",
1730    "\
1731 Returns file information for the given C<path>.
1732
1733 This is the same as C<guestfs_stat> except that if C<path>
1734 is a symbolic link, then the link is stat-ed, not the file it
1735 refers to.
1736
1737 This is the same as the C<lstat(2)> system call.");
1738
1739   ("statvfs", (RStruct ("statbuf", "statvfs"), [Pathname "path"]), 54, [],
1740    [InitISOFS, Always, TestOutputStruct (
1741       [["statvfs"; "/"]], [CompareWithInt ("namemax", 255)])],
1742    "get file system statistics",
1743    "\
1744 Returns file system statistics for any mounted file system.
1745 C<path> should be a file or directory in the mounted file system
1746 (typically it is the mount point itself, but it doesn't need to be).
1747
1748 This is the same as the C<statvfs(2)> system call.");
1749
1750   ("tune2fs_l", (RHashtable "superblock", [Device "device"]), 55, [],
1751    [], (* XXX test *)
1752    "get ext2/ext3/ext4 superblock details",
1753    "\
1754 This returns the contents of the ext2, ext3 or ext4 filesystem
1755 superblock on C<device>.
1756
1757 It is the same as running C<tune2fs -l device>.  See L<tune2fs(8)>
1758 manpage for more details.  The list of fields returned isn't
1759 clearly defined, and depends on both the version of C<tune2fs>
1760 that libguestfs was built against, and the filesystem itself.");
1761
1762   ("blockdev_setro", (RErr, [Device "device"]), 56, [],
1763    [InitEmpty, Always, TestOutputTrue (
1764       [["blockdev_setro"; "/dev/sda"];
1765        ["blockdev_getro"; "/dev/sda"]])],
1766    "set block device to read-only",
1767    "\
1768 Sets the block device named C<device> to read-only.
1769
1770 This uses the L<blockdev(8)> command.");
1771
1772   ("blockdev_setrw", (RErr, [Device "device"]), 57, [],
1773    [InitEmpty, Always, TestOutputFalse (
1774       [["blockdev_setrw"; "/dev/sda"];
1775        ["blockdev_getro"; "/dev/sda"]])],
1776    "set block device to read-write",
1777    "\
1778 Sets the block device named C<device> to read-write.
1779
1780 This uses the L<blockdev(8)> command.");
1781
1782   ("blockdev_getro", (RBool "ro", [Device "device"]), 58, [],
1783    [InitEmpty, Always, TestOutputTrue (
1784       [["blockdev_setro"; "/dev/sda"];
1785        ["blockdev_getro"; "/dev/sda"]])],
1786    "is block device set to read-only",
1787    "\
1788 Returns a boolean indicating if the block device is read-only
1789 (true if read-only, false if not).
1790
1791 This uses the L<blockdev(8)> command.");
1792
1793   ("blockdev_getss", (RInt "sectorsize", [Device "device"]), 59, [],
1794    [InitEmpty, Always, TestOutputInt (
1795       [["blockdev_getss"; "/dev/sda"]], 512)],
1796    "get sectorsize of block device",
1797    "\
1798 This returns the size of sectors on a block device.
1799 Usually 512, but can be larger for modern devices.
1800
1801 (Note, this is not the size in sectors, use C<guestfs_blockdev_getsz>
1802 for that).
1803
1804 This uses the L<blockdev(8)> command.");
1805
1806   ("blockdev_getbsz", (RInt "blocksize", [Device "device"]), 60, [],
1807    [InitEmpty, Always, TestOutputInt (
1808       [["blockdev_getbsz"; "/dev/sda"]], 4096)],
1809    "get blocksize of block device",
1810    "\
1811 This returns the block size of a device.
1812
1813 (Note this is different from both I<size in blocks> and
1814 I<filesystem block size>).
1815
1816 This uses the L<blockdev(8)> command.");
1817
1818   ("blockdev_setbsz", (RErr, [Device "device"; Int "blocksize"]), 61, [],
1819    [], (* XXX test *)
1820    "set blocksize of block device",
1821    "\
1822 This sets the block size of a device.
1823
1824 (Note this is different from both I<size in blocks> and
1825 I<filesystem block size>).
1826
1827 This uses the L<blockdev(8)> command.");
1828
1829   ("blockdev_getsz", (RInt64 "sizeinsectors", [Device "device"]), 62, [],
1830    [InitEmpty, Always, TestOutputInt (
1831       [["blockdev_getsz"; "/dev/sda"]], 1024000)],
1832    "get total size of device in 512-byte sectors",
1833    "\
1834 This returns the size of the device in units of 512-byte sectors
1835 (even if the sectorsize isn't 512 bytes ... weird).
1836
1837 See also C<guestfs_blockdev_getss> for the real sector size of
1838 the device, and C<guestfs_blockdev_getsize64> for the more
1839 useful I<size in bytes>.
1840
1841 This uses the L<blockdev(8)> command.");
1842
1843   ("blockdev_getsize64", (RInt64 "sizeinbytes", [Device "device"]), 63, [],
1844    [InitEmpty, Always, TestOutputInt (
1845       [["blockdev_getsize64"; "/dev/sda"]], 524288000)],
1846    "get total size of device in bytes",
1847    "\
1848 This returns the size of the device in bytes.
1849
1850 See also C<guestfs_blockdev_getsz>.
1851
1852 This uses the L<blockdev(8)> command.");
1853
1854   ("blockdev_flushbufs", (RErr, [Device "device"]), 64, [],
1855    [InitEmpty, Always, TestRun
1856       [["blockdev_flushbufs"; "/dev/sda"]]],
1857    "flush device buffers",
1858    "\
1859 This tells the kernel to flush internal buffers associated
1860 with C<device>.
1861
1862 This uses the L<blockdev(8)> command.");
1863
1864   ("blockdev_rereadpt", (RErr, [Device "device"]), 65, [],
1865    [InitEmpty, Always, TestRun
1866       [["blockdev_rereadpt"; "/dev/sda"]]],
1867    "reread partition table",
1868    "\
1869 Reread the partition table on C<device>.
1870
1871 This uses the L<blockdev(8)> command.");
1872
1873   ("upload", (RErr, [FileIn "filename"; Dev_or_Path "remotefilename"]), 66, [],
1874    [InitBasicFS, Always, TestOutput (
1875       (* Pick a file from cwd which isn't likely to change. *)
1876       [["upload"; "../COPYING.LIB"; "/COPYING.LIB"];
1877        ["checksum"; "md5"; "/COPYING.LIB"]],
1878       Digest.to_hex (Digest.file "COPYING.LIB"))],
1879    "upload a file from the local machine",
1880    "\
1881 Upload local file C<filename> to C<remotefilename> on the
1882 filesystem.
1883
1884 C<filename> can also be a named pipe.
1885
1886 See also C<guestfs_download>.");
1887
1888   ("download", (RErr, [Dev_or_Path "remotefilename"; FileOut "filename"]), 67, [],
1889    [InitBasicFS, Always, TestOutput (
1890       (* Pick a file from cwd which isn't likely to change. *)
1891       [["upload"; "../COPYING.LIB"; "/COPYING.LIB"];
1892        ["download"; "/COPYING.LIB"; "testdownload.tmp"];
1893        ["upload"; "testdownload.tmp"; "/upload"];
1894        ["checksum"; "md5"; "/upload"]],
1895       Digest.to_hex (Digest.file "COPYING.LIB"))],
1896    "download a file to the local machine",
1897    "\
1898 Download file C<remotefilename> and save it as C<filename>
1899 on the local machine.
1900
1901 C<filename> can also be a named pipe.
1902
1903 See also C<guestfs_upload>, C<guestfs_cat>.");
1904
1905   ("checksum", (RString "checksum", [String "csumtype"; Pathname "path"]), 68, [],
1906    [InitISOFS, Always, TestOutput (
1907       [["checksum"; "crc"; "/known-3"]], "2891671662");
1908     InitISOFS, Always, TestLastFail (
1909       [["checksum"; "crc"; "/notexists"]]);
1910     InitISOFS, Always, TestOutput (
1911       [["checksum"; "md5"; "/known-3"]], "46d6ca27ee07cdc6fa99c2e138cc522c");
1912     InitISOFS, Always, TestOutput (
1913       [["checksum"; "sha1"; "/known-3"]], "b7ebccc3ee418311091c3eda0a45b83c0a770f15");
1914     InitISOFS, Always, TestOutput (
1915       [["checksum"; "sha224"; "/known-3"]], "d2cd1774b28f3659c14116be0a6dc2bb5c4b350ce9cd5defac707741");
1916     InitISOFS, Always, TestOutput (
1917       [["checksum"; "sha256"; "/known-3"]], "75bb71b90cd20cb13f86d2bea8dad63ac7194e7517c3b52b8d06ff52d3487d30");
1918     InitISOFS, Always, TestOutput (
1919       [["checksum"; "sha384"; "/known-3"]], "5fa7883430f357b5d7b7271d3a1d2872b51d73cba72731de6863d3dea55f30646af2799bef44d5ea776a5ec7941ac640");
1920     InitISOFS, Always, TestOutput (
1921       [["checksum"; "sha512"; "/known-3"]], "2794062c328c6b216dca90443b7f7134c5f40e56bd0ed7853123275a09982a6f992e6ca682f9d2fba34a4c5e870d8fe077694ff831e3032a004ee077e00603f6")],
1922    "compute MD5, SHAx or CRC checksum of file",
1923    "\
1924 This call computes the MD5, SHAx or CRC checksum of the
1925 file named C<path>.
1926
1927 The type of checksum to compute is given by the C<csumtype>
1928 parameter which must have one of the following values:
1929
1930 =over 4
1931
1932 =item C<crc>
1933
1934 Compute the cyclic redundancy check (CRC) specified by POSIX
1935 for the C<cksum> command.
1936
1937 =item C<md5>
1938
1939 Compute the MD5 hash (using the C<md5sum> program).
1940
1941 =item C<sha1>
1942
1943 Compute the SHA1 hash (using the C<sha1sum> program).
1944
1945 =item C<sha224>
1946
1947 Compute the SHA224 hash (using the C<sha224sum> program).
1948
1949 =item C<sha256>
1950
1951 Compute the SHA256 hash (using the C<sha256sum> program).
1952
1953 =item C<sha384>
1954
1955 Compute the SHA384 hash (using the C<sha384sum> program).
1956
1957 =item C<sha512>
1958
1959 Compute the SHA512 hash (using the C<sha512sum> program).
1960
1961 =back
1962
1963 The checksum is returned as a printable string.");
1964
1965   ("tar_in", (RErr, [FileIn "tarfile"; String "directory"]), 69, [],
1966    [InitBasicFS, Always, TestOutput (
1967       [["tar_in"; "../images/helloworld.tar"; "/"];
1968        ["cat"; "/hello"]], "hello\n")],
1969    "unpack tarfile to directory",
1970    "\
1971 This command uploads and unpacks local file C<tarfile> (an
1972 I<uncompressed> tar file) into C<directory>.
1973
1974 To upload a compressed tarball, use C<guestfs_tgz_in>.");
1975
1976   ("tar_out", (RErr, [String "directory"; FileOut "tarfile"]), 70, [],
1977    [],
1978    "pack directory into tarfile",
1979    "\
1980 This command packs the contents of C<directory> and downloads
1981 it to local file C<tarfile>.
1982
1983 To download a compressed tarball, use C<guestfs_tgz_out>.");
1984
1985   ("tgz_in", (RErr, [FileIn "tarball"; String "directory"]), 71, [],
1986    [InitBasicFS, Always, TestOutput (
1987       [["tgz_in"; "../images/helloworld.tar.gz"; "/"];
1988        ["cat"; "/hello"]], "hello\n")],
1989    "unpack compressed tarball to directory",
1990    "\
1991 This command uploads and unpacks local file C<tarball> (a
1992 I<gzip compressed> tar file) into C<directory>.
1993
1994 To upload an uncompressed tarball, use C<guestfs_tar_in>.");
1995
1996   ("tgz_out", (RErr, [Pathname "directory"; FileOut "tarball"]), 72, [],
1997    [],
1998    "pack directory into compressed tarball",
1999    "\
2000 This command packs the contents of C<directory> and downloads
2001 it to local file C<tarball>.
2002
2003 To download an uncompressed tarball, use C<guestfs_tar_out>.");
2004
2005   ("mount_ro", (RErr, [Device "device"; String "mountpoint"]), 73, [],
2006    [InitBasicFS, Always, TestLastFail (
2007       [["umount"; "/"];
2008        ["mount_ro"; "/dev/sda1"; "/"];
2009        ["touch"; "/new"]]);
2010     InitBasicFS, Always, TestOutput (
2011       [["write_file"; "/new"; "data"; "0"];
2012        ["umount"; "/"];
2013        ["mount_ro"; "/dev/sda1"; "/"];
2014        ["cat"; "/new"]], "data")],
2015    "mount a guest disk, read-only",
2016    "\
2017 This is the same as the C<guestfs_mount> command, but it
2018 mounts the filesystem with the read-only (I<-o ro>) flag.");
2019
2020   ("mount_options", (RErr, [String "options"; Device "device"; String "mountpoint"]), 74, [],
2021    [],
2022    "mount a guest disk with mount options",
2023    "\
2024 This is the same as the C<guestfs_mount> command, but it
2025 allows you to set the mount options as for the
2026 L<mount(8)> I<-o> flag.");
2027
2028   ("mount_vfs", (RErr, [String "options"; String "vfstype"; Device "device"; String "mountpoint"]), 75, [],
2029    [],
2030    "mount a guest disk with mount options and vfstype",
2031    "\
2032 This is the same as the C<guestfs_mount> command, but it
2033 allows you to set both the mount options and the vfstype
2034 as for the L<mount(8)> I<-o> and I<-t> flags.");
2035
2036   ("debug", (RString "result", [String "subcmd"; StringList "extraargs"]), 76, [],
2037    [],
2038    "debugging and internals",
2039    "\
2040 The C<guestfs_debug> command exposes some internals of
2041 C<guestfsd> (the guestfs daemon) that runs inside the
2042 qemu subprocess.
2043
2044 There is no comprehensive help for this command.  You have
2045 to look at the file C<daemon/debug.c> in the libguestfs source
2046 to find out what you can do.");
2047
2048   ("lvremove", (RErr, [Device "device"]), 77, [Optional "lvm2"],
2049    [InitEmpty, Always, TestOutputList (
2050       [["part_disk"; "/dev/sda"; "mbr"];
2051        ["pvcreate"; "/dev/sda1"];
2052        ["vgcreate"; "VG"; "/dev/sda1"];
2053        ["lvcreate"; "LV1"; "VG"; "50"];
2054        ["lvcreate"; "LV2"; "VG"; "50"];
2055        ["lvremove"; "/dev/VG/LV1"];
2056        ["lvs"]], ["/dev/VG/LV2"]);
2057     InitEmpty, Always, TestOutputList (
2058       [["part_disk"; "/dev/sda"; "mbr"];
2059        ["pvcreate"; "/dev/sda1"];
2060        ["vgcreate"; "VG"; "/dev/sda1"];
2061        ["lvcreate"; "LV1"; "VG"; "50"];
2062        ["lvcreate"; "LV2"; "VG"; "50"];
2063        ["lvremove"; "/dev/VG"];
2064        ["lvs"]], []);
2065     InitEmpty, Always, TestOutputList (
2066       [["part_disk"; "/dev/sda"; "mbr"];
2067        ["pvcreate"; "/dev/sda1"];
2068        ["vgcreate"; "VG"; "/dev/sda1"];
2069        ["lvcreate"; "LV1"; "VG"; "50"];
2070        ["lvcreate"; "LV2"; "VG"; "50"];
2071        ["lvremove"; "/dev/VG"];
2072        ["vgs"]], ["VG"])],
2073    "remove an LVM logical volume",
2074    "\
2075 Remove an LVM logical volume C<device>, where C<device> is
2076 the path to the LV, such as C</dev/VG/LV>.
2077
2078 You can also remove all LVs in a volume group by specifying
2079 the VG name, C</dev/VG>.");
2080
2081   ("vgremove", (RErr, [String "vgname"]), 78, [Optional "lvm2"],
2082    [InitEmpty, Always, TestOutputList (
2083       [["part_disk"; "/dev/sda"; "mbr"];
2084        ["pvcreate"; "/dev/sda1"];
2085        ["vgcreate"; "VG"; "/dev/sda1"];
2086        ["lvcreate"; "LV1"; "VG"; "50"];
2087        ["lvcreate"; "LV2"; "VG"; "50"];
2088        ["vgremove"; "VG"];
2089        ["lvs"]], []);
2090     InitEmpty, Always, TestOutputList (
2091       [["part_disk"; "/dev/sda"; "mbr"];
2092        ["pvcreate"; "/dev/sda1"];
2093        ["vgcreate"; "VG"; "/dev/sda1"];
2094        ["lvcreate"; "LV1"; "VG"; "50"];
2095        ["lvcreate"; "LV2"; "VG"; "50"];
2096        ["vgremove"; "VG"];
2097        ["vgs"]], [])],
2098    "remove an LVM volume group",
2099    "\
2100 Remove an LVM volume group C<vgname>, (for example C<VG>).
2101
2102 This also forcibly removes all logical volumes in the volume
2103 group (if any).");
2104
2105   ("pvremove", (RErr, [Device "device"]), 79, [Optional "lvm2"],
2106    [InitEmpty, Always, TestOutputListOfDevices (
2107       [["part_disk"; "/dev/sda"; "mbr"];
2108        ["pvcreate"; "/dev/sda1"];
2109        ["vgcreate"; "VG"; "/dev/sda1"];
2110        ["lvcreate"; "LV1"; "VG"; "50"];
2111        ["lvcreate"; "LV2"; "VG"; "50"];
2112        ["vgremove"; "VG"];
2113        ["pvremove"; "/dev/sda1"];
2114        ["lvs"]], []);
2115     InitEmpty, Always, TestOutputListOfDevices (
2116       [["part_disk"; "/dev/sda"; "mbr"];
2117        ["pvcreate"; "/dev/sda1"];
2118        ["vgcreate"; "VG"; "/dev/sda1"];
2119        ["lvcreate"; "LV1"; "VG"; "50"];
2120        ["lvcreate"; "LV2"; "VG"; "50"];
2121        ["vgremove"; "VG"];
2122        ["pvremove"; "/dev/sda1"];
2123        ["vgs"]], []);
2124     InitEmpty, Always, TestOutputListOfDevices (
2125       [["part_disk"; "/dev/sda"; "mbr"];
2126        ["pvcreate"; "/dev/sda1"];
2127        ["vgcreate"; "VG"; "/dev/sda1"];
2128        ["lvcreate"; "LV1"; "VG"; "50"];
2129        ["lvcreate"; "LV2"; "VG"; "50"];
2130        ["vgremove"; "VG"];
2131        ["pvremove"; "/dev/sda1"];
2132        ["pvs"]], [])],
2133    "remove an LVM physical volume",
2134    "\
2135 This wipes a physical volume C<device> so that LVM will no longer
2136 recognise it.
2137
2138 The implementation uses the C<pvremove> command which refuses to
2139 wipe physical volumes that contain any volume groups, so you have
2140 to remove those first.");
2141
2142   ("set_e2label", (RErr, [Device "device"; String "label"]), 80, [],
2143    [InitBasicFS, Always, TestOutput (
2144       [["set_e2label"; "/dev/sda1"; "testlabel"];
2145        ["get_e2label"; "/dev/sda1"]], "testlabel")],
2146    "set the ext2/3/4 filesystem label",
2147    "\
2148 This sets the ext2/3/4 filesystem label of the filesystem on
2149 C<device> to C<label>.  Filesystem labels are limited to
2150 16 characters.
2151
2152 You can use either C<guestfs_tune2fs_l> or C<guestfs_get_e2label>
2153 to return the existing label on a filesystem.");
2154
2155   ("get_e2label", (RString "label", [Device "device"]), 81, [],
2156    [],
2157    "get the ext2/3/4 filesystem label",
2158    "\
2159 This returns the ext2/3/4 filesystem label of the filesystem on
2160 C<device>.");
2161
2162   ("set_e2uuid", (RErr, [Device "device"; String "uuid"]), 82, [],
2163    (let uuid = uuidgen () in
2164     [InitBasicFS, Always, TestOutput (
2165        [["set_e2uuid"; "/dev/sda1"; uuid];
2166         ["get_e2uuid"; "/dev/sda1"]], uuid);
2167      InitBasicFS, Always, TestOutput (
2168        [["set_e2uuid"; "/dev/sda1"; "clear"];
2169         ["get_e2uuid"; "/dev/sda1"]], "");
2170      (* We can't predict what UUIDs will be, so just check the commands run. *)
2171      InitBasicFS, Always, TestRun (
2172        [["set_e2uuid"; "/dev/sda1"; "random"]]);
2173      InitBasicFS, Always, TestRun (
2174        [["set_e2uuid"; "/dev/sda1"; "time"]])]),
2175    "set the ext2/3/4 filesystem UUID",
2176    "\
2177 This sets the ext2/3/4 filesystem UUID of the filesystem on
2178 C<device> to C<uuid>.  The format of the UUID and alternatives
2179 such as C<clear>, C<random> and C<time> are described in the
2180 L<tune2fs(8)> manpage.
2181
2182 You can use either C<guestfs_tune2fs_l> or C<guestfs_get_e2uuid>
2183 to return the existing UUID of a filesystem.");
2184
2185   ("get_e2uuid", (RString "uuid", [Device "device"]), 83, [],
2186    [],
2187    "get the ext2/3/4 filesystem UUID",
2188    "\
2189 This returns the ext2/3/4 filesystem UUID of the filesystem on
2190 C<device>.");
2191
2192   ("fsck", (RInt "status", [String "fstype"; Device "device"]), 84, [],
2193    [InitBasicFS, Always, TestOutputInt (
2194       [["umount"; "/dev/sda1"];
2195        ["fsck"; "ext2"; "/dev/sda1"]], 0);
2196     InitBasicFS, Always, TestOutputInt (
2197       [["umount"; "/dev/sda1"];
2198        ["zero"; "/dev/sda1"];
2199        ["fsck"; "ext2"; "/dev/sda1"]], 8)],
2200    "run the filesystem checker",
2201    "\
2202 This runs the filesystem checker (fsck) on C<device> which
2203 should have filesystem type C<fstype>.
2204
2205 The returned integer is the status.  See L<fsck(8)> for the
2206 list of status codes from C<fsck>.
2207
2208 Notes:
2209
2210 =over 4
2211
2212 =item *
2213
2214 Multiple status codes can be summed together.
2215
2216 =item *
2217
2218 A non-zero return code can mean \"success\", for example if
2219 errors have been corrected on the filesystem.
2220
2221 =item *
2222
2223 Checking or repairing NTFS volumes is not supported
2224 (by linux-ntfs).
2225
2226 =back
2227
2228 This command is entirely equivalent to running C<fsck -a -t fstype device>.");
2229
2230   ("zero", (RErr, [Device "device"]), 85, [],
2231    [InitBasicFS, Always, TestOutput (
2232       [["umount"; "/dev/sda1"];
2233        ["zero"; "/dev/sda1"];
2234        ["file"; "/dev/sda1"]], "data")],
2235    "write zeroes to the device",
2236    "\
2237 This command writes zeroes over the first few blocks of C<device>.
2238
2239 How many blocks are zeroed isn't specified (but it's I<not> enough
2240 to securely wipe the device).  It should be sufficient to remove
2241 any partition tables, filesystem superblocks and so on.
2242
2243 See also: C<guestfs_scrub_device>.");
2244
2245   ("grub_install", (RErr, [Pathname "root"; Device "device"]), 86, [],
2246    (* Test disabled because grub-install incompatible with virtio-blk driver.
2247     * See also: https://bugzilla.redhat.com/show_bug.cgi?id=479760
2248     *)
2249    [InitBasicFS, Disabled, TestOutputTrue (
2250       [["grub_install"; "/"; "/dev/sda1"];
2251        ["is_dir"; "/boot"]])],
2252    "install GRUB",
2253    "\
2254 This command installs GRUB (the Grand Unified Bootloader) on
2255 C<device>, with the root directory being C<root>.");
2256
2257   ("cp", (RErr, [Pathname "src"; Pathname "dest"]), 87, [],
2258    [InitBasicFS, Always, TestOutput (
2259       [["write_file"; "/old"; "file content"; "0"];
2260        ["cp"; "/old"; "/new"];
2261        ["cat"; "/new"]], "file content");
2262     InitBasicFS, Always, TestOutputTrue (
2263       [["write_file"; "/old"; "file content"; "0"];
2264        ["cp"; "/old"; "/new"];
2265        ["is_file"; "/old"]]);
2266     InitBasicFS, Always, TestOutput (
2267       [["write_file"; "/old"; "file content"; "0"];
2268        ["mkdir"; "/dir"];
2269        ["cp"; "/old"; "/dir/new"];
2270        ["cat"; "/dir/new"]], "file content")],
2271    "copy a file",
2272    "\
2273 This copies a file from C<src> to C<dest> where C<dest> is
2274 either a destination filename or destination directory.");
2275
2276   ("cp_a", (RErr, [Pathname "src"; Pathname "dest"]), 88, [],
2277    [InitBasicFS, Always, TestOutput (
2278       [["mkdir"; "/olddir"];
2279        ["mkdir"; "/newdir"];
2280        ["write_file"; "/olddir/file"; "file content"; "0"];
2281        ["cp_a"; "/olddir"; "/newdir"];
2282        ["cat"; "/newdir/olddir/file"]], "file content")],
2283    "copy a file or directory recursively",
2284    "\
2285 This copies a file or directory from C<src> to C<dest>
2286 recursively using the C<cp -a> command.");
2287
2288   ("mv", (RErr, [Pathname "src"; Pathname "dest"]), 89, [],
2289    [InitBasicFS, Always, TestOutput (
2290       [["write_file"; "/old"; "file content"; "0"];
2291        ["mv"; "/old"; "/new"];
2292        ["cat"; "/new"]], "file content");
2293     InitBasicFS, Always, TestOutputFalse (
2294       [["write_file"; "/old"; "file content"; "0"];
2295        ["mv"; "/old"; "/new"];
2296        ["is_file"; "/old"]])],
2297    "move a file",
2298    "\
2299 This moves a file from C<src> to C<dest> where C<dest> is
2300 either a destination filename or destination directory.");
2301
2302   ("drop_caches", (RErr, [Int "whattodrop"]), 90, [],
2303    [InitEmpty, Always, TestRun (
2304       [["drop_caches"; "3"]])],
2305    "drop kernel page cache, dentries and inodes",
2306    "\
2307 This instructs the guest kernel to drop its page cache,
2308 and/or dentries and inode caches.  The parameter C<whattodrop>
2309 tells the kernel what precisely to drop, see
2310 L<http://linux-mm.org/Drop_Caches>
2311
2312 Setting C<whattodrop> to 3 should drop everything.
2313
2314 This automatically calls L<sync(2)> before the operation,
2315 so that the maximum guest memory is freed.");
2316
2317   ("dmesg", (RString "kmsgs", []), 91, [],
2318    [InitEmpty, Always, TestRun (
2319       [["dmesg"]])],
2320    "return kernel messages",
2321    "\
2322 This returns the kernel messages (C<dmesg> output) from
2323 the guest kernel.  This is sometimes useful for extended
2324 debugging of problems.
2325
2326 Another way to get the same information is to enable
2327 verbose messages with C<guestfs_set_verbose> or by setting
2328 the environment variable C<LIBGUESTFS_DEBUG=1> before
2329 running the program.");
2330
2331   ("ping_daemon", (RErr, []), 92, [],
2332    [InitEmpty, Always, TestRun (
2333       [["ping_daemon"]])],
2334    "ping the guest daemon",
2335    "\
2336 This is a test probe into the guestfs daemon running inside
2337 the qemu subprocess.  Calling this function checks that the
2338 daemon responds to the ping message, without affecting the daemon
2339 or attached block device(s) in any other way.");
2340
2341   ("equal", (RBool "equality", [Pathname "file1"; Pathname "file2"]), 93, [],
2342    [InitBasicFS, Always, TestOutputTrue (
2343       [["write_file"; "/file1"; "contents of a file"; "0"];
2344        ["cp"; "/file1"; "/file2"];
2345        ["equal"; "/file1"; "/file2"]]);
2346     InitBasicFS, Always, TestOutputFalse (
2347       [["write_file"; "/file1"; "contents of a file"; "0"];
2348        ["write_file"; "/file2"; "contents of another file"; "0"];
2349        ["equal"; "/file1"; "/file2"]]);
2350     InitBasicFS, Always, TestLastFail (
2351       [["equal"; "/file1"; "/file2"]])],
2352    "test if two files have equal contents",
2353    "\
2354 This compares the two files C<file1> and C<file2> and returns
2355 true if their content is exactly equal, or false otherwise.
2356
2357 The external L<cmp(1)> program is used for the comparison.");
2358
2359   ("strings", (RStringList "stringsout", [Pathname "path"]), 94, [ProtocolLimitWarning],
2360    [InitISOFS, Always, TestOutputList (
2361       [["strings"; "/known-5"]], ["abcdefghi"; "jklmnopqr"]);
2362     InitISOFS, Always, TestOutputList (
2363       [["strings"; "/empty"]], [])],
2364    "print the printable strings in a file",
2365    "\
2366 This runs the L<strings(1)> command on a file and returns
2367 the list of printable strings found.");
2368
2369   ("strings_e", (RStringList "stringsout", [String "encoding"; Pathname "path"]), 95, [ProtocolLimitWarning],
2370    [InitISOFS, Always, TestOutputList (
2371       [["strings_e"; "b"; "/known-5"]], []);
2372     InitBasicFS, Disabled, TestOutputList (
2373       [["write_file"; "/new"; "\000h\000e\000l\000l\000o\000\n\000w\000o\000r\000l\000d\000\n"; "24"];
2374        ["strings_e"; "b"; "/new"]], ["hello"; "world"])],
2375    "print the printable strings in a file",
2376    "\
2377 This is like the C<guestfs_strings> command, but allows you to
2378 specify the encoding.
2379
2380 See the L<strings(1)> manpage for the full list of encodings.
2381
2382 Commonly useful encodings are C<l> (lower case L) which will
2383 show strings inside Windows/x86 files.
2384
2385 The returned strings are transcoded to UTF-8.");
2386
2387   ("hexdump", (RString "dump", [Pathname "path"]), 96, [ProtocolLimitWarning],
2388    [InitISOFS, Always, TestOutput (
2389       [["hexdump"; "/known-4"]], "00000000  61 62 63 0a 64 65 66 0a  67 68 69                 |abc.def.ghi|\n0000000b\n");
2390     (* Test for RHBZ#501888c2 regression which caused large hexdump
2391      * commands to segfault.
2392      *)
2393     InitISOFS, Always, TestRun (
2394       [["hexdump"; "/100krandom"]])],
2395    "dump a file in hexadecimal",
2396    "\
2397 This runs C<hexdump -C> on the given C<path>.  The result is
2398 the human-readable, canonical hex dump of the file.");
2399
2400   ("zerofree", (RErr, [Device "device"]), 97, [Optional "zerofree"],
2401    [InitNone, Always, TestOutput (
2402       [["part_disk"; "/dev/sda"; "mbr"];
2403        ["mkfs"; "ext3"; "/dev/sda1"];
2404        ["mount"; "/dev/sda1"; "/"];
2405        ["write_file"; "/new"; "test file"; "0"];
2406        ["umount"; "/dev/sda1"];
2407        ["zerofree"; "/dev/sda1"];
2408        ["mount"; "/dev/sda1"; "/"];
2409        ["cat"; "/new"]], "test file")],
2410    "zero unused inodes and disk blocks on ext2/3 filesystem",
2411    "\
2412 This runs the I<zerofree> program on C<device>.  This program
2413 claims to zero unused inodes and disk blocks on an ext2/3
2414 filesystem, thus making it possible to compress the filesystem
2415 more effectively.
2416
2417 You should B<not> run this program if the filesystem is
2418 mounted.
2419
2420 It is possible that using this program can damage the filesystem
2421 or data on the filesystem.");
2422
2423   ("pvresize", (RErr, [Device "device"]), 98, [Optional "lvm2"],
2424    [],
2425    "resize an LVM physical volume",
2426    "\
2427 This resizes (expands or shrinks) an existing LVM physical
2428 volume to match the new size of the underlying device.");
2429
2430   ("sfdisk_N", (RErr, [Device "device"; Int "partnum";
2431                        Int "cyls"; Int "heads"; Int "sectors";
2432                        String "line"]), 99, [DangerWillRobinson],
2433    [],
2434    "modify a single partition on a block device",
2435    "\
2436 This runs L<sfdisk(8)> option to modify just the single
2437 partition C<n> (note: C<n> counts from 1).
2438
2439 For other parameters, see C<guestfs_sfdisk>.  You should usually
2440 pass C<0> for the cyls/heads/sectors parameters.
2441
2442 See also: C<guestfs_part_add>");
2443
2444   ("sfdisk_l", (RString "partitions", [Device "device"]), 100, [],
2445    [],
2446    "display the partition table",
2447    "\
2448 This displays the partition table on C<device>, in the
2449 human-readable output of the L<sfdisk(8)> command.  It is
2450 not intended to be parsed.
2451
2452 See also: C<guestfs_part_list>");
2453
2454   ("sfdisk_kernel_geometry", (RString "partitions", [Device "device"]), 101, [],
2455    [],
2456    "display the kernel geometry",
2457    "\
2458 This displays the kernel's idea of the geometry of C<device>.
2459
2460 The result is in human-readable format, and not designed to
2461 be parsed.");
2462
2463   ("sfdisk_disk_geometry", (RString "partitions", [Device "device"]), 102, [],
2464    [],
2465    "display the disk geometry from the partition table",
2466    "\
2467 This displays the disk geometry of C<device> read from the
2468 partition table.  Especially in the case where the underlying
2469 block device has been resized, this can be different from the
2470 kernel's idea of the geometry (see C<guestfs_sfdisk_kernel_geometry>).
2471
2472 The result is in human-readable format, and not designed to
2473 be parsed.");
2474
2475   ("vg_activate_all", (RErr, [Bool "activate"]), 103, [Optional "lvm2"],
2476    [],
2477    "activate or deactivate all volume groups",
2478    "\
2479 This command activates or (if C<activate> is false) deactivates
2480 all logical volumes in all volume groups.
2481 If activated, then they are made known to the
2482 kernel, ie. they appear as C</dev/mapper> devices.  If deactivated,
2483 then those devices disappear.
2484
2485 This command is the same as running C<vgchange -a y|n>");
2486
2487   ("vg_activate", (RErr, [Bool "activate"; StringList "volgroups"]), 104, [Optional "lvm2"],
2488    [],
2489    "activate or deactivate some volume groups",
2490    "\
2491 This command activates or (if C<activate> is false) deactivates
2492 all logical volumes in the listed volume groups C<volgroups>.
2493 If activated, then they are made known to the
2494 kernel, ie. they appear as C</dev/mapper> devices.  If deactivated,
2495 then those devices disappear.
2496
2497 This command is the same as running C<vgchange -a y|n volgroups...>
2498
2499 Note that if C<volgroups> is an empty list then B<all> volume groups
2500 are activated or deactivated.");
2501
2502   ("lvresize", (RErr, [Device "device"; Int "mbytes"]), 105, [Optional "lvm2"],
2503    [InitNone, Always, TestOutput (
2504       [["part_disk"; "/dev/sda"; "mbr"];
2505        ["pvcreate"; "/dev/sda1"];
2506        ["vgcreate"; "VG"; "/dev/sda1"];
2507        ["lvcreate"; "LV"; "VG"; "10"];
2508        ["mkfs"; "ext2"; "/dev/VG/LV"];
2509        ["mount"; "/dev/VG/LV"; "/"];
2510        ["write_file"; "/new"; "test content"; "0"];
2511        ["umount"; "/"];
2512        ["lvresize"; "/dev/VG/LV"; "20"];
2513        ["e2fsck_f"; "/dev/VG/LV"];
2514        ["resize2fs"; "/dev/VG/LV"];
2515        ["mount"; "/dev/VG/LV"; "/"];
2516        ["cat"; "/new"]], "test content")],
2517    "resize an LVM logical volume",
2518    "\
2519 This resizes (expands or shrinks) an existing LVM logical
2520 volume to C<mbytes>.  When reducing, data in the reduced part
2521 is lost.");
2522
2523   ("resize2fs", (RErr, [Device "device"]), 106, [],
2524    [], (* lvresize tests this *)
2525    "resize an ext2/ext3 filesystem",
2526    "\
2527 This resizes an ext2 or ext3 filesystem to match the size of
2528 the underlying device.
2529
2530 I<Note:> It is sometimes required that you run C<guestfs_e2fsck_f>
2531 on the C<device> before calling this command.  For unknown reasons
2532 C<resize2fs> sometimes gives an error about this and sometimes not.
2533 In any case, it is always safe to call C<guestfs_e2fsck_f> before
2534 calling this function.");
2535
2536   ("find", (RStringList "names", [Pathname "directory"]), 107, [ProtocolLimitWarning],
2537    [InitBasicFS, Always, TestOutputList (
2538       [["find"; "/"]], ["lost+found"]);
2539     InitBasicFS, Always, TestOutputList (
2540       [["touch"; "/a"];
2541        ["mkdir"; "/b"];
2542        ["touch"; "/b/c"];
2543        ["find"; "/"]], ["a"; "b"; "b/c"; "lost+found"]);
2544     InitBasicFS, Always, TestOutputList (
2545       [["mkdir_p"; "/a/b/c"];
2546        ["touch"; "/a/b/c/d"];
2547        ["find"; "/a/b/"]], ["c"; "c/d"])],
2548    "find all files and directories",
2549    "\
2550 This command lists out all files and directories, recursively,
2551 starting at C<directory>.  It is essentially equivalent to
2552 running the shell command C<find directory -print> but some
2553 post-processing happens on the output, described below.
2554
2555 This returns a list of strings I<without any prefix>.  Thus
2556 if the directory structure was:
2557
2558  /tmp/a
2559  /tmp/b
2560  /tmp/c/d
2561
2562 then the returned list from C<guestfs_find> C</tmp> would be
2563 4 elements:
2564
2565  a
2566  b
2567  c
2568  c/d
2569
2570 If C<directory> is not a directory, then this command returns
2571 an error.
2572
2573 The returned list is sorted.
2574
2575 See also C<guestfs_find0>.");
2576
2577   ("e2fsck_f", (RErr, [Device "device"]), 108, [],
2578    [], (* lvresize tests this *)
2579    "check an ext2/ext3 filesystem",
2580    "\
2581 This runs C<e2fsck -p -f device>, ie. runs the ext2/ext3
2582 filesystem checker on C<device>, noninteractively (C<-p>),
2583 even if the filesystem appears to be clean (C<-f>).
2584
2585 This command is only needed because of C<guestfs_resize2fs>
2586 (q.v.).  Normally you should use C<guestfs_fsck>.");
2587
2588   ("sleep", (RErr, [Int "secs"]), 109, [],
2589    [InitNone, Always, TestRun (
2590       [["sleep"; "1"]])],
2591    "sleep for some seconds",
2592    "\
2593 Sleep for C<secs> seconds.");
2594
2595   ("ntfs_3g_probe", (RInt "status", [Bool "rw"; Device "device"]), 110, [Optional "ntfs3g"],
2596    [InitNone, Always, TestOutputInt (
2597       [["part_disk"; "/dev/sda"; "mbr"];
2598        ["mkfs"; "ntfs"; "/dev/sda1"];
2599        ["ntfs_3g_probe"; "true"; "/dev/sda1"]], 0);
2600     InitNone, Always, TestOutputInt (
2601       [["part_disk"; "/dev/sda"; "mbr"];
2602        ["mkfs"; "ext2"; "/dev/sda1"];
2603        ["ntfs_3g_probe"; "true"; "/dev/sda1"]], 12)],
2604    "probe NTFS volume",
2605    "\
2606 This command runs the L<ntfs-3g.probe(8)> command which probes
2607 an NTFS C<device> for mountability.  (Not all NTFS volumes can
2608 be mounted read-write, and some cannot be mounted at all).
2609
2610 C<rw> is a boolean flag.  Set it to true if you want to test
2611 if the volume can be mounted read-write.  Set it to false if
2612 you want to test if the volume can be mounted read-only.
2613
2614 The return value is an integer which C<0> if the operation
2615 would succeed, or some non-zero value documented in the
2616 L<ntfs-3g.probe(8)> manual page.");
2617
2618   ("sh", (RString "output", [String "command"]), 111, [],
2619    [], (* XXX needs tests *)
2620    "run a command via the shell",
2621    "\
2622 This call runs a command from the guest filesystem via the
2623 guest's C</bin/sh>.
2624
2625 This is like C<guestfs_command>, but passes the command to:
2626
2627  /bin/sh -c \"command\"
2628
2629 Depending on the guest's shell, this usually results in
2630 wildcards being expanded, shell expressions being interpolated
2631 and so on.
2632
2633 All the provisos about C<guestfs_command> apply to this call.");
2634
2635   ("sh_lines", (RStringList "lines", [String "command"]), 112, [],
2636    [], (* XXX needs tests *)
2637    "run a command via the shell returning lines",
2638    "\
2639 This is the same as C<guestfs_sh>, but splits the result
2640 into a list of lines.
2641
2642 See also: C<guestfs_command_lines>");
2643
2644   ("glob_expand", (RStringList "paths", [Pathname "pattern"]), 113, [],
2645    (* Use Pathname here, and hence ABS_PATH (pattern,... in generated
2646     * code in stubs.c, since all valid glob patterns must start with "/".
2647     * There is no concept of "cwd" in libguestfs, hence no "."-relative names.
2648     *)
2649    [InitBasicFS, Always, TestOutputList (
2650       [["mkdir_p"; "/a/b/c"];
2651        ["touch"; "/a/b/c/d"];
2652        ["touch"; "/a/b/c/e"];
2653        ["glob_expand"; "/a/b/c/*"]], ["/a/b/c/d"; "/a/b/c/e"]);
2654     InitBasicFS, Always, TestOutputList (
2655       [["mkdir_p"; "/a/b/c"];
2656        ["touch"; "/a/b/c/d"];
2657        ["touch"; "/a/b/c/e"];
2658        ["glob_expand"; "/a/*/c/*"]], ["/a/b/c/d"; "/a/b/c/e"]);
2659     InitBasicFS, Always, TestOutputList (
2660       [["mkdir_p"; "/a/b/c"];
2661        ["touch"; "/a/b/c/d"];
2662        ["touch"; "/a/b/c/e"];
2663        ["glob_expand"; "/a/*/x/*"]], [])],
2664    "expand a wildcard path",
2665    "\
2666 This command searches for all the pathnames matching
2667 C<pattern> according to the wildcard expansion rules
2668 used by the shell.
2669
2670 If no paths match, then this returns an empty list
2671 (note: not an error).
2672
2673 It is just a wrapper around the C L<glob(3)> function
2674 with flags C<GLOB_MARK|GLOB_BRACE>.
2675 See that manual page for more details.");
2676
2677   ("scrub_device", (RErr, [Device "device"]), 114, [DangerWillRobinson; Optional "scrub"],
2678    [InitNone, Always, TestRun ( (* use /dev/sdc because it's smaller *)
2679       [["scrub_device"; "/dev/sdc"]])],
2680    "scrub (securely wipe) a device",
2681    "\
2682 This command writes patterns over C<device> to make data retrieval
2683 more difficult.
2684
2685 It is an interface to the L<scrub(1)> program.  See that
2686 manual page for more details.");
2687
2688   ("scrub_file", (RErr, [Pathname "file"]), 115, [Optional "scrub"],
2689    [InitBasicFS, Always, TestRun (
2690       [["write_file"; "/file"; "content"; "0"];
2691        ["scrub_file"; "/file"]])],
2692    "scrub (securely wipe) a file",
2693    "\
2694 This command writes patterns over a file to make data retrieval
2695 more difficult.
2696
2697 The file is I<removed> after scrubbing.
2698
2699 It is an interface to the L<scrub(1)> program.  See that
2700 manual page for more details.");
2701
2702   ("scrub_freespace", (RErr, [Pathname "dir"]), 116, [Optional "scrub"],
2703    [], (* XXX needs testing *)
2704    "scrub (securely wipe) free space",
2705    "\
2706 This command creates the directory C<dir> and then fills it
2707 with files until the filesystem is full, and scrubs the files
2708 as for C<guestfs_scrub_file>, and deletes them.
2709 The intention is to scrub any free space on the partition
2710 containing C<dir>.
2711
2712 It is an interface to the L<scrub(1)> program.  See that
2713 manual page for more details.");
2714
2715   ("mkdtemp", (RString "dir", [Pathname "template"]), 117, [],
2716    [InitBasicFS, Always, TestRun (
2717       [["mkdir"; "/tmp"];
2718        ["mkdtemp"; "/tmp/tmpXXXXXX"]])],
2719    "create a temporary directory",
2720    "\
2721 This command creates a temporary directory.  The
2722 C<template> parameter should be a full pathname for the
2723 temporary directory name with the final six characters being
2724 \"XXXXXX\".
2725
2726 For example: \"/tmp/myprogXXXXXX\" or \"/Temp/myprogXXXXXX\",
2727 the second one being suitable for Windows filesystems.
2728
2729 The name of the temporary directory that was created
2730 is returned.
2731
2732 The temporary directory is created with mode 0700
2733 and is owned by root.
2734
2735 The caller is responsible for deleting the temporary
2736 directory and its contents after use.
2737
2738 See also: L<mkdtemp(3)>");
2739
2740   ("wc_l", (RInt "lines", [Pathname "path"]), 118, [],
2741    [InitISOFS, Always, TestOutputInt (
2742       [["wc_l"; "/10klines"]], 10000)],
2743    "count lines in a file",
2744    "\
2745 This command counts the lines in a file, using the
2746 C<wc -l> external command.");
2747
2748   ("wc_w", (RInt "words", [Pathname "path"]), 119, [],
2749    [InitISOFS, Always, TestOutputInt (
2750       [["wc_w"; "/10klines"]], 10000)],
2751    "count words in a file",
2752    "\
2753 This command counts the words in a file, using the
2754 C<wc -w> external command.");
2755
2756   ("wc_c", (RInt "chars", [Pathname "path"]), 120, [],
2757    [InitISOFS, Always, TestOutputInt (
2758       [["wc_c"; "/100kallspaces"]], 102400)],
2759    "count characters in a file",
2760    "\
2761 This command counts the characters in a file, using the
2762 C<wc -c> external command.");
2763
2764   ("head", (RStringList "lines", [Pathname "path"]), 121, [ProtocolLimitWarning],
2765    [InitISOFS, Always, TestOutputList (
2766       [["head"; "/10klines"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz";"3abcdefghijklmnopqrstuvwxyz";"4abcdefghijklmnopqrstuvwxyz";"5abcdefghijklmnopqrstuvwxyz";"6abcdefghijklmnopqrstuvwxyz";"7abcdefghijklmnopqrstuvwxyz";"8abcdefghijklmnopqrstuvwxyz";"9abcdefghijklmnopqrstuvwxyz"])],
2767    "return first 10 lines of a file",
2768    "\
2769 This command returns up to the first 10 lines of a file as
2770 a list of strings.");
2771
2772   ("head_n", (RStringList "lines", [Int "nrlines"; Pathname "path"]), 122, [ProtocolLimitWarning],
2773    [InitISOFS, Always, TestOutputList (
2774       [["head_n"; "3"; "/10klines"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz"]);
2775     InitISOFS, Always, TestOutputList (
2776       [["head_n"; "-9997"; "/10klines"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz"]);
2777     InitISOFS, Always, TestOutputList (
2778       [["head_n"; "0"; "/10klines"]], [])],
2779    "return first N lines of a file",
2780    "\
2781 If the parameter C<nrlines> is a positive number, this returns the first
2782 C<nrlines> lines of the file C<path>.
2783
2784 If the parameter C<nrlines> is a negative number, this returns lines
2785 from the file C<path>, excluding the last C<nrlines> lines.
2786
2787 If the parameter C<nrlines> is zero, this returns an empty list.");
2788
2789   ("tail", (RStringList "lines", [Pathname "path"]), 123, [ProtocolLimitWarning],
2790    [InitISOFS, Always, TestOutputList (
2791       [["tail"; "/10klines"]], ["9990abcdefghijklmnopqrstuvwxyz";"9991abcdefghijklmnopqrstuvwxyz";"9992abcdefghijklmnopqrstuvwxyz";"9993abcdefghijklmnopqrstuvwxyz";"9994abcdefghijklmnopqrstuvwxyz";"9995abcdefghijklmnopqrstuvwxyz";"9996abcdefghijklmnopqrstuvwxyz";"9997abcdefghijklmnopqrstuvwxyz";"9998abcdefghijklmnopqrstuvwxyz";"9999abcdefghijklmnopqrstuvwxyz"])],
2792    "return last 10 lines of a file",
2793    "\
2794 This command returns up to the last 10 lines of a file as
2795 a list of strings.");
2796
2797   ("tail_n", (RStringList "lines", [Int "nrlines"; Pathname "path"]), 124, [ProtocolLimitWarning],
2798    [InitISOFS, Always, TestOutputList (
2799       [["tail_n"; "3"; "/10klines"]], ["9997abcdefghijklmnopqrstuvwxyz";"9998abcdefghijklmnopqrstuvwxyz";"9999abcdefghijklmnopqrstuvwxyz"]);
2800     InitISOFS, Always, TestOutputList (
2801       [["tail_n"; "-9998"; "/10klines"]], ["9997abcdefghijklmnopqrstuvwxyz";"9998abcdefghijklmnopqrstuvwxyz";"9999abcdefghijklmnopqrstuvwxyz"]);
2802     InitISOFS, Always, TestOutputList (
2803       [["tail_n"; "0"; "/10klines"]], [])],
2804    "return last N lines of a file",
2805    "\
2806 If the parameter C<nrlines> is a positive number, this returns the last
2807 C<nrlines> lines of the file C<path>.
2808
2809 If the parameter C<nrlines> is a negative number, this returns lines
2810 from the file C<path>, starting with the C<-nrlines>th line.
2811
2812 If the parameter C<nrlines> is zero, this returns an empty list.");
2813
2814   ("df", (RString "output", []), 125, [],
2815    [], (* XXX Tricky to test because it depends on the exact format
2816         * of the 'df' command and other imponderables.
2817         *)
2818    "report file system disk space usage",
2819    "\
2820 This command runs the C<df> command to report disk space used.
2821
2822 This command is mostly useful for interactive sessions.  It
2823 is I<not> intended that you try to parse the output string.
2824 Use C<statvfs> from programs.");
2825
2826   ("df_h", (RString "output", []), 126, [],
2827    [], (* XXX Tricky to test because it depends on the exact format
2828         * of the 'df' command and other imponderables.
2829         *)
2830    "report file system disk space usage (human readable)",
2831    "\
2832 This command runs the C<df -h> command to report disk space used
2833 in human-readable format.
2834
2835 This command is mostly useful for interactive sessions.  It
2836 is I<not> intended that you try to parse the output string.
2837 Use C<statvfs> from programs.");
2838
2839   ("du", (RInt64 "sizekb", [Pathname "path"]), 127, [],
2840    [InitISOFS, Always, TestOutputInt (
2841       [["du"; "/directory"]], 2 (* ISO fs blocksize is 2K *))],
2842    "estimate file space usage",
2843    "\
2844 This command runs the C<du -s> command to estimate file space
2845 usage for C<path>.
2846
2847 C<path> can be a file or a directory.  If C<path> is a directory
2848 then the estimate includes the contents of the directory and all
2849 subdirectories (recursively).
2850
2851 The result is the estimated size in I<kilobytes>
2852 (ie. units of 1024 bytes).");
2853
2854   ("initrd_list", (RStringList "filenames", [Pathname "path"]), 128, [],
2855    [InitISOFS, Always, TestOutputList (
2856       [["initrd_list"; "/initrd"]], ["empty";"known-1";"known-2";"known-3";"known-4"; "known-5"])],
2857    "list files in an initrd",
2858    "\
2859 This command lists out files contained in an initrd.
2860
2861 The files are listed without any initial C</> character.  The
2862 files are listed in the order they appear (not necessarily
2863 alphabetical).  Directory names are listed as separate items.
2864
2865 Old Linux kernels (2.4 and earlier) used a compressed ext2
2866 filesystem as initrd.  We I<only> support the newer initramfs
2867 format (compressed cpio files).");
2868
2869   ("mount_loop", (RErr, [Pathname "file"; Pathname "mountpoint"]), 129, [],
2870    [],
2871    "mount a file using the loop device",
2872    "\
2873 This command lets you mount C<file> (a filesystem image
2874 in a file) on a mount point.  It is entirely equivalent to
2875 the command C<mount -o loop file mountpoint>.");
2876
2877   ("mkswap", (RErr, [Device "device"]), 130, [],
2878    [InitEmpty, Always, TestRun (
2879       [["part_disk"; "/dev/sda"; "mbr"];
2880        ["mkswap"; "/dev/sda1"]])],
2881    "create a swap partition",
2882    "\
2883 Create a swap partition on C<device>.");
2884
2885   ("mkswap_L", (RErr, [String "label"; Device "device"]), 131, [],
2886    [InitEmpty, Always, TestRun (
2887       [["part_disk"; "/dev/sda"; "mbr"];
2888        ["mkswap_L"; "hello"; "/dev/sda1"]])],
2889    "create a swap partition with a label",
2890    "\
2891 Create a swap partition on C<device> with label C<label>.
2892
2893 Note that you cannot attach a swap label to a block device
2894 (eg. C</dev/sda>), just to a partition.  This appears to be
2895 a limitation of the kernel or swap tools.");
2896
2897   ("mkswap_U", (RErr, [String "uuid"; Device "device"]), 132, [Optional "linuxfsuuid"],
2898    (let uuid = uuidgen () in
2899     [InitEmpty, Always, TestRun (
2900        [["part_disk"; "/dev/sda"; "mbr"];
2901         ["mkswap_U"; uuid; "/dev/sda1"]])]),
2902    "create a swap partition with an explicit UUID",
2903    "\
2904 Create a swap partition on C<device> with UUID C<uuid>.");
2905
2906   ("mknod", (RErr, [Int "mode"; Int "devmajor"; Int "devminor"; Pathname "path"]), 133, [Optional "mknod"],
2907    [InitBasicFS, Always, TestOutputStruct (
2908       [["mknod"; "0o10777"; "0"; "0"; "/node"];
2909        (* NB: default umask 022 means 0777 -> 0755 in these tests *)
2910        ["stat"; "/node"]], [CompareWithInt ("mode", 0o10755)]);
2911     InitBasicFS, Always, TestOutputStruct (
2912       [["mknod"; "0o60777"; "66"; "99"; "/node"];
2913        ["stat"; "/node"]], [CompareWithInt ("mode", 0o60755)])],
2914    "make block, character or FIFO devices",
2915    "\
2916 This call creates block or character special devices, or
2917 named pipes (FIFOs).
2918
2919 The C<mode> parameter should be the mode, using the standard
2920 constants.  C<devmajor> and C<devminor> are the
2921 device major and minor numbers, only used when creating block
2922 and character special devices.");
2923
2924   ("mkfifo", (RErr, [Int "mode"; Pathname "path"]), 134, [Optional "mknod"],
2925    [InitBasicFS, Always, TestOutputStruct (
2926       [["mkfifo"; "0o777"; "/node"];
2927        ["stat"; "/node"]], [CompareWithInt ("mode", 0o10755)])],
2928    "make FIFO (named pipe)",
2929    "\
2930 This call creates a FIFO (named pipe) called C<path> with
2931 mode C<mode>.  It is just a convenient wrapper around
2932 C<guestfs_mknod>.");
2933
2934   ("mknod_b", (RErr, [Int "mode"; Int "devmajor"; Int "devminor"; Pathname "path"]), 135, [Optional "mknod"],
2935    [InitBasicFS, Always, TestOutputStruct (
2936       [["mknod_b"; "0o777"; "99"; "66"; "/node"];
2937        ["stat"; "/node"]], [CompareWithInt ("mode", 0o60755)])],
2938    "make block device node",
2939    "\
2940 This call creates a block device node called C<path> with
2941 mode C<mode> and device major/minor C<devmajor> and C<devminor>.
2942 It is just a convenient wrapper around C<guestfs_mknod>.");
2943
2944   ("mknod_c", (RErr, [Int "mode"; Int "devmajor"; Int "devminor"; Pathname "path"]), 136, [Optional "mknod"],
2945    [InitBasicFS, Always, TestOutputStruct (
2946       [["mknod_c"; "0o777"; "99"; "66"; "/node"];
2947        ["stat"; "/node"]], [CompareWithInt ("mode", 0o20755)])],
2948    "make char device node",
2949    "\
2950 This call creates a char device node called C<path> with
2951 mode C<mode> and device major/minor C<devmajor> and C<devminor>.
2952 It is just a convenient wrapper around C<guestfs_mknod>.");
2953
2954   ("umask", (RInt "oldmask", [Int "mask"]), 137, [],
2955    [], (* XXX umask is one of those stateful things that we should
2956         * reset between each test.
2957         *)
2958    "set file mode creation mask (umask)",
2959    "\
2960 This function sets the mask used for creating new files and
2961 device nodes to C<mask & 0777>.
2962
2963 Typical umask values would be C<022> which creates new files
2964 with permissions like \"-rw-r--r--\" or \"-rwxr-xr-x\", and
2965 C<002> which creates new files with permissions like
2966 \"-rw-rw-r--\" or \"-rwxrwxr-x\".
2967
2968 The default umask is C<022>.  This is important because it
2969 means that directories and device nodes will be created with
2970 C<0644> or C<0755> mode even if you specify C<0777>.
2971
2972 See also L<umask(2)>, C<guestfs_mknod>, C<guestfs_mkdir>.
2973
2974 This call returns the previous umask.");
2975
2976   ("readdir", (RStructList ("entries", "dirent"), [Pathname "dir"]), 138, [],
2977    [],
2978    "read directories entries",
2979    "\
2980 This returns the list of directory entries in directory C<dir>.
2981
2982 All entries in the directory are returned, including C<.> and
2983 C<..>.  The entries are I<not> sorted, but returned in the same
2984 order as the underlying filesystem.
2985
2986 Also this call returns basic file type information about each
2987 file.  The C<ftyp> field will contain one of the following characters:
2988
2989 =over 4
2990
2991 =item 'b'
2992
2993 Block special
2994
2995 =item 'c'
2996
2997 Char special
2998
2999 =item 'd'
3000
3001 Directory
3002
3003 =item 'f'
3004
3005 FIFO (named pipe)
3006
3007 =item 'l'
3008
3009 Symbolic link
3010
3011 =item 'r'
3012
3013 Regular file
3014
3015 =item 's'
3016
3017 Socket
3018
3019 =item 'u'
3020
3021 Unknown file type
3022
3023 =item '?'
3024
3025 The L<readdir(3)> returned a C<d_type> field with an
3026 unexpected value
3027
3028 =back
3029
3030 This function is primarily intended for use by programs.  To
3031 get a simple list of names, use C<guestfs_ls>.  To get a printable
3032 directory for human consumption, use C<guestfs_ll>.");
3033
3034   ("sfdiskM", (RErr, [Device "device"; StringList "lines"]), 139, [DangerWillRobinson],
3035    [],
3036    "create partitions on a block device",
3037    "\
3038 This is a simplified interface to the C<guestfs_sfdisk>
3039 command, where partition sizes are specified in megabytes
3040 only (rounded to the nearest cylinder) and you don't need
3041 to specify the cyls, heads and sectors parameters which
3042 were rarely if ever used anyway.
3043
3044 See also: C<guestfs_sfdisk>, the L<sfdisk(8)> manpage
3045 and C<guestfs_part_disk>");
3046
3047   ("zfile", (RString "description", [String "meth"; Pathname "path"]), 140, [DeprecatedBy "file"],
3048    [],
3049    "determine file type inside a compressed file",
3050    "\
3051 This command runs C<file> after first decompressing C<path>
3052 using C<method>.
3053
3054 C<method> must be one of C<gzip>, C<compress> or C<bzip2>.
3055
3056 Since 1.0.63, use C<guestfs_file> instead which can now
3057 process compressed files.");
3058
3059   ("getxattrs", (RStructList ("xattrs", "xattr"), [Pathname "path"]), 141, [Optional "linuxxattrs"],
3060    [],
3061    "list extended attributes of a file or directory",
3062    "\
3063 This call lists the extended attributes of the file or directory
3064 C<path>.
3065
3066 At the system call level, this is a combination of the
3067 L<listxattr(2)> and L<getxattr(2)> calls.
3068
3069 See also: C<guestfs_lgetxattrs>, L<attr(5)>.");
3070
3071   ("lgetxattrs", (RStructList ("xattrs", "xattr"), [Pathname "path"]), 142, [Optional "linuxxattrs"],
3072    [],
3073    "list extended attributes of a file or directory",
3074    "\
3075 This is the same as C<guestfs_getxattrs>, but if C<path>
3076 is a symbolic link, then it returns the extended attributes
3077 of the link itself.");
3078
3079   ("setxattr", (RErr, [String "xattr";
3080                        String "val"; Int "vallen"; (* will be BufferIn *)
3081                        Pathname "path"]), 143, [Optional "linuxxattrs"],
3082    [],
3083    "set extended attribute of a file or directory",
3084    "\
3085 This call sets the extended attribute named C<xattr>
3086 of the file C<path> to the value C<val> (of length C<vallen>).
3087 The value is arbitrary 8 bit data.
3088
3089 See also: C<guestfs_lsetxattr>, L<attr(5)>.");
3090
3091   ("lsetxattr", (RErr, [String "xattr";
3092                         String "val"; Int "vallen"; (* will be BufferIn *)
3093                         Pathname "path"]), 144, [Optional "linuxxattrs"],
3094    [],
3095    "set extended attribute of a file or directory",
3096    "\
3097 This is the same as C<guestfs_setxattr>, but if C<path>
3098 is a symbolic link, then it sets an extended attribute
3099 of the link itself.");
3100
3101   ("removexattr", (RErr, [String "xattr"; Pathname "path"]), 145, [Optional "linuxxattrs"],
3102    [],
3103    "remove extended attribute of a file or directory",
3104    "\
3105 This call removes the extended attribute named C<xattr>
3106 of the file C<path>.
3107
3108 See also: C<guestfs_lremovexattr>, L<attr(5)>.");
3109
3110   ("lremovexattr", (RErr, [String "xattr"; Pathname "path"]), 146, [Optional "linuxxattrs"],
3111    [],
3112    "remove extended attribute of a file or directory",
3113    "\
3114 This is the same as C<guestfs_removexattr>, but if C<path>
3115 is a symbolic link, then it removes an extended attribute
3116 of the link itself.");
3117
3118   ("mountpoints", (RHashtable "mps", []), 147, [],
3119    [],
3120    "show mountpoints",
3121    "\
3122 This call is similar to C<guestfs_mounts>.  That call returns
3123 a list of devices.  This one returns a hash table (map) of
3124 device name to directory where the device is mounted.");
3125
3126   ("mkmountpoint", (RErr, [String "exemptpath"]), 148, [],
3127    (* This is a special case: while you would expect a parameter
3128     * of type "Pathname", that doesn't work, because it implies
3129     * NEED_ROOT in the generated calling code in stubs.c, and
3130     * this function cannot use NEED_ROOT.
3131     *)
3132    [],
3133    "create a mountpoint",
3134    "\
3135 C<guestfs_mkmountpoint> and C<guestfs_rmmountpoint> are
3136 specialized calls that can be used to create extra mountpoints
3137 before mounting the first filesystem.
3138
3139 These calls are I<only> necessary in some very limited circumstances,
3140 mainly the case where you want to mount a mix of unrelated and/or
3141 read-only filesystems together.
3142
3143 For example, live CDs often contain a \"Russian doll\" nest of
3144 filesystems, an ISO outer layer, with a squashfs image inside, with
3145 an ext2/3 image inside that.  You can unpack this as follows
3146 in guestfish:
3147
3148  add-ro Fedora-11-i686-Live.iso
3149  run
3150  mkmountpoint /cd
3151  mkmountpoint /squash
3152  mkmountpoint /ext3
3153  mount /dev/sda /cd
3154  mount-loop /cd/LiveOS/squashfs.img /squash
3155  mount-loop /squash/LiveOS/ext3fs.img /ext3
3156
3157 The inner filesystem is now unpacked under the /ext3 mountpoint.");
3158
3159   ("rmmountpoint", (RErr, [String "exemptpath"]), 149, [],
3160    [],
3161    "remove a mountpoint",
3162    "\
3163 This calls removes a mountpoint that was previously created
3164 with C<guestfs_mkmountpoint>.  See C<guestfs_mkmountpoint>
3165 for full details.");
3166
3167   ("read_file", (RBufferOut "content", [Pathname "path"]), 150, [ProtocolLimitWarning],
3168    [InitISOFS, Always, TestOutputBuffer (
3169       [["read_file"; "/known-4"]], "abc\ndef\nghi")],
3170    "read a file",
3171    "\
3172 This calls returns the contents of the file C<path> as a
3173 buffer.
3174
3175 Unlike C<guestfs_cat>, this function can correctly
3176 handle files that contain embedded ASCII NUL characters.
3177 However unlike C<guestfs_download>, this function is limited
3178 in the total size of file that can be handled.");
3179
3180   ("grep", (RStringList "lines", [String "regex"; Pathname "path"]), 151, [ProtocolLimitWarning],
3181    [InitISOFS, Always, TestOutputList (
3182       [["grep"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"]);
3183     InitISOFS, Always, TestOutputList (
3184       [["grep"; "nomatch"; "/test-grep.txt"]], [])],
3185    "return lines matching a pattern",
3186    "\
3187 This calls the external C<grep> program and returns the
3188 matching lines.");
3189
3190   ("egrep", (RStringList "lines", [String "regex"; Pathname "path"]), 152, [ProtocolLimitWarning],
3191    [InitISOFS, Always, TestOutputList (
3192       [["egrep"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"])],
3193    "return lines matching a pattern",
3194    "\
3195 This calls the external C<egrep> program and returns the
3196 matching lines.");
3197
3198   ("fgrep", (RStringList "lines", [String "pattern"; Pathname "path"]), 153, [ProtocolLimitWarning],
3199    [InitISOFS, Always, TestOutputList (
3200       [["fgrep"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"])],
3201    "return lines matching a pattern",
3202    "\
3203 This calls the external C<fgrep> program and returns the
3204 matching lines.");
3205
3206   ("grepi", (RStringList "lines", [String "regex"; Pathname "path"]), 154, [ProtocolLimitWarning],
3207    [InitISOFS, Always, TestOutputList (
3208       [["grepi"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"; "ABC"])],
3209    "return lines matching a pattern",
3210    "\
3211 This calls the external C<grep -i> program and returns the
3212 matching lines.");
3213
3214   ("egrepi", (RStringList "lines", [String "regex"; Pathname "path"]), 155, [ProtocolLimitWarning],
3215    [InitISOFS, Always, TestOutputList (
3216       [["egrepi"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"; "ABC"])],
3217    "return lines matching a pattern",
3218    "\
3219 This calls the external C<egrep -i> program and returns the
3220 matching lines.");
3221
3222   ("fgrepi", (RStringList "lines", [String "pattern"; Pathname "path"]), 156, [ProtocolLimitWarning],
3223    [InitISOFS, Always, TestOutputList (
3224       [["fgrepi"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"; "ABC"])],
3225    "return lines matching a pattern",
3226    "\
3227 This calls the external C<fgrep -i> program and returns the
3228 matching lines.");
3229
3230   ("zgrep", (RStringList "lines", [String "regex"; Pathname "path"]), 157, [ProtocolLimitWarning],
3231    [InitISOFS, Always, TestOutputList (
3232       [["zgrep"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"])],
3233    "return lines matching a pattern",
3234    "\
3235 This calls the external C<zgrep> program and returns the
3236 matching lines.");
3237
3238   ("zegrep", (RStringList "lines", [String "regex"; Pathname "path"]), 158, [ProtocolLimitWarning],
3239    [InitISOFS, Always, TestOutputList (
3240       [["zegrep"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"])],
3241    "return lines matching a pattern",
3242    "\
3243 This calls the external C<zegrep> program and returns the
3244 matching lines.");
3245
3246   ("zfgrep", (RStringList "lines", [String "pattern"; Pathname "path"]), 159, [ProtocolLimitWarning],
3247    [InitISOFS, Always, TestOutputList (
3248       [["zfgrep"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"])],
3249    "return lines matching a pattern",
3250    "\
3251 This calls the external C<zfgrep> program and returns the
3252 matching lines.");
3253
3254   ("zgrepi", (RStringList "lines", [String "regex"; Pathname "path"]), 160, [ProtocolLimitWarning],
3255    [InitISOFS, Always, TestOutputList (
3256       [["zgrepi"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"; "ABC"])],
3257    "return lines matching a pattern",
3258    "\
3259 This calls the external C<zgrep -i> program and returns the
3260 matching lines.");
3261
3262   ("zegrepi", (RStringList "lines", [String "regex"; Pathname "path"]), 161, [ProtocolLimitWarning],
3263    [InitISOFS, Always, TestOutputList (
3264       [["zegrepi"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"; "ABC"])],
3265    "return lines matching a pattern",
3266    "\
3267 This calls the external C<zegrep -i> program and returns the
3268 matching lines.");
3269
3270   ("zfgrepi", (RStringList "lines", [String "pattern"; Pathname "path"]), 162, [ProtocolLimitWarning],
3271    [InitISOFS, Always, TestOutputList (
3272       [["zfgrepi"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"; "ABC"])],
3273    "return lines matching a pattern",
3274    "\
3275 This calls the external C<zfgrep -i> program and returns the
3276 matching lines.");
3277
3278   ("realpath", (RString "rpath", [Pathname "path"]), 163, [Optional "realpath"],
3279    [InitISOFS, Always, TestOutput (
3280       [["realpath"; "/../directory"]], "/directory")],
3281    "canonicalized absolute pathname",
3282    "\
3283 Return the canonicalized absolute pathname of C<path>.  The
3284 returned path has no C<.>, C<..> or symbolic link path elements.");
3285
3286   ("ln", (RErr, [String "target"; Pathname "linkname"]), 164, [],
3287    [InitBasicFS, Always, TestOutputStruct (
3288       [["touch"; "/a"];
3289        ["ln"; "/a"; "/b"];
3290        ["stat"; "/b"]], [CompareWithInt ("nlink", 2)])],
3291    "create a hard link",
3292    "\
3293 This command creates a hard link using the C<ln> command.");
3294
3295   ("ln_f", (RErr, [String "target"; Pathname "linkname"]), 165, [],
3296    [InitBasicFS, Always, TestOutputStruct (
3297       [["touch"; "/a"];
3298        ["touch"; "/b"];
3299        ["ln_f"; "/a"; "/b"];
3300        ["stat"; "/b"]], [CompareWithInt ("nlink", 2)])],
3301    "create a hard link",
3302    "\
3303 This command creates a hard link using the C<ln -f> command.
3304 The C<-f> option removes the link (C<linkname>) if it exists already.");
3305
3306   ("ln_s", (RErr, [String "target"; Pathname "linkname"]), 166, [],
3307    [InitBasicFS, Always, TestOutputStruct (
3308       [["touch"; "/a"];
3309        ["ln_s"; "a"; "/b"];
3310        ["lstat"; "/b"]], [CompareWithInt ("mode", 0o120777)])],
3311    "create a symbolic link",
3312    "\
3313 This command creates a symbolic link using the C<ln -s> command.");
3314
3315   ("ln_sf", (RErr, [String "target"; Pathname "linkname"]), 167, [],
3316    [InitBasicFS, Always, TestOutput (
3317       [["mkdir_p"; "/a/b"];
3318        ["touch"; "/a/b/c"];
3319        ["ln_sf"; "../d"; "/a/b/c"];
3320        ["readlink"; "/a/b/c"]], "../d")],
3321    "create a symbolic link",
3322    "\
3323 This command creates a symbolic link using the C<ln -sf> command,
3324 The C<-f> option removes the link (C<linkname>) if it exists already.");
3325
3326   ("readlink", (RString "link", [Pathname "path"]), 168, [],
3327    [] (* XXX tested above *),
3328    "read the target of a symbolic link",
3329    "\
3330 This command reads the target of a symbolic link.");
3331
3332   ("fallocate", (RErr, [Pathname "path"; Int "len"]), 169, [],
3333    [InitBasicFS, Always, TestOutputStruct (
3334       [["fallocate"; "/a"; "1000000"];
3335        ["stat"; "/a"]], [CompareWithInt ("size", 1_000_000)])],
3336    "preallocate a file in the guest filesystem",
3337    "\
3338 This command preallocates a file (containing zero bytes) named
3339 C<path> of size C<len> bytes.  If the file exists already, it
3340 is overwritten.
3341
3342 Do not confuse this with the guestfish-specific
3343 C<alloc> command which allocates a file in the host and
3344 attaches it as a device.");
3345
3346   ("swapon_device", (RErr, [Device "device"]), 170, [],
3347    [InitPartition, Always, TestRun (
3348       [["mkswap"; "/dev/sda1"];
3349        ["swapon_device"; "/dev/sda1"];
3350        ["swapoff_device"; "/dev/sda1"]])],
3351    "enable swap on device",
3352    "\
3353 This command enables the libguestfs appliance to use the
3354 swap device or partition named C<device>.  The increased
3355 memory is made available for all commands, for example
3356 those run using C<guestfs_command> or C<guestfs_sh>.
3357
3358 Note that you should not swap to existing guest swap
3359 partitions unless you know what you are doing.  They may
3360 contain hibernation information, or other information that
3361 the guest doesn't want you to trash.  You also risk leaking
3362 information about the host to the guest this way.  Instead,
3363 attach a new host device to the guest and swap on that.");
3364
3365   ("swapoff_device", (RErr, [Device "device"]), 171, [],
3366    [], (* XXX tested by swapon_device *)
3367    "disable swap on device",
3368    "\
3369 This command disables the libguestfs appliance swap
3370 device or partition named C<device>.
3371 See C<guestfs_swapon_device>.");
3372
3373   ("swapon_file", (RErr, [Pathname "file"]), 172, [],
3374    [InitBasicFS, Always, TestRun (
3375       [["fallocate"; "/swap"; "8388608"];
3376        ["mkswap_file"; "/swap"];
3377        ["swapon_file"; "/swap"];
3378        ["swapoff_file"; "/swap"]])],
3379    "enable swap on file",
3380    "\
3381 This command enables swap to a file.
3382 See C<guestfs_swapon_device> for other notes.");
3383
3384   ("swapoff_file", (RErr, [Pathname "file"]), 173, [],
3385    [], (* XXX tested by swapon_file *)
3386    "disable swap on file",
3387    "\
3388 This command disables the libguestfs appliance swap on file.");
3389
3390   ("swapon_label", (RErr, [String "label"]), 174, [],
3391    [InitEmpty, Always, TestRun (
3392       [["part_disk"; "/dev/sdb"; "mbr"];
3393        ["mkswap_L"; "swapit"; "/dev/sdb1"];
3394        ["swapon_label"; "swapit"];
3395        ["swapoff_label"; "swapit"];
3396        ["zero"; "/dev/sdb"];
3397        ["blockdev_rereadpt"; "/dev/sdb"]])],
3398    "enable swap on labeled swap partition",
3399    "\
3400 This command enables swap to a labeled swap partition.
3401 See C<guestfs_swapon_device> for other notes.");
3402
3403   ("swapoff_label", (RErr, [String "label"]), 175, [],
3404    [], (* XXX tested by swapon_label *)
3405    "disable swap on labeled swap partition",
3406    "\
3407 This command disables the libguestfs appliance swap on
3408 labeled swap partition.");
3409
3410   ("swapon_uuid", (RErr, [String "uuid"]), 176, [Optional "linuxfsuuid"],
3411    (let uuid = uuidgen () in
3412     [InitEmpty, Always, TestRun (
3413        [["mkswap_U"; uuid; "/dev/sdb"];
3414         ["swapon_uuid"; uuid];
3415         ["swapoff_uuid"; uuid]])]),
3416    "enable swap on swap partition by UUID",
3417    "\
3418 This command enables swap to a swap partition with the given UUID.
3419 See C<guestfs_swapon_device> for other notes.");
3420
3421   ("swapoff_uuid", (RErr, [String "uuid"]), 177, [Optional "linuxfsuuid"],
3422    [], (* XXX tested by swapon_uuid *)
3423    "disable swap on swap partition by UUID",
3424    "\
3425 This command disables the libguestfs appliance swap partition
3426 with the given UUID.");
3427
3428   ("mkswap_file", (RErr, [Pathname "path"]), 178, [],
3429    [InitBasicFS, Always, TestRun (
3430       [["fallocate"; "/swap"; "8388608"];
3431        ["mkswap_file"; "/swap"]])],
3432    "create a swap file",
3433    "\
3434 Create a swap file.
3435
3436 This command just writes a swap file signature to an existing
3437 file.  To create the file itself, use something like C<guestfs_fallocate>.");
3438
3439   ("inotify_init", (RErr, [Int "maxevents"]), 179, [Optional "inotify"],
3440    [InitISOFS, Always, TestRun (
3441       [["inotify_init"; "0"]])],
3442    "create an inotify handle",
3443    "\
3444 This command creates a new inotify handle.
3445 The inotify subsystem can be used to notify events which happen to
3446 objects in the guest filesystem.
3447
3448 C<maxevents> is the maximum number of events which will be
3449 queued up between calls to C<guestfs_inotify_read> or
3450 C<guestfs_inotify_files>.
3451 If this is passed as C<0>, then the kernel (or previously set)
3452 default is used.  For Linux 2.6.29 the default was 16384 events.
3453 Beyond this limit, the kernel throws away events, but records
3454 the fact that it threw them away by setting a flag
3455 C<IN_Q_OVERFLOW> in the returned structure list (see
3456 C<guestfs_inotify_read>).
3457
3458 Before any events are generated, you have to add some
3459 watches to the internal watch list.  See:
3460 C<guestfs_inotify_add_watch>,
3461 C<guestfs_inotify_rm_watch> and
3462 C<guestfs_inotify_watch_all>.
3463
3464 Queued up events should be read periodically by calling
3465 C<guestfs_inotify_read>
3466 (or C<guestfs_inotify_files> which is just a helpful
3467 wrapper around C<guestfs_inotify_read>).  If you don't
3468 read the events out often enough then you risk the internal
3469 queue overflowing.
3470
3471 The handle should be closed after use by calling
3472 C<guestfs_inotify_close>.  This also removes any
3473 watches automatically.
3474
3475 See also L<inotify(7)> for an overview of the inotify interface
3476 as exposed by the Linux kernel, which is roughly what we expose
3477 via libguestfs.  Note that there is one global inotify handle
3478 per libguestfs instance.");
3479
3480   ("inotify_add_watch", (RInt64 "wd", [Pathname "path"; Int "mask"]), 180, [Optional "inotify"],
3481    [InitBasicFS, Always, TestOutputList (
3482       [["inotify_init"; "0"];
3483        ["inotify_add_watch"; "/"; "1073741823"];
3484        ["touch"; "/a"];
3485        ["touch"; "/b"];
3486        ["inotify_files"]], ["a"; "b"])],
3487    "add an inotify watch",
3488    "\
3489 Watch C<path> for the events listed in C<mask>.
3490
3491 Note that if C<path> is a directory then events within that
3492 directory are watched, but this does I<not> happen recursively
3493 (in subdirectories).
3494
3495 Note for non-C or non-Linux callers: the inotify events are
3496 defined by the Linux kernel ABI and are listed in
3497 C</usr/include/sys/inotify.h>.");
3498
3499   ("inotify_rm_watch", (RErr, [Int(*XXX64*) "wd"]), 181, [Optional "inotify"],
3500    [],
3501    "remove an inotify watch",
3502    "\
3503 Remove a previously defined inotify watch.
3504 See C<guestfs_inotify_add_watch>.");
3505
3506   ("inotify_read", (RStructList ("events", "inotify_event"), []), 182, [Optional "inotify"],
3507    [],
3508    "return list of inotify events",
3509    "\
3510 Return the complete queue of events that have happened
3511 since the previous read call.
3512
3513 If no events have happened, this returns an empty list.
3514
3515 I<Note>: In order to make sure that all events have been
3516 read, you must call this function repeatedly until it
3517 returns an empty list.  The reason is that the call will
3518 read events up to the maximum appliance-to-host message
3519 size and leave remaining events in the queue.");
3520
3521   ("inotify_files", (RStringList "paths", []), 183, [Optional "inotify"],
3522    [],
3523    "return list of watched files that had events",
3524    "\
3525 This function is a helpful wrapper around C<guestfs_inotify_read>
3526 which just returns a list of pathnames of objects that were
3527 touched.  The returned pathnames are sorted and deduplicated.");
3528
3529   ("inotify_close", (RErr, []), 184, [Optional "inotify"],
3530    [],
3531    "close the inotify handle",
3532    "\
3533 This closes the inotify handle which was previously
3534 opened by inotify_init.  It removes all watches, throws
3535 away any pending events, and deallocates all resources.");
3536
3537   ("setcon", (RErr, [String "context"]), 185, [Optional "selinux"],
3538    [],
3539    "set SELinux security context",
3540    "\
3541 This sets the SELinux security context of the daemon
3542 to the string C<context>.
3543
3544 See the documentation about SELINUX in L<guestfs(3)>.");
3545
3546   ("getcon", (RString "context", []), 186, [Optional "selinux"],
3547    [],
3548    "get SELinux security context",
3549    "\
3550 This gets the SELinux security context of the daemon.
3551
3552 See the documentation about SELINUX in L<guestfs(3)>,
3553 and C<guestfs_setcon>");
3554
3555   ("mkfs_b", (RErr, [String "fstype"; Int "blocksize"; Device "device"]), 187, [],
3556    [InitEmpty, Always, TestOutput (
3557       [["part_disk"; "/dev/sda"; "mbr"];
3558        ["mkfs_b"; "ext2"; "4096"; "/dev/sda1"];
3559        ["mount"; "/dev/sda1"; "/"];
3560        ["write_file"; "/new"; "new file contents"; "0"];
3561        ["cat"; "/new"]], "new file contents")],
3562    "make a filesystem with block size",
3563    "\
3564 This call is similar to C<guestfs_mkfs>, but it allows you to
3565 control the block size of the resulting filesystem.  Supported
3566 block sizes depend on the filesystem type, but typically they
3567 are C<1024>, C<2048> or C<4096> only.");
3568
3569   ("mke2journal", (RErr, [Int "blocksize"; Device "device"]), 188, [],
3570    [InitEmpty, Always, TestOutput (
3571       [["sfdiskM"; "/dev/sda"; ",100 ,"];
3572        ["mke2journal"; "4096"; "/dev/sda1"];
3573        ["mke2fs_J"; "ext2"; "4096"; "/dev/sda2"; "/dev/sda1"];
3574        ["mount"; "/dev/sda2"; "/"];
3575        ["write_file"; "/new"; "new file contents"; "0"];
3576        ["cat"; "/new"]], "new file contents")],
3577    "make ext2/3/4 external journal",
3578    "\
3579 This creates an ext2 external journal on C<device>.  It is equivalent
3580 to the command:
3581
3582  mke2fs -O journal_dev -b blocksize device");
3583
3584   ("mke2journal_L", (RErr, [Int "blocksize"; String "label"; Device "device"]), 189, [],
3585    [InitEmpty, Always, TestOutput (
3586       [["sfdiskM"; "/dev/sda"; ",100 ,"];
3587        ["mke2journal_L"; "4096"; "JOURNAL"; "/dev/sda1"];
3588        ["mke2fs_JL"; "ext2"; "4096"; "/dev/sda2"; "JOURNAL"];
3589        ["mount"; "/dev/sda2"; "/"];
3590        ["write_file"; "/new"; "new file contents"; "0"];
3591        ["cat"; "/new"]], "new file contents")],
3592    "make ext2/3/4 external journal with label",
3593    "\
3594 This creates an ext2 external journal on C<device> with label C<label>.");
3595
3596   ("mke2journal_U", (RErr, [Int "blocksize"; String "uuid"; Device "device"]), 190, [Optional "linuxfsuuid"],
3597    (let uuid = uuidgen () in
3598     [InitEmpty, Always, TestOutput (
3599        [["sfdiskM"; "/dev/sda"; ",100 ,"];
3600         ["mke2journal_U"; "4096"; uuid; "/dev/sda1"];
3601         ["mke2fs_JU"; "ext2"; "4096"; "/dev/sda2"; uuid];
3602         ["mount"; "/dev/sda2"; "/"];
3603         ["write_file"; "/new"; "new file contents"; "0"];
3604         ["cat"; "/new"]], "new file contents")]),
3605    "make ext2/3/4 external journal with UUID",
3606    "\
3607 This creates an ext2 external journal on C<device> with UUID C<uuid>.");
3608
3609   ("mke2fs_J", (RErr, [String "fstype"; Int "blocksize"; Device "device"; Device "journal"]), 191, [],
3610    [],
3611    "make ext2/3/4 filesystem with external journal",
3612    "\
3613 This creates an ext2/3/4 filesystem on C<device> with
3614 an external journal on C<journal>.  It is equivalent
3615 to the command:
3616
3617  mke2fs -t fstype -b blocksize -J device=<journal> <device>
3618
3619 See also C<guestfs_mke2journal>.");
3620
3621   ("mke2fs_JL", (RErr, [String "fstype"; Int "blocksize"; Device "device"; String "label"]), 192, [],
3622    [],
3623    "make ext2/3/4 filesystem with external journal",
3624    "\
3625 This creates an ext2/3/4 filesystem on C<device> with
3626 an external journal on the journal labeled C<label>.
3627
3628 See also C<guestfs_mke2journal_L>.");
3629
3630   ("mke2fs_JU", (RErr, [String "fstype"; Int "blocksize"; Device "device"; String "uuid"]), 193, [Optional "linuxfsuuid"],
3631    [],
3632    "make ext2/3/4 filesystem with external journal",
3633    "\
3634 This creates an ext2/3/4 filesystem on C<device> with
3635 an external journal on the journal with UUID C<uuid>.
3636
3637 See also C<guestfs_mke2journal_U>.");
3638
3639   ("modprobe", (RErr, [String "modulename"]), 194, [Optional "linuxmodules"],
3640    [InitNone, Always, TestRun [["modprobe"; "fat"]]],
3641    "load a kernel module",
3642    "\
3643 This loads a kernel module in the appliance.
3644
3645 The kernel module must have been whitelisted when libguestfs
3646 was built (see C<appliance/kmod.whitelist.in> in the source).");
3647
3648   ("echo_daemon", (RString "output", [StringList "words"]), 195, [],
3649    [InitNone, Always, TestOutput (
3650       [["echo_daemon"; "This is a test"]], "This is a test"
3651     )],
3652    "echo arguments back to the client",
3653    "\
3654 This command concatenate the list of C<words> passed with single spaces between
3655 them and returns the resulting string.
3656
3657 You can use this command to test the connection through to the daemon.
3658
3659 See also C<guestfs_ping_daemon>.");
3660
3661   ("find0", (RErr, [Pathname "directory"; FileOut "files"]), 196, [],
3662    [], (* There is a regression test for this. *)
3663    "find all files and directories, returning NUL-separated list",
3664    "\
3665 This command lists out all files and directories, recursively,
3666 starting at C<directory>, placing the resulting list in the
3667 external file called C<files>.
3668
3669 This command works the same way as C<guestfs_find> with the
3670 following exceptions:
3671
3672 =over 4
3673
3674 =item *
3675
3676 The resulting list is written to an external file.
3677
3678 =item *
3679
3680 Items (filenames) in the result are separated
3681 by C<\\0> characters.  See L<find(1)> option I<-print0>.
3682
3683 =item *
3684
3685 This command is not limited in the number of names that it
3686 can return.
3687
3688 =item *
3689
3690 The result list is not sorted.
3691
3692 =back");
3693
3694   ("case_sensitive_path", (RString "rpath", [Pathname "path"]), 197, [],
3695    [InitISOFS, Always, TestOutput (
3696       [["case_sensitive_path"; "/DIRECTORY"]], "/directory");
3697     InitISOFS, Always, TestOutput (
3698       [["case_sensitive_path"; "/DIRECTORY/"]], "/directory");
3699     InitISOFS, Always, TestOutput (
3700       [["case_sensitive_path"; "/Known-1"]], "/known-1");
3701     InitISOFS, Always, TestLastFail (
3702       [["case_sensitive_path"; "/Known-1/"]]);
3703     InitBasicFS, Always, TestOutput (
3704       [["mkdir"; "/a"];
3705        ["mkdir"; "/a/bbb"];
3706        ["touch"; "/a/bbb/c"];
3707        ["case_sensitive_path"; "/A/bbB/C"]], "/a/bbb/c");
3708     InitBasicFS, Always, TestOutput (
3709       [["mkdir"; "/a"];
3710        ["mkdir"; "/a/bbb"];
3711        ["touch"; "/a/bbb/c"];
3712        ["case_sensitive_path"; "/A////bbB/C"]], "/a/bbb/c");
3713     InitBasicFS, Always, TestLastFail (
3714       [["mkdir"; "/a"];
3715        ["mkdir"; "/a/bbb"];
3716        ["touch"; "/a/bbb/c"];
3717        ["case_sensitive_path"; "/A/bbb/../bbb/C"]])],
3718    "return true path on case-insensitive filesystem",
3719    "\
3720 This can be used to resolve case insensitive paths on
3721 a filesystem which is case sensitive.  The use case is
3722 to resolve paths which you have read from Windows configuration
3723 files or the Windows Registry, to the true path.
3724
3725 The command handles a peculiarity of the Linux ntfs-3g
3726 filesystem driver (and probably others), which is that although
3727 the underlying filesystem is case-insensitive, the driver
3728 exports the filesystem to Linux as case-sensitive.
3729
3730 One consequence of this is that special directories such
3731 as C<c:\\windows> may appear as C</WINDOWS> or C</windows>
3732 (or other things) depending on the precise details of how
3733 they were created.  In Windows itself this would not be
3734 a problem.
3735
3736 Bug or feature?  You decide:
3737 L<http://www.tuxera.com/community/ntfs-3g-faq/#posixfilenames1>
3738
3739 This function resolves the true case of each element in the
3740 path and returns the case-sensitive path.
3741
3742 Thus C<guestfs_case_sensitive_path> (\"/Windows/System32\")
3743 might return C<\"/WINDOWS/system32\"> (the exact return value
3744 would depend on details of how the directories were originally
3745 created under Windows).
3746
3747 I<Note>:
3748 This function does not handle drive names, backslashes etc.
3749
3750 See also C<guestfs_realpath>.");
3751
3752   ("vfs_type", (RString "fstype", [Device "device"]), 198, [],
3753    [InitBasicFS, Always, TestOutput (
3754       [["vfs_type"; "/dev/sda1"]], "ext2")],
3755    "get the Linux VFS type corresponding to a mounted device",
3756    "\
3757 This command gets the block device type corresponding to
3758 a mounted device called C<device>.
3759
3760 Usually the result is the name of the Linux VFS module that
3761 is used to mount this device (probably determined automatically
3762 if you used the C<guestfs_mount> call).");
3763
3764   ("truncate", (RErr, [Pathname "path"]), 199, [],
3765    [InitBasicFS, Always, TestOutputStruct (
3766       [["write_file"; "/test"; "some stuff so size is not zero"; "0"];
3767        ["truncate"; "/test"];
3768        ["stat"; "/test"]], [CompareWithInt ("size", 0)])],
3769    "truncate a file to zero size",
3770    "\
3771 This command truncates C<path> to a zero-length file.  The
3772 file must exist already.");
3773
3774   ("truncate_size", (RErr, [Pathname "path"; Int64 "size"]), 200, [],
3775    [InitBasicFS, Always, TestOutputStruct (
3776       [["touch"; "/test"];
3777        ["truncate_size"; "/test"; "1000"];
3778        ["stat"; "/test"]], [CompareWithInt ("size", 1000)])],
3779    "truncate a file to a particular size",
3780    "\
3781 This command truncates C<path> to size C<size> bytes.  The file
3782 must exist already.  If the file is smaller than C<size> then
3783 the file is extended to the required size with null bytes.");
3784
3785   ("utimens", (RErr, [Pathname "path"; Int64 "atsecs"; Int64 "atnsecs"; Int64 "mtsecs"; Int64 "mtnsecs"]), 201, [],
3786    [InitBasicFS, Always, TestOutputStruct (
3787       [["touch"; "/test"];
3788        ["utimens"; "/test"; "12345"; "67890"; "9876"; "5432"];
3789        ["stat"; "/test"]], [CompareWithInt ("mtime", 9876)])],
3790    "set timestamp of a file with nanosecond precision",
3791    "\
3792 This command sets the timestamps of a file with nanosecond
3793 precision.
3794
3795 C<atsecs, atnsecs> are the last access time (atime) in secs and
3796 nanoseconds from the epoch.
3797
3798 C<mtsecs, mtnsecs> are the last modification time (mtime) in
3799 secs and nanoseconds from the epoch.
3800
3801 If the C<*nsecs> field contains the special value C<-1> then
3802 the corresponding timestamp is set to the current time.  (The
3803 C<*secs> field is ignored in this case).
3804
3805 If the C<*nsecs> field contains the special value C<-2> then
3806 the corresponding timestamp is left unchanged.  (The
3807 C<*secs> field is ignored in this case).");
3808
3809   ("mkdir_mode", (RErr, [Pathname "path"; Int "mode"]), 202, [],
3810    [InitBasicFS, Always, TestOutputStruct (
3811       [["mkdir_mode"; "/test"; "0o111"];
3812        ["stat"; "/test"]], [CompareWithInt ("mode", 0o40111)])],
3813    "create a directory with a particular mode",
3814    "\
3815 This command creates a directory, setting the initial permissions
3816 of the directory to C<mode>.  See also C<guestfs_mkdir>.");
3817
3818   ("lchown", (RErr, [Int "owner"; Int "group"; Pathname "path"]), 203, [],
3819    [], (* XXX *)
3820    "change file owner and group",
3821    "\
3822 Change the file owner to C<owner> and group to C<group>.
3823 This is like C<guestfs_chown> but if C<path> is a symlink then
3824 the link itself is changed, not the target.
3825
3826 Only numeric uid and gid are supported.  If you want to use
3827 names, you will need to locate and parse the password file
3828 yourself (Augeas support makes this relatively easy).");
3829
3830   ("lstatlist", (RStructList ("statbufs", "stat"), [Pathname "path"; StringList "names"]), 204, [],
3831    [], (* XXX *)
3832    "lstat on multiple files",
3833    "\
3834 This call allows you to perform the C<guestfs_lstat> operation
3835 on multiple files, where all files are in the directory C<path>.
3836 C<names> is the list of files from this directory.
3837
3838 On return you get a list of stat structs, with a one-to-one
3839 correspondence to the C<names> list.  If any name did not exist
3840 or could not be lstat'd, then the C<ino> field of that structure
3841 is set to C<-1>.
3842
3843 This call is intended for programs that want to efficiently
3844 list a directory contents without making many round-trips.
3845 See also C<guestfs_lxattrlist> for a similarly efficient call
3846 for getting extended attributes.  Very long directory listings
3847 might cause the protocol message size to be exceeded, causing
3848 this call to fail.  The caller must split up such requests
3849 into smaller groups of names.");
3850
3851   ("lxattrlist", (RStructList ("xattrs", "xattr"), [Pathname "path"; StringList "names"]), 205, [Optional "linuxxattrs"],
3852    [], (* XXX *)
3853    "lgetxattr on multiple files",
3854    "\
3855 This call allows you to get the extended attributes
3856 of multiple files, where all files are in the directory C<path>.
3857 C<names> is the list of files from this directory.
3858
3859 On return you get a flat list of xattr structs which must be
3860 interpreted sequentially.  The first xattr struct always has a zero-length
3861 C<attrname>.  C<attrval> in this struct is zero-length
3862 to indicate there was an error doing C<lgetxattr> for this
3863 file, I<or> is a C string which is a decimal number
3864 (the number of following attributes for this file, which could
3865 be C<\"0\">).  Then after the first xattr struct are the
3866 zero or more attributes for the first named file.
3867 This repeats for the second and subsequent files.
3868
3869 This call is intended for programs that want to efficiently
3870 list a directory contents without making many round-trips.
3871 See also C<guestfs_lstatlist> for a similarly efficient call
3872 for getting standard stats.  Very long directory listings
3873 might cause the protocol message size to be exceeded, causing
3874 this call to fail.  The caller must split up such requests
3875 into smaller groups of names.");
3876
3877   ("readlinklist", (RStringList "links", [Pathname "path"; StringList "names"]), 206, [],
3878    [], (* XXX *)
3879    "readlink on multiple files",
3880    "\
3881 This call allows you to do a C<readlink> operation
3882 on multiple files, where all files are in the directory C<path>.
3883 C<names> is the list of files from this directory.
3884
3885 On return you get a list of strings, with a one-to-one
3886 correspondence to the C<names> list.  Each string is the
3887 value of the symbol link.
3888
3889 If the C<readlink(2)> operation fails on any name, then
3890 the corresponding result string is the empty string C<\"\">.
3891 However the whole operation is completed even if there
3892 were C<readlink(2)> errors, and so you can call this
3893 function with names where you don't know if they are
3894 symbolic links already (albeit slightly less efficient).
3895
3896 This call is intended for programs that want to efficiently
3897 list a directory contents without making many round-trips.
3898 Very long directory listings might cause the protocol
3899 message size to be exceeded, causing
3900 this call to fail.  The caller must split up such requests
3901 into smaller groups of names.");
3902
3903   ("pread", (RBufferOut "content", [Pathname "path"; Int "count"; Int64 "offset"]), 207, [ProtocolLimitWarning],
3904    [InitISOFS, Always, TestOutputBuffer (
3905       [["pread"; "/known-4"; "1"; "3"]], "\n");
3906     InitISOFS, Always, TestOutputBuffer (
3907       [["pread"; "/empty"; "0"; "100"]], "")],
3908    "read part of a file",
3909    "\
3910 This command lets you read part of a file.  It reads C<count>
3911 bytes of the file, starting at C<offset>, from file C<path>.
3912
3913 This may read fewer bytes than requested.  For further details
3914 see the L<pread(2)> system call.");
3915
3916   ("part_init", (RErr, [Device "device"; String "parttype"]), 208, [],
3917    [InitEmpty, Always, TestRun (
3918       [["part_init"; "/dev/sda"; "gpt"]])],
3919    "create an empty partition table",
3920    "\
3921 This creates an empty partition table on C<device> of one of the
3922 partition types listed below.  Usually C<parttype> should be
3923 either C<msdos> or C<gpt> (for large disks).
3924
3925 Initially there are no partitions.  Following this, you should
3926 call C<guestfs_part_add> for each partition required.
3927
3928 Possible values for C<parttype> are:
3929
3930 =over 4
3931
3932 =item B<efi> | B<gpt>
3933
3934 Intel EFI / GPT partition table.
3935
3936 This is recommended for >= 2 TB partitions that will be accessed
3937 from Linux and Intel-based Mac OS X.  It also has limited backwards
3938 compatibility with the C<mbr> format.
3939
3940 =item B<mbr> | B<msdos>
3941
3942 The standard PC \"Master Boot Record\" (MBR) format used
3943 by MS-DOS and Windows.  This partition type will B<only> work
3944 for device sizes up to 2 TB.  For large disks we recommend
3945 using C<gpt>.
3946
3947 =back
3948
3949 Other partition table types that may work but are not
3950 supported include:
3951
3952 =over 4
3953
3954 =item B<aix>
3955
3956 AIX disk labels.
3957
3958 =item B<amiga> | B<rdb>
3959
3960 Amiga \"Rigid Disk Block\" format.
3961
3962 =item B<bsd>
3963
3964 BSD disk labels.
3965
3966 =item B<dasd>
3967
3968 DASD, used on IBM mainframes.
3969
3970 =item B<dvh>
3971
3972 MIPS/SGI volumes.
3973
3974 =item B<mac>
3975
3976 Old Mac partition format.  Modern Macs use C<gpt>.
3977
3978 =item B<pc98>
3979
3980 NEC PC-98 format, common in Japan apparently.
3981
3982 =item B<sun>
3983
3984 Sun disk labels.
3985
3986 =back");
3987
3988   ("part_add", (RErr, [Device "device"; String "prlogex"; Int64 "startsect"; Int64 "endsect"]), 209, [],
3989    [InitEmpty, Always, TestRun (
3990       [["part_init"; "/dev/sda"; "mbr"];
3991        ["part_add"; "/dev/sda"; "primary"; "1"; "-1"]]);
3992     InitEmpty, Always, TestRun (
3993       [["part_init"; "/dev/sda"; "gpt"];
3994        ["part_add"; "/dev/sda"; "primary"; "34"; "127"];
3995        ["part_add"; "/dev/sda"; "primary"; "128"; "-34"]]);
3996     InitEmpty, Always, TestRun (
3997       [["part_init"; "/dev/sda"; "mbr"];
3998        ["part_add"; "/dev/sda"; "primary"; "32"; "127"];
3999        ["part_add"; "/dev/sda"; "primary"; "128"; "255"];
4000        ["part_add"; "/dev/sda"; "primary"; "256"; "511"];
4001        ["part_add"; "/dev/sda"; "primary"; "512"; "-1"]])],
4002    "add a partition to the device",
4003    "\
4004 This command adds a partition to C<device>.  If there is no partition
4005 table on the device, call C<guestfs_part_init> first.
4006
4007 The C<prlogex> parameter is the type of partition.  Normally you
4008 should pass C<p> or C<primary> here, but MBR partition tables also
4009 support C<l> (or C<logical>) and C<e> (or C<extended>) partition
4010 types.
4011
4012 C<startsect> and C<endsect> are the start and end of the partition
4013 in I<sectors>.  C<endsect> may be negative, which means it counts
4014 backwards from the end of the disk (C<-1> is the last sector).
4015
4016 Creating a partition which covers the whole disk is not so easy.
4017 Use C<guestfs_part_disk> to do that.");
4018
4019   ("part_disk", (RErr, [Device "device"; String "parttype"]), 210, [DangerWillRobinson],
4020    [InitEmpty, Always, TestRun (
4021       [["part_disk"; "/dev/sda"; "mbr"]]);
4022     InitEmpty, Always, TestRun (
4023       [["part_disk"; "/dev/sda"; "gpt"]])],
4024    "partition whole disk with a single primary partition",
4025    "\
4026 This command is simply a combination of C<guestfs_part_init>
4027 followed by C<guestfs_part_add> to create a single primary partition
4028 covering the whole disk.
4029
4030 C<parttype> is the partition table type, usually C<mbr> or C<gpt>,
4031 but other possible values are described in C<guestfs_part_init>.");
4032
4033   ("part_set_bootable", (RErr, [Device "device"; Int "partnum"; Bool "bootable"]), 211, [],
4034    [InitEmpty, Always, TestRun (
4035       [["part_disk"; "/dev/sda"; "mbr"];
4036        ["part_set_bootable"; "/dev/sda"; "1"; "true"]])],
4037    "make a partition bootable",
4038    "\
4039 This sets the bootable flag on partition numbered C<partnum> on
4040 device C<device>.  Note that partitions are numbered from 1.
4041
4042 The bootable flag is used by some PC BIOSes to determine which
4043 partition to boot from.  It is by no means universally recognized,
4044 and in any case if your operating system installed a boot
4045 sector on the device itself, then that takes precedence.");
4046
4047   ("part_set_name", (RErr, [Device "device"; Int "partnum"; String "name"]), 212, [],
4048    [InitEmpty, Always, TestRun (
4049       [["part_disk"; "/dev/sda"; "gpt"];
4050        ["part_set_name"; "/dev/sda"; "1"; "thepartname"]])],
4051    "set partition name",
4052    "\
4053 This sets the partition name on partition numbered C<partnum> on
4054 device C<device>.  Note that partitions are numbered from 1.
4055
4056 The partition name can only be set on certain types of partition
4057 table.  This works on C<gpt> but not on C<mbr> partitions.");
4058
4059   ("part_list", (RStructList ("partitions", "partition"), [Device "device"]), 213, [],
4060    [], (* XXX Add a regression test for this. *)
4061    "list partitions on a device",
4062    "\
4063 This command parses the partition table on C<device> and
4064 returns the list of partitions found.
4065
4066 The fields in the returned structure are:
4067
4068 =over 4
4069
4070 =item B<part_num>
4071
4072 Partition number, counting from 1.
4073
4074 =item B<part_start>
4075
4076 Start of the partition I<in bytes>.  To get sectors you have to
4077 divide by the device's sector size, see C<guestfs_blockdev_getss>.
4078
4079 =item B<part_end>
4080
4081 End of the partition in bytes.
4082
4083 =item B<part_size>
4084
4085 Size of the partition in bytes.
4086
4087 =back");
4088
4089   ("part_get_parttype", (RString "parttype", [Device "device"]), 214, [],
4090    [InitEmpty, Always, TestOutput (
4091       [["part_disk"; "/dev/sda"; "gpt"];
4092        ["part_get_parttype"; "/dev/sda"]], "gpt")],
4093    "get the partition table type",
4094    "\
4095 This command examines the partition table on C<device> and
4096 returns the partition table type (format) being used.
4097
4098 Common return values include: C<msdos> (a DOS/Windows style MBR
4099 partition table), C<gpt> (a GPT/EFI-style partition table).  Other
4100 values are possible, although unusual.  See C<guestfs_part_init>
4101 for a full list.");
4102
4103   ("fill", (RErr, [Int "c"; Int "len"; Pathname "path"]), 215, [],
4104    [InitBasicFS, Always, TestOutputBuffer (
4105       [["fill"; "0x63"; "10"; "/test"];
4106        ["read_file"; "/test"]], "cccccccccc")],
4107    "fill a file with octets",
4108    "\
4109 This command creates a new file called C<path>.  The initial
4110 content of the file is C<len> octets of C<c>, where C<c>
4111 must be a number in the range C<[0..255]>.
4112
4113 To fill a file with zero bytes (sparsely), it is
4114 much more efficient to use C<guestfs_truncate_size>.");
4115
4116   ("available", (RErr, [StringList "groups"]), 216, [],
4117    [InitNone, Always, TestRun [["available"; ""]]],
4118    "test availability of some parts of the API",
4119    "\
4120 This command is used to check the availability of some
4121 groups of functionality in the appliance, which not all builds of
4122 the libguestfs appliance will be able to provide.
4123
4124 The libguestfs groups, and the functions that those
4125 groups correspond to, are listed in L<guestfs(3)/AVAILABILITY>.
4126
4127 The argument C<groups> is a list of group names, eg:
4128 C<[\"inotify\", \"augeas\"]> would check for the availability of
4129 the Linux inotify functions and Augeas (configuration file
4130 editing) functions.
4131
4132 The command returns no error if I<all> requested groups are available.
4133
4134 It fails with an error if one or more of the requested
4135 groups is unavailable in the appliance.
4136
4137 If an unknown group name is included in the
4138 list of groups then an error is always returned.
4139
4140 I<Notes:>
4141
4142 =over 4
4143
4144 =item *
4145
4146 You must call C<guestfs_launch> before calling this function.
4147
4148 The reason is because we don't know what groups are
4149 supported by the appliance/daemon until it is running and can
4150 be queried.
4151
4152 =item *
4153
4154 If a group of functions is available, this does not necessarily
4155 mean that they will work.  You still have to check for errors
4156 when calling individual API functions even if they are
4157 available.
4158
4159 =item *
4160
4161 It is usually the job of distro packagers to build
4162 complete functionality into the libguestfs appliance.
4163 Upstream libguestfs, if built from source with all
4164 requirements satisfied, will support everything.
4165
4166 =item *
4167
4168 This call was added in version C<1.0.80>.  In previous
4169 versions of libguestfs all you could do would be to speculatively
4170 execute a command to find out if the daemon implemented it.
4171 See also C<guestfs_version>.
4172
4173 =back");
4174
4175   ("dd", (RErr, [Dev_or_Path "src"; Dev_or_Path "dest"]), 217, [],
4176    [InitBasicFS, Always, TestOutputBuffer (
4177       [["write_file"; "/src"; "hello, world"; "0"];
4178        ["dd"; "/src"; "/dest"];
4179        ["read_file"; "/dest"]], "hello, world")],
4180    "copy from source to destination using dd",
4181    "\
4182 This command copies from one source device or file C<src>
4183 to another destination device or file C<dest>.  Normally you
4184 would use this to copy to or from a device or partition, for
4185 example to duplicate a filesystem.
4186
4187 If the destination is a device, it must be as large or larger
4188 than the source file or device, otherwise the copy will fail.
4189 This command cannot do partial copies.");
4190
4191 ]
4192
4193 let all_functions = non_daemon_functions @ daemon_functions
4194
4195 (* In some places we want the functions to be displayed sorted
4196  * alphabetically, so this is useful:
4197  *)
4198 let all_functions_sorted =
4199   List.sort (fun (n1,_,_,_,_,_,_) (n2,_,_,_,_,_,_) ->
4200                compare n1 n2) all_functions
4201
4202 (* Field types for structures. *)
4203 type field =
4204   | FChar                       (* C 'char' (really, a 7 bit byte). *)
4205   | FString                     (* nul-terminated ASCII string, NOT NULL. *)
4206   | FBuffer                     (* opaque buffer of bytes, (char *, int) pair *)
4207   | FUInt32
4208   | FInt32
4209   | FUInt64
4210   | FInt64
4211   | FBytes                      (* Any int measure that counts bytes. *)
4212   | FUUID                       (* 32 bytes long, NOT nul-terminated. *)
4213   | FOptPercent                 (* [0..100], or -1 meaning "not present". *)
4214
4215 (* Because we generate extra parsing code for LVM command line tools,
4216  * we have to pull out the LVM columns separately here.
4217  *)
4218 let lvm_pv_cols = [
4219   "pv_name", FString;
4220   "pv_uuid", FUUID;
4221   "pv_fmt", FString;
4222   "pv_size", FBytes;
4223   "dev_size", FBytes;
4224   "pv_free", FBytes;
4225   "pv_used", FBytes;
4226   "pv_attr", FString (* XXX *);
4227   "pv_pe_count", FInt64;
4228   "pv_pe_alloc_count", FInt64;
4229   "pv_tags", FString;
4230   "pe_start", FBytes;
4231   "pv_mda_count", FInt64;
4232   "pv_mda_free", FBytes;
4233   (* Not in Fedora 10:
4234      "pv_mda_size", FBytes;
4235   *)
4236 ]
4237 let lvm_vg_cols = [
4238   "vg_name", FString;
4239   "vg_uuid", FUUID;
4240   "vg_fmt", FString;
4241   "vg_attr", FString (* XXX *);
4242   "vg_size", FBytes;
4243   "vg_free", FBytes;
4244   "vg_sysid", FString;
4245   "vg_extent_size", FBytes;
4246   "vg_extent_count", FInt64;
4247   "vg_free_count", FInt64;
4248   "max_lv", FInt64;
4249   "max_pv", FInt64;
4250   "pv_count", FInt64;
4251   "lv_count", FInt64;
4252   "snap_count", FInt64;
4253   "vg_seqno", FInt64;
4254   "vg_tags", FString;
4255   "vg_mda_count", FInt64;
4256   "vg_mda_free", FBytes;
4257   (* Not in Fedora 10:
4258      "vg_mda_size", FBytes;
4259   *)
4260 ]
4261 let lvm_lv_cols = [
4262   "lv_name", FString;
4263   "lv_uuid", FUUID;
4264   "lv_attr", FString (* XXX *);
4265   "lv_major", FInt64;
4266   "lv_minor", FInt64;
4267   "lv_kernel_major", FInt64;
4268   "lv_kernel_minor", FInt64;
4269   "lv_size", FBytes;
4270   "seg_count", FInt64;
4271   "origin", FString;
4272   "snap_percent", FOptPercent;
4273   "copy_percent", FOptPercent;
4274   "move_pv", FString;
4275   "lv_tags", FString;
4276   "mirror_log", FString;
4277   "modules", FString;
4278 ]
4279
4280 (* Names and fields in all structures (in RStruct and RStructList)
4281  * that we support.
4282  *)
4283 let structs = [
4284   (* The old RIntBool return type, only ever used for aug_defnode.  Do
4285    * not use this struct in any new code.
4286    *)
4287   "int_bool", [
4288     "i", FInt32;                (* for historical compatibility *)
4289     "b", FInt32;                (* for historical compatibility *)
4290   ];
4291
4292   (* LVM PVs, VGs, LVs. *)
4293   "lvm_pv", lvm_pv_cols;
4294   "lvm_vg", lvm_vg_cols;
4295   "lvm_lv", lvm_lv_cols;
4296
4297   (* Column names and types from stat structures.
4298    * NB. Can't use things like 'st_atime' because glibc header files
4299    * define some of these as macros.  Ugh.
4300    *)
4301   "stat", [
4302     "dev", FInt64;
4303     "ino", FInt64;
4304     "mode", FInt64;
4305     "nlink", FInt64;
4306     "uid", FInt64;
4307     "gid", FInt64;
4308     "rdev", FInt64;
4309     "size", FInt64;
4310     "blksize", FInt64;
4311     "blocks", FInt64;
4312     "atime", FInt64;
4313     "mtime", FInt64;
4314     "ctime", FInt64;
4315   ];
4316   "statvfs", [
4317     "bsize", FInt64;
4318     "frsize", FInt64;
4319     "blocks", FInt64;
4320     "bfree", FInt64;
4321     "bavail", FInt64;
4322     "files", FInt64;
4323     "ffree", FInt64;
4324     "favail", FInt64;
4325     "fsid", FInt64;
4326     "flag", FInt64;
4327     "namemax", FInt64;
4328   ];
4329
4330   (* Column names in dirent structure. *)
4331   "dirent", [
4332     "ino", FInt64;
4333     (* 'b' 'c' 'd' 'f' (FIFO) 'l' 'r' (regular file) 's' 'u' '?' *)
4334     "ftyp", FChar;
4335     "name", FString;
4336   ];
4337
4338   (* Version numbers. *)
4339   "version", [
4340     "major", FInt64;
4341     "minor", FInt64;
4342     "release", FInt64;
4343     "extra", FString;
4344   ];
4345
4346   (* Extended attribute. *)
4347   "xattr", [
4348     "attrname", FString;
4349     "attrval", FBuffer;
4350   ];
4351
4352   (* Inotify events. *)
4353   "inotify_event", [
4354     "in_wd", FInt64;
4355     "in_mask", FUInt32;
4356     "in_cookie", FUInt32;
4357     "in_name", FString;
4358   ];
4359
4360   (* Partition table entry. *)
4361   "partition", [
4362     "part_num", FInt32;
4363     "part_start", FBytes;
4364     "part_end", FBytes;
4365     "part_size", FBytes;
4366   ];
4367 ] (* end of structs *)
4368
4369 (* Ugh, Java has to be different ..
4370  * These names are also used by the Haskell bindings.
4371  *)
4372 let java_structs = [
4373   "int_bool", "IntBool";
4374   "lvm_pv", "PV";
4375   "lvm_vg", "VG";
4376   "lvm_lv", "LV";
4377   "stat", "Stat";
4378   "statvfs", "StatVFS";
4379   "dirent", "Dirent";
4380   "version", "Version";
4381   "xattr", "XAttr";
4382   "inotify_event", "INotifyEvent";
4383   "partition", "Partition";
4384 ]
4385
4386 (* What structs are actually returned. *)
4387 type rstructs_used_t = RStructOnly | RStructListOnly | RStructAndList
4388
4389 (* Returns a list of RStruct/RStructList structs that are returned
4390  * by any function.  Each element of returned list is a pair:
4391  *
4392  * (structname, RStructOnly)
4393  *    == there exists function which returns RStruct (_, structname)
4394  * (structname, RStructListOnly)
4395  *    == there exists function which returns RStructList (_, structname)
4396  * (structname, RStructAndList)
4397  *    == there are functions returning both RStruct (_, structname)
4398  *                                      and RStructList (_, structname)
4399  *)
4400 let rstructs_used_by functions =
4401   (* ||| is a "logical OR" for rstructs_used_t *)
4402   let (|||) a b =
4403     match a, b with
4404     | RStructAndList, _
4405     | _, RStructAndList -> RStructAndList
4406     | RStructOnly, RStructListOnly
4407     | RStructListOnly, RStructOnly -> RStructAndList
4408     | RStructOnly, RStructOnly -> RStructOnly
4409     | RStructListOnly, RStructListOnly -> RStructListOnly
4410   in
4411
4412   let h = Hashtbl.create 13 in
4413
4414   (* if elem->oldv exists, update entry using ||| operator,
4415    * else just add elem->newv to the hash
4416    *)
4417   let update elem newv =
4418     try  let oldv = Hashtbl.find h elem in
4419          Hashtbl.replace h elem (newv ||| oldv)
4420     with Not_found -> Hashtbl.add h elem newv
4421   in
4422
4423   List.iter (
4424     fun (_, style, _, _, _, _, _) ->
4425       match fst style with
4426       | RStruct (_, structname) -> update structname RStructOnly
4427       | RStructList (_, structname) -> update structname RStructListOnly
4428       | _ -> ()
4429   ) functions;
4430
4431   (* return key->values as a list of (key,value) *)
4432   Hashtbl.fold (fun key value xs -> (key, value) :: xs) h []
4433
4434 (* Used for testing language bindings. *)
4435 type callt =
4436   | CallString of string
4437   | CallOptString of string option
4438   | CallStringList of string list
4439   | CallInt of int
4440   | CallInt64 of int64
4441   | CallBool of bool
4442
4443 (* Used to memoize the result of pod2text. *)
4444 let pod2text_memo_filename = "src/.pod2text.data"
4445 let pod2text_memo : ((int * string * string), string list) Hashtbl.t =
4446   try
4447     let chan = open_in pod2text_memo_filename in
4448     let v = input_value chan in
4449     close_in chan;
4450     v
4451   with
4452     _ -> Hashtbl.create 13
4453 let pod2text_memo_updated () =
4454   let chan = open_out pod2text_memo_filename in
4455   output_value chan pod2text_memo;
4456   close_out chan
4457
4458 (* Useful functions.
4459  * Note we don't want to use any external OCaml libraries which
4460  * makes this a bit harder than it should be.
4461  *)
4462 module StringMap = Map.Make (String)
4463
4464 let failwithf fs = ksprintf failwith fs
4465
4466 let unique = let i = ref 0 in fun () -> incr i; !i
4467
4468 let replace_char s c1 c2 =
4469   let s2 = String.copy s in
4470   let r = ref false in
4471   for i = 0 to String.length s2 - 1 do
4472     if String.unsafe_get s2 i = c1 then (
4473       String.unsafe_set s2 i c2;
4474       r := true
4475     )
4476   done;
4477   if not !r then s else s2
4478
4479 let isspace c =
4480   c = ' '
4481   (* || c = '\f' *) || c = '\n' || c = '\r' || c = '\t' (* || c = '\v' *)
4482
4483 let triml ?(test = isspace) str =
4484   let i = ref 0 in
4485   let n = ref (String.length str) in
4486   while !n > 0 && test str.[!i]; do
4487     decr n;
4488     incr i
4489   done;
4490   if !i = 0 then str
4491   else String.sub str !i !n
4492
4493 let trimr ?(test = isspace) str =
4494   let n = ref (String.length str) in
4495   while !n > 0 && test str.[!n-1]; do
4496     decr n
4497   done;
4498   if !n = String.length str then str
4499   else String.sub str 0 !n
4500
4501 let trim ?(test = isspace) str =
4502   trimr ~test (triml ~test str)
4503
4504 let rec find s sub =
4505   let len = String.length s in
4506   let sublen = String.length sub in
4507   let rec loop i =
4508     if i <= len-sublen then (
4509       let rec loop2 j =
4510         if j < sublen then (
4511           if s.[i+j] = sub.[j] then loop2 (j+1)
4512           else -1
4513         ) else
4514           i (* found *)
4515       in
4516       let r = loop2 0 in
4517       if r = -1 then loop (i+1) else r
4518     ) else
4519       -1 (* not found *)
4520   in
4521   loop 0
4522
4523 let rec replace_str s s1 s2 =
4524   let len = String.length s in
4525   let sublen = String.length s1 in
4526   let i = find s s1 in
4527   if i = -1 then s
4528   else (
4529     let s' = String.sub s 0 i in
4530     let s'' = String.sub s (i+sublen) (len-i-sublen) in
4531     s' ^ s2 ^ replace_str s'' s1 s2
4532   )
4533
4534 let rec string_split sep str =
4535   let len = String.length str in
4536   let seplen = String.length sep in
4537   let i = find str sep in
4538   if i = -1 then [str]
4539   else (
4540     let s' = String.sub str 0 i in
4541     let s'' = String.sub str (i+seplen) (len-i-seplen) in
4542     s' :: string_split sep s''
4543   )
4544
4545 let files_equal n1 n2 =
4546   let cmd = sprintf "cmp -s %s %s" (Filename.quote n1) (Filename.quote n2) in
4547   match Sys.command cmd with
4548   | 0 -> true
4549   | 1 -> false
4550   | i -> failwithf "%s: failed with error code %d" cmd i
4551
4552 let rec filter_map f = function
4553   | [] -> []
4554   | x :: xs ->
4555       match f x with
4556       | Some y -> y :: filter_map f xs
4557       | None -> filter_map f xs
4558
4559 let rec find_map f = function
4560   | [] -> raise Not_found
4561   | x :: xs ->
4562       match f x with
4563       | Some y -> y
4564       | None -> find_map f xs
4565
4566 let iteri f xs =
4567   let rec loop i = function
4568     | [] -> ()
4569     | x :: xs -> f i x; loop (i+1) xs
4570   in
4571   loop 0 xs
4572
4573 let mapi f xs =
4574   let rec loop i = function
4575     | [] -> []
4576     | x :: xs -> let r = f i x in r :: loop (i+1) xs
4577   in
4578   loop 0 xs
4579
4580 let name_of_argt = function
4581   | Pathname n | Device n | Dev_or_Path n | String n | OptString n
4582   | StringList n | DeviceList n | Bool n | Int n | Int64 n
4583   | FileIn n | FileOut n -> n
4584
4585 let java_name_of_struct typ =
4586   try List.assoc typ java_structs
4587   with Not_found ->
4588     failwithf
4589       "java_name_of_struct: no java_structs entry corresponding to %s" typ
4590
4591 let cols_of_struct typ =
4592   try List.assoc typ structs
4593   with Not_found ->
4594     failwithf "cols_of_struct: unknown struct %s" typ
4595
4596 let seq_of_test = function
4597   | TestRun s | TestOutput (s, _) | TestOutputList (s, _)
4598   | TestOutputListOfDevices (s, _)
4599   | TestOutputInt (s, _) | TestOutputIntOp (s, _, _)
4600   | TestOutputTrue s | TestOutputFalse s
4601   | TestOutputLength (s, _) | TestOutputBuffer (s, _)
4602   | TestOutputStruct (s, _)
4603   | TestLastFail s -> s
4604
4605 (* Handling for function flags. *)
4606 let protocol_limit_warning =
4607   "Because of the message protocol, there is a transfer limit
4608 of somewhere between 2MB and 4MB.  To transfer large files you should use
4609 FTP."
4610
4611 let danger_will_robinson =
4612   "B<This command is dangerous.  Without careful use you
4613 can easily destroy all your data>."
4614
4615 let deprecation_notice flags =
4616   try
4617     let alt =
4618       find_map (function DeprecatedBy str -> Some str | _ -> None) flags in
4619     let txt =
4620       sprintf "This function is deprecated.
4621 In new code, use the C<%s> call instead.
4622
4623 Deprecated functions will not be removed from the API, but the
4624 fact that they are deprecated indicates that there are problems
4625 with correct use of these functions." alt in
4626     Some txt
4627   with
4628     Not_found -> None
4629
4630 (* Create list of optional groups. *)
4631 let optgroups =
4632   let h = Hashtbl.create 13 in
4633   List.iter (
4634     fun (name, _, _, flags, _, _, _) ->
4635       List.iter (
4636         function
4637         | Optional group ->
4638             let names = try Hashtbl.find h group with Not_found -> [] in
4639             Hashtbl.replace h group (name :: names)
4640         | _ -> ()
4641       ) flags
4642   ) daemon_functions;
4643   let groups = Hashtbl.fold (fun k _ ks -> k :: ks) h [] in
4644   let groups =
4645     List.map (
4646       fun group -> group, List.sort compare (Hashtbl.find h group)
4647     ) groups in
4648   List.sort (fun x y -> compare (fst x) (fst y)) groups
4649
4650 (* Check function names etc. for consistency. *)
4651 let check_functions () =
4652   let contains_uppercase str =
4653     let len = String.length str in
4654     let rec loop i =
4655       if i >= len then false
4656       else (
4657         let c = str.[i] in
4658         if c >= 'A' && c <= 'Z' then true
4659         else loop (i+1)
4660       )
4661     in
4662     loop 0
4663   in
4664
4665   (* Check function names. *)
4666   List.iter (
4667     fun (name, _, _, _, _, _, _) ->
4668       if String.length name >= 7 && String.sub name 0 7 = "guestfs" then
4669         failwithf "function name %s does not need 'guestfs' prefix" name;
4670       if name = "" then
4671         failwithf "function name is empty";
4672       if name.[0] < 'a' || name.[0] > 'z' then
4673         failwithf "function name %s must start with lowercase a-z" name;
4674       if String.contains name '-' then
4675         failwithf "function name %s should not contain '-', use '_' instead."
4676           name
4677   ) all_functions;
4678
4679   (* Check function parameter/return names. *)
4680   List.iter (
4681     fun (name, style, _, _, _, _, _) ->
4682       let check_arg_ret_name n =
4683         if contains_uppercase n then
4684           failwithf "%s param/ret %s should not contain uppercase chars"
4685             name n;
4686         if String.contains n '-' || String.contains n '_' then
4687           failwithf "%s param/ret %s should not contain '-' or '_'"
4688             name n;
4689         if n = "value" then
4690           failwithf "%s has a param/ret called 'value', which causes conflicts in the OCaml bindings, use something like 'val' or a more descriptive name" name;
4691         if n = "int" || n = "char" || n = "short" || n = "long" then
4692           failwithf "%s has a param/ret which conflicts with a C type (eg. 'int', 'char' etc.)" name;
4693         if n = "i" || n = "n" then
4694           failwithf "%s has a param/ret called 'i' or 'n', which will cause some conflicts in the generated code" name;
4695         if n = "argv" || n = "args" then
4696           failwithf "%s has a param/ret called 'argv' or 'args', which will cause some conflicts in the generated code" name;
4697
4698         (* List Haskell, OCaml and C keywords here.
4699          * http://www.haskell.org/haskellwiki/Keywords
4700          * http://caml.inria.fr/pub/docs/manual-ocaml/lex.html#operator-char
4701          * http://en.wikipedia.org/wiki/C_syntax#Reserved_keywords
4702          * Formatted via: cat c haskell ocaml|sort -u|grep -vE '_|^val$' \
4703          *   |perl -pe 's/(.+)/"$1";/'|fmt -70
4704          * Omitting _-containing words, since they're handled above.
4705          * Omitting the OCaml reserved word, "val", is ok,
4706          * and saves us from renaming several parameters.
4707          *)
4708         let reserved = [
4709           "and"; "as"; "asr"; "assert"; "auto"; "begin"; "break"; "case";
4710           "char"; "class"; "const"; "constraint"; "continue"; "data";
4711           "default"; "deriving"; "do"; "done"; "double"; "downto"; "else";
4712           "end"; "enum"; "exception"; "extern"; "external"; "false"; "float";
4713           "for"; "forall"; "foreign"; "fun"; "function"; "functor"; "goto";
4714           "hiding"; "if"; "import"; "in"; "include"; "infix"; "infixl";
4715           "infixr"; "inherit"; "initializer"; "inline"; "instance"; "int";
4716           "land"; "lazy"; "let"; "long"; "lor"; "lsl"; "lsr"; "lxor";
4717           "match"; "mdo"; "method"; "mod"; "module"; "mutable"; "new";
4718           "newtype"; "object"; "of"; "open"; "or"; "private"; "qualified";
4719           "rec"; "register"; "restrict"; "return"; "short"; "sig"; "signed";
4720           "sizeof"; "static"; "struct"; "switch"; "then"; "to"; "true"; "try";
4721           "type"; "typedef"; "union"; "unsigned"; "virtual"; "void";
4722           "volatile"; "when"; "where"; "while";
4723           ] in
4724         if List.mem n reserved then
4725           failwithf "%s has param/ret using reserved word %s" name n;
4726       in
4727
4728       (match fst style with
4729        | RErr -> ()
4730        | RInt n | RInt64 n | RBool n
4731        | RConstString n | RConstOptString n | RString n
4732        | RStringList n | RStruct (n, _) | RStructList (n, _)
4733        | RHashtable n | RBufferOut n ->
4734            check_arg_ret_name n
4735       );
4736       List.iter (fun arg -> check_arg_ret_name (name_of_argt arg)) (snd style)
4737   ) all_functions;
4738
4739   (* Check short descriptions. *)
4740   List.iter (
4741     fun (name, _, _, _, _, shortdesc, _) ->
4742       if shortdesc.[0] <> Char.lowercase shortdesc.[0] then
4743         failwithf "short description of %s should begin with lowercase." name;
4744       let c = shortdesc.[String.length shortdesc-1] in
4745       if c = '\n' || c = '.' then
4746         failwithf "short description of %s should not end with . or \\n." name
4747   ) all_functions;
4748
4749   (* Check long dscriptions. *)
4750   List.iter (
4751     fun (name, _, _, _, _, _, longdesc) ->
4752       if longdesc.[String.length longdesc-1] = '\n' then
4753         failwithf "long description of %s should not end with \\n." name
4754   ) all_functions;
4755
4756   (* Check proc_nrs. *)
4757   List.iter (
4758     fun (name, _, proc_nr, _, _, _, _) ->
4759       if proc_nr <= 0 then
4760         failwithf "daemon function %s should have proc_nr > 0" name
4761   ) daemon_functions;
4762
4763   List.iter (
4764     fun (name, _, proc_nr, _, _, _, _) ->
4765       if proc_nr <> -1 then
4766         failwithf "non-daemon function %s should have proc_nr -1" name
4767   ) non_daemon_functions;
4768
4769   let proc_nrs =
4770     List.map (fun (name, _, proc_nr, _, _, _, _) -> name, proc_nr)
4771       daemon_functions in
4772   let proc_nrs =
4773     List.sort (fun (_,nr1) (_,nr2) -> compare nr1 nr2) proc_nrs in
4774   let rec loop = function
4775     | [] -> ()
4776     | [_] -> ()
4777     | (name1,nr1) :: ((name2,nr2) :: _ as rest) when nr1 < nr2 ->
4778         loop rest
4779     | (name1,nr1) :: (name2,nr2) :: _ ->
4780         failwithf "%s and %s have conflicting procedure numbers (%d, %d)"
4781           name1 name2 nr1 nr2
4782   in
4783   loop proc_nrs;
4784
4785   (* Check tests. *)
4786   List.iter (
4787     function
4788       (* Ignore functions that have no tests.  We generate a
4789        * warning when the user does 'make check' instead.
4790        *)
4791     | name, _, _, _, [], _, _ -> ()
4792     | name, _, _, _, tests, _, _ ->
4793         let funcs =
4794           List.map (
4795             fun (_, _, test) ->
4796               match seq_of_test test with
4797               | [] ->
4798                   failwithf "%s has a test containing an empty sequence" name
4799               | cmds -> List.map List.hd cmds
4800           ) tests in
4801         let funcs = List.flatten funcs in
4802
4803         let tested = List.mem name funcs in
4804
4805         if not tested then
4806           failwithf "function %s has tests but does not test itself" name
4807   ) all_functions
4808
4809 (* 'pr' prints to the current output file. *)
4810 let chan = ref Pervasives.stdout
4811 let pr fs = ksprintf (output_string !chan) fs
4812
4813 let copyright_years =
4814   let this_year = 1900 + (localtime (time ())).tm_year in
4815   if this_year > 2009 then sprintf "2009-%04d" this_year else "2009"
4816
4817 (* Generate a header block in a number of standard styles. *)
4818 type comment_style = CStyle | HashStyle | OCamlStyle | HaskellStyle
4819 type license = GPLv2 | LGPLv2
4820
4821 let generate_header ?(extra_inputs = []) comment license =
4822   let inputs = "src/generator.ml" :: extra_inputs in
4823   let c = match comment with
4824     | CStyle ->     pr "/* "; " *"
4825     | HashStyle ->  pr "# ";  "#"
4826     | OCamlStyle -> pr "(* "; " *"
4827     | HaskellStyle -> pr "{- "; "  " in
4828   pr "libguestfs generated file\n";
4829   pr "%s WARNING: THIS FILE IS GENERATED FROM:\n" c;
4830   List.iter (pr "%s   %s\n" c) inputs;
4831   pr "%s ANY CHANGES YOU MAKE TO THIS FILE WILL BE LOST.\n" c;
4832   pr "%s\n" c;
4833   pr "%s Copyright (C) %s Red Hat Inc.\n" c copyright_years;
4834   pr "%s\n" c;
4835   (match license with
4836    | GPLv2 ->
4837        pr "%s This program is free software; you can redistribute it and/or modify\n" c;
4838        pr "%s it under the terms of the GNU General Public License as published by\n" c;
4839        pr "%s the Free Software Foundation; either version 2 of the License, or\n" c;
4840        pr "%s (at your option) any later version.\n" c;
4841        pr "%s\n" c;
4842        pr "%s This program is distributed in the hope that it will be useful,\n" c;
4843        pr "%s but WITHOUT ANY WARRANTY; without even the implied warranty of\n" c;
4844        pr "%s MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the\n" c;
4845        pr "%s GNU General Public License for more details.\n" c;
4846        pr "%s\n" c;
4847        pr "%s You should have received a copy of the GNU General Public License along\n" c;
4848        pr "%s with this program; if not, write to the Free Software Foundation, Inc.,\n" c;
4849        pr "%s 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA.\n" c;
4850
4851    | LGPLv2 ->
4852        pr "%s This library is free software; you can redistribute it and/or\n" c;
4853        pr "%s modify it under the terms of the GNU Lesser General Public\n" c;
4854        pr "%s License as published by the Free Software Foundation; either\n" c;
4855        pr "%s version 2 of the License, or (at your option) any later version.\n" c;
4856        pr "%s\n" c;
4857        pr "%s This library is distributed in the hope that it will be useful,\n" c;
4858        pr "%s but WITHOUT ANY WARRANTY; without even the implied warranty of\n" c;
4859        pr "%s MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU\n" c;
4860        pr "%s Lesser General Public License for more details.\n" c;
4861        pr "%s\n" c;
4862        pr "%s You should have received a copy of the GNU Lesser General Public\n" c;
4863        pr "%s License along with this library; if not, write to the Free Software\n" c;
4864        pr "%s Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA\n" c;
4865   );
4866   (match comment with
4867    | CStyle -> pr " */\n"
4868    | HashStyle -> ()
4869    | OCamlStyle -> pr " *)\n"
4870    | HaskellStyle -> pr "-}\n"
4871   );
4872   pr "\n"
4873
4874 (* Start of main code generation functions below this line. *)
4875
4876 (* Generate the pod documentation for the C API. *)
4877 let rec generate_actions_pod () =
4878   List.iter (
4879     fun (shortname, style, _, flags, _, _, longdesc) ->
4880       if not (List.mem NotInDocs flags) then (
4881         let name = "guestfs_" ^ shortname in
4882         pr "=head2 %s\n\n" name;
4883         pr " ";
4884         generate_prototype ~extern:false ~handle:"handle" name style;
4885         pr "\n\n";
4886         pr "%s\n\n" longdesc;
4887         (match fst style with
4888          | RErr ->
4889              pr "This function returns 0 on success or -1 on error.\n\n"
4890          | RInt _ ->
4891              pr "On error this function returns -1.\n\n"
4892          | RInt64 _ ->
4893              pr "On error this function returns -1.\n\n"
4894          | RBool _ ->
4895              pr "This function returns a C truth value on success or -1 on error.\n\n"
4896          | RConstString _ ->
4897              pr "This function returns a string, or NULL on error.
4898 The string is owned by the guest handle and must I<not> be freed.\n\n"
4899          | RConstOptString _ ->
4900              pr "This function returns a string which may be NULL.
4901 There is way to return an error from this function.
4902 The string is owned by the guest handle and must I<not> be freed.\n\n"
4903          | RString _ ->
4904              pr "This function returns a string, or NULL on error.
4905 I<The caller must free the returned string after use>.\n\n"
4906          | RStringList _ ->
4907              pr "This function returns a NULL-terminated array of strings
4908 (like L<environ(3)>), or NULL if there was an error.
4909 I<The caller must free the strings and the array after use>.\n\n"
4910          | RStruct (_, typ) ->
4911              pr "This function returns a C<struct guestfs_%s *>,
4912 or NULL if there was an error.
4913 I<The caller must call C<guestfs_free_%s> after use>.\n\n" typ typ
4914          | RStructList (_, typ) ->
4915              pr "This function returns a C<struct guestfs_%s_list *>
4916 (see E<lt>guestfs-structs.hE<gt>),
4917 or NULL if there was an error.
4918 I<The caller must call C<guestfs_free_%s_list> after use>.\n\n" typ typ
4919          | RHashtable _ ->
4920              pr "This function returns a NULL-terminated array of
4921 strings, or NULL if there was an error.
4922 The array of strings will always have length C<2n+1>, where
4923 C<n> keys and values alternate, followed by the trailing NULL entry.
4924 I<The caller must free the strings and the array after use>.\n\n"
4925          | RBufferOut _ ->
4926              pr "This function returns a buffer, or NULL on error.
4927 The size of the returned buffer is written to C<*size_r>.
4928 I<The caller must free the returned buffer after use>.\n\n"
4929         );
4930         if List.mem ProtocolLimitWarning flags then
4931           pr "%s\n\n" protocol_limit_warning;
4932         if List.mem DangerWillRobinson flags then
4933           pr "%s\n\n" danger_will_robinson;
4934         match deprecation_notice flags with
4935         | None -> ()
4936         | Some txt -> pr "%s\n\n" txt
4937       )
4938   ) all_functions_sorted
4939
4940 and generate_structs_pod () =
4941   (* Structs documentation. *)
4942   List.iter (
4943     fun (typ, cols) ->
4944       pr "=head2 guestfs_%s\n" typ;
4945       pr "\n";
4946       pr " struct guestfs_%s {\n" typ;
4947       List.iter (
4948         function
4949         | name, FChar -> pr "   char %s;\n" name
4950         | name, FUInt32 -> pr "   uint32_t %s;\n" name
4951         | name, FInt32 -> pr "   int32_t %s;\n" name
4952         | name, (FUInt64|FBytes) -> pr "   uint64_t %s;\n" name
4953         | name, FInt64 -> pr "   int64_t %s;\n" name
4954         | name, FString -> pr "   char *%s;\n" name
4955         | name, FBuffer ->
4956             pr "   /* The next two fields describe a byte array. */\n";
4957             pr "   uint32_t %s_len;\n" name;
4958             pr "   char *%s;\n" name
4959         | name, FUUID ->
4960             pr "   /* The next field is NOT nul-terminated, be careful when printing it: */\n";
4961             pr "   char %s[32];\n" name
4962         | name, FOptPercent ->
4963             pr "   /* The next field is [0..100] or -1 meaning 'not present': */\n";
4964             pr "   float %s;\n" name
4965       ) cols;
4966       pr " };\n";
4967       pr " \n";
4968       pr " struct guestfs_%s_list {\n" typ;
4969       pr "   uint32_t len; /* Number of elements in list. */\n";
4970       pr "   struct guestfs_%s *val; /* Elements. */\n" typ;
4971       pr " };\n";
4972       pr " \n";
4973       pr " void guestfs_free_%s (struct guestfs_free_%s *);\n" typ typ;
4974       pr " void guestfs_free_%s_list (struct guestfs_free_%s_list *);\n"
4975         typ typ;
4976       pr "\n"
4977   ) structs
4978
4979 and generate_availability_pod () =
4980   (* Availability documentation. *)
4981   pr "=over 4\n";
4982   pr "\n";
4983   List.iter (
4984     fun (group, functions) ->
4985       pr "=item B<%s>\n" group;
4986       pr "\n";
4987       pr "The following functions:\n";
4988       List.iter (pr "L</guestfs_%s>\n") functions;
4989       pr "\n"
4990   ) optgroups;
4991   pr "=back\n";
4992   pr "\n"
4993
4994 (* Generate the protocol (XDR) file, 'guestfs_protocol.x' and
4995  * indirectly 'guestfs_protocol.h' and 'guestfs_protocol.c'.
4996  *
4997  * We have to use an underscore instead of a dash because otherwise
4998  * rpcgen generates incorrect code.
4999  *
5000  * This header is NOT exported to clients, but see also generate_structs_h.
5001  *)
5002 and generate_xdr () =
5003   generate_header CStyle LGPLv2;
5004
5005   (* This has to be defined to get around a limitation in Sun's rpcgen. *)
5006   pr "typedef string str<>;\n";
5007   pr "\n";
5008
5009   (* Internal structures. *)
5010   List.iter (
5011     function
5012     | typ, cols ->
5013         pr "struct guestfs_int_%s {\n" typ;
5014         List.iter (function
5015                    | name, FChar -> pr "  char %s;\n" name
5016                    | name, FString -> pr "  string %s<>;\n" name
5017                    | name, FBuffer -> pr "  opaque %s<>;\n" name
5018                    | name, FUUID -> pr "  opaque %s[32];\n" name
5019                    | name, (FInt32|FUInt32) -> pr "  int %s;\n" name
5020                    | name, (FInt64|FUInt64|FBytes) -> pr "  hyper %s;\n" name
5021                    | name, FOptPercent -> pr "  float %s;\n" name
5022                   ) cols;
5023         pr "};\n";
5024         pr "\n";
5025         pr "typedef struct guestfs_int_%s guestfs_int_%s_list<>;\n" typ typ;
5026         pr "\n";
5027   ) structs;
5028
5029   List.iter (
5030     fun (shortname, style, _, _, _, _, _) ->
5031       let name = "guestfs_" ^ shortname in
5032
5033       (match snd style with
5034        | [] -> ()
5035        | args ->
5036            pr "struct %s_args {\n" name;
5037            List.iter (
5038              function
5039              | Pathname n | Device n | Dev_or_Path n | String n ->
5040                  pr "  string %s<>;\n" n
5041              | OptString n -> pr "  str *%s;\n" n
5042              | StringList n | DeviceList n -> pr "  str %s<>;\n" n
5043              | Bool n -> pr "  bool %s;\n" n
5044              | Int n -> pr "  int %s;\n" n
5045              | Int64 n -> pr "  hyper %s;\n" n
5046              | FileIn _ | FileOut _ -> ()
5047            ) args;
5048            pr "};\n\n"
5049       );
5050       (match fst style with
5051        | RErr -> ()
5052        | RInt n ->
5053            pr "struct %s_ret {\n" name;
5054            pr "  int %s;\n" n;
5055            pr "};\n\n"
5056        | RInt64 n ->
5057            pr "struct %s_ret {\n" name;
5058            pr "  hyper %s;\n" n;
5059            pr "};\n\n"
5060        | RBool n ->
5061            pr "struct %s_ret {\n" name;
5062            pr "  bool %s;\n" n;
5063            pr "};\n\n"
5064        | RConstString _ | RConstOptString _ ->
5065            failwithf "RConstString|RConstOptString cannot be used by daemon functions"
5066        | RString n ->
5067            pr "struct %s_ret {\n" name;
5068            pr "  string %s<>;\n" n;
5069            pr "};\n\n"
5070        | RStringList n ->
5071            pr "struct %s_ret {\n" name;
5072            pr "  str %s<>;\n" n;
5073            pr "};\n\n"
5074        | RStruct (n, typ) ->
5075            pr "struct %s_ret {\n" name;
5076            pr "  guestfs_int_%s %s;\n" typ n;
5077            pr "};\n\n"
5078        | RStructList (n, typ) ->
5079            pr "struct %s_ret {\n" name;
5080            pr "  guestfs_int_%s_list %s;\n" typ n;
5081            pr "};\n\n"
5082        | RHashtable n ->
5083            pr "struct %s_ret {\n" name;
5084            pr "  str %s<>;\n" n;
5085            pr "};\n\n"
5086        | RBufferOut n ->
5087            pr "struct %s_ret {\n" name;
5088            pr "  opaque %s<>;\n" n;
5089            pr "};\n\n"
5090       );
5091   ) daemon_functions;
5092
5093   (* Table of procedure numbers. *)
5094   pr "enum guestfs_procedure {\n";
5095   List.iter (
5096     fun (shortname, _, proc_nr, _, _, _, _) ->
5097       pr "  GUESTFS_PROC_%s = %d,\n" (String.uppercase shortname) proc_nr
5098   ) daemon_functions;
5099   pr "  GUESTFS_PROC_NR_PROCS\n";
5100   pr "};\n";
5101   pr "\n";
5102
5103   (* Having to choose a maximum message size is annoying for several
5104    * reasons (it limits what we can do in the API), but it (a) makes
5105    * the protocol a lot simpler, and (b) provides a bound on the size
5106    * of the daemon which operates in limited memory space.  For large
5107    * file transfers you should use FTP.
5108    *)
5109   pr "const GUESTFS_MESSAGE_MAX = %d;\n" (4 * 1024 * 1024);
5110   pr "\n";
5111
5112   (* Message header, etc. *)
5113   pr "\
5114 /* The communication protocol is now documented in the guestfs(3)
5115  * manpage.
5116  */
5117
5118 const GUESTFS_PROGRAM = 0x2000F5F5;
5119 const GUESTFS_PROTOCOL_VERSION = 1;
5120
5121 /* These constants must be larger than any possible message length. */
5122 const GUESTFS_LAUNCH_FLAG = 0xf5f55ff5;
5123 const GUESTFS_CANCEL_FLAG = 0xffffeeee;
5124
5125 enum guestfs_message_direction {
5126   GUESTFS_DIRECTION_CALL = 0,        /* client -> daemon */
5127   GUESTFS_DIRECTION_REPLY = 1        /* daemon -> client */
5128 };
5129
5130 enum guestfs_message_status {
5131   GUESTFS_STATUS_OK = 0,
5132   GUESTFS_STATUS_ERROR = 1
5133 };
5134
5135 const GUESTFS_ERROR_LEN = 256;
5136
5137 struct guestfs_message_error {
5138   string error_message<GUESTFS_ERROR_LEN>;
5139 };
5140
5141 struct guestfs_message_header {
5142   unsigned prog;                     /* GUESTFS_PROGRAM */
5143   unsigned vers;                     /* GUESTFS_PROTOCOL_VERSION */
5144   guestfs_procedure proc;            /* GUESTFS_PROC_x */
5145   guestfs_message_direction direction;
5146   unsigned serial;                   /* message serial number */
5147   guestfs_message_status status;
5148 };
5149
5150 const GUESTFS_MAX_CHUNK_SIZE = 8192;
5151
5152 struct guestfs_chunk {
5153   int cancel;                        /* if non-zero, transfer is cancelled */
5154   /* data size is 0 bytes if the transfer has finished successfully */
5155   opaque data<GUESTFS_MAX_CHUNK_SIZE>;
5156 };
5157 "
5158
5159 (* Generate the guestfs-structs.h file. *)
5160 and generate_structs_h () =
5161   generate_header CStyle LGPLv2;
5162
5163   (* This is a public exported header file containing various
5164    * structures.  The structures are carefully written to have
5165    * exactly the same in-memory format as the XDR structures that
5166    * we use on the wire to the daemon.  The reason for creating
5167    * copies of these structures here is just so we don't have to
5168    * export the whole of guestfs_protocol.h (which includes much
5169    * unrelated and XDR-dependent stuff that we don't want to be
5170    * public, or required by clients).
5171    *
5172    * To reiterate, we will pass these structures to and from the
5173    * client with a simple assignment or memcpy, so the format
5174    * must be identical to what rpcgen / the RFC defines.
5175    *)
5176
5177   (* Public structures. *)
5178   List.iter (
5179     fun (typ, cols) ->
5180       pr "struct guestfs_%s {\n" typ;
5181       List.iter (
5182         function
5183         | name, FChar -> pr "  char %s;\n" name
5184         | name, FString -> pr "  char *%s;\n" name
5185         | name, FBuffer ->
5186             pr "  uint32_t %s_len;\n" name;
5187             pr "  char *%s;\n" name
5188         | name, FUUID -> pr "  char %s[32]; /* this is NOT nul-terminated, be careful when printing */\n" name
5189         | name, FUInt32 -> pr "  uint32_t %s;\n" name
5190         | name, FInt32 -> pr "  int32_t %s;\n" name
5191         | name, (FUInt64|FBytes) -> pr "  uint64_t %s;\n" name
5192         | name, FInt64 -> pr "  int64_t %s;\n" name
5193         | name, FOptPercent -> pr "  float %s; /* [0..100] or -1 */\n" name
5194       ) cols;
5195       pr "};\n";
5196       pr "\n";
5197       pr "struct guestfs_%s_list {\n" typ;
5198       pr "  uint32_t len;\n";
5199       pr "  struct guestfs_%s *val;\n" typ;
5200       pr "};\n";
5201       pr "\n";
5202       pr "extern void guestfs_free_%s (struct guestfs_%s *);\n" typ typ;
5203       pr "extern void guestfs_free_%s_list (struct guestfs_%s_list *);\n" typ typ;
5204       pr "\n"
5205   ) structs
5206
5207 (* Generate the guestfs-actions.h file. *)
5208 and generate_actions_h () =
5209   generate_header CStyle LGPLv2;
5210   List.iter (
5211     fun (shortname, style, _, _, _, _, _) ->
5212       let name = "guestfs_" ^ shortname in
5213       generate_prototype ~single_line:true ~newline:true ~handle:"handle"
5214         name style
5215   ) all_functions
5216
5217 (* Generate the guestfs-internal-actions.h file. *)
5218 and generate_internal_actions_h () =
5219   generate_header CStyle LGPLv2;
5220   List.iter (
5221     fun (shortname, style, _, _, _, _, _) ->
5222       let name = "guestfs__" ^ shortname in
5223       generate_prototype ~single_line:true ~newline:true ~handle:"handle"
5224         name style
5225   ) non_daemon_functions
5226
5227 (* Generate the client-side dispatch stubs. *)
5228 and generate_client_actions () =
5229   generate_header CStyle LGPLv2;
5230
5231   pr "\
5232 #include <stdio.h>
5233 #include <stdlib.h>
5234 #include <stdint.h>
5235 #include <inttypes.h>
5236
5237 #include \"guestfs.h\"
5238 #include \"guestfs-internal.h\"
5239 #include \"guestfs-internal-actions.h\"
5240 #include \"guestfs_protocol.h\"
5241
5242 #define error guestfs_error
5243 //#define perrorf guestfs_perrorf
5244 #define safe_malloc guestfs_safe_malloc
5245 #define safe_realloc guestfs_safe_realloc
5246 //#define safe_strdup guestfs_safe_strdup
5247 #define safe_memdup guestfs_safe_memdup
5248
5249 /* Check the return message from a call for validity. */
5250 static int
5251 check_reply_header (guestfs_h *g,
5252                     const struct guestfs_message_header *hdr,
5253                     unsigned int proc_nr, unsigned int serial)
5254 {
5255   if (hdr->prog != GUESTFS_PROGRAM) {
5256     error (g, \"wrong program (%%d/%%d)\", hdr->prog, GUESTFS_PROGRAM);
5257     return -1;
5258   }
5259   if (hdr->vers != GUESTFS_PROTOCOL_VERSION) {
5260     error (g, \"wrong protocol version (%%d/%%d)\",
5261            hdr->vers, GUESTFS_PROTOCOL_VERSION);
5262     return -1;
5263   }
5264   if (hdr->direction != GUESTFS_DIRECTION_REPLY) {
5265     error (g, \"unexpected message direction (%%d/%%d)\",
5266            hdr->direction, GUESTFS_DIRECTION_REPLY);
5267     return -1;
5268   }
5269   if (hdr->proc != proc_nr) {
5270     error (g, \"unexpected procedure number (%%d/%%d)\", hdr->proc, proc_nr);
5271     return -1;
5272   }
5273   if (hdr->serial != serial) {
5274     error (g, \"unexpected serial (%%d/%%d)\", hdr->serial, serial);
5275     return -1;
5276   }
5277
5278   return 0;
5279 }
5280
5281 /* Check we are in the right state to run a high-level action. */
5282 static int
5283 check_state (guestfs_h *g, const char *caller)
5284 {
5285   if (!guestfs__is_ready (g)) {
5286     if (guestfs__is_config (g) || guestfs__is_launching (g))
5287       error (g, \"%%s: call launch before using this function\\n(in guestfish, don't forget to use the 'run' command)\",
5288         caller);
5289     else
5290       error (g, \"%%s called from the wrong state, %%d != READY\",
5291         caller, guestfs__get_state (g));
5292     return -1;
5293   }
5294   return 0;
5295 }
5296
5297 ";
5298
5299   (* Generate code to generate guestfish call traces. *)
5300   let trace_call shortname style =
5301     pr "  if (guestfs__get_trace (g)) {\n";
5302
5303     let needs_i =
5304       List.exists (function
5305                    | StringList _ | DeviceList _ -> true
5306                    | _ -> false) (snd style) in
5307     if needs_i then (
5308       pr "    int i;\n";
5309       pr "\n"
5310     );
5311
5312     pr "    printf (\"%s\");\n" shortname;
5313     List.iter (
5314       function
5315       | String n                        (* strings *)
5316       | Device n
5317       | Pathname n
5318       | Dev_or_Path n
5319       | FileIn n
5320       | FileOut n ->
5321           (* guestfish doesn't support string escaping, so neither do we *)
5322           pr "    printf (\" \\\"%%s\\\"\", %s);\n" n
5323       | OptString n ->                  (* string option *)
5324           pr "    if (%s) printf (\" \\\"%%s\\\"\", %s);\n" n n;
5325           pr "    else printf (\" null\");\n"
5326       | StringList n
5327       | DeviceList n ->                 (* string list *)
5328           pr "    putchar (' ');\n";
5329           pr "    putchar ('\"');\n";
5330           pr "    for (i = 0; %s[i]; ++i) {\n" n;
5331           pr "      if (i > 0) putchar (' ');\n";
5332           pr "      fputs (%s[i], stdout);\n" n;
5333           pr "    }\n";
5334           pr "    putchar ('\"');\n";
5335       | Bool n ->                       (* boolean *)
5336           pr "    fputs (%s ? \" true\" : \" false\", stdout);\n" n
5337       | Int n ->                        (* int *)
5338           pr "    printf (\" %%d\", %s);\n" n
5339       | Int64 n ->
5340           pr "    printf (\" %%\" PRIi64, %s);\n" n
5341     ) (snd style);
5342     pr "    putchar ('\\n');\n";
5343     pr "  }\n";
5344     pr "\n";
5345   in
5346
5347   (* For non-daemon functions, generate a wrapper around each function. *)
5348   List.iter (
5349     fun (shortname, style, _, _, _, _, _) ->
5350       let name = "guestfs_" ^ shortname in
5351
5352       generate_prototype ~extern:false ~semicolon:false ~newline:true
5353         ~handle:"g" name style;
5354       pr "{\n";
5355       trace_call shortname style;
5356       pr "  return guestfs__%s " shortname;
5357       generate_c_call_args ~handle:"g" style;
5358       pr ";\n";
5359       pr "}\n";
5360       pr "\n"
5361   ) non_daemon_functions;
5362
5363   (* Client-side stubs for each function. *)
5364   List.iter (
5365     fun (shortname, style, _, _, _, _, _) ->
5366       let name = "guestfs_" ^ shortname in
5367
5368       (* Generate the action stub. *)
5369       generate_prototype ~extern:false ~semicolon:false ~newline:true
5370         ~handle:"g" name style;
5371
5372       let error_code =
5373         match fst style with
5374         | RErr | RInt _ | RInt64 _ | RBool _ -> "-1"
5375         | RConstString _ | RConstOptString _ ->
5376             failwithf "RConstString|RConstOptString cannot be used by daemon functions"
5377         | RString _ | RStringList _
5378         | RStruct _ | RStructList _
5379         | RHashtable _ | RBufferOut _ ->
5380             "NULL" in
5381
5382       pr "{\n";
5383
5384       (match snd style with
5385        | [] -> ()
5386        | _ -> pr "  struct %s_args args;\n" name
5387       );
5388
5389       pr "  guestfs_message_header hdr;\n";
5390       pr "  guestfs_message_error err;\n";
5391       let has_ret =
5392         match fst style with
5393         | RErr -> false
5394         | RConstString _ | RConstOptString _ ->
5395             failwithf "RConstString|RConstOptString cannot be used by daemon functions"
5396         | RInt _ | RInt64 _
5397         | RBool _ | RString _ | RStringList _
5398         | RStruct _ | RStructList _
5399         | RHashtable _ | RBufferOut _ ->
5400             pr "  struct %s_ret ret;\n" name;
5401             true in
5402
5403       pr "  int serial;\n";
5404       pr "  int r;\n";
5405       pr "\n";
5406       trace_call shortname style;
5407       pr "  if (check_state (g, \"%s\") == -1) return %s;\n" name error_code;
5408       pr "  guestfs___set_busy (g);\n";
5409       pr "\n";
5410
5411       (* Send the main header and arguments. *)
5412       (match snd style with
5413        | [] ->
5414            pr "  serial = guestfs___send (g, GUESTFS_PROC_%s, NULL, NULL);\n"
5415              (String.uppercase shortname)
5416        | args ->
5417            List.iter (
5418              function
5419              | Pathname n | Device n | Dev_or_Path n | String n ->
5420                  pr "  args.%s = (char *) %s;\n" n n
5421              | OptString n ->
5422                  pr "  args.%s = %s ? (char **) &%s : NULL;\n" n n n
5423              | StringList n | DeviceList n ->
5424                  pr "  args.%s.%s_val = (char **) %s;\n" n n n;
5425                  pr "  for (args.%s.%s_len = 0; %s[args.%s.%s_len]; args.%s.%s_len++) ;\n" n n n n n n n;
5426              | Bool n ->
5427                  pr "  args.%s = %s;\n" n n
5428              | Int n ->
5429                  pr "  args.%s = %s;\n" n n
5430              | Int64 n ->
5431                  pr "  args.%s = %s;\n" n n
5432              | FileIn _ | FileOut _ -> ()
5433            ) args;
5434            pr "  serial = guestfs___send (g, GUESTFS_PROC_%s,\n"
5435              (String.uppercase shortname);
5436            pr "        (xdrproc_t) xdr_%s_args, (char *) &args);\n"
5437              name;
5438       );
5439       pr "  if (serial == -1) {\n";
5440       pr "    guestfs___end_busy (g);\n";
5441       pr "    return %s;\n" error_code;
5442       pr "  }\n";
5443       pr "\n";
5444
5445       (* Send any additional files (FileIn) requested. *)
5446       let need_read_reply_label = ref false in
5447       List.iter (
5448         function
5449         | FileIn n ->
5450             pr "  r = guestfs___send_file (g, %s);\n" n;
5451             pr "  if (r == -1) {\n";
5452             pr "    guestfs___end_busy (g);\n";
5453             pr "    return %s;\n" error_code;
5454             pr "  }\n";
5455             pr "  if (r == -2) /* daemon cancelled */\n";
5456             pr "    goto read_reply;\n";
5457             need_read_reply_label := true;
5458             pr "\n";
5459         | _ -> ()
5460       ) (snd style);
5461
5462       (* Wait for the reply from the remote end. *)
5463       if !need_read_reply_label then pr " read_reply:\n";
5464       pr "  memset (&hdr, 0, sizeof hdr);\n";
5465       pr "  memset (&err, 0, sizeof err);\n";
5466       if has_ret then pr "  memset (&ret, 0, sizeof ret);\n";
5467       pr "\n";
5468       pr "  r = guestfs___recv (g, \"%s\", &hdr, &err,\n        " shortname;
5469       if not has_ret then
5470         pr "NULL, NULL"
5471       else
5472         pr "(xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret" shortname;
5473       pr ");\n";
5474
5475       pr "  if (r == -1) {\n";
5476       pr "    guestfs___end_busy (g);\n";
5477       pr "    return %s;\n" error_code;
5478       pr "  }\n";
5479       pr "\n";
5480
5481       pr "  if (check_reply_header (g, &hdr, GUESTFS_PROC_%s, serial) == -1) {\n"
5482         (String.uppercase shortname);
5483       pr "    guestfs___end_busy (g);\n";
5484       pr "    return %s;\n" error_code;
5485       pr "  }\n";
5486       pr "\n";
5487
5488       pr "  if (hdr.status == GUESTFS_STATUS_ERROR) {\n";
5489       pr "    error (g, \"%%s: %%s\", \"%s\", err.error_message);\n" shortname;
5490       pr "    free (err.error_message);\n";
5491       pr "    guestfs___end_busy (g);\n";
5492       pr "    return %s;\n" error_code;
5493       pr "  }\n";
5494       pr "\n";
5495
5496       (* Expecting to receive further files (FileOut)? *)
5497       List.iter (
5498         function
5499         | FileOut n ->
5500             pr "  if (guestfs___recv_file (g, %s) == -1) {\n" n;
5501             pr "    guestfs___end_busy (g);\n";
5502             pr "    return %s;\n" error_code;
5503             pr "  }\n";
5504             pr "\n";
5505         | _ -> ()
5506       ) (snd style);
5507
5508       pr "  guestfs___end_busy (g);\n";
5509
5510       (match fst style with
5511        | RErr -> pr "  return 0;\n"
5512        | RInt n | RInt64 n | RBool n ->
5513            pr "  return ret.%s;\n" n
5514        | RConstString _ | RConstOptString _ ->
5515            failwithf "RConstString|RConstOptString cannot be used by daemon functions"
5516        | RString n ->
5517            pr "  return ret.%s; /* caller will free */\n" n
5518        | RStringList n | RHashtable n ->
5519            pr "  /* caller will free this, but we need to add a NULL entry */\n";
5520            pr "  ret.%s.%s_val =\n" n n;
5521            pr "    safe_realloc (g, ret.%s.%s_val,\n" n n;
5522            pr "                  sizeof (char *) * (ret.%s.%s_len + 1));\n"
5523              n n;
5524            pr "  ret.%s.%s_val[ret.%s.%s_len] = NULL;\n" n n n n;
5525            pr "  return ret.%s.%s_val;\n" n n
5526        | RStruct (n, _) ->
5527            pr "  /* caller will free this */\n";
5528            pr "  return safe_memdup (g, &ret.%s, sizeof (ret.%s));\n" n n
5529        | RStructList (n, _) ->
5530            pr "  /* caller will free this */\n";
5531            pr "  return safe_memdup (g, &ret.%s, sizeof (ret.%s));\n" n n
5532        | RBufferOut n ->
5533            pr "  /* RBufferOut is tricky: If the buffer is zero-length, then\n";
5534            pr "   * _val might be NULL here.  To make the API saner for\n";
5535            pr "   * callers, we turn this case into a unique pointer (using\n";
5536            pr "   * malloc(1)).\n";
5537            pr "   */\n";
5538            pr "  if (ret.%s.%s_len > 0) {\n" n n;
5539            pr "    *size_r = ret.%s.%s_len;\n" n n;
5540            pr "    return ret.%s.%s_val; /* caller will free */\n" n n;
5541            pr "  } else {\n";
5542            pr "    free (ret.%s.%s_val);\n" n n;
5543            pr "    char *p = safe_malloc (g, 1);\n";
5544            pr "    *size_r = ret.%s.%s_len;\n" n n;
5545            pr "    return p;\n";
5546            pr "  }\n";
5547       );
5548
5549       pr "}\n\n"
5550   ) daemon_functions;
5551
5552   (* Functions to free structures. *)
5553   pr "/* Structure-freeing functions.  These rely on the fact that the\n";
5554   pr " * structure format is identical to the XDR format.  See note in\n";
5555   pr " * generator.ml.\n";
5556   pr " */\n";
5557   pr "\n";
5558
5559   List.iter (
5560     fun (typ, _) ->
5561       pr "void\n";
5562       pr "guestfs_free_%s (struct guestfs_%s *x)\n" typ typ;
5563       pr "{\n";
5564       pr "  xdr_free ((xdrproc_t) xdr_guestfs_int_%s, (char *) x);\n" typ;
5565       pr "  free (x);\n";
5566       pr "}\n";
5567       pr "\n";
5568
5569       pr "void\n";
5570       pr "guestfs_free_%s_list (struct guestfs_%s_list *x)\n" typ typ;
5571       pr "{\n";
5572       pr "  xdr_free ((xdrproc_t) xdr_guestfs_int_%s_list, (char *) x);\n" typ;
5573       pr "  free (x);\n";
5574       pr "}\n";
5575       pr "\n";
5576
5577   ) structs;
5578
5579 (* Generate daemon/actions.h. *)
5580 and generate_daemon_actions_h () =
5581   generate_header CStyle GPLv2;
5582
5583   pr "#include \"../src/guestfs_protocol.h\"\n";
5584   pr "\n";
5585
5586   List.iter (
5587     fun (name, style, _, _, _, _, _) ->
5588       generate_prototype
5589         ~single_line:true ~newline:true ~in_daemon:true ~prefix:"do_"
5590         name style;
5591   ) daemon_functions
5592
5593 (* Generate the server-side stubs. *)
5594 and generate_daemon_actions () =
5595   generate_header CStyle GPLv2;
5596
5597   pr "#include <config.h>\n";
5598   pr "\n";
5599   pr "#include <stdio.h>\n";
5600   pr "#include <stdlib.h>\n";
5601   pr "#include <string.h>\n";
5602   pr "#include <inttypes.h>\n";
5603   pr "#include <rpc/types.h>\n";
5604   pr "#include <rpc/xdr.h>\n";
5605   pr "\n";
5606   pr "#include \"daemon.h\"\n";
5607   pr "#include \"c-ctype.h\"\n";
5608   pr "#include \"../src/guestfs_protocol.h\"\n";
5609   pr "#include \"actions.h\"\n";
5610   pr "\n";
5611
5612   List.iter (
5613     fun (name, style, _, _, _, _, _) ->
5614       (* Generate server-side stubs. *)
5615       pr "static void %s_stub (XDR *xdr_in)\n" name;
5616       pr "{\n";
5617       let error_code =
5618         match fst style with
5619         | RErr | RInt _ -> pr "  int r;\n"; "-1"
5620         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
5621         | RBool _ -> pr "  int r;\n"; "-1"
5622         | RConstString _ | RConstOptString _ ->
5623             failwithf "RConstString|RConstOptString cannot be used by daemon functions"
5624         | RString _ -> pr "  char *r;\n"; "NULL"
5625         | RStringList _ | RHashtable _ -> pr "  char **r;\n"; "NULL"
5626         | RStruct (_, typ) -> pr "  guestfs_int_%s *r;\n" typ; "NULL"
5627         | RStructList (_, typ) -> pr "  guestfs_int_%s_list *r;\n" typ; "NULL"
5628         | RBufferOut _ ->
5629             pr "  size_t size = 1;\n";
5630             pr "  char *r;\n";
5631             "NULL" in
5632
5633       (match snd style with
5634        | [] -> ()
5635        | args ->
5636            pr "  struct guestfs_%s_args args;\n" name;
5637            List.iter (
5638              function
5639              | Device n | Dev_or_Path n
5640              | Pathname n
5641              | String n -> ()
5642              | OptString n -> pr "  char *%s;\n" n
5643              | StringList n | DeviceList n -> pr "  char **%s;\n" n
5644              | Bool n -> pr "  int %s;\n" n
5645              | Int n -> pr "  int %s;\n" n
5646              | Int64 n -> pr "  int64_t %s;\n" n
5647              | FileIn _ | FileOut _ -> ()
5648            ) args
5649       );
5650       pr "\n";
5651
5652       (match snd style with
5653        | [] -> ()
5654        | args ->
5655            pr "  memset (&args, 0, sizeof args);\n";
5656            pr "\n";
5657            pr "  if (!xdr_guestfs_%s_args (xdr_in, &args)) {\n" name;
5658            pr "    reply_with_error (\"%%s: daemon failed to decode procedure arguments\", \"%s\");\n" name;
5659            pr "    return;\n";
5660            pr "  }\n";
5661            let pr_args n =
5662              pr "  char *%s = args.%s;\n" n n
5663            in
5664            let pr_list_handling_code n =
5665              pr "  %s = realloc (args.%s.%s_val,\n" n n n;
5666              pr "                sizeof (char *) * (args.%s.%s_len+1));\n" n n;
5667              pr "  if (%s == NULL) {\n" n;
5668              pr "    reply_with_perror (\"realloc\");\n";
5669              pr "    goto done;\n";
5670              pr "  }\n";
5671              pr "  %s[args.%s.%s_len] = NULL;\n" n n n;
5672              pr "  args.%s.%s_val = %s;\n" n n n;
5673            in
5674            List.iter (
5675              function
5676              | Pathname n ->
5677                  pr_args n;
5678                  pr "  ABS_PATH (%s, goto done);\n" n;
5679              | Device n ->
5680                  pr_args n;
5681                  pr "  RESOLVE_DEVICE (%s, goto done);\n" n;
5682              | Dev_or_Path n ->
5683                  pr_args n;
5684                  pr "  REQUIRE_ROOT_OR_RESOLVE_DEVICE (%s, goto done);\n" n;
5685              | String n -> pr_args n
5686              | OptString n -> pr "  %s = args.%s ? *args.%s : NULL;\n" n n n
5687              | StringList n ->
5688                  pr_list_handling_code n;
5689              | DeviceList n ->
5690                  pr_list_handling_code n;
5691                  pr "  /* Ensure that each is a device,\n";
5692                  pr "   * and perform device name translation. */\n";
5693                  pr "  { int pvi; for (pvi = 0; physvols[pvi] != NULL; ++pvi)\n";
5694                  pr "    RESOLVE_DEVICE (physvols[pvi], goto done);\n";
5695                  pr "  }\n";
5696              | Bool n -> pr "  %s = args.%s;\n" n n
5697              | Int n -> pr "  %s = args.%s;\n" n n
5698              | Int64 n -> pr "  %s = args.%s;\n" n n
5699              | FileIn _ | FileOut _ -> ()
5700            ) args;
5701            pr "\n"
5702       );
5703
5704
5705       (* this is used at least for do_equal *)
5706       if List.exists (function Pathname _ -> true | _ -> false) (snd style) then (
5707         (* Emit NEED_ROOT just once, even when there are two or
5708            more Pathname args *)
5709         pr "  NEED_ROOT (goto done);\n";
5710       );
5711
5712       (* Don't want to call the impl with any FileIn or FileOut
5713        * parameters, since these go "outside" the RPC protocol.
5714        *)
5715       let args' =
5716         List.filter (function FileIn _ | FileOut _ -> false | _ -> true)
5717           (snd style) in
5718       pr "  r = do_%s " name;
5719       generate_c_call_args (fst style, args');
5720       pr ";\n";
5721
5722       (match fst style with
5723        | RErr | RInt _ | RInt64 _ | RBool _
5724        | RConstString _ | RConstOptString _
5725        | RString _ | RStringList _ | RHashtable _
5726        | RStruct (_, _) | RStructList (_, _) ->
5727            pr "  if (r == %s)\n" error_code;
5728            pr "    /* do_%s has already called reply_with_error */\n" name;
5729            pr "    goto done;\n";
5730            pr "\n"
5731        | RBufferOut _ ->
5732            pr "  /* size == 0 && r == NULL could be a non-error case (just\n";
5733            pr "   * an ordinary zero-length buffer), so be careful ...\n";
5734            pr "   */\n";
5735            pr "  if (size == 1 && r == %s)\n" error_code;
5736            pr "    /* do_%s has already called reply_with_error */\n" name;
5737            pr "    goto done;\n";
5738            pr "\n"
5739       );
5740
5741       (* If there are any FileOut parameters, then the impl must
5742        * send its own reply.
5743        *)
5744       let no_reply =
5745         List.exists (function FileOut _ -> true | _ -> false) (snd style) in
5746       if no_reply then
5747         pr "  /* do_%s has already sent a reply */\n" name
5748       else (
5749         match fst style with
5750         | RErr -> pr "  reply (NULL, NULL);\n"
5751         | RInt n | RInt64 n | RBool n ->
5752             pr "  struct guestfs_%s_ret ret;\n" name;
5753             pr "  ret.%s = r;\n" n;
5754             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
5755               name
5756         | RConstString _ | RConstOptString _ ->
5757             failwithf "RConstString|RConstOptString cannot be used by daemon functions"
5758         | RString n ->
5759             pr "  struct guestfs_%s_ret ret;\n" name;
5760             pr "  ret.%s = r;\n" n;
5761             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
5762               name;
5763             pr "  free (r);\n"
5764         | RStringList n | RHashtable n ->
5765             pr "  struct guestfs_%s_ret ret;\n" name;
5766             pr "  ret.%s.%s_len = count_strings (r);\n" n n;
5767             pr "  ret.%s.%s_val = r;\n" n n;
5768             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
5769               name;
5770             pr "  free_strings (r);\n"
5771         | RStruct (n, _) ->
5772             pr "  struct guestfs_%s_ret ret;\n" name;
5773             pr "  ret.%s = *r;\n" n;
5774             pr "  reply ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
5775               name;
5776             pr "  xdr_free ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
5777               name
5778         | RStructList (n, _) ->
5779             pr "  struct guestfs_%s_ret ret;\n" name;
5780             pr "  ret.%s = *r;\n" n;
5781             pr "  reply ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
5782               name;
5783             pr "  xdr_free ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
5784               name
5785         | RBufferOut n ->
5786             pr "  struct guestfs_%s_ret ret;\n" name;
5787             pr "  ret.%s.%s_val = r;\n" n n;
5788             pr "  ret.%s.%s_len = size;\n" n n;
5789             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
5790               name;
5791             pr "  free (r);\n"
5792       );
5793
5794       (* Free the args. *)
5795       (match snd style with
5796        | [] ->
5797            pr "done: ;\n";
5798        | _ ->
5799            pr "done:\n";
5800            pr "  xdr_free ((xdrproc_t) xdr_guestfs_%s_args, (char *) &args);\n"
5801              name
5802       );
5803
5804       pr "}\n\n";
5805   ) daemon_functions;
5806
5807   (* Dispatch function. *)
5808   pr "void dispatch_incoming_message (XDR *xdr_in)\n";
5809   pr "{\n";
5810   pr "  switch (proc_nr) {\n";
5811
5812   List.iter (
5813     fun (name, style, _, _, _, _, _) ->
5814       pr "    case GUESTFS_PROC_%s:\n" (String.uppercase name);
5815       pr "      %s_stub (xdr_in);\n" name;
5816       pr "      break;\n"
5817   ) daemon_functions;
5818
5819   pr "    default:\n";
5820   pr "      reply_with_error (\"dispatch_incoming_message: unknown procedure number %%d, set LIBGUESTFS_PATH to point to the matching libguestfs appliance directory\", proc_nr);\n";
5821   pr "  }\n";
5822   pr "}\n";
5823   pr "\n";
5824
5825   (* LVM columns and tokenization functions. *)
5826   (* XXX This generates crap code.  We should rethink how we
5827    * do this parsing.
5828    *)
5829   List.iter (
5830     function
5831     | typ, cols ->
5832         pr "static const char *lvm_%s_cols = \"%s\";\n"
5833           typ (String.concat "," (List.map fst cols));
5834         pr "\n";
5835
5836         pr "static int lvm_tokenize_%s (char *str, guestfs_int_lvm_%s *r)\n" typ typ;
5837         pr "{\n";
5838         pr "  char *tok, *p, *next;\n";
5839         pr "  int i, j;\n";
5840         pr "\n";
5841         (*
5842           pr "  fprintf (stderr, \"%%s: <<%%s>>\\n\", __func__, str);\n";
5843           pr "\n";
5844         *)
5845         pr "  if (!str) {\n";
5846         pr "    fprintf (stderr, \"%%s: failed: passed a NULL string\\n\", __func__);\n";
5847         pr "    return -1;\n";
5848         pr "  }\n";
5849         pr "  if (!*str || c_isspace (*str)) {\n";
5850         pr "    fprintf (stderr, \"%%s: failed: passed a empty string or one beginning with whitespace\\n\", __func__);\n";
5851         pr "    return -1;\n";
5852         pr "  }\n";
5853         pr "  tok = str;\n";
5854         List.iter (
5855           fun (name, coltype) ->
5856             pr "  if (!tok) {\n";
5857             pr "    fprintf (stderr, \"%%s: failed: string finished early, around token %%s\\n\", __func__, \"%s\");\n" name;
5858             pr "    return -1;\n";
5859             pr "  }\n";
5860             pr "  p = strchrnul (tok, ',');\n";
5861             pr "  if (*p) next = p+1; else next = NULL;\n";
5862             pr "  *p = '\\0';\n";
5863             (match coltype with
5864              | FString ->
5865                  pr "  r->%s = strdup (tok);\n" name;
5866                  pr "  if (r->%s == NULL) {\n" name;
5867                  pr "    perror (\"strdup\");\n";
5868                  pr "    return -1;\n";
5869                  pr "  }\n"
5870              | FUUID ->
5871                  pr "  for (i = j = 0; i < 32; ++j) {\n";
5872                  pr "    if (tok[j] == '\\0') {\n";
5873                  pr "      fprintf (stderr, \"%%s: failed to parse UUID from '%%s'\\n\", __func__, tok);\n";
5874                  pr "      return -1;\n";
5875                  pr "    } else if (tok[j] != '-')\n";
5876                  pr "      r->%s[i++] = tok[j];\n" name;
5877                  pr "  }\n";
5878              | FBytes ->
5879                  pr "  if (sscanf (tok, \"%%\"SCNu64, &r->%s) != 1) {\n" name;
5880                  pr "    fprintf (stderr, \"%%s: failed to parse size '%%s' from token %%s\\n\", __func__, tok, \"%s\");\n" name;
5881                  pr "    return -1;\n";
5882                  pr "  }\n";
5883              | FInt64 ->
5884                  pr "  if (sscanf (tok, \"%%\"SCNi64, &r->%s) != 1) {\n" name;
5885                  pr "    fprintf (stderr, \"%%s: failed to parse int '%%s' from token %%s\\n\", __func__, tok, \"%s\");\n" name;
5886                  pr "    return -1;\n";
5887                  pr "  }\n";
5888              | FOptPercent ->
5889                  pr "  if (tok[0] == '\\0')\n";
5890                  pr "    r->%s = -1;\n" name;
5891                  pr "  else if (sscanf (tok, \"%%f\", &r->%s) != 1) {\n" name;
5892                  pr "    fprintf (stderr, \"%%s: failed to parse float '%%s' from token %%s\\n\", __func__, tok, \"%s\");\n" name;
5893                  pr "    return -1;\n";
5894                  pr "  }\n";
5895              | FBuffer | FInt32 | FUInt32 | FUInt64 | FChar ->
5896                  assert false (* can never be an LVM column *)
5897             );
5898             pr "  tok = next;\n";
5899         ) cols;
5900
5901         pr "  if (tok != NULL) {\n";
5902         pr "    fprintf (stderr, \"%%s: failed: extra tokens at end of string\\n\", __func__);\n";
5903         pr "    return -1;\n";
5904         pr "  }\n";
5905         pr "  return 0;\n";
5906         pr "}\n";
5907         pr "\n";
5908
5909         pr "guestfs_int_lvm_%s_list *\n" typ;
5910         pr "parse_command_line_%ss (void)\n" typ;
5911         pr "{\n";
5912         pr "  char *out, *err;\n";
5913         pr "  char *p, *pend;\n";
5914         pr "  int r, i;\n";
5915         pr "  guestfs_int_lvm_%s_list *ret;\n" typ;
5916         pr "  void *newp;\n";
5917         pr "\n";
5918         pr "  ret = malloc (sizeof *ret);\n";
5919         pr "  if (!ret) {\n";
5920         pr "    reply_with_perror (\"malloc\");\n";
5921         pr "    return NULL;\n";
5922         pr "  }\n";
5923         pr "\n";
5924         pr "  ret->guestfs_int_lvm_%s_list_len = 0;\n" typ;
5925         pr "  ret->guestfs_int_lvm_%s_list_val = NULL;\n" typ;
5926         pr "\n";
5927         pr "  r = command (&out, &err,\n";
5928         pr "           \"/sbin/lvm\", \"%ss\",\n" typ;
5929         pr "           \"-o\", lvm_%s_cols, \"--unbuffered\", \"--noheadings\",\n" typ;
5930         pr "           \"--nosuffix\", \"--separator\", \",\", \"--units\", \"b\", NULL);\n";
5931         pr "  if (r == -1) {\n";
5932         pr "    reply_with_error (\"%%s\", err);\n";
5933         pr "    free (out);\n";
5934         pr "    free (err);\n";
5935         pr "    free (ret);\n";
5936         pr "    return NULL;\n";
5937         pr "  }\n";
5938         pr "\n";
5939         pr "  free (err);\n";
5940         pr "\n";
5941         pr "  /* Tokenize each line of the output. */\n";
5942         pr "  p = out;\n";
5943         pr "  i = 0;\n";
5944         pr "  while (p) {\n";
5945         pr "    pend = strchr (p, '\\n');       /* Get the next line of output. */\n";
5946         pr "    if (pend) {\n";
5947         pr "      *pend = '\\0';\n";
5948         pr "      pend++;\n";
5949         pr "    }\n";
5950         pr "\n";
5951         pr "    while (*p && c_isspace (*p))    /* Skip any leading whitespace. */\n";
5952         pr "      p++;\n";
5953         pr "\n";
5954         pr "    if (!*p) {                      /* Empty line?  Skip it. */\n";
5955         pr "      p = pend;\n";
5956         pr "      continue;\n";
5957         pr "    }\n";
5958         pr "\n";
5959         pr "    /* Allocate some space to store this next entry. */\n";
5960         pr "    newp = realloc (ret->guestfs_int_lvm_%s_list_val,\n" typ;
5961         pr "                sizeof (guestfs_int_lvm_%s) * (i+1));\n" typ;
5962         pr "    if (newp == NULL) {\n";
5963         pr "      reply_with_perror (\"realloc\");\n";
5964         pr "      free (ret->guestfs_int_lvm_%s_list_val);\n" typ;
5965         pr "      free (ret);\n";
5966         pr "      free (out);\n";
5967         pr "      return NULL;\n";
5968         pr "    }\n";
5969         pr "    ret->guestfs_int_lvm_%s_list_val = newp;\n" typ;
5970         pr "\n";
5971         pr "    /* Tokenize the next entry. */\n";
5972         pr "    r = lvm_tokenize_%s (p, &ret->guestfs_int_lvm_%s_list_val[i]);\n" typ typ;
5973         pr "    if (r == -1) {\n";
5974         pr "      reply_with_error (\"failed to parse output of '%ss' command\");\n" typ;
5975         pr "      free (ret->guestfs_int_lvm_%s_list_val);\n" typ;
5976         pr "      free (ret);\n";
5977         pr "      free (out);\n";
5978         pr "      return NULL;\n";
5979         pr "    }\n";
5980         pr "\n";
5981         pr "    ++i;\n";
5982         pr "    p = pend;\n";
5983         pr "  }\n";
5984         pr "\n";
5985         pr "  ret->guestfs_int_lvm_%s_list_len = i;\n" typ;
5986         pr "\n";
5987         pr "  free (out);\n";
5988         pr "  return ret;\n";
5989         pr "}\n"
5990
5991   ) ["pv", lvm_pv_cols; "vg", lvm_vg_cols; "lv", lvm_lv_cols]
5992
5993 (* Generate a list of function names, for debugging in the daemon.. *)
5994 and generate_daemon_names () =
5995   generate_header CStyle GPLv2;
5996
5997   pr "#include <config.h>\n";
5998   pr "\n";
5999   pr "#include \"daemon.h\"\n";
6000   pr "\n";
6001
6002   pr "/* This array is indexed by proc_nr.  See guestfs_protocol.x. */\n";
6003   pr "const char *function_names[] = {\n";
6004   List.iter (
6005     fun (name, _, proc_nr, _, _, _, _) -> pr "  [%d] = \"%s\",\n" proc_nr name
6006   ) daemon_functions;
6007   pr "};\n";
6008
6009 (* Generate the optional groups for the daemon to implement
6010  * guestfs_available.
6011  *)
6012 and generate_daemon_optgroups_c () =
6013   generate_header CStyle GPLv2;
6014
6015   pr "#include <config.h>\n";
6016   pr "\n";
6017   pr "#include \"daemon.h\"\n";
6018   pr "#include \"optgroups.h\"\n";
6019   pr "\n";
6020
6021   pr "struct optgroup optgroups[] = {\n";
6022   List.iter (
6023     fun (group, _) ->
6024       pr "  { \"%s\", optgroup_%s_available },\n" group group
6025   ) optgroups;
6026   pr "  { NULL, NULL }\n";
6027   pr "};\n"
6028
6029 and generate_daemon_optgroups_h () =
6030   generate_header CStyle GPLv2;
6031
6032   List.iter (
6033     fun (group, _) ->
6034       pr "extern int optgroup_%s_available (void);\n" group
6035   ) optgroups
6036
6037 (* Generate the tests. *)
6038 and generate_tests () =
6039   generate_header CStyle GPLv2;
6040
6041   pr "\
6042 #include <stdio.h>
6043 #include <stdlib.h>
6044 #include <string.h>
6045 #include <unistd.h>
6046 #include <sys/types.h>
6047 #include <fcntl.h>
6048
6049 #include \"guestfs.h\"
6050 #include \"guestfs-internal.h\"
6051
6052 static guestfs_h *g;
6053 static int suppress_error = 0;
6054
6055 static void print_error (guestfs_h *g, void *data, const char *msg)
6056 {
6057   if (!suppress_error)
6058     fprintf (stderr, \"%%s\\n\", msg);
6059 }
6060
6061 /* FIXME: nearly identical code appears in fish.c */
6062 static void print_strings (char *const *argv)
6063 {
6064   int argc;
6065
6066   for (argc = 0; argv[argc] != NULL; ++argc)
6067     printf (\"\\t%%s\\n\", argv[argc]);
6068 }
6069
6070 /*
6071 static void print_table (char const *const *argv)
6072 {
6073   int i;
6074
6075   for (i = 0; argv[i] != NULL; i += 2)
6076     printf (\"%%s: %%s\\n\", argv[i], argv[i+1]);
6077 }
6078 */
6079
6080 ";
6081
6082   (* Generate a list of commands which are not tested anywhere. *)
6083   pr "static void no_test_warnings (void)\n";
6084   pr "{\n";
6085
6086   let hash : (string, bool) Hashtbl.t = Hashtbl.create 13 in
6087   List.iter (
6088     fun (_, _, _, _, tests, _, _) ->
6089       let tests = filter_map (
6090         function
6091         | (_, (Always|If _|Unless _), test) -> Some test
6092         | (_, Disabled, _) -> None
6093       ) tests in
6094       let seq = List.concat (List.map seq_of_test tests) in
6095       let cmds_tested = List.map List.hd seq in
6096       List.iter (fun cmd -> Hashtbl.replace hash cmd true) cmds_tested
6097   ) all_functions;
6098
6099   List.iter (
6100     fun (name, _, _, _, _, _, _) ->
6101       if not (Hashtbl.mem hash name) then
6102         pr "  fprintf (stderr, \"warning: \\\"guestfs_%s\\\" has no tests\\n\");\n" name
6103   ) all_functions;
6104
6105   pr "}\n";
6106   pr "\n";
6107
6108   (* Generate the actual tests.  Note that we generate the tests
6109    * in reverse order, deliberately, so that (in general) the
6110    * newest tests run first.  This makes it quicker and easier to
6111    * debug them.
6112    *)
6113   let test_names =
6114     List.map (
6115       fun (name, _, _, flags, tests, _, _) ->
6116         mapi (generate_one_test name flags) tests
6117     ) (List.rev all_functions) in
6118   let test_names = List.concat test_names in
6119   let nr_tests = List.length test_names in
6120
6121   pr "\
6122 int main (int argc, char *argv[])
6123 {
6124   char c = 0;
6125   unsigned long int n_failed = 0;
6126   const char *filename;
6127   int fd;
6128   int nr_tests, test_num = 0;
6129
6130   setbuf (stdout, NULL);
6131
6132   no_test_warnings ();
6133
6134   g = guestfs_create ();
6135   if (g == NULL) {
6136     printf (\"guestfs_create FAILED\\n\");
6137     exit (EXIT_FAILURE);
6138   }
6139
6140   guestfs_set_error_handler (g, print_error, NULL);
6141
6142   guestfs_set_path (g, \"../appliance\");
6143
6144   filename = \"test1.img\";
6145   fd = open (filename, O_WRONLY|O_CREAT|O_NOCTTY|O_NONBLOCK|O_TRUNC, 0666);
6146   if (fd == -1) {
6147     perror (filename);
6148     exit (EXIT_FAILURE);
6149   }
6150   if (lseek (fd, %d, SEEK_SET) == -1) {
6151     perror (\"lseek\");
6152     close (fd);
6153     unlink (filename);
6154     exit (EXIT_FAILURE);
6155   }
6156   if (write (fd, &c, 1) == -1) {
6157     perror (\"write\");
6158     close (fd);
6159     unlink (filename);
6160     exit (EXIT_FAILURE);
6161   }
6162   if (close (fd) == -1) {
6163     perror (filename);
6164     unlink (filename);
6165     exit (EXIT_FAILURE);
6166   }
6167   if (guestfs_add_drive (g, filename) == -1) {
6168     printf (\"guestfs_add_drive %%s FAILED\\n\", filename);
6169     exit (EXIT_FAILURE);
6170   }
6171
6172   filename = \"test2.img\";
6173   fd = open (filename, O_WRONLY|O_CREAT|O_NOCTTY|O_NONBLOCK|O_TRUNC, 0666);
6174   if (fd == -1) {
6175     perror (filename);
6176     exit (EXIT_FAILURE);
6177   }
6178   if (lseek (fd, %d, SEEK_SET) == -1) {
6179     perror (\"lseek\");
6180     close (fd);
6181     unlink (filename);
6182     exit (EXIT_FAILURE);
6183   }
6184   if (write (fd, &c, 1) == -1) {
6185     perror (\"write\");
6186     close (fd);
6187     unlink (filename);
6188     exit (EXIT_FAILURE);
6189   }
6190   if (close (fd) == -1) {
6191     perror (filename);
6192     unlink (filename);
6193     exit (EXIT_FAILURE);
6194   }
6195   if (guestfs_add_drive (g, filename) == -1) {
6196     printf (\"guestfs_add_drive %%s FAILED\\n\", filename);
6197     exit (EXIT_FAILURE);
6198   }
6199
6200   filename = \"test3.img\";
6201   fd = open (filename, O_WRONLY|O_CREAT|O_NOCTTY|O_NONBLOCK|O_TRUNC, 0666);
6202   if (fd == -1) {
6203     perror (filename);
6204     exit (EXIT_FAILURE);
6205   }
6206   if (lseek (fd, %d, SEEK_SET) == -1) {
6207     perror (\"lseek\");
6208     close (fd);
6209     unlink (filename);
6210     exit (EXIT_FAILURE);
6211   }
6212   if (write (fd, &c, 1) == -1) {
6213     perror (\"write\");
6214     close (fd);
6215     unlink (filename);
6216     exit (EXIT_FAILURE);
6217   }
6218   if (close (fd) == -1) {
6219     perror (filename);
6220     unlink (filename);
6221     exit (EXIT_FAILURE);
6222   }
6223   if (guestfs_add_drive (g, filename) == -1) {
6224     printf (\"guestfs_add_drive %%s FAILED\\n\", filename);
6225     exit (EXIT_FAILURE);
6226   }
6227
6228   if (guestfs_add_drive_ro (g, \"../images/test.iso\") == -1) {
6229     printf (\"guestfs_add_drive_ro ../images/test.iso FAILED\\n\");
6230     exit (EXIT_FAILURE);
6231   }
6232
6233   if (guestfs_launch (g) == -1) {
6234     printf (\"guestfs_launch FAILED\\n\");
6235     exit (EXIT_FAILURE);
6236   }
6237
6238   /* Set a timeout in case qemu hangs during launch (RHBZ#505329). */
6239   alarm (600);
6240
6241   /* Cancel previous alarm. */
6242   alarm (0);
6243
6244   nr_tests = %d;
6245
6246 " (500 * 1024 * 1024) (50 * 1024 * 1024) (10 * 1024 * 1024) nr_tests;
6247
6248   iteri (
6249     fun i test_name ->
6250       pr "  test_num++;\n";
6251       pr "  printf (\"%%3d/%%3d %s\\n\", test_num, nr_tests);\n" test_name;
6252       pr "  if (%s () == -1) {\n" test_name;
6253       pr "    printf (\"%s FAILED\\n\");\n" test_name;
6254       pr "    n_failed++;\n";
6255       pr "  }\n";
6256   ) test_names;
6257   pr "\n";
6258
6259   pr "  guestfs_close (g);\n";
6260   pr "  unlink (\"test1.img\");\n";
6261   pr "  unlink (\"test2.img\");\n";
6262   pr "  unlink (\"test3.img\");\n";
6263   pr "\n";
6264
6265   pr "  if (n_failed > 0) {\n";
6266   pr "    printf (\"***** %%lu / %%d tests FAILED *****\\n\", n_failed, nr_tests);\n";
6267   pr "    exit (EXIT_FAILURE);\n";
6268   pr "  }\n";
6269   pr "\n";
6270
6271   pr "  exit (EXIT_SUCCESS);\n";
6272   pr "}\n"
6273
6274 and generate_one_test name flags i (init, prereq, test) =
6275   let test_name = sprintf "test_%s_%d" name i in
6276
6277   pr "\
6278 static int %s_skip (void)
6279 {
6280   const char *str;
6281
6282   str = getenv (\"TEST_ONLY\");
6283   if (str)
6284     return strstr (str, \"%s\") == NULL;
6285   str = getenv (\"SKIP_%s\");
6286   if (str && STREQ (str, \"1\")) return 1;
6287   str = getenv (\"SKIP_TEST_%s\");
6288   if (str && STREQ (str, \"1\")) return 1;
6289   return 0;
6290 }
6291
6292 " test_name name (String.uppercase test_name) (String.uppercase name);
6293
6294   (match prereq with
6295    | Disabled | Always -> ()
6296    | If code | Unless code ->
6297        pr "static int %s_prereq (void)\n" test_name;
6298        pr "{\n";
6299        pr "  %s\n" code;
6300        pr "}\n";
6301        pr "\n";
6302   );
6303
6304   pr "\
6305 static int %s (void)
6306 {
6307   if (%s_skip ()) {
6308     printf (\"        %%s skipped (reason: environment variable set)\\n\", \"%s\");
6309     return 0;
6310   }
6311
6312 " test_name test_name test_name;
6313
6314   (* Optional functions should only be tested if the relevant
6315    * support is available in the daemon.
6316    *)
6317   List.iter (
6318     function
6319     | Optional group ->
6320         pr "  {\n";
6321         pr "    const char *groups[] = { \"%s\", NULL };\n" group;
6322         pr "    int r;\n";
6323         pr "    suppress_error = 1;\n";
6324         pr "    r = guestfs_available (g, (char **) groups);\n";
6325         pr "    suppress_error = 0;\n";
6326         pr "    if (r == -1) {\n";
6327         pr "      printf (\"        %%s skipped (reason: group %%s not available in daemon)\\n\", \"%s\", groups[0]);\n" test_name;
6328         pr "      return 0;\n";
6329         pr "    }\n";
6330         pr "  }\n";
6331     | _ -> ()
6332   ) flags;
6333
6334   (match prereq with
6335    | Disabled ->
6336        pr "  printf (\"        %%s skipped (reason: test disabled in generator)\\n\", \"%s\");\n" test_name
6337    | If _ ->
6338        pr "  if (! %s_prereq ()) {\n" test_name;
6339        pr "    printf (\"        %%s skipped (reason: test prerequisite)\\n\", \"%s\");\n" test_name;
6340        pr "    return 0;\n";
6341        pr "  }\n";
6342        pr "\n";
6343        generate_one_test_body name i test_name init test;
6344    | Unless _ ->
6345        pr "  if (%s_prereq ()) {\n" test_name;
6346        pr "    printf (\"        %%s skipped (reason: test prerequisite)\\n\", \"%s\");\n" test_name;
6347        pr "    return 0;\n";
6348        pr "  }\n";
6349        pr "\n";
6350        generate_one_test_body name i test_name init test;
6351    | Always ->
6352        generate_one_test_body name i test_name init test
6353   );
6354
6355   pr "  return 0;\n";
6356   pr "}\n";
6357   pr "\n";
6358   test_name
6359
6360 and generate_one_test_body name i test_name init test =
6361   (match init with
6362    | InitNone (* XXX at some point, InitNone and InitEmpty became
6363                * folded together as the same thing.  Really we should
6364                * make InitNone do nothing at all, but the tests may
6365                * need to be checked to make sure this is OK.
6366                *)
6367    | InitEmpty ->
6368        pr "  /* InitNone|InitEmpty for %s */\n" test_name;
6369        List.iter (generate_test_command_call test_name)
6370          [["blockdev_setrw"; "/dev/sda"];
6371           ["umount_all"];
6372           ["lvm_remove_all"]]
6373    | InitPartition ->
6374        pr "  /* InitPartition for %s: create /dev/sda1 */\n" test_name;
6375        List.iter (generate_test_command_call test_name)
6376          [["blockdev_setrw"; "/dev/sda"];
6377           ["umount_all"];
6378           ["lvm_remove_all"];
6379           ["part_disk"; "/dev/sda"; "mbr"]]
6380    | InitBasicFS ->
6381        pr "  /* InitBasicFS for %s: create ext2 on /dev/sda1 */\n" test_name;
6382        List.iter (generate_test_command_call test_name)
6383          [["blockdev_setrw"; "/dev/sda"];
6384           ["umount_all"];
6385           ["lvm_remove_all"];
6386           ["part_disk"; "/dev/sda"; "mbr"];
6387           ["mkfs"; "ext2"; "/dev/sda1"];
6388           ["mount"; "/dev/sda1"; "/"]]
6389    | InitBasicFSonLVM ->
6390        pr "  /* InitBasicFSonLVM for %s: create ext2 on /dev/VG/LV */\n"
6391          test_name;
6392        List.iter (generate_test_command_call test_name)
6393          [["blockdev_setrw"; "/dev/sda"];
6394           ["umount_all"];
6395           ["lvm_remove_all"];
6396           ["part_disk"; "/dev/sda"; "mbr"];
6397           ["pvcreate"; "/dev/sda1"];
6398           ["vgcreate"; "VG"; "/dev/sda1"];
6399           ["lvcreate"; "LV"; "VG"; "8"];
6400           ["mkfs"; "ext2"; "/dev/VG/LV"];
6401           ["mount"; "/dev/VG/LV"; "/"]]
6402    | InitISOFS ->
6403        pr "  /* InitISOFS for %s */\n" test_name;
6404        List.iter (generate_test_command_call test_name)
6405          [["blockdev_setrw"; "/dev/sda"];
6406           ["umount_all"];
6407           ["lvm_remove_all"];
6408           ["mount_ro"; "/dev/sdd"; "/"]]
6409   );
6410
6411   let get_seq_last = function
6412     | [] ->
6413         failwithf "%s: you cannot use [] (empty list) when expecting a command"
6414           test_name
6415     | seq ->
6416         let seq = List.rev seq in
6417         List.rev (List.tl seq), List.hd seq
6418   in
6419
6420   match test with
6421   | TestRun seq ->
6422       pr "  /* TestRun for %s (%d) */\n" name i;
6423       List.iter (generate_test_command_call test_name) seq
6424   | TestOutput (seq, expected) ->
6425       pr "  /* TestOutput for %s (%d) */\n" name i;
6426       pr "  const char *expected = \"%s\";\n" (c_quote expected);
6427       let seq, last = get_seq_last seq in
6428       let test () =
6429         pr "    if (STRNEQ (r, expected)) {\n";
6430         pr "      fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r);\n" test_name;
6431         pr "      return -1;\n";
6432         pr "    }\n"
6433       in
6434       List.iter (generate_test_command_call test_name) seq;
6435       generate_test_command_call ~test test_name last
6436   | TestOutputList (seq, expected) ->
6437       pr "  /* TestOutputList for %s (%d) */\n" name i;
6438       let seq, last = get_seq_last seq in
6439       let test () =
6440         iteri (
6441           fun i str ->
6442             pr "    if (!r[%d]) {\n" i;
6443             pr "      fprintf (stderr, \"%s: short list returned from command\\n\");\n" test_name;
6444             pr "      print_strings (r);\n";
6445             pr "      return -1;\n";
6446             pr "    }\n";
6447             pr "    {\n";
6448             pr "      const char *expected = \"%s\";\n" (c_quote str);
6449             pr "      if (STRNEQ (r[%d], expected)) {\n" i;
6450             pr "        fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r[%d]);\n" test_name i;
6451             pr "        return -1;\n";
6452             pr "      }\n";
6453             pr "    }\n"
6454         ) expected;
6455         pr "    if (r[%d] != NULL) {\n" (List.length expected);
6456         pr "      fprintf (stderr, \"%s: extra elements returned from command\\n\");\n"
6457           test_name;
6458         pr "      print_strings (r);\n";
6459         pr "      return -1;\n";
6460         pr "    }\n"
6461       in
6462       List.iter (generate_test_command_call test_name) seq;
6463       generate_test_command_call ~test test_name last
6464   | TestOutputListOfDevices (seq, expected) ->
6465       pr "  /* TestOutputListOfDevices for %s (%d) */\n" name i;
6466       let seq, last = get_seq_last seq in
6467       let test () =
6468         iteri (
6469           fun i str ->
6470             pr "    if (!r[%d]) {\n" i;
6471             pr "      fprintf (stderr, \"%s: short list returned from command\\n\");\n" test_name;
6472             pr "      print_strings (r);\n";
6473             pr "      return -1;\n";
6474             pr "    }\n";
6475             pr "    {\n";
6476             pr "      const char *expected = \"%s\";\n" (c_quote str);
6477             pr "      r[%d][5] = 's';\n" i;
6478             pr "      if (STRNEQ (r[%d], expected)) {\n" i;
6479             pr "        fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r[%d]);\n" test_name i;
6480             pr "        return -1;\n";
6481             pr "      }\n";
6482             pr "    }\n"
6483         ) expected;
6484         pr "    if (r[%d] != NULL) {\n" (List.length expected);
6485         pr "      fprintf (stderr, \"%s: extra elements returned from command\\n\");\n"
6486           test_name;
6487         pr "      print_strings (r);\n";
6488         pr "      return -1;\n";
6489         pr "    }\n"
6490       in
6491       List.iter (generate_test_command_call test_name) seq;
6492       generate_test_command_call ~test test_name last
6493   | TestOutputInt (seq, expected) ->
6494       pr "  /* TestOutputInt for %s (%d) */\n" name i;
6495       let seq, last = get_seq_last seq in
6496       let test () =
6497         pr "    if (r != %d) {\n" expected;
6498         pr "      fprintf (stderr, \"%s: expected %d but got %%d\\n\","
6499           test_name expected;
6500         pr "               (int) r);\n";
6501         pr "      return -1;\n";
6502         pr "    }\n"
6503       in
6504       List.iter (generate_test_command_call test_name) seq;
6505       generate_test_command_call ~test test_name last
6506   | TestOutputIntOp (seq, op, expected) ->
6507       pr "  /* TestOutputIntOp for %s (%d) */\n" name i;
6508       let seq, last = get_seq_last seq in
6509       let test () =
6510         pr "    if (! (r %s %d)) {\n" op expected;
6511         pr "      fprintf (stderr, \"%s: expected %s %d but got %%d\\n\","
6512           test_name op expected;
6513         pr "               (int) r);\n";
6514         pr "      return -1;\n";
6515         pr "    }\n"
6516       in
6517       List.iter (generate_test_command_call test_name) seq;
6518       generate_test_command_call ~test test_name last
6519   | TestOutputTrue seq ->
6520       pr "  /* TestOutputTrue for %s (%d) */\n" name i;
6521       let seq, last = get_seq_last seq in
6522       let test () =
6523         pr "    if (!r) {\n";
6524         pr "      fprintf (stderr, \"%s: expected true, got false\\n\");\n"
6525           test_name;
6526         pr "      return -1;\n";
6527         pr "    }\n"
6528       in
6529       List.iter (generate_test_command_call test_name) seq;
6530       generate_test_command_call ~test test_name last
6531   | TestOutputFalse seq ->
6532       pr "  /* TestOutputFalse for %s (%d) */\n" name i;
6533       let seq, last = get_seq_last seq in
6534       let test () =
6535         pr "    if (r) {\n";
6536         pr "      fprintf (stderr, \"%s: expected false, got true\\n\");\n"
6537           test_name;
6538         pr "      return -1;\n";
6539         pr "    }\n"
6540       in
6541       List.iter (generate_test_command_call test_name) seq;
6542       generate_test_command_call ~test test_name last
6543   | TestOutputLength (seq, expected) ->
6544       pr "  /* TestOutputLength for %s (%d) */\n" name i;
6545       let seq, last = get_seq_last seq in
6546       let test () =
6547         pr "    int j;\n";
6548         pr "    for (j = 0; j < %d; ++j)\n" expected;
6549         pr "      if (r[j] == NULL) {\n";
6550         pr "        fprintf (stderr, \"%s: short list returned\\n\");\n"
6551           test_name;
6552         pr "        print_strings (r);\n";
6553         pr "        return -1;\n";
6554         pr "      }\n";
6555         pr "    if (r[j] != NULL) {\n";
6556         pr "      fprintf (stderr, \"%s: long list returned\\n\");\n"
6557           test_name;
6558         pr "      print_strings (r);\n";
6559         pr "      return -1;\n";
6560         pr "    }\n"
6561       in
6562       List.iter (generate_test_command_call test_name) seq;
6563       generate_test_command_call ~test test_name last
6564   | TestOutputBuffer (seq, expected) ->
6565       pr "  /* TestOutputBuffer for %s (%d) */\n" name i;
6566       pr "  const char *expected = \"%s\";\n" (c_quote expected);
6567       let seq, last = get_seq_last seq in
6568       let len = String.length expected in
6569       let test () =
6570         pr "    if (size != %d) {\n" len;
6571         pr "      fprintf (stderr, \"%s: returned size of buffer wrong, expected %d but got %%zu\\n\", size);\n" test_name len;
6572         pr "      return -1;\n";
6573         pr "    }\n";
6574         pr "    if (STRNEQLEN (r, expected, size)) {\n";
6575         pr "      fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r);\n" test_name;
6576         pr "      return -1;\n";
6577         pr "    }\n"
6578       in
6579       List.iter (generate_test_command_call test_name) seq;
6580       generate_test_command_call ~test test_name last
6581   | TestOutputStruct (seq, checks) ->
6582       pr "  /* TestOutputStruct for %s (%d) */\n" name i;
6583       let seq, last = get_seq_last seq in
6584       let test () =
6585         List.iter (
6586           function
6587           | CompareWithInt (field, expected) ->
6588               pr "    if (r->%s != %d) {\n" field expected;
6589               pr "      fprintf (stderr, \"%s: %s was %%d, expected %d\\n\",\n"
6590                 test_name field expected;
6591               pr "               (int) r->%s);\n" field;
6592               pr "      return -1;\n";
6593               pr "    }\n"
6594           | CompareWithIntOp (field, op, expected) ->
6595               pr "    if (!(r->%s %s %d)) {\n" field op expected;
6596               pr "      fprintf (stderr, \"%s: %s was %%d, expected %s %d\\n\",\n"
6597                 test_name field op expected;
6598               pr "               (int) r->%s);\n" field;
6599               pr "      return -1;\n";
6600               pr "    }\n"
6601           | CompareWithString (field, expected) ->
6602               pr "    if (STRNEQ (r->%s, \"%s\")) {\n" field expected;
6603               pr "      fprintf (stderr, \"%s: %s was \"%%s\", expected \"%s\"\\n\",\n"
6604                 test_name field expected;
6605               pr "               r->%s);\n" field;
6606               pr "      return -1;\n";
6607               pr "    }\n"
6608           | CompareFieldsIntEq (field1, field2) ->
6609               pr "    if (r->%s != r->%s) {\n" field1 field2;
6610               pr "      fprintf (stderr, \"%s: %s (%%d) <> %s (%%d)\\n\",\n"
6611                 test_name field1 field2;
6612               pr "               (int) r->%s, (int) r->%s);\n" field1 field2;
6613               pr "      return -1;\n";
6614               pr "    }\n"
6615           | CompareFieldsStrEq (field1, field2) ->
6616               pr "    if (STRNEQ (r->%s, r->%s)) {\n" field1 field2;
6617               pr "      fprintf (stderr, \"%s: %s (\"%%s\") <> %s (\"%%s\")\\n\",\n"
6618                 test_name field1 field2;
6619               pr "               r->%s, r->%s);\n" field1 field2;
6620               pr "      return -1;\n";
6621               pr "    }\n"
6622         ) checks
6623       in
6624       List.iter (generate_test_command_call test_name) seq;
6625       generate_test_command_call ~test test_name last
6626   | TestLastFail seq ->
6627       pr "  /* TestLastFail for %s (%d) */\n" name i;
6628       let seq, last = get_seq_last seq in
6629       List.iter (generate_test_command_call test_name) seq;
6630       generate_test_command_call test_name ~expect_error:true last
6631
6632 (* Generate the code to run a command, leaving the result in 'r'.
6633  * If you expect to get an error then you should set expect_error:true.
6634  *)
6635 and generate_test_command_call ?(expect_error = false) ?test test_name cmd =
6636   match cmd with
6637   | [] -> assert false
6638   | name :: args ->
6639       (* Look up the command to find out what args/ret it has. *)
6640       let style =
6641         try
6642           let _, style, _, _, _, _, _ =
6643             List.find (fun (n, _, _, _, _, _, _) -> n = name) all_functions in
6644           style
6645         with Not_found ->
6646           failwithf "%s: in test, command %s was not found" test_name name in
6647
6648       if List.length (snd style) <> List.length args then
6649         failwithf "%s: in test, wrong number of args given to %s"
6650           test_name name;
6651
6652       pr "  {\n";
6653
6654       List.iter (
6655         function
6656         | OptString n, "NULL" -> ()
6657         | Pathname n, arg
6658         | Device n, arg
6659         | Dev_or_Path n, arg
6660         | String n, arg
6661         | OptString n, arg ->
6662             pr "    const char *%s = \"%s\";\n" n (c_quote arg);
6663         | Int _, _
6664         | Int64 _, _
6665         | Bool _, _
6666         | FileIn _, _ | FileOut _, _ -> ()
6667         | StringList n, "" | DeviceList n, "" ->
6668             pr "    const char *const %s[1] = { NULL };\n" n
6669         | StringList n, arg | DeviceList n, arg ->
6670             let strs = string_split " " arg in
6671             iteri (
6672               fun i str ->
6673                 pr "    const char *%s_%d = \"%s\";\n" n i (c_quote str);
6674             ) strs;
6675             pr "    const char *const %s[] = {\n" n;
6676             iteri (
6677               fun i _ -> pr "      %s_%d,\n" n i
6678             ) strs;
6679             pr "      NULL\n";
6680             pr "    };\n";
6681       ) (List.combine (snd style) args);
6682
6683       let error_code =
6684         match fst style with
6685         | RErr | RInt _ | RBool _ -> pr "    int r;\n"; "-1"
6686         | RInt64 _ -> pr "    int64_t r;\n"; "-1"
6687         | RConstString _ | RConstOptString _ ->
6688             pr "    const char *r;\n"; "NULL"
6689         | RString _ -> pr "    char *r;\n"; "NULL"
6690         | RStringList _ | RHashtable _ ->
6691             pr "    char **r;\n";
6692             pr "    int i;\n";
6693             "NULL"
6694         | RStruct (_, typ) ->
6695             pr "    struct guestfs_%s *r;\n" typ; "NULL"
6696         | RStructList (_, typ) ->
6697             pr "    struct guestfs_%s_list *r;\n" typ; "NULL"
6698         | RBufferOut _ ->
6699             pr "    char *r;\n";
6700             pr "    size_t size;\n";
6701             "NULL" in
6702
6703       pr "    suppress_error = %d;\n" (if expect_error then 1 else 0);
6704       pr "    r = guestfs_%s (g" name;
6705
6706       (* Generate the parameters. *)
6707       List.iter (
6708         function
6709         | OptString _, "NULL" -> pr ", NULL"
6710         | Pathname n, _
6711         | Device n, _ | Dev_or_Path n, _
6712         | String n, _
6713         | OptString n, _ ->
6714             pr ", %s" n
6715         | FileIn _, arg | FileOut _, arg ->
6716             pr ", \"%s\"" (c_quote arg)
6717         | StringList n, _ | DeviceList n, _ ->
6718             pr ", (char **) %s" n
6719         | Int _, arg ->
6720             let i =
6721               try int_of_string arg
6722               with Failure "int_of_string" ->
6723                 failwithf "%s: expecting an int, but got '%s'" test_name arg in
6724             pr ", %d" i
6725         | Int64 _, arg ->
6726             let i =
6727               try Int64.of_string arg
6728               with Failure "int_of_string" ->
6729                 failwithf "%s: expecting an int64, but got '%s'" test_name arg in
6730             pr ", %Ld" i
6731         | Bool _, arg ->
6732             let b = bool_of_string arg in pr ", %d" (if b then 1 else 0)
6733       ) (List.combine (snd style) args);
6734
6735       (match fst style with
6736        | RBufferOut _ -> pr ", &size"
6737        | _ -> ()
6738       );
6739
6740       pr ");\n";
6741
6742       if not expect_error then
6743         pr "    if (r == %s)\n" error_code
6744       else
6745         pr "    if (r != %s)\n" error_code;
6746       pr "      return -1;\n";
6747
6748       (* Insert the test code. *)
6749       (match test with
6750        | None -> ()
6751        | Some f -> f ()
6752       );
6753
6754       (match fst style with
6755        | RErr | RInt _ | RInt64 _ | RBool _
6756        | RConstString _ | RConstOptString _ -> ()
6757        | RString _ | RBufferOut _ -> pr "    free (r);\n"
6758        | RStringList _ | RHashtable _ ->
6759            pr "    for (i = 0; r[i] != NULL; ++i)\n";
6760            pr "      free (r[i]);\n";
6761            pr "    free (r);\n"
6762        | RStruct (_, typ) ->
6763            pr "    guestfs_free_%s (r);\n" typ
6764        | RStructList (_, typ) ->
6765            pr "    guestfs_free_%s_list (r);\n" typ
6766       );
6767
6768       pr "  }\n"
6769
6770 and c_quote str =
6771   let str = replace_str str "\r" "\\r" in
6772   let str = replace_str str "\n" "\\n" in
6773   let str = replace_str str "\t" "\\t" in
6774   let str = replace_str str "\000" "\\0" in
6775   str
6776
6777 (* Generate a lot of different functions for guestfish. *)
6778 and generate_fish_cmds () =
6779   generate_header CStyle GPLv2;
6780
6781   let all_functions =
6782     List.filter (
6783       fun (_, _, _, flags, _, _, _) -> not (List.mem NotInFish flags)
6784     ) all_functions in
6785   let all_functions_sorted =
6786     List.filter (
6787       fun (_, _, _, flags, _, _, _) -> not (List.mem NotInFish flags)
6788     ) all_functions_sorted in
6789
6790   pr "#include <stdio.h>\n";
6791   pr "#include <stdlib.h>\n";
6792   pr "#include <string.h>\n";
6793   pr "#include <inttypes.h>\n";
6794   pr "\n";
6795   pr "#include <guestfs.h>\n";
6796   pr "#include \"c-ctype.h\"\n";
6797   pr "#include \"fish.h\"\n";
6798   pr "\n";
6799
6800   (* list_commands function, which implements guestfish -h *)
6801   pr "void list_commands (void)\n";
6802   pr "{\n";
6803   pr "  printf (\"    %%-16s     %%s\\n\", _(\"Command\"), _(\"Description\"));\n";
6804   pr "  list_builtin_commands ();\n";
6805   List.iter (
6806     fun (name, _, _, flags, _, shortdesc, _) ->
6807       let name = replace_char name '_' '-' in
6808       pr "  printf (\"%%-20s %%s\\n\", \"%s\", _(\"%s\"));\n"
6809         name shortdesc
6810   ) all_functions_sorted;
6811   pr "  printf (\"    %%s\\n\",";
6812   pr "          _(\"Use -h <cmd> / help <cmd> to show detailed help for a command.\"));\n";
6813   pr "}\n";
6814   pr "\n";
6815
6816   (* display_command function, which implements guestfish -h cmd *)
6817   pr "void display_command (const char *cmd)\n";
6818   pr "{\n";
6819   List.iter (
6820     fun (name, style, _, flags, _, shortdesc, longdesc) ->
6821       let name2 = replace_char name '_' '-' in
6822       let alias =
6823         try find_map (function FishAlias n -> Some n | _ -> None) flags
6824         with Not_found -> name in
6825       let longdesc = replace_str longdesc "C<guestfs_" "C<" in
6826       let synopsis =
6827         match snd style with
6828         | [] -> name2
6829         | args ->
6830             sprintf "%s %s"
6831               name2 (String.concat " " (List.map name_of_argt args)) in
6832
6833       let warnings =
6834         if List.mem ProtocolLimitWarning flags then
6835           ("\n\n" ^ protocol_limit_warning)
6836         else "" in
6837
6838       (* For DangerWillRobinson commands, we should probably have
6839        * guestfish prompt before allowing you to use them (especially
6840        * in interactive mode). XXX
6841        *)
6842       let warnings =
6843         warnings ^
6844           if List.mem DangerWillRobinson flags then
6845             ("\n\n" ^ danger_will_robinson)
6846           else "" in
6847
6848       let warnings =
6849         warnings ^
6850           match deprecation_notice flags with
6851           | None -> ""
6852           | Some txt -> "\n\n" ^ txt in
6853
6854       let describe_alias =
6855         if name <> alias then
6856           sprintf "\n\nYou can use '%s' as an alias for this command." alias
6857         else "" in
6858
6859       pr "  if (";
6860       pr "STRCASEEQ (cmd, \"%s\")" name;
6861       if name <> name2 then
6862         pr " || STRCASEEQ (cmd, \"%s\")" name2;
6863       if name <> alias then
6864         pr " || STRCASEEQ (cmd, \"%s\")" alias;
6865       pr ")\n";
6866       pr "    pod2text (\"%s\", _(\"%s\"), %S);\n"
6867         name2 shortdesc
6868         ("=head1 SYNOPSIS\n\n " ^ synopsis ^ "\n\n" ^
6869          "=head1 DESCRIPTION\n\n" ^
6870          longdesc ^ warnings ^ describe_alias);
6871       pr "  else\n"
6872   ) all_functions;
6873   pr "    display_builtin_command (cmd);\n";
6874   pr "}\n";
6875   pr "\n";
6876
6877   let emit_print_list_function typ =
6878     pr "static void print_%s_list (struct guestfs_%s_list *%ss)\n"
6879       typ typ typ;
6880     pr "{\n";
6881     pr "  unsigned int i;\n";
6882     pr "\n";
6883     pr "  for (i = 0; i < %ss->len; ++i) {\n" typ;
6884     pr "    printf (\"[%%d] = {\\n\", i);\n";
6885     pr "    print_%s_indent (&%ss->val[i], \"  \");\n" typ typ;
6886     pr "    printf (\"}\\n\");\n";
6887     pr "  }\n";
6888     pr "}\n";
6889     pr "\n";
6890   in
6891
6892   (* print_* functions *)
6893   List.iter (
6894     fun (typ, cols) ->
6895       let needs_i =
6896         List.exists (function (_, (FUUID|FBuffer)) -> true | _ -> false) cols in
6897
6898       pr "static void print_%s_indent (struct guestfs_%s *%s, const char *indent)\n" typ typ typ;
6899       pr "{\n";
6900       if needs_i then (
6901         pr "  unsigned int i;\n";
6902         pr "\n"
6903       );
6904       List.iter (
6905         function
6906         | name, FString ->
6907             pr "  printf (\"%%s%s: %%s\\n\", indent, %s->%s);\n" name typ name
6908         | name, FUUID ->
6909             pr "  printf (\"%%s%s: \", indent);\n" name;
6910             pr "  for (i = 0; i < 32; ++i)\n";
6911             pr "    printf (\"%%c\", %s->%s[i]);\n" typ name;
6912             pr "  printf (\"\\n\");\n"
6913         | name, FBuffer ->
6914             pr "  printf (\"%%s%s: \", indent);\n" name;
6915             pr "  for (i = 0; i < %s->%s_len; ++i)\n" typ name;
6916             pr "    if (c_isprint (%s->%s[i]))\n" typ name;
6917             pr "      printf (\"%%c\", %s->%s[i]);\n" typ name;
6918             pr "    else\n";
6919             pr "      printf (\"\\\\x%%02x\", %s->%s[i]);\n" typ name;
6920             pr "  printf (\"\\n\");\n"
6921         | name, (FUInt64|FBytes) ->
6922             pr "  printf (\"%%s%s: %%\" PRIu64 \"\\n\", indent, %s->%s);\n"
6923               name typ name
6924         | name, FInt64 ->
6925             pr "  printf (\"%%s%s: %%\" PRIi64 \"\\n\", indent, %s->%s);\n"
6926               name typ name
6927         | name, FUInt32 ->
6928             pr "  printf (\"%%s%s: %%\" PRIu32 \"\\n\", indent, %s->%s);\n"
6929               name typ name
6930         | name, FInt32 ->
6931             pr "  printf (\"%%s%s: %%\" PRIi32 \"\\n\", indent, %s->%s);\n"
6932               name typ name
6933         | name, FChar ->
6934             pr "  printf (\"%%s%s: %%c\\n\", indent, %s->%s);\n"
6935               name typ name
6936         | name, FOptPercent ->
6937             pr "  if (%s->%s >= 0) printf (\"%%s%s: %%g %%%%\\n\", indent, %s->%s);\n"
6938               typ name name typ name;
6939             pr "  else printf (\"%%s%s: \\n\", indent);\n" name
6940       ) cols;
6941       pr "}\n";
6942       pr "\n";
6943   ) structs;
6944
6945   (* Emit a print_TYPE_list function definition only if that function is used. *)
6946   List.iter (
6947     function
6948     | typ, (RStructListOnly | RStructAndList) ->
6949         (* generate the function for typ *)
6950         emit_print_list_function typ
6951     | typ, _ -> () (* empty *)
6952   ) (rstructs_used_by all_functions);
6953
6954   (* Emit a print_TYPE function definition only if that function is used. *)
6955   List.iter (
6956     function
6957     | typ, (RStructOnly | RStructAndList) ->
6958         pr "static void print_%s (struct guestfs_%s *%s)\n" typ typ typ;
6959         pr "{\n";
6960         pr "  print_%s_indent (%s, \"\");\n" typ typ;
6961         pr "}\n";
6962         pr "\n";
6963     | typ, _ -> () (* empty *)
6964   ) (rstructs_used_by all_functions);
6965
6966   (* run_<action> actions *)
6967   List.iter (
6968     fun (name, style, _, flags, _, _, _) ->
6969       pr "static int run_%s (const char *cmd, int argc, char *argv[])\n" name;
6970       pr "{\n";
6971       (match fst style with
6972        | RErr
6973        | RInt _
6974        | RBool _ -> pr "  int r;\n"
6975        | RInt64 _ -> pr "  int64_t r;\n"
6976        | RConstString _ | RConstOptString _ -> pr "  const char *r;\n"
6977        | RString _ -> pr "  char *r;\n"
6978        | RStringList _ | RHashtable _ -> pr "  char **r;\n"
6979        | RStruct (_, typ) -> pr "  struct guestfs_%s *r;\n" typ
6980        | RStructList (_, typ) -> pr "  struct guestfs_%s_list *r;\n" typ
6981        | RBufferOut _ ->
6982            pr "  char *r;\n";
6983            pr "  size_t size;\n";
6984       );
6985       List.iter (
6986         function
6987         | Device n
6988         | String n
6989         | OptString n
6990         | FileIn n
6991         | FileOut n -> pr "  const char *%s;\n" n
6992         | Pathname n
6993         | Dev_or_Path n -> pr "  char *%s;\n" n
6994         | StringList n | DeviceList n -> pr "  char **%s;\n" n
6995         | Bool n -> pr "  int %s;\n" n
6996         | Int n -> pr "  int %s;\n" n
6997         | Int64 n -> pr "  int64_t %s;\n" n
6998       ) (snd style);
6999
7000       (* Check and convert parameters. *)
7001       let argc_expected = List.length (snd style) in
7002       pr "  if (argc != %d) {\n" argc_expected;
7003       pr "    fprintf (stderr, _(\"%%s should have %%d parameter(s)\\n\"), cmd, %d);\n"
7004         argc_expected;
7005       pr "    fprintf (stderr, _(\"type 'help %%s' for help on %%s\\n\"), cmd, cmd);\n";
7006       pr "    return -1;\n";
7007       pr "  }\n";
7008       iteri (
7009         fun i ->
7010           function
7011           | Device name
7012           | String name ->
7013               pr "  %s = argv[%d];\n" name i
7014           | Pathname name
7015           | Dev_or_Path name ->
7016               pr "  %s = resolve_win_path (argv[%d]);\n" name i;
7017               pr "  if (%s == NULL) return -1;\n" name
7018           | OptString name ->
7019               pr "  %s = STRNEQ (argv[%d], \"\") ? argv[%d] : NULL;\n"
7020                 name i i
7021           | FileIn name ->
7022               pr "  %s = STRNEQ (argv[%d], \"-\") ? argv[%d] : \"/dev/stdin\";\n"
7023                 name i i
7024           | FileOut name ->
7025               pr "  %s = STRNEQ (argv[%d], \"-\") ? argv[%d] : \"/dev/stdout\";\n"
7026                 name i i
7027           | StringList name | DeviceList name ->
7028               pr "  %s = parse_string_list (argv[%d]);\n" name i;
7029               pr "  if (%s == NULL) return -1;\n" name;
7030           | Bool name ->
7031               pr "  %s = is_true (argv[%d]) ? 1 : 0;\n" name i
7032           | Int name ->
7033               pr "  %s = atoi (argv[%d]);\n" name i
7034           | Int64 name ->
7035               pr "  %s = atoll (argv[%d]);\n" name i
7036       ) (snd style);
7037
7038       (* Call C API function. *)
7039       let fn =
7040         try find_map (function FishAction n -> Some n | _ -> None) flags
7041         with Not_found -> sprintf "guestfs_%s" name in
7042       pr "  r = %s " fn;
7043       generate_c_call_args ~handle:"g" style;
7044       pr ";\n";
7045
7046       List.iter (
7047         function
7048         | Device name | String name
7049         | OptString name | FileIn name | FileOut name | Bool name
7050         | Int name | Int64 name -> ()
7051         | Pathname name | Dev_or_Path name ->
7052             pr "  free (%s);\n" name
7053         | StringList name | DeviceList name ->
7054             pr "  free_strings (%s);\n" name
7055       ) (snd style);
7056
7057       (* Check return value for errors and display command results. *)
7058       (match fst style with
7059        | RErr -> pr "  return r;\n"
7060        | RInt _ ->
7061            pr "  if (r == -1) return -1;\n";
7062            pr "  printf (\"%%d\\n\", r);\n";
7063            pr "  return 0;\n"
7064        | RInt64 _ ->
7065            pr "  if (r == -1) return -1;\n";
7066            pr "  printf (\"%%\" PRIi64 \"\\n\", r);\n";
7067            pr "  return 0;\n"
7068        | RBool _ ->
7069            pr "  if (r == -1) return -1;\n";
7070            pr "  if (r) printf (\"true\\n\"); else printf (\"false\\n\");\n";
7071            pr "  return 0;\n"
7072        | RConstString _ ->
7073            pr "  if (r == NULL) return -1;\n";
7074            pr "  printf (\"%%s\\n\", r);\n";
7075            pr "  return 0;\n"
7076        | RConstOptString _ ->
7077            pr "  printf (\"%%s\\n\", r ? : \"(null)\");\n";
7078            pr "  return 0;\n"
7079        | RString _ ->
7080            pr "  if (r == NULL) return -1;\n";
7081            pr "  printf (\"%%s\\n\", r);\n";
7082            pr "  free (r);\n";
7083            pr "  return 0;\n"
7084        | RStringList _ ->
7085            pr "  if (r == NULL) return -1;\n";
7086            pr "  print_strings (r);\n";
7087            pr "  free_strings (r);\n";
7088            pr "  return 0;\n"
7089        | RStruct (_, typ) ->
7090            pr "  if (r == NULL) return -1;\n";
7091            pr "  print_%s (r);\n" typ;
7092            pr "  guestfs_free_%s (r);\n" typ;
7093            pr "  return 0;\n"
7094        | RStructList (_, typ) ->
7095            pr "  if (r == NULL) return -1;\n";
7096            pr "  print_%s_list (r);\n" typ;
7097            pr "  guestfs_free_%s_list (r);\n" typ;
7098            pr "  return 0;\n"
7099        | RHashtable _ ->
7100            pr "  if (r == NULL) return -1;\n";
7101            pr "  print_table (r);\n";
7102            pr "  free_strings (r);\n";
7103            pr "  return 0;\n"
7104        | RBufferOut _ ->
7105            pr "  if (r == NULL) return -1;\n";
7106            pr "  fwrite (r, size, 1, stdout);\n";
7107            pr "  free (r);\n";
7108            pr "  return 0;\n"
7109       );
7110       pr "}\n";
7111       pr "\n"
7112   ) all_functions;
7113
7114   (* run_action function *)
7115   pr "int run_action (const char *cmd, int argc, char *argv[])\n";
7116   pr "{\n";
7117   List.iter (
7118     fun (name, _, _, flags, _, _, _) ->
7119       let name2 = replace_char name '_' '-' in
7120       let alias =
7121         try find_map (function FishAlias n -> Some n | _ -> None) flags
7122         with Not_found -> name in
7123       pr "  if (";
7124       pr "STRCASEEQ (cmd, \"%s\")" name;
7125       if name <> name2 then
7126         pr " || STRCASEEQ (cmd, \"%s\")" name2;
7127       if name <> alias then
7128         pr " || STRCASEEQ (cmd, \"%s\")" alias;
7129       pr ")\n";
7130       pr "    return run_%s (cmd, argc, argv);\n" name;
7131       pr "  else\n";
7132   ) all_functions;
7133   pr "    {\n";
7134   pr "      fprintf (stderr, _(\"%%s: unknown command\\n\"), cmd);\n";
7135   pr "      return -1;\n";
7136   pr "    }\n";
7137   pr "  return 0;\n";
7138   pr "}\n";
7139   pr "\n"
7140
7141 (* Readline completion for guestfish. *)
7142 and generate_fish_completion () =
7143   generate_header CStyle GPLv2;
7144
7145   let all_functions =
7146     List.filter (
7147       fun (_, _, _, flags, _, _, _) -> not (List.mem NotInFish flags)
7148     ) all_functions in
7149
7150   pr "\
7151 #include <config.h>
7152
7153 #include <stdio.h>
7154 #include <stdlib.h>
7155 #include <string.h>
7156
7157 #ifdef HAVE_LIBREADLINE
7158 #include <readline/readline.h>
7159 #endif
7160
7161 #include \"fish.h\"
7162
7163 #ifdef HAVE_LIBREADLINE
7164
7165 static const char *const commands[] = {
7166   BUILTIN_COMMANDS_FOR_COMPLETION,
7167 ";
7168
7169   (* Get the commands, including the aliases.  They don't need to be
7170    * sorted - the generator() function just does a dumb linear search.
7171    *)
7172   let commands =
7173     List.map (
7174       fun (name, _, _, flags, _, _, _) ->
7175         let name2 = replace_char name '_' '-' in
7176         let alias =
7177           try find_map (function FishAlias n -> Some n | _ -> None) flags
7178           with Not_found -> name in
7179
7180         if name <> alias then [name2; alias] else [name2]
7181     ) all_functions in
7182   let commands = List.flatten commands in
7183
7184   List.iter (pr "  \"%s\",\n") commands;
7185
7186   pr "  NULL
7187 };
7188
7189 static char *
7190 generator (const char *text, int state)
7191 {
7192   static int index, len;
7193   const char *name;
7194
7195   if (!state) {
7196     index = 0;
7197     len = strlen (text);
7198   }
7199
7200   rl_attempted_completion_over = 1;
7201
7202   while ((name = commands[index]) != NULL) {
7203     index++;
7204     if (STRCASEEQLEN (name, text, len))
7205       return strdup (name);
7206   }
7207
7208   return NULL;
7209 }
7210
7211 #endif /* HAVE_LIBREADLINE */
7212
7213 char **do_completion (const char *text, int start, int end)
7214 {
7215   char **matches = NULL;
7216
7217 #ifdef HAVE_LIBREADLINE
7218   rl_completion_append_character = ' ';
7219
7220   if (start == 0)
7221     matches = rl_completion_matches (text, generator);
7222   else if (complete_dest_paths)
7223     matches = rl_completion_matches (text, complete_dest_paths_generator);
7224 #endif
7225
7226   return matches;
7227 }
7228 ";
7229
7230 (* Generate the POD documentation for guestfish. *)
7231 and generate_fish_actions_pod () =
7232   let all_functions_sorted =
7233     List.filter (
7234       fun (_, _, _, flags, _, _, _) ->
7235         not (List.mem NotInFish flags || List.mem NotInDocs flags)
7236     ) all_functions_sorted in
7237
7238   let rex = Str.regexp "C<guestfs_\\([^>]+\\)>" in
7239
7240   List.iter (
7241     fun (name, style, _, flags, _, _, longdesc) ->
7242       let longdesc =
7243         Str.global_substitute rex (
7244           fun s ->
7245             let sub =
7246               try Str.matched_group 1 s
7247               with Not_found ->
7248                 failwithf "error substituting C<guestfs_...> in longdesc of function %s" name in
7249             "C<" ^ replace_char sub '_' '-' ^ ">"
7250         ) longdesc in
7251       let name = replace_char name '_' '-' in
7252       let alias =
7253         try find_map (function FishAlias n -> Some n | _ -> None) flags
7254         with Not_found -> name in
7255
7256       pr "=head2 %s" name;
7257       if name <> alias then
7258         pr " | %s" alias;
7259       pr "\n";
7260       pr "\n";
7261       pr " %s" name;
7262       List.iter (
7263         function
7264         | Pathname n | Device n | Dev_or_Path n | String n -> pr " %s" n
7265         | OptString n -> pr " %s" n
7266         | StringList n | DeviceList n -> pr " '%s ...'" n
7267         | Bool _ -> pr " true|false"
7268         | Int n -> pr " %s" n
7269         | Int64 n -> pr " %s" n
7270         | FileIn n | FileOut n -> pr " (%s|-)" n
7271       ) (snd style);
7272       pr "\n";
7273       pr "\n";
7274       pr "%s\n\n" longdesc;
7275
7276       if List.exists (function FileIn _ | FileOut _ -> true
7277                       | _ -> false) (snd style) then
7278         pr "Use C<-> instead of a filename to read/write from stdin/stdout.\n\n";
7279
7280       if List.mem ProtocolLimitWarning flags then
7281         pr "%s\n\n" protocol_limit_warning;
7282
7283       if List.mem DangerWillRobinson flags then
7284         pr "%s\n\n" danger_will_robinson;
7285
7286       match deprecation_notice flags with
7287       | None -> ()
7288       | Some txt -> pr "%s\n\n" txt
7289   ) all_functions_sorted
7290
7291 (* Generate a C function prototype. *)
7292 and generate_prototype ?(extern = true) ?(static = false) ?(semicolon = true)
7293     ?(single_line = false) ?(newline = false) ?(in_daemon = false)
7294     ?(prefix = "")
7295     ?handle name style =
7296   if extern then pr "extern ";
7297   if static then pr "static ";
7298   (match fst style with
7299    | RErr -> pr "int "
7300    | RInt _ -> pr "int "
7301    | RInt64 _ -> pr "int64_t "
7302    | RBool _ -> pr "int "
7303    | RConstString _ | RConstOptString _ -> pr "const char *"
7304    | RString _ | RBufferOut _ -> pr "char *"
7305    | RStringList _ | RHashtable _ -> pr "char **"
7306    | RStruct (_, typ) ->
7307        if not in_daemon then pr "struct guestfs_%s *" typ
7308        else pr "guestfs_int_%s *" typ
7309    | RStructList (_, typ) ->
7310        if not in_daemon then pr "struct guestfs_%s_list *" typ
7311        else pr "guestfs_int_%s_list *" typ
7312   );
7313   let is_RBufferOut = match fst style with RBufferOut _ -> true | _ -> false in
7314   pr "%s%s (" prefix name;
7315   if handle = None && List.length (snd style) = 0 && not is_RBufferOut then
7316     pr "void"
7317   else (
7318     let comma = ref false in
7319     (match handle with
7320      | None -> ()
7321      | Some handle -> pr "guestfs_h *%s" handle; comma := true
7322     );
7323     let next () =
7324       if !comma then (
7325         if single_line then pr ", " else pr ",\n\t\t"
7326       );
7327       comma := true
7328     in
7329     List.iter (
7330       function
7331       | Pathname n
7332       | Device n | Dev_or_Path n
7333       | String n
7334       | OptString n ->
7335           next ();
7336           pr "const char *%s" n
7337       | StringList n | DeviceList n ->
7338           next ();
7339           pr "char *const *%s" n
7340       | Bool n -> next (); pr "int %s" n
7341       | Int n -> next (); pr "int %s" n
7342       | Int64 n -> next (); pr "int64_t %s" n
7343       | FileIn n
7344       | FileOut n ->
7345           if not in_daemon then (next (); pr "const char *%s" n)
7346     ) (snd style);
7347     if is_RBufferOut then (next (); pr "size_t *size_r");
7348   );
7349   pr ")";
7350   if semicolon then pr ";";
7351   if newline then pr "\n"
7352
7353 (* Generate C call arguments, eg "(handle, foo, bar)" *)
7354 and generate_c_call_args ?handle ?(decl = false) style =
7355   pr "(";
7356   let comma = ref false in
7357   let next () =
7358     if !comma then pr ", ";
7359     comma := true
7360   in
7361   (match handle with
7362    | None -> ()
7363    | Some handle -> pr "%s" handle; comma := true
7364   );
7365   List.iter (
7366     fun arg ->
7367       next ();
7368       pr "%s" (name_of_argt arg)
7369   ) (snd style);
7370   (* For RBufferOut calls, add implicit &size parameter. *)
7371   if not decl then (
7372     match fst style with
7373     | RBufferOut _ ->
7374         next ();
7375         pr "&size"
7376     | _ -> ()
7377   );
7378   pr ")"
7379
7380 (* Generate the OCaml bindings interface. *)
7381 and generate_ocaml_mli () =
7382   generate_header OCamlStyle LGPLv2;
7383
7384   pr "\
7385 (** For API documentation you should refer to the C API
7386     in the guestfs(3) manual page.  The OCaml API uses almost
7387     exactly the same calls. *)
7388
7389 type t
7390 (** A [guestfs_h] handle. *)
7391
7392 exception Error of string
7393 (** This exception is raised when there is an error. *)
7394
7395 exception Handle_closed of string
7396 (** This exception is raised if you use a {!Guestfs.t} handle
7397     after calling {!close} on it.  The string is the name of
7398     the function. *)
7399
7400 val create : unit -> t
7401 (** Create a {!Guestfs.t} handle. *)
7402
7403 val close : t -> unit
7404 (** Close the {!Guestfs.t} handle and free up all resources used
7405     by it immediately.
7406
7407     Handles are closed by the garbage collector when they become
7408     unreferenced, but callers can call this in order to provide
7409     predictable cleanup. *)
7410
7411 ";
7412   generate_ocaml_structure_decls ();
7413
7414   (* The actions. *)
7415   List.iter (
7416     fun (name, style, _, _, _, shortdesc, _) ->
7417       generate_ocaml_prototype name style;
7418       pr "(** %s *)\n" shortdesc;
7419       pr "\n"
7420   ) all_functions_sorted
7421
7422 (* Generate the OCaml bindings implementation. *)
7423 and generate_ocaml_ml () =
7424   generate_header OCamlStyle LGPLv2;
7425
7426   pr "\
7427 type t
7428
7429 exception Error of string
7430 exception Handle_closed of string
7431
7432 external create : unit -> t = \"ocaml_guestfs_create\"
7433 external close : t -> unit = \"ocaml_guestfs_close\"
7434
7435 (* Give the exceptions names, so they can be raised from the C code. *)
7436 let () =
7437   Callback.register_exception \"ocaml_guestfs_error\" (Error \"\");
7438   Callback.register_exception \"ocaml_guestfs_closed\" (Handle_closed \"\")
7439
7440 ";
7441
7442   generate_ocaml_structure_decls ();
7443
7444   (* The actions. *)
7445   List.iter (
7446     fun (name, style, _, _, _, shortdesc, _) ->
7447       generate_ocaml_prototype ~is_external:true name style;
7448   ) all_functions_sorted
7449
7450 (* Generate the OCaml bindings C implementation. *)
7451 and generate_ocaml_c () =
7452   generate_header CStyle LGPLv2;
7453
7454   pr "\
7455 #include <stdio.h>
7456 #include <stdlib.h>
7457 #include <string.h>
7458
7459 #include <caml/config.h>
7460 #include <caml/alloc.h>
7461 #include <caml/callback.h>
7462 #include <caml/fail.h>
7463 #include <caml/memory.h>
7464 #include <caml/mlvalues.h>
7465 #include <caml/signals.h>
7466
7467 #include <guestfs.h>
7468
7469 #include \"guestfs_c.h\"
7470
7471 /* Copy a hashtable of string pairs into an assoc-list.  We return
7472  * the list in reverse order, but hashtables aren't supposed to be
7473  * ordered anyway.
7474  */
7475 static CAMLprim value
7476 copy_table (char * const * argv)
7477 {
7478   CAMLparam0 ();
7479   CAMLlocal5 (rv, pairv, kv, vv, cons);
7480   int i;
7481
7482   rv = Val_int (0);
7483   for (i = 0; argv[i] != NULL; i += 2) {
7484     kv = caml_copy_string (argv[i]);
7485     vv = caml_copy_string (argv[i+1]);
7486     pairv = caml_alloc (2, 0);
7487     Store_field (pairv, 0, kv);
7488     Store_field (pairv, 1, vv);
7489     cons = caml_alloc (2, 0);
7490     Store_field (cons, 1, rv);
7491     rv = cons;
7492     Store_field (cons, 0, pairv);
7493   }
7494
7495   CAMLreturn (rv);
7496 }
7497
7498 ";
7499
7500   (* Struct copy functions. *)
7501
7502   let emit_ocaml_copy_list_function typ =
7503     pr "static CAMLprim value\n";
7504     pr "copy_%s_list (const struct guestfs_%s_list *%ss)\n" typ typ typ;
7505     pr "{\n";
7506     pr "  CAMLparam0 ();\n";
7507     pr "  CAMLlocal2 (rv, v);\n";
7508     pr "  unsigned int i;\n";
7509     pr "\n";
7510     pr "  if (%ss->len == 0)\n" typ;
7511     pr "    CAMLreturn (Atom (0));\n";
7512     pr "  else {\n";
7513     pr "    rv = caml_alloc (%ss->len, 0);\n" typ;
7514     pr "    for (i = 0; i < %ss->len; ++i) {\n" typ;
7515     pr "      v = copy_%s (&%ss->val[i]);\n" typ typ;
7516     pr "      caml_modify (&Field (rv, i), v);\n";
7517     pr "    }\n";
7518     pr "    CAMLreturn (rv);\n";
7519     pr "  }\n";
7520     pr "}\n";
7521     pr "\n";
7522   in
7523
7524   List.iter (
7525     fun (typ, cols) ->
7526       let has_optpercent_col =
7527         List.exists (function (_, FOptPercent) -> true | _ -> false) cols in
7528
7529       pr "static CAMLprim value\n";
7530       pr "copy_%s (const struct guestfs_%s *%s)\n" typ typ typ;
7531       pr "{\n";
7532       pr "  CAMLparam0 ();\n";
7533       if has_optpercent_col then
7534         pr "  CAMLlocal3 (rv, v, v2);\n"
7535       else
7536         pr "  CAMLlocal2 (rv, v);\n";
7537       pr "\n";
7538       pr "  rv = caml_alloc (%d, 0);\n" (List.length cols);
7539       iteri (
7540         fun i col ->
7541           (match col with
7542            | name, FString ->
7543                pr "  v = caml_copy_string (%s->%s);\n" typ name
7544            | name, FBuffer ->
7545                pr "  v = caml_alloc_string (%s->%s_len);\n" typ name;
7546                pr "  memcpy (String_val (v), %s->%s, %s->%s_len);\n"
7547                  typ name typ name
7548            | name, FUUID ->
7549                pr "  v = caml_alloc_string (32);\n";
7550                pr "  memcpy (String_val (v), %s->%s, 32);\n" typ name
7551            | name, (FBytes|FInt64|FUInt64) ->
7552                pr "  v = caml_copy_int64 (%s->%s);\n" typ name
7553            | name, (FInt32|FUInt32) ->
7554                pr "  v = caml_copy_int32 (%s->%s);\n" typ name
7555            | name, FOptPercent ->
7556                pr "  if (%s->%s >= 0) { /* Some %s */\n" typ name name;
7557                pr "    v2 = caml_copy_double (%s->%s);\n" typ name;
7558                pr "    v = caml_alloc (1, 0);\n";
7559                pr "    Store_field (v, 0, v2);\n";
7560                pr "  } else /* None */\n";
7561                pr "    v = Val_int (0);\n";
7562            | name, FChar ->
7563                pr "  v = Val_int (%s->%s);\n" typ name
7564           );
7565           pr "  Store_field (rv, %d, v);\n" i
7566       ) cols;
7567       pr "  CAMLreturn (rv);\n";
7568       pr "}\n";
7569       pr "\n";
7570   ) structs;
7571
7572   (* Emit a copy_TYPE_list function definition only if that function is used. *)
7573   List.iter (
7574     function
7575     | typ, (RStructListOnly | RStructAndList) ->
7576         (* generate the function for typ *)
7577         emit_ocaml_copy_list_function typ
7578     | typ, _ -> () (* empty *)
7579   ) (rstructs_used_by all_functions);
7580
7581   (* The wrappers. *)
7582   List.iter (
7583     fun (name, style, _, _, _, _, _) ->
7584       pr "/* Automatically generated wrapper for function\n";
7585       pr " * ";
7586       generate_ocaml_prototype name style;
7587       pr " */\n";
7588       pr "\n";
7589
7590       let params =
7591         "gv" :: List.map (fun arg -> name_of_argt arg ^ "v") (snd style) in
7592
7593       let needs_extra_vs =
7594         match fst style with RConstOptString _ -> true | _ -> false in
7595
7596       pr "/* Emit prototype to appease gcc's -Wmissing-prototypes. */\n";
7597       pr "CAMLprim value ocaml_guestfs_%s (value %s" name (List.hd params);
7598       List.iter (pr ", value %s") (List.tl params); pr ");\n";
7599       pr "\n";
7600
7601       pr "CAMLprim value\n";
7602       pr "ocaml_guestfs_%s (value %s" name (List.hd params);
7603       List.iter (pr ", value %s") (List.tl params);
7604       pr ")\n";
7605       pr "{\n";
7606
7607       (match params with
7608        | [p1; p2; p3; p4; p5] ->
7609            pr "  CAMLparam5 (%s);\n" (String.concat ", " params)
7610        | p1 :: p2 :: p3 :: p4 :: p5 :: rest ->
7611            pr "  CAMLparam5 (%s);\n" (String.concat ", " [p1; p2; p3; p4; p5]);
7612            pr "  CAMLxparam%d (%s);\n"
7613              (List.length rest) (String.concat ", " rest)
7614        | ps ->
7615            pr "  CAMLparam%d (%s);\n" (List.length ps) (String.concat ", " ps)
7616       );
7617       if not needs_extra_vs then
7618         pr "  CAMLlocal1 (rv);\n"
7619       else
7620         pr "  CAMLlocal3 (rv, v, v2);\n";
7621       pr "\n";
7622
7623       pr "  guestfs_h *g = Guestfs_val (gv);\n";
7624       pr "  if (g == NULL)\n";
7625       pr "    ocaml_guestfs_raise_closed (\"%s\");\n" name;
7626       pr "\n";
7627
7628       List.iter (
7629         function
7630         | Pathname n
7631         | Device n | Dev_or_Path n
7632         | String n
7633         | FileIn n
7634         | FileOut n ->
7635             pr "  const char *%s = String_val (%sv);\n" n n
7636         | OptString n ->
7637             pr "  const char *%s =\n" n;
7638             pr "    %sv != Val_int (0) ? String_val (Field (%sv, 0)) : NULL;\n"
7639               n n
7640         | StringList n | DeviceList n ->
7641             pr "  char **%s = ocaml_guestfs_strings_val (g, %sv);\n" n n
7642         | Bool n ->
7643             pr "  int %s = Bool_val (%sv);\n" n n
7644         | Int n ->
7645             pr "  int %s = Int_val (%sv);\n" n n
7646         | Int64 n ->
7647             pr "  int64_t %s = Int64_val (%sv);\n" n n
7648       ) (snd style);
7649       let error_code =
7650         match fst style with
7651         | RErr -> pr "  int r;\n"; "-1"
7652         | RInt _ -> pr "  int r;\n"; "-1"
7653         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
7654         | RBool _ -> pr "  int r;\n"; "-1"
7655         | RConstString _ | RConstOptString _ ->
7656             pr "  const char *r;\n"; "NULL"
7657         | RString _ -> pr "  char *r;\n"; "NULL"
7658         | RStringList _ ->
7659             pr "  int i;\n";
7660             pr "  char **r;\n";
7661             "NULL"
7662         | RStruct (_, typ) ->
7663             pr "  struct guestfs_%s *r;\n" typ; "NULL"
7664         | RStructList (_, typ) ->
7665             pr "  struct guestfs_%s_list *r;\n" typ; "NULL"
7666         | RHashtable _ ->
7667             pr "  int i;\n";
7668             pr "  char **r;\n";
7669             "NULL"
7670         | RBufferOut _ ->
7671             pr "  char *r;\n";
7672             pr "  size_t size;\n";
7673             "NULL" in
7674       pr "\n";
7675
7676       pr "  caml_enter_blocking_section ();\n";
7677       pr "  r = guestfs_%s " name;
7678       generate_c_call_args ~handle:"g" style;
7679       pr ";\n";
7680       pr "  caml_leave_blocking_section ();\n";
7681
7682       List.iter (
7683         function
7684         | StringList n | DeviceList n ->
7685             pr "  ocaml_guestfs_free_strings (%s);\n" n;
7686         | Pathname _ | Device _ | Dev_or_Path _ | String _ | OptString _
7687         | Bool _ | Int _ | Int64 _
7688         | FileIn _ | FileOut _ -> ()
7689       ) (snd style);
7690
7691       pr "  if (r == %s)\n" error_code;
7692       pr "    ocaml_guestfs_raise_error (g, \"%s\");\n" name;
7693       pr "\n";
7694
7695       (match fst style with
7696        | RErr -> pr "  rv = Val_unit;\n"
7697        | RInt _ -> pr "  rv = Val_int (r);\n"
7698        | RInt64 _ ->
7699            pr "  rv = caml_copy_int64 (r);\n"
7700        | RBool _ -> pr "  rv = Val_bool (r);\n"
7701        | RConstString _ ->
7702            pr "  rv = caml_copy_string (r);\n"
7703        | RConstOptString _ ->
7704            pr "  if (r) { /* Some string */\n";
7705            pr "    v = caml_alloc (1, 0);\n";
7706            pr "    v2 = caml_copy_string (r);\n";
7707            pr "    Store_field (v, 0, v2);\n";
7708            pr "  } else /* None */\n";
7709            pr "    v = Val_int (0);\n";
7710        | RString _ ->
7711            pr "  rv = caml_copy_string (r);\n";
7712            pr "  free (r);\n"
7713        | RStringList _ ->
7714            pr "  rv = caml_copy_string_array ((const char **) r);\n";
7715            pr "  for (i = 0; r[i] != NULL; ++i) free (r[i]);\n";
7716            pr "  free (r);\n"
7717        | RStruct (_, typ) ->
7718            pr "  rv = copy_%s (r);\n" typ;
7719            pr "  guestfs_free_%s (r);\n" typ;
7720        | RStructList (_, typ) ->
7721            pr "  rv = copy_%s_list (r);\n" typ;
7722            pr "  guestfs_free_%s_list (r);\n" typ;
7723        | RHashtable _ ->
7724            pr "  rv = copy_table (r);\n";
7725            pr "  for (i = 0; r[i] != NULL; ++i) free (r[i]);\n";
7726            pr "  free (r);\n";
7727        | RBufferOut _ ->
7728            pr "  rv = caml_alloc_string (size);\n";
7729            pr "  memcpy (String_val (rv), r, size);\n";
7730       );
7731
7732       pr "  CAMLreturn (rv);\n";
7733       pr "}\n";
7734       pr "\n";
7735
7736       if List.length params > 5 then (
7737         pr "/* Emit prototype to appease gcc's -Wmissing-prototypes. */\n";
7738         pr "CAMLprim value ";
7739         pr "ocaml_guestfs_%s_byte (value *argv, int argn);\n" name;
7740         pr "CAMLprim value\n";
7741         pr "ocaml_guestfs_%s_byte (value *argv, int argn)\n" name;
7742         pr "{\n";
7743         pr "  return ocaml_guestfs_%s (argv[0]" name;
7744         iteri (fun i _ -> pr ", argv[%d]" i) (List.tl params);
7745         pr ");\n";
7746         pr "}\n";
7747         pr "\n"
7748       )
7749   ) all_functions_sorted
7750
7751 and generate_ocaml_structure_decls () =
7752   List.iter (
7753     fun (typ, cols) ->
7754       pr "type %s = {\n" typ;
7755       List.iter (
7756         function
7757         | name, FString -> pr "  %s : string;\n" name
7758         | name, FBuffer -> pr "  %s : string;\n" name
7759         | name, FUUID -> pr "  %s : string;\n" name
7760         | name, (FBytes|FInt64|FUInt64) -> pr "  %s : int64;\n" name
7761         | name, (FInt32|FUInt32) -> pr "  %s : int32;\n" name
7762         | name, FChar -> pr "  %s : char;\n" name
7763         | name, FOptPercent -> pr "  %s : float option;\n" name
7764       ) cols;
7765       pr "}\n";
7766       pr "\n"
7767   ) structs
7768
7769 and generate_ocaml_prototype ?(is_external = false) name style =
7770   if is_external then pr "external " else pr "val ";
7771   pr "%s : t -> " name;
7772   List.iter (
7773     function
7774     | Pathname _ | Device _ | Dev_or_Path _ | String _ | FileIn _ | FileOut _ -> pr "string -> "
7775     | OptString _ -> pr "string option -> "
7776     | StringList _ | DeviceList _ -> pr "string array -> "
7777     | Bool _ -> pr "bool -> "
7778     | Int _ -> pr "int -> "
7779     | Int64 _ -> pr "int64 -> "
7780   ) (snd style);
7781   (match fst style with
7782    | RErr -> pr "unit" (* all errors are turned into exceptions *)
7783    | RInt _ -> pr "int"
7784    | RInt64 _ -> pr "int64"
7785    | RBool _ -> pr "bool"
7786    | RConstString _ -> pr "string"
7787    | RConstOptString _ -> pr "string option"
7788    | RString _ | RBufferOut _ -> pr "string"
7789    | RStringList _ -> pr "string array"
7790    | RStruct (_, typ) -> pr "%s" typ
7791    | RStructList (_, typ) -> pr "%s array" typ
7792    | RHashtable _ -> pr "(string * string) list"
7793   );
7794   if is_external then (
7795     pr " = ";
7796     if List.length (snd style) + 1 > 5 then
7797       pr "\"ocaml_guestfs_%s_byte\" " name;
7798     pr "\"ocaml_guestfs_%s\"" name
7799   );
7800   pr "\n"
7801
7802 (* Generate Perl xs code, a sort of crazy variation of C with macros. *)
7803 and generate_perl_xs () =
7804   generate_header CStyle LGPLv2;
7805
7806   pr "\
7807 #include \"EXTERN.h\"
7808 #include \"perl.h\"
7809 #include \"XSUB.h\"
7810
7811 #include <guestfs.h>
7812
7813 #ifndef PRId64
7814 #define PRId64 \"lld\"
7815 #endif
7816
7817 static SV *
7818 my_newSVll(long long val) {
7819 #ifdef USE_64_BIT_ALL
7820   return newSViv(val);
7821 #else
7822   char buf[100];
7823   int len;
7824   len = snprintf(buf, 100, \"%%\" PRId64, val);
7825   return newSVpv(buf, len);
7826 #endif
7827 }
7828
7829 #ifndef PRIu64
7830 #define PRIu64 \"llu\"
7831 #endif
7832
7833 static SV *
7834 my_newSVull(unsigned long long val) {
7835 #ifdef USE_64_BIT_ALL
7836   return newSVuv(val);
7837 #else
7838   char buf[100];
7839   int len;
7840   len = snprintf(buf, 100, \"%%\" PRIu64, val);
7841   return newSVpv(buf, len);
7842 #endif
7843 }
7844
7845 /* http://www.perlmonks.org/?node_id=680842 */
7846 static char **
7847 XS_unpack_charPtrPtr (SV *arg) {
7848   char **ret;
7849   AV *av;
7850   I32 i;
7851
7852   if (!arg || !SvOK (arg) || !SvROK (arg) || SvTYPE (SvRV (arg)) != SVt_PVAV)
7853     croak (\"array reference expected\");
7854
7855   av = (AV *)SvRV (arg);
7856   ret = malloc ((av_len (av) + 1 + 1) * sizeof (char *));
7857   if (!ret)
7858     croak (\"malloc failed\");
7859
7860   for (i = 0; i <= av_len (av); i++) {
7861     SV **elem = av_fetch (av, i, 0);
7862
7863     if (!elem || !*elem)
7864       croak (\"missing element in list\");
7865
7866     ret[i] = SvPV_nolen (*elem);
7867   }
7868
7869   ret[i] = NULL;
7870
7871   return ret;
7872 }
7873
7874 MODULE = Sys::Guestfs  PACKAGE = Sys::Guestfs
7875
7876 PROTOTYPES: ENABLE
7877
7878 guestfs_h *
7879 _create ()
7880    CODE:
7881       RETVAL = guestfs_create ();
7882       if (!RETVAL)
7883         croak (\"could not create guestfs handle\");
7884       guestfs_set_error_handler (RETVAL, NULL, NULL);
7885  OUTPUT:
7886       RETVAL
7887
7888 void
7889 DESTROY (g)
7890       guestfs_h *g;
7891  PPCODE:
7892       guestfs_close (g);
7893
7894 ";
7895
7896   List.iter (
7897     fun (name, style, _, _, _, _, _) ->
7898       (match fst style with
7899        | RErr -> pr "void\n"
7900        | RInt _ -> pr "SV *\n"
7901        | RInt64 _ -> pr "SV *\n"
7902        | RBool _ -> pr "SV *\n"
7903        | RConstString _ -> pr "SV *\n"
7904        | RConstOptString _ -> pr "SV *\n"
7905        | RString _ -> pr "SV *\n"
7906        | RBufferOut _ -> pr "SV *\n"
7907        | RStringList _
7908        | RStruct _ | RStructList _
7909        | RHashtable _ ->
7910            pr "void\n" (* all lists returned implictly on the stack *)
7911       );
7912       (* Call and arguments. *)
7913       pr "%s " name;
7914       generate_c_call_args ~handle:"g" ~decl:true style;
7915       pr "\n";
7916       pr "      guestfs_h *g;\n";
7917       iteri (
7918         fun i ->
7919           function
7920           | Pathname n | Device n | Dev_or_Path n | String n | FileIn n | FileOut n ->
7921               pr "      char *%s;\n" n
7922           | OptString n ->
7923               (* http://www.perlmonks.org/?node_id=554277
7924                * Note that the implicit handle argument means we have
7925                * to add 1 to the ST(x) operator.
7926                *)
7927               pr "      char *%s = SvOK(ST(%d)) ? SvPV_nolen(ST(%d)) : NULL;\n" n (i+1) (i+1)
7928           | StringList n | DeviceList n -> pr "      char **%s;\n" n
7929           | Bool n -> pr "      int %s;\n" n
7930           | Int n -> pr "      int %s;\n" n
7931           | Int64 n -> pr "      int64_t %s;\n" n
7932       ) (snd style);
7933
7934       let do_cleanups () =
7935         List.iter (
7936           function
7937           | Pathname _ | Device _ | Dev_or_Path _ | String _ | OptString _
7938           | Bool _ | Int _ | Int64 _
7939           | FileIn _ | FileOut _ -> ()
7940           | StringList n | DeviceList n -> pr "      free (%s);\n" n
7941         ) (snd style)
7942       in
7943
7944       (* Code. *)
7945       (match fst style with
7946        | RErr ->
7947            pr "PREINIT:\n";
7948            pr "      int r;\n";
7949            pr " PPCODE:\n";
7950            pr "      r = guestfs_%s " name;
7951            generate_c_call_args ~handle:"g" style;
7952            pr ";\n";
7953            do_cleanups ();
7954            pr "      if (r == -1)\n";
7955            pr "        croak (\"%s: %%s\", guestfs_last_error (g));\n" name;
7956        | RInt n
7957        | RBool n ->
7958            pr "PREINIT:\n";
7959            pr "      int %s;\n" n;
7960            pr "   CODE:\n";
7961            pr "      %s = guestfs_%s " n name;
7962            generate_c_call_args ~handle:"g" style;
7963            pr ";\n";
7964            do_cleanups ();
7965            pr "      if (%s == -1)\n" n;
7966            pr "        croak (\"%s: %%s\", guestfs_last_error (g));\n" name;
7967            pr "      RETVAL = newSViv (%s);\n" n;
7968            pr " OUTPUT:\n";
7969            pr "      RETVAL\n"
7970        | RInt64 n ->
7971            pr "PREINIT:\n";
7972            pr "      int64_t %s;\n" n;
7973            pr "   CODE:\n";
7974            pr "      %s = guestfs_%s " n name;
7975            generate_c_call_args ~handle:"g" style;
7976            pr ";\n";
7977            do_cleanups ();
7978            pr "      if (%s == -1)\n" n;
7979            pr "        croak (\"%s: %%s\", guestfs_last_error (g));\n" name;
7980            pr "      RETVAL = my_newSVll (%s);\n" n;
7981            pr " OUTPUT:\n";
7982            pr "      RETVAL\n"
7983        | RConstString n ->
7984            pr "PREINIT:\n";
7985            pr "      const char *%s;\n" n;
7986            pr "   CODE:\n";
7987            pr "      %s = guestfs_%s " n name;
7988            generate_c_call_args ~handle:"g" style;
7989            pr ";\n";
7990            do_cleanups ();
7991            pr "      if (%s == NULL)\n" n;
7992            pr "        croak (\"%s: %%s\", guestfs_last_error (g));\n" name;
7993            pr "      RETVAL = newSVpv (%s, 0);\n" n;
7994            pr " OUTPUT:\n";
7995            pr "      RETVAL\n"
7996        | RConstOptString n ->
7997            pr "PREINIT:\n";
7998            pr "      const char *%s;\n" n;
7999            pr "   CODE:\n";
8000            pr "      %s = guestfs_%s " n name;
8001            generate_c_call_args ~handle:"g" style;
8002            pr ";\n";
8003            do_cleanups ();
8004            pr "      if (%s == NULL)\n" n;
8005            pr "        RETVAL = &PL_sv_undef;\n";
8006            pr "      else\n";
8007            pr "        RETVAL = newSVpv (%s, 0);\n" n;
8008            pr " OUTPUT:\n";
8009            pr "      RETVAL\n"
8010        | RString n ->
8011            pr "PREINIT:\n";
8012            pr "      char *%s;\n" n;
8013            pr "   CODE:\n";
8014            pr "      %s = guestfs_%s " n name;
8015            generate_c_call_args ~handle:"g" style;
8016            pr ";\n";
8017            do_cleanups ();
8018            pr "      if (%s == NULL)\n" n;
8019            pr "        croak (\"%s: %%s\", guestfs_last_error (g));\n" name;
8020            pr "      RETVAL = newSVpv (%s, 0);\n" n;
8021            pr "      free (%s);\n" n;
8022            pr " OUTPUT:\n";
8023            pr "      RETVAL\n"
8024        | RStringList n | RHashtable n ->
8025            pr "PREINIT:\n";
8026            pr "      char **%s;\n" n;
8027            pr "      int i, n;\n";
8028            pr " PPCODE:\n";
8029            pr "      %s = guestfs_%s " n name;
8030            generate_c_call_args ~handle:"g" style;
8031            pr ";\n";
8032            do_cleanups ();
8033            pr "      if (%s == NULL)\n" n;
8034            pr "        croak (\"%s: %%s\", guestfs_last_error (g));\n" name;
8035            pr "      for (n = 0; %s[n] != NULL; ++n) /**/;\n" n;
8036            pr "      EXTEND (SP, n);\n";
8037            pr "      for (i = 0; i < n; ++i) {\n";
8038            pr "        PUSHs (sv_2mortal (newSVpv (%s[i], 0)));\n" n;
8039            pr "        free (%s[i]);\n" n;
8040            pr "      }\n";
8041            pr "      free (%s);\n" n;
8042        | RStruct (n, typ) ->
8043            let cols = cols_of_struct typ in
8044            generate_perl_struct_code typ cols name style n do_cleanups
8045        | RStructList (n, typ) ->
8046            let cols = cols_of_struct typ in
8047            generate_perl_struct_list_code typ cols name style n do_cleanups
8048        | RBufferOut n ->
8049            pr "PREINIT:\n";
8050            pr "      char *%s;\n" n;
8051            pr "      size_t size;\n";
8052            pr "   CODE:\n";
8053            pr "      %s = guestfs_%s " n name;
8054            generate_c_call_args ~handle:"g" style;
8055            pr ";\n";
8056            do_cleanups ();
8057            pr "      if (%s == NULL)\n" n;
8058            pr "        croak (\"%s: %%s\", guestfs_last_error (g));\n" name;
8059            pr "      RETVAL = newSVpv (%s, size);\n" n;
8060            pr "      free (%s);\n" n;
8061            pr " OUTPUT:\n";
8062            pr "      RETVAL\n"
8063       );
8064
8065       pr "\n"
8066   ) all_functions
8067
8068 and generate_perl_struct_list_code typ cols name style n do_cleanups =
8069   pr "PREINIT:\n";
8070   pr "      struct guestfs_%s_list *%s;\n" typ n;
8071   pr "      int i;\n";
8072   pr "      HV *hv;\n";
8073   pr " PPCODE:\n";
8074   pr "      %s = guestfs_%s " n name;
8075   generate_c_call_args ~handle:"g" style;
8076   pr ";\n";
8077   do_cleanups ();
8078   pr "      if (%s == NULL)\n" n;
8079   pr "        croak (\"%s: %%s\", guestfs_last_error (g));\n" name;
8080   pr "      EXTEND (SP, %s->len);\n" n;
8081   pr "      for (i = 0; i < %s->len; ++i) {\n" n;
8082   pr "        hv = newHV ();\n";
8083   List.iter (
8084     function
8085     | name, FString ->
8086         pr "        (void) hv_store (hv, \"%s\", %d, newSVpv (%s->val[i].%s, 0), 0);\n"
8087           name (String.length name) n name
8088     | name, FUUID ->
8089         pr "        (void) hv_store (hv, \"%s\", %d, newSVpv (%s->val[i].%s, 32), 0);\n"
8090           name (String.length name) n name
8091     | name, FBuffer ->
8092         pr "        (void) hv_store (hv, \"%s\", %d, newSVpv (%s->val[i].%s, %s->val[i].%s_len), 0);\n"
8093           name (String.length name) n name n name
8094     | name, (FBytes|FUInt64) ->
8095         pr "        (void) hv_store (hv, \"%s\", %d, my_newSVull (%s->val[i].%s), 0);\n"
8096           name (String.length name) n name
8097     | name, FInt64 ->
8098         pr "        (void) hv_store (hv, \"%s\", %d, my_newSVll (%s->val[i].%s), 0);\n"
8099           name (String.length name) n name
8100     | name, (FInt32|FUInt32) ->
8101         pr "        (void) hv_store (hv, \"%s\", %d, newSVnv (%s->val[i].%s), 0);\n"
8102           name (String.length name) n name
8103     | name, FChar ->
8104         pr "        (void) hv_store (hv, \"%s\", %d, newSVpv (&%s->val[i].%s, 1), 0);\n"
8105           name (String.length name) n name
8106     | name, FOptPercent ->
8107         pr "        (void) hv_store (hv, \"%s\", %d, newSVnv (%s->val[i].%s), 0);\n"
8108           name (String.length name) n name
8109   ) cols;
8110   pr "        PUSHs (sv_2mortal (newRV ((SV *) hv)));\n";
8111   pr "      }\n";
8112   pr "      guestfs_free_%s_list (%s);\n" typ n
8113
8114 and generate_perl_struct_code typ cols name style n do_cleanups =
8115   pr "PREINIT:\n";
8116   pr "      struct guestfs_%s *%s;\n" typ n;
8117   pr " PPCODE:\n";
8118   pr "      %s = guestfs_%s " n name;
8119   generate_c_call_args ~handle:"g" style;
8120   pr ";\n";
8121   do_cleanups ();
8122   pr "      if (%s == NULL)\n" n;
8123   pr "        croak (\"%s: %%s\", guestfs_last_error (g));\n" name;
8124   pr "      EXTEND (SP, 2 * %d);\n" (List.length cols);
8125   List.iter (
8126     fun ((name, _) as col) ->
8127       pr "      PUSHs (sv_2mortal (newSVpv (\"%s\", 0)));\n" name;
8128
8129       match col with
8130       | name, FString ->
8131           pr "      PUSHs (sv_2mortal (newSVpv (%s->%s, 0)));\n"
8132             n name
8133       | name, FBuffer ->
8134           pr "      PUSHs (sv_2mortal (newSVpv (%s->%s, %s->%s_len)));\n"
8135             n name n name
8136       | name, FUUID ->
8137           pr "      PUSHs (sv_2mortal (newSVpv (%s->%s, 32)));\n"
8138             n name
8139       | name, (FBytes|FUInt64) ->
8140           pr "      PUSHs (sv_2mortal (my_newSVull (%s->%s)));\n"
8141             n name
8142       | name, FInt64 ->
8143           pr "      PUSHs (sv_2mortal (my_newSVll (%s->%s)));\n"
8144             n name
8145       | name, (FInt32|FUInt32) ->
8146           pr "      PUSHs (sv_2mortal (newSVnv (%s->%s)));\n"
8147             n name
8148       | name, FChar ->
8149           pr "      PUSHs (sv_2mortal (newSVpv (&%s->%s, 1)));\n"
8150             n name
8151       | name, FOptPercent ->
8152           pr "      PUSHs (sv_2mortal (newSVnv (%s->%s)));\n"
8153             n name
8154   ) cols;
8155   pr "      free (%s);\n" n
8156
8157 (* Generate Sys/Guestfs.pm. *)
8158 and generate_perl_pm () =
8159   generate_header HashStyle LGPLv2;
8160
8161   pr "\
8162 =pod
8163
8164 =head1 NAME
8165
8166 Sys::Guestfs - Perl bindings for libguestfs
8167
8168 =head1 SYNOPSIS
8169
8170  use Sys::Guestfs;
8171
8172  my $h = Sys::Guestfs->new ();
8173  $h->add_drive ('guest.img');
8174  $h->launch ();
8175  $h->mount ('/dev/sda1', '/');
8176  $h->touch ('/hello');
8177  $h->sync ();
8178
8179 =head1 DESCRIPTION
8180
8181 The C<Sys::Guestfs> module provides a Perl XS binding to the
8182 libguestfs API for examining and modifying virtual machine
8183 disk images.
8184
8185 Amongst the things this is good for: making batch configuration
8186 changes to guests, getting disk used/free statistics (see also:
8187 virt-df), migrating between virtualization systems (see also:
8188 virt-p2v), performing partial backups, performing partial guest
8189 clones, cloning guests and changing registry/UUID/hostname info, and
8190 much else besides.
8191
8192 Libguestfs uses Linux kernel and qemu code, and can access any type of
8193 guest filesystem that Linux and qemu can, including but not limited
8194 to: ext2/3/4, btrfs, FAT and NTFS, LVM, many different disk partition
8195 schemes, qcow, qcow2, vmdk.
8196
8197 Libguestfs provides ways to enumerate guest storage (eg. partitions,
8198 LVs, what filesystem is in each LV, etc.).  It can also run commands
8199 in the context of the guest.  Also you can access filesystems over FTP.
8200
8201 See also L<Sys::Guestfs::Lib(3)> for a set of useful library
8202 functions for using libguestfs from Perl, including integration
8203 with libvirt.
8204
8205 =head1 ERRORS
8206
8207 All errors turn into calls to C<croak> (see L<Carp(3)>).
8208
8209 =head1 METHODS
8210
8211 =over 4
8212
8213 =cut
8214
8215 package Sys::Guestfs;
8216
8217 use strict;
8218 use warnings;
8219
8220 require XSLoader;
8221 XSLoader::load ('Sys::Guestfs');
8222
8223 =item $h = Sys::Guestfs->new ();
8224
8225 Create a new guestfs handle.
8226
8227 =cut
8228
8229 sub new {
8230   my $proto = shift;
8231   my $class = ref ($proto) || $proto;
8232
8233   my $self = Sys::Guestfs::_create ();
8234   bless $self, $class;
8235   return $self;
8236 }
8237
8238 ";
8239
8240   (* Actions.  We only need to print documentation for these as
8241    * they are pulled in from the XS code automatically.
8242    *)
8243   List.iter (
8244     fun (name, style, _, flags, _, _, longdesc) ->
8245       if not (List.mem NotInDocs flags) then (
8246         let longdesc = replace_str longdesc "C<guestfs_" "C<$h-E<gt>" in
8247         pr "=item ";
8248         generate_perl_prototype name style;
8249         pr "\n\n";
8250         pr "%s\n\n" longdesc;
8251         if List.mem ProtocolLimitWarning flags then
8252           pr "%s\n\n" protocol_limit_warning;
8253         if List.mem DangerWillRobinson flags then
8254           pr "%s\n\n" danger_will_robinson;
8255         match deprecation_notice flags with
8256         | None -> ()
8257         | Some txt -> pr "%s\n\n" txt
8258       )
8259   ) all_functions_sorted;
8260
8261   (* End of file. *)
8262   pr "\
8263 =cut
8264
8265 1;
8266
8267 =back
8268
8269 =head1 COPYRIGHT
8270
8271 Copyright (C) %s Red Hat Inc.
8272
8273 =head1 LICENSE
8274
8275 Please see the file COPYING.LIB for the full license.
8276
8277 =head1 SEE ALSO
8278
8279 L<guestfs(3)>,
8280 L<guestfish(1)>,
8281 L<http://libguestfs.org>,
8282 L<Sys::Guestfs::Lib(3)>.
8283
8284 =cut
8285 " copyright_years
8286
8287 and generate_perl_prototype name style =
8288   (match fst style with
8289    | RErr -> ()
8290    | RBool n
8291    | RInt n
8292    | RInt64 n
8293    | RConstString n
8294    | RConstOptString n
8295    | RString n
8296    | RBufferOut n -> pr "$%s = " n
8297    | RStruct (n,_)
8298    | RHashtable n -> pr "%%%s = " n
8299    | RStringList n
8300    | RStructList (n,_) -> pr "@%s = " n
8301   );
8302   pr "$h->%s (" name;
8303   let comma = ref false in
8304   List.iter (
8305     fun arg ->
8306       if !comma then pr ", ";
8307       comma := true;
8308       match arg with
8309       | Pathname n | Device n | Dev_or_Path n | String n
8310       | OptString n | Bool n | Int n | Int64 n | FileIn n | FileOut n ->
8311           pr "$%s" n
8312       | StringList n | DeviceList n ->
8313           pr "\\@%s" n
8314   ) (snd style);
8315   pr ");"
8316
8317 (* Generate Python C module. *)
8318 and generate_python_c () =
8319   generate_header CStyle LGPLv2;
8320
8321   pr "\
8322 #include <Python.h>
8323
8324 #include <stdio.h>
8325 #include <stdlib.h>
8326 #include <assert.h>
8327
8328 #include \"guestfs.h\"
8329
8330 typedef struct {
8331   PyObject_HEAD
8332   guestfs_h *g;
8333 } Pyguestfs_Object;
8334
8335 static guestfs_h *
8336 get_handle (PyObject *obj)
8337 {
8338   assert (obj);
8339   assert (obj != Py_None);
8340   return ((Pyguestfs_Object *) obj)->g;
8341 }
8342
8343 static PyObject *
8344 put_handle (guestfs_h *g)
8345 {
8346   assert (g);
8347   return
8348     PyCObject_FromVoidPtrAndDesc ((void *) g, (char *) \"guestfs_h\", NULL);
8349 }
8350
8351 /* This list should be freed (but not the strings) after use. */
8352 static char **
8353 get_string_list (PyObject *obj)
8354 {
8355   int i, len;
8356   char **r;
8357
8358   assert (obj);
8359
8360   if (!PyList_Check (obj)) {
8361     PyErr_SetString (PyExc_RuntimeError, \"expecting a list parameter\");
8362     return NULL;
8363   }
8364
8365   len = PyList_Size (obj);
8366   r = malloc (sizeof (char *) * (len+1));
8367   if (r == NULL) {
8368     PyErr_SetString (PyExc_RuntimeError, \"get_string_list: out of memory\");
8369     return NULL;
8370   }
8371
8372   for (i = 0; i < len; ++i)
8373     r[i] = PyString_AsString (PyList_GetItem (obj, i));
8374   r[len] = NULL;
8375
8376   return r;
8377 }
8378
8379 static PyObject *
8380 put_string_list (char * const * const argv)
8381 {
8382   PyObject *list;
8383   int argc, i;
8384
8385   for (argc = 0; argv[argc] != NULL; ++argc)
8386     ;
8387
8388   list = PyList_New (argc);
8389   for (i = 0; i < argc; ++i)
8390     PyList_SetItem (list, i, PyString_FromString (argv[i]));
8391
8392   return list;
8393 }
8394
8395 static PyObject *
8396 put_table (char * const * const argv)
8397 {
8398   PyObject *list, *item;
8399   int argc, i;
8400
8401   for (argc = 0; argv[argc] != NULL; ++argc)
8402     ;
8403
8404   list = PyList_New (argc >> 1);
8405   for (i = 0; i < argc; i += 2) {
8406     item = PyTuple_New (2);
8407     PyTuple_SetItem (item, 0, PyString_FromString (argv[i]));
8408     PyTuple_SetItem (item, 1, PyString_FromString (argv[i+1]));
8409     PyList_SetItem (list, i >> 1, item);
8410   }
8411
8412   return list;
8413 }
8414
8415 static void
8416 free_strings (char **argv)
8417 {
8418   int argc;
8419
8420   for (argc = 0; argv[argc] != NULL; ++argc)
8421     free (argv[argc]);
8422   free (argv);
8423 }
8424
8425 static PyObject *
8426 py_guestfs_create (PyObject *self, PyObject *args)
8427 {
8428   guestfs_h *g;
8429
8430   g = guestfs_create ();
8431   if (g == NULL) {
8432     PyErr_SetString (PyExc_RuntimeError,
8433                      \"guestfs.create: failed to allocate handle\");
8434     return NULL;
8435   }
8436   guestfs_set_error_handler (g, NULL, NULL);
8437   return put_handle (g);
8438 }
8439
8440 static PyObject *
8441 py_guestfs_close (PyObject *self, PyObject *args)
8442 {
8443   PyObject *py_g;
8444   guestfs_h *g;
8445
8446   if (!PyArg_ParseTuple (args, (char *) \"O:guestfs_close\", &py_g))
8447     return NULL;
8448   g = get_handle (py_g);
8449
8450   guestfs_close (g);
8451
8452   Py_INCREF (Py_None);
8453   return Py_None;
8454 }
8455
8456 ";
8457
8458   let emit_put_list_function typ =
8459     pr "static PyObject *\n";
8460     pr "put_%s_list (struct guestfs_%s_list *%ss)\n" typ typ typ;
8461     pr "{\n";
8462     pr "  PyObject *list;\n";
8463     pr "  int i;\n";
8464     pr "\n";
8465     pr "  list = PyList_New (%ss->len);\n" typ;
8466     pr "  for (i = 0; i < %ss->len; ++i)\n" typ;
8467     pr "    PyList_SetItem (list, i, put_%s (&%ss->val[i]));\n" typ typ;
8468     pr "  return list;\n";
8469     pr "};\n";
8470     pr "\n"
8471   in
8472
8473   (* Structures, turned into Python dictionaries. *)
8474   List.iter (
8475     fun (typ, cols) ->
8476       pr "static PyObject *\n";
8477       pr "put_%s (struct guestfs_%s *%s)\n" typ typ typ;
8478       pr "{\n";
8479       pr "  PyObject *dict;\n";
8480       pr "\n";
8481       pr "  dict = PyDict_New ();\n";
8482       List.iter (
8483         function
8484         | name, FString ->
8485             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
8486             pr "                        PyString_FromString (%s->%s));\n"
8487               typ name
8488         | name, FBuffer ->
8489             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
8490             pr "                        PyString_FromStringAndSize (%s->%s, %s->%s_len));\n"
8491               typ name typ name
8492         | name, FUUID ->
8493             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
8494             pr "                        PyString_FromStringAndSize (%s->%s, 32));\n"
8495               typ name
8496         | name, (FBytes|FUInt64) ->
8497             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
8498             pr "                        PyLong_FromUnsignedLongLong (%s->%s));\n"
8499               typ name
8500         | name, FInt64 ->
8501             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
8502             pr "                        PyLong_FromLongLong (%s->%s));\n"
8503               typ name
8504         | name, FUInt32 ->
8505             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
8506             pr "                        PyLong_FromUnsignedLong (%s->%s));\n"
8507               typ name
8508         | name, FInt32 ->
8509             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
8510             pr "                        PyLong_FromLong (%s->%s));\n"
8511               typ name
8512         | name, FOptPercent ->
8513             pr "  if (%s->%s >= 0)\n" typ name;
8514             pr "    PyDict_SetItemString (dict, \"%s\",\n" name;
8515             pr "                          PyFloat_FromDouble ((double) %s->%s));\n"
8516               typ name;
8517             pr "  else {\n";
8518             pr "    Py_INCREF (Py_None);\n";
8519             pr "    PyDict_SetItemString (dict, \"%s\", Py_None);\n" name;
8520             pr "  }\n"
8521         | name, FChar ->
8522             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
8523             pr "                        PyString_FromStringAndSize (&dirent->%s, 1));\n" name
8524       ) cols;
8525       pr "  return dict;\n";
8526       pr "};\n";
8527       pr "\n";
8528
8529   ) structs;
8530
8531   (* Emit a put_TYPE_list function definition only if that function is used. *)
8532   List.iter (
8533     function
8534     | typ, (RStructListOnly | RStructAndList) ->
8535         (* generate the function for typ *)
8536         emit_put_list_function typ
8537     | typ, _ -> () (* empty *)
8538   ) (rstructs_used_by all_functions);
8539
8540   (* Python wrapper functions. *)
8541   List.iter (
8542     fun (name, style, _, _, _, _, _) ->
8543       pr "static PyObject *\n";
8544       pr "py_guestfs_%s (PyObject *self, PyObject *args)\n" name;
8545       pr "{\n";
8546
8547       pr "  PyObject *py_g;\n";
8548       pr "  guestfs_h *g;\n";
8549       pr "  PyObject *py_r;\n";
8550
8551       let error_code =
8552         match fst style with
8553         | RErr | RInt _ | RBool _ -> pr "  int r;\n"; "-1"
8554         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
8555         | RConstString _ | RConstOptString _ ->
8556             pr "  const char *r;\n"; "NULL"
8557         | RString _ -> pr "  char *r;\n"; "NULL"
8558         | RStringList _ | RHashtable _ -> pr "  char **r;\n"; "NULL"
8559         | RStruct (_, typ) -> pr "  struct guestfs_%s *r;\n" typ; "NULL"
8560         | RStructList (_, typ) ->
8561             pr "  struct guestfs_%s_list *r;\n" typ; "NULL"
8562         | RBufferOut _ ->
8563             pr "  char *r;\n";
8564             pr "  size_t size;\n";
8565             "NULL" in
8566
8567       List.iter (
8568         function
8569         | Pathname n | Device n | Dev_or_Path n | String n | FileIn n | FileOut n ->
8570             pr "  const char *%s;\n" n
8571         | OptString n -> pr "  const char *%s;\n" n
8572         | StringList n | DeviceList n ->
8573             pr "  PyObject *py_%s;\n" n;
8574             pr "  char **%s;\n" n
8575         | Bool n -> pr "  int %s;\n" n
8576         | Int n -> pr "  int %s;\n" n
8577         | Int64 n -> pr "  long long %s;\n" n
8578       ) (snd style);
8579
8580       pr "\n";
8581
8582       (* Convert the parameters. *)
8583       pr "  if (!PyArg_ParseTuple (args, (char *) \"O";
8584       List.iter (
8585         function
8586         | Pathname _ | Device _ | Dev_or_Path _ | String _ | FileIn _ | FileOut _ -> pr "s"
8587         | OptString _ -> pr "z"
8588         | StringList _ | DeviceList _ -> pr "O"
8589         | Bool _ -> pr "i" (* XXX Python has booleans? *)
8590         | Int _ -> pr "i"
8591         | Int64 _ -> pr "L" (* XXX Whoever thought it was a good idea to
8592                              * emulate C's int/long/long long in Python?
8593                              *)
8594       ) (snd style);
8595       pr ":guestfs_%s\",\n" name;
8596       pr "                         &py_g";
8597       List.iter (
8598         function
8599         | Pathname n | Device n | Dev_or_Path n | String n | FileIn n | FileOut n -> pr ", &%s" n
8600         | OptString n -> pr ", &%s" n
8601         | StringList n | DeviceList n -> pr ", &py_%s" n
8602         | Bool n -> pr ", &%s" n
8603         | Int n -> pr ", &%s" n
8604         | Int64 n -> pr ", &%s" n
8605       ) (snd style);
8606
8607       pr "))\n";
8608       pr "    return NULL;\n";
8609
8610       pr "  g = get_handle (py_g);\n";
8611       List.iter (
8612         function
8613         | Pathname _ | Device _ | Dev_or_Path _ | String _
8614         | FileIn _ | FileOut _ | OptString _ | Bool _ | Int _ | Int64 _ -> ()
8615         | StringList n | DeviceList n ->
8616             pr "  %s = get_string_list (py_%s);\n" n n;
8617             pr "  if (!%s) return NULL;\n" n
8618       ) (snd style);
8619
8620       pr "\n";
8621
8622       pr "  r = guestfs_%s " name;
8623       generate_c_call_args ~handle:"g" style;
8624       pr ";\n";
8625
8626       List.iter (
8627         function
8628         | Pathname _ | Device _ | Dev_or_Path _ | String _
8629         | FileIn _ | FileOut _ | OptString _ | Bool _ | Int _ | Int64 _ -> ()
8630         | StringList n | DeviceList n ->
8631             pr "  free (%s);\n" n
8632       ) (snd style);
8633
8634       pr "  if (r == %s) {\n" error_code;
8635       pr "    PyErr_SetString (PyExc_RuntimeError, guestfs_last_error (g));\n";
8636       pr "    return NULL;\n";
8637       pr "  }\n";
8638       pr "\n";
8639
8640       (match fst style with
8641        | RErr ->
8642            pr "  Py_INCREF (Py_None);\n";
8643            pr "  py_r = Py_None;\n"
8644        | RInt _
8645        | RBool _ -> pr "  py_r = PyInt_FromLong ((long) r);\n"
8646        | RInt64 _ -> pr "  py_r = PyLong_FromLongLong (r);\n"
8647        | RConstString _ -> pr "  py_r = PyString_FromString (r);\n"
8648        | RConstOptString _ ->
8649            pr "  if (r)\n";
8650            pr "    py_r = PyString_FromString (r);\n";
8651            pr "  else {\n";
8652            pr "    Py_INCREF (Py_None);\n";
8653            pr "    py_r = Py_None;\n";
8654            pr "  }\n"
8655        | RString _ ->
8656            pr "  py_r = PyString_FromString (r);\n";
8657            pr "  free (r);\n"
8658        | RStringList _ ->
8659            pr "  py_r = put_string_list (r);\n";
8660            pr "  free_strings (r);\n"
8661        | RStruct (_, typ) ->
8662            pr "  py_r = put_%s (r);\n" typ;
8663            pr "  guestfs_free_%s (r);\n" typ
8664        | RStructList (_, typ) ->
8665            pr "  py_r = put_%s_list (r);\n" typ;
8666            pr "  guestfs_free_%s_list (r);\n" typ
8667        | RHashtable n ->
8668            pr "  py_r = put_table (r);\n";
8669            pr "  free_strings (r);\n"
8670        | RBufferOut _ ->
8671            pr "  py_r = PyString_FromStringAndSize (r, size);\n";
8672            pr "  free (r);\n"
8673       );
8674
8675       pr "  return py_r;\n";
8676       pr "}\n";
8677       pr "\n"
8678   ) all_functions;
8679
8680   (* Table of functions. *)
8681   pr "static PyMethodDef methods[] = {\n";
8682   pr "  { (char *) \"create\", py_guestfs_create, METH_VARARGS, NULL },\n";
8683   pr "  { (char *) \"close\", py_guestfs_close, METH_VARARGS, NULL },\n";
8684   List.iter (
8685     fun (name, _, _, _, _, _, _) ->
8686       pr "  { (char *) \"%s\", py_guestfs_%s, METH_VARARGS, NULL },\n"
8687         name name
8688   ) all_functions;
8689   pr "  { NULL, NULL, 0, NULL }\n";
8690   pr "};\n";
8691   pr "\n";
8692
8693   (* Init function. *)
8694   pr "\
8695 void
8696 initlibguestfsmod (void)
8697 {
8698   static int initialized = 0;
8699
8700   if (initialized) return;
8701   Py_InitModule ((char *) \"libguestfsmod\", methods);
8702   initialized = 1;
8703 }
8704 "
8705
8706 (* Generate Python module. *)
8707 and generate_python_py () =
8708   generate_header HashStyle LGPLv2;
8709
8710   pr "\
8711 u\"\"\"Python bindings for libguestfs
8712
8713 import guestfs
8714 g = guestfs.GuestFS ()
8715 g.add_drive (\"guest.img\")
8716 g.launch ()
8717 parts = g.list_partitions ()
8718
8719 The guestfs module provides a Python binding to the libguestfs API
8720 for examining and modifying virtual machine disk images.
8721
8722 Amongst the things this is good for: making batch configuration
8723 changes to guests, getting disk used/free statistics (see also:
8724 virt-df), migrating between virtualization systems (see also:
8725 virt-p2v), performing partial backups, performing partial guest
8726 clones, cloning guests and changing registry/UUID/hostname info, and
8727 much else besides.
8728
8729 Libguestfs uses Linux kernel and qemu code, and can access any type of
8730 guest filesystem that Linux and qemu can, including but not limited
8731 to: ext2/3/4, btrfs, FAT and NTFS, LVM, many different disk partition
8732 schemes, qcow, qcow2, vmdk.
8733
8734 Libguestfs provides ways to enumerate guest storage (eg. partitions,
8735 LVs, what filesystem is in each LV, etc.).  It can also run commands
8736 in the context of the guest.  Also you can access filesystems over FTP.
8737
8738 Errors which happen while using the API are turned into Python
8739 RuntimeError exceptions.
8740
8741 To create a guestfs handle you usually have to perform the following
8742 sequence of calls:
8743
8744 # Create the handle, call add_drive at least once, and possibly
8745 # several times if the guest has multiple block devices:
8746 g = guestfs.GuestFS ()
8747 g.add_drive (\"guest.img\")
8748
8749 # Launch the qemu subprocess and wait for it to become ready:
8750 g.launch ()
8751
8752 # Now you can issue commands, for example:
8753 logvols = g.lvs ()
8754
8755 \"\"\"
8756
8757 import libguestfsmod
8758
8759 class GuestFS:
8760     \"\"\"Instances of this class are libguestfs API handles.\"\"\"
8761
8762     def __init__ (self):
8763         \"\"\"Create a new libguestfs handle.\"\"\"
8764         self._o = libguestfsmod.create ()
8765
8766     def __del__ (self):
8767         libguestfsmod.close (self._o)
8768
8769 ";
8770
8771   List.iter (
8772     fun (name, style, _, flags, _, _, longdesc) ->
8773       pr "    def %s " name;
8774       generate_py_call_args ~handle:"self" (snd style);
8775       pr ":\n";
8776
8777       if not (List.mem NotInDocs flags) then (
8778         let doc = replace_str longdesc "C<guestfs_" "C<g." in
8779         let doc =
8780           match fst style with
8781           | RErr | RInt _ | RInt64 _ | RBool _
8782           | RConstOptString _ | RConstString _
8783           | RString _ | RBufferOut _ -> doc
8784           | RStringList _ ->
8785               doc ^ "\n\nThis function returns a list of strings."
8786           | RStruct (_, typ) ->
8787               doc ^ sprintf "\n\nThis function returns a dictionary, with keys matching the various fields in the guestfs_%s structure." typ
8788           | RStructList (_, typ) ->
8789               doc ^ sprintf "\n\nThis function returns a list of %ss.  Each %s is represented as a dictionary." typ typ
8790           | RHashtable _ ->
8791               doc ^ "\n\nThis function returns a dictionary." in
8792         let doc =
8793           if List.mem ProtocolLimitWarning flags then
8794             doc ^ "\n\n" ^ protocol_limit_warning
8795           else doc in
8796         let doc =
8797           if List.mem DangerWillRobinson flags then
8798             doc ^ "\n\n" ^ danger_will_robinson
8799           else doc in
8800         let doc =
8801           match deprecation_notice flags with
8802           | None -> doc
8803           | Some txt -> doc ^ "\n\n" ^ txt in
8804         let doc = pod2text ~width:60 name doc in
8805         let doc = List.map (fun line -> replace_str line "\\" "\\\\") doc in
8806         let doc = String.concat "\n        " doc in
8807         pr "        u\"\"\"%s\"\"\"\n" doc;
8808       );
8809       pr "        return libguestfsmod.%s " name;
8810       generate_py_call_args ~handle:"self._o" (snd style);
8811       pr "\n";
8812       pr "\n";
8813   ) all_functions
8814
8815 (* Generate Python call arguments, eg "(handle, foo, bar)" *)
8816 and generate_py_call_args ~handle args =
8817   pr "(%s" handle;
8818   List.iter (fun arg -> pr ", %s" (name_of_argt arg)) args;
8819   pr ")"
8820
8821 (* Useful if you need the longdesc POD text as plain text.  Returns a
8822  * list of lines.
8823  *
8824  * Because this is very slow (the slowest part of autogeneration),
8825  * we memoize the results.
8826  *)
8827 and pod2text ~width name longdesc =
8828   let key = width, name, longdesc in
8829   try Hashtbl.find pod2text_memo key
8830   with Not_found ->
8831     let filename, chan = Filename.open_temp_file "gen" ".tmp" in
8832     fprintf chan "=head1 %s\n\n%s\n" name longdesc;
8833     close_out chan;
8834     let cmd = sprintf "pod2text -w %d %s" width (Filename.quote filename) in
8835     let chan = open_process_in cmd in
8836     let lines = ref [] in
8837     let rec loop i =
8838       let line = input_line chan in
8839       if i = 1 then             (* discard the first line of output *)
8840         loop (i+1)
8841       else (
8842         let line = triml line in
8843         lines := line :: !lines;
8844         loop (i+1)
8845       ) in
8846     let lines = try loop 1 with End_of_file -> List.rev !lines in
8847     unlink filename;
8848     (match close_process_in chan with
8849      | WEXITED 0 -> ()
8850      | WEXITED i ->
8851          failwithf "pod2text: process exited with non-zero status (%d)" i
8852      | WSIGNALED i | WSTOPPED i ->
8853          failwithf "pod2text: process signalled or stopped by signal %d" i
8854     );
8855     Hashtbl.add pod2text_memo key lines;
8856     pod2text_memo_updated ();
8857     lines
8858
8859 (* Generate ruby bindings. *)
8860 and generate_ruby_c () =
8861   generate_header CStyle LGPLv2;
8862
8863   pr "\
8864 #include <stdio.h>
8865 #include <stdlib.h>
8866
8867 #include <ruby.h>
8868
8869 #include \"guestfs.h\"
8870
8871 #include \"extconf.h\"
8872
8873 /* For Ruby < 1.9 */
8874 #ifndef RARRAY_LEN
8875 #define RARRAY_LEN(r) (RARRAY((r))->len)
8876 #endif
8877
8878 static VALUE m_guestfs;                 /* guestfs module */
8879 static VALUE c_guestfs;                 /* guestfs_h handle */
8880 static VALUE e_Error;                   /* used for all errors */
8881
8882 static void ruby_guestfs_free (void *p)
8883 {
8884   if (!p) return;
8885   guestfs_close ((guestfs_h *) p);
8886 }
8887
8888 static VALUE ruby_guestfs_create (VALUE m)
8889 {
8890   guestfs_h *g;
8891
8892   g = guestfs_create ();
8893   if (!g)
8894     rb_raise (e_Error, \"failed to create guestfs handle\");
8895
8896   /* Don't print error messages to stderr by default. */
8897   guestfs_set_error_handler (g, NULL, NULL);
8898
8899   /* Wrap it, and make sure the close function is called when the
8900    * handle goes away.
8901    */
8902   return Data_Wrap_Struct (c_guestfs, NULL, ruby_guestfs_free, g);
8903 }
8904
8905 static VALUE ruby_guestfs_close (VALUE gv)
8906 {
8907   guestfs_h *g;
8908   Data_Get_Struct (gv, guestfs_h, g);
8909
8910   ruby_guestfs_free (g);
8911   DATA_PTR (gv) = NULL;
8912
8913   return Qnil;
8914 }
8915
8916 ";
8917
8918   List.iter (
8919     fun (name, style, _, _, _, _, _) ->
8920       pr "static VALUE ruby_guestfs_%s (VALUE gv" name;
8921       List.iter (fun arg -> pr ", VALUE %sv" (name_of_argt arg)) (snd style);
8922       pr ")\n";
8923       pr "{\n";
8924       pr "  guestfs_h *g;\n";
8925       pr "  Data_Get_Struct (gv, guestfs_h, g);\n";
8926       pr "  if (!g)\n";
8927       pr "    rb_raise (rb_eArgError, \"%%s: used handle after closing it\", \"%s\");\n"
8928         name;
8929       pr "\n";
8930
8931       List.iter (
8932         function
8933         | Pathname n | Device n | Dev_or_Path n | String n | FileIn n | FileOut n ->
8934             pr "  Check_Type (%sv, T_STRING);\n" n;
8935             pr "  const char *%s = StringValueCStr (%sv);\n" n n;
8936             pr "  if (!%s)\n" n;
8937             pr "    rb_raise (rb_eTypeError, \"expected string for parameter %%s of %%s\",\n";
8938             pr "              \"%s\", \"%s\");\n" n name
8939         | OptString n ->
8940             pr "  const char *%s = !NIL_P (%sv) ? StringValueCStr (%sv) : NULL;\n" n n n
8941         | StringList n | DeviceList n ->
8942             pr "  char **%s;\n" n;
8943             pr "  Check_Type (%sv, T_ARRAY);\n" n;
8944             pr "  {\n";
8945             pr "    int i, len;\n";
8946             pr "    len = RARRAY_LEN (%sv);\n" n;
8947             pr "    %s = guestfs_safe_malloc (g, sizeof (char *) * (len+1));\n"
8948               n;
8949             pr "    for (i = 0; i < len; ++i) {\n";
8950             pr "      VALUE v = rb_ary_entry (%sv, i);\n" n;
8951             pr "      %s[i] = StringValueCStr (v);\n" n;
8952             pr "    }\n";
8953             pr "    %s[len] = NULL;\n" n;
8954             pr "  }\n";
8955         | Bool n ->
8956             pr "  int %s = RTEST (%sv);\n" n n
8957         | Int n ->
8958             pr "  int %s = NUM2INT (%sv);\n" n n
8959         | Int64 n ->
8960             pr "  long long %s = NUM2LL (%sv);\n" n n
8961       ) (snd style);
8962       pr "\n";
8963
8964       let error_code =
8965         match fst style with
8966         | RErr | RInt _ | RBool _ -> pr "  int r;\n"; "-1"
8967         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
8968         | RConstString _ | RConstOptString _ ->
8969             pr "  const char *r;\n"; "NULL"
8970         | RString _ -> pr "  char *r;\n"; "NULL"
8971         | RStringList _ | RHashtable _ -> pr "  char **r;\n"; "NULL"
8972         | RStruct (_, typ) -> pr "  struct guestfs_%s *r;\n" typ; "NULL"
8973         | RStructList (_, typ) ->
8974             pr "  struct guestfs_%s_list *r;\n" typ; "NULL"
8975         | RBufferOut _ ->
8976             pr "  char *r;\n";
8977             pr "  size_t size;\n";
8978             "NULL" in
8979       pr "\n";
8980
8981       pr "  r = guestfs_%s " name;
8982       generate_c_call_args ~handle:"g" style;
8983       pr ";\n";
8984
8985       List.iter (
8986         function
8987         | Pathname _ | Device _ | Dev_or_Path _ | String _
8988         | FileIn _ | FileOut _ | OptString _ | Bool _ | Int _ | Int64 _ -> ()
8989         | StringList n | DeviceList n ->
8990             pr "  free (%s);\n" n
8991       ) (snd style);
8992
8993       pr "  if (r == %s)\n" error_code;
8994       pr "    rb_raise (e_Error, \"%%s\", guestfs_last_error (g));\n";
8995       pr "\n";
8996
8997       (match fst style with
8998        | RErr ->
8999            pr "  return Qnil;\n"
9000        | RInt _ | RBool _ ->
9001            pr "  return INT2NUM (r);\n"
9002        | RInt64 _ ->
9003            pr "  return ULL2NUM (r);\n"
9004        | RConstString _ ->
9005            pr "  return rb_str_new2 (r);\n";
9006        | RConstOptString _ ->
9007            pr "  if (r)\n";
9008            pr "    return rb_str_new2 (r);\n";
9009            pr "  else\n";
9010            pr "    return Qnil;\n";
9011        | RString _ ->
9012            pr "  VALUE rv = rb_str_new2 (r);\n";
9013            pr "  free (r);\n";
9014            pr "  return rv;\n";
9015        | RStringList _ ->
9016            pr "  int i, len = 0;\n";
9017            pr "  for (i = 0; r[i] != NULL; ++i) len++;\n";
9018            pr "  VALUE rv = rb_ary_new2 (len);\n";
9019            pr "  for (i = 0; r[i] != NULL; ++i) {\n";
9020            pr "    rb_ary_push (rv, rb_str_new2 (r[i]));\n";
9021            pr "    free (r[i]);\n";
9022            pr "  }\n";
9023            pr "  free (r);\n";
9024            pr "  return rv;\n"
9025        | RStruct (_, typ) ->
9026            let cols = cols_of_struct typ in
9027            generate_ruby_struct_code typ cols
9028        | RStructList (_, typ) ->
9029            let cols = cols_of_struct typ in
9030            generate_ruby_struct_list_code typ cols
9031        | RHashtable _ ->
9032            pr "  VALUE rv = rb_hash_new ();\n";
9033            pr "  int i;\n";
9034            pr "  for (i = 0; r[i] != NULL; i+=2) {\n";
9035            pr "    rb_hash_aset (rv, rb_str_new2 (r[i]), rb_str_new2 (r[i+1]));\n";
9036            pr "    free (r[i]);\n";
9037            pr "    free (r[i+1]);\n";
9038            pr "  }\n";
9039            pr "  free (r);\n";
9040            pr "  return rv;\n"
9041        | RBufferOut _ ->
9042            pr "  VALUE rv = rb_str_new (r, size);\n";
9043            pr "  free (r);\n";
9044            pr "  return rv;\n";
9045       );
9046
9047       pr "}\n";
9048       pr "\n"
9049   ) all_functions;
9050
9051   pr "\
9052 /* Initialize the module. */
9053 void Init__guestfs ()
9054 {
9055   m_guestfs = rb_define_module (\"Guestfs\");
9056   c_guestfs = rb_define_class_under (m_guestfs, \"Guestfs\", rb_cObject);
9057   e_Error = rb_define_class_under (m_guestfs, \"Error\", rb_eStandardError);
9058
9059   rb_define_module_function (m_guestfs, \"create\", ruby_guestfs_create, 0);
9060   rb_define_method (c_guestfs, \"close\", ruby_guestfs_close, 0);
9061
9062 ";
9063   (* Define the rest of the methods. *)
9064   List.iter (
9065     fun (name, style, _, _, _, _, _) ->
9066       pr "  rb_define_method (c_guestfs, \"%s\",\n" name;
9067       pr "        ruby_guestfs_%s, %d);\n" name (List.length (snd style))
9068   ) all_functions;
9069
9070   pr "}\n"
9071
9072 (* Ruby code to return a struct. *)
9073 and generate_ruby_struct_code typ cols =
9074   pr "  VALUE rv = rb_hash_new ();\n";
9075   List.iter (
9076     function
9077     | name, FString ->
9078         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_str_new2 (r->%s));\n" name name
9079     | name, FBuffer ->
9080         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_str_new (r->%s, r->%s_len));\n" name name name
9081     | name, FUUID ->
9082         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_str_new (r->%s, 32));\n" name name
9083     | name, (FBytes|FUInt64) ->
9084         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), ULL2NUM (r->%s));\n" name name
9085     | name, FInt64 ->
9086         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), LL2NUM (r->%s));\n" name name
9087     | name, FUInt32 ->
9088         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), UINT2NUM (r->%s));\n" name name
9089     | name, FInt32 ->
9090         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), INT2NUM (r->%s));\n" name name
9091     | name, FOptPercent ->
9092         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_dbl2big (r->%s));\n" name name
9093     | name, FChar -> (* XXX wrong? *)
9094         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), ULL2NUM (r->%s));\n" name name
9095   ) cols;
9096   pr "  guestfs_free_%s (r);\n" typ;
9097   pr "  return rv;\n"
9098
9099 (* Ruby code to return a struct list. *)
9100 and generate_ruby_struct_list_code typ cols =
9101   pr "  VALUE rv = rb_ary_new2 (r->len);\n";
9102   pr "  int i;\n";
9103   pr "  for (i = 0; i < r->len; ++i) {\n";
9104   pr "    VALUE hv = rb_hash_new ();\n";
9105   List.iter (
9106     function
9107     | name, FString ->
9108         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_str_new2 (r->val[i].%s));\n" name name
9109     | name, FBuffer ->
9110         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_str_new (r->val[i].%s, r->val[i].%s_len));\n" name name name
9111     | name, FUUID ->
9112         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_str_new (r->val[i].%s, 32));\n" name name
9113     | name, (FBytes|FUInt64) ->
9114         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), ULL2NUM (r->val[i].%s));\n" name name
9115     | name, FInt64 ->
9116         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), LL2NUM (r->val[i].%s));\n" name name
9117     | name, FUInt32 ->
9118         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), UINT2NUM (r->val[i].%s));\n" name name
9119     | name, FInt32 ->
9120         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), INT2NUM (r->val[i].%s));\n" name name
9121     | name, FOptPercent ->
9122         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_dbl2big (r->val[i].%s));\n" name name
9123     | name, FChar -> (* XXX wrong? *)
9124         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), ULL2NUM (r->val[i].%s));\n" name name
9125   ) cols;
9126   pr "    rb_ary_push (rv, hv);\n";
9127   pr "  }\n";
9128   pr "  guestfs_free_%s_list (r);\n" typ;
9129   pr "  return rv;\n"
9130
9131 (* Generate Java bindings GuestFS.java file. *)
9132 and generate_java_java () =
9133   generate_header CStyle LGPLv2;
9134
9135   pr "\
9136 package com.redhat.et.libguestfs;
9137
9138 import java.util.HashMap;
9139 import com.redhat.et.libguestfs.LibGuestFSException;
9140 import com.redhat.et.libguestfs.PV;
9141 import com.redhat.et.libguestfs.VG;
9142 import com.redhat.et.libguestfs.LV;
9143 import com.redhat.et.libguestfs.Stat;
9144 import com.redhat.et.libguestfs.StatVFS;
9145 import com.redhat.et.libguestfs.IntBool;
9146 import com.redhat.et.libguestfs.Dirent;
9147
9148 /**
9149  * The GuestFS object is a libguestfs handle.
9150  *
9151  * @author rjones
9152  */
9153 public class GuestFS {
9154   // Load the native code.
9155   static {
9156     System.loadLibrary (\"guestfs_jni\");
9157   }
9158
9159   /**
9160    * The native guestfs_h pointer.
9161    */
9162   long g;
9163
9164   /**
9165    * Create a libguestfs handle.
9166    *
9167    * @throws LibGuestFSException
9168    */
9169   public GuestFS () throws LibGuestFSException
9170   {
9171     g = _create ();
9172   }
9173   private native long _create () throws LibGuestFSException;
9174
9175   /**
9176    * Close a libguestfs handle.
9177    *
9178    * You can also leave handles to be collected by the garbage
9179    * collector, but this method ensures that the resources used
9180    * by the handle are freed up immediately.  If you call any
9181    * other methods after closing the handle, you will get an
9182    * exception.
9183    *
9184    * @throws LibGuestFSException
9185    */
9186   public void close () throws LibGuestFSException
9187   {
9188     if (g != 0)
9189       _close (g);
9190     g = 0;
9191   }
9192   private native void _close (long g) throws LibGuestFSException;
9193
9194   public void finalize () throws LibGuestFSException
9195   {
9196     close ();
9197   }
9198
9199 ";
9200
9201   List.iter (
9202     fun (name, style, _, flags, _, shortdesc, longdesc) ->
9203       if not (List.mem NotInDocs flags); then (
9204         let doc = replace_str longdesc "C<guestfs_" "C<g." in
9205         let doc =
9206           if List.mem ProtocolLimitWarning flags then
9207             doc ^ "\n\n" ^ protocol_limit_warning
9208           else doc in
9209         let doc =
9210           if List.mem DangerWillRobinson flags then
9211             doc ^ "\n\n" ^ danger_will_robinson
9212           else doc in
9213         let doc =
9214           match deprecation_notice flags with
9215           | None -> doc
9216           | Some txt -> doc ^ "\n\n" ^ txt in
9217         let doc = pod2text ~width:60 name doc in
9218         let doc = List.map (            (* RHBZ#501883 *)
9219           function
9220           | "" -> "<p>"
9221           | nonempty -> nonempty
9222         ) doc in
9223         let doc = String.concat "\n   * " doc in
9224
9225         pr "  /**\n";
9226         pr "   * %s\n" shortdesc;
9227         pr "   * <p>\n";
9228         pr "   * %s\n" doc;
9229         pr "   * @throws LibGuestFSException\n";
9230         pr "   */\n";
9231         pr "  ";
9232       );
9233       generate_java_prototype ~public:true ~semicolon:false name style;
9234       pr "\n";
9235       pr "  {\n";
9236       pr "    if (g == 0)\n";
9237       pr "      throw new LibGuestFSException (\"%s: handle is closed\");\n"
9238         name;
9239       pr "    ";
9240       if fst style <> RErr then pr "return ";
9241       pr "_%s " name;
9242       generate_java_call_args ~handle:"g" (snd style);
9243       pr ";\n";
9244       pr "  }\n";
9245       pr "  ";
9246       generate_java_prototype ~privat:true ~native:true name style;
9247       pr "\n";
9248       pr "\n";
9249   ) all_functions;
9250
9251   pr "}\n"
9252
9253 (* Generate Java call arguments, eg "(handle, foo, bar)" *)
9254 and generate_java_call_args ~handle args =
9255   pr "(%s" handle;
9256   List.iter (fun arg -> pr ", %s" (name_of_argt arg)) args;
9257   pr ")"
9258
9259 and generate_java_prototype ?(public=false) ?(privat=false) ?(native=false)
9260     ?(semicolon=true) name style =
9261   if privat then pr "private ";
9262   if public then pr "public ";
9263   if native then pr "native ";
9264
9265   (* return type *)
9266   (match fst style with
9267    | RErr -> pr "void ";
9268    | RInt _ -> pr "int ";
9269    | RInt64 _ -> pr "long ";
9270    | RBool _ -> pr "boolean ";
9271    | RConstString _ | RConstOptString _ | RString _
9272    | RBufferOut _ -> pr "String ";
9273    | RStringList _ -> pr "String[] ";
9274    | RStruct (_, typ) ->
9275        let name = java_name_of_struct typ in
9276        pr "%s " name;
9277    | RStructList (_, typ) ->
9278        let name = java_name_of_struct typ in
9279        pr "%s[] " name;
9280    | RHashtable _ -> pr "HashMap<String,String> ";
9281   );
9282
9283   if native then pr "_%s " name else pr "%s " name;
9284   pr "(";
9285   let needs_comma = ref false in
9286   if native then (
9287     pr "long g";
9288     needs_comma := true
9289   );
9290
9291   (* args *)
9292   List.iter (
9293     fun arg ->
9294       if !needs_comma then pr ", ";
9295       needs_comma := true;
9296
9297       match arg with
9298       | Pathname n
9299       | Device n | Dev_or_Path n
9300       | String n
9301       | OptString n
9302       | FileIn n
9303       | FileOut n ->
9304           pr "String %s" n
9305       | StringList n | DeviceList n ->
9306           pr "String[] %s" n
9307       | Bool n ->
9308           pr "boolean %s" n
9309       | Int n ->
9310           pr "int %s" n
9311       | Int64 n ->
9312           pr "long %s" n
9313   ) (snd style);
9314
9315   pr ")\n";
9316   pr "    throws LibGuestFSException";
9317   if semicolon then pr ";"
9318
9319 and generate_java_struct jtyp cols =
9320   generate_header CStyle LGPLv2;
9321
9322   pr "\
9323 package com.redhat.et.libguestfs;
9324
9325 /**
9326  * Libguestfs %s structure.
9327  *
9328  * @author rjones
9329  * @see GuestFS
9330  */
9331 public class %s {
9332 " jtyp jtyp;
9333
9334   List.iter (
9335     function
9336     | name, FString
9337     | name, FUUID
9338     | name, FBuffer -> pr "  public String %s;\n" name
9339     | name, (FBytes|FUInt64|FInt64) -> pr "  public long %s;\n" name
9340     | name, (FUInt32|FInt32) -> pr "  public int %s;\n" name
9341     | name, FChar -> pr "  public char %s;\n" name
9342     | name, FOptPercent ->
9343         pr "  /* The next field is [0..100] or -1 meaning 'not present': */\n";
9344         pr "  public float %s;\n" name
9345   ) cols;
9346
9347   pr "}\n"
9348
9349 and generate_java_c () =
9350   generate_header CStyle LGPLv2;
9351
9352   pr "\
9353 #include <stdio.h>
9354 #include <stdlib.h>
9355 #include <string.h>
9356
9357 #include \"com_redhat_et_libguestfs_GuestFS.h\"
9358 #include \"guestfs.h\"
9359
9360 /* Note that this function returns.  The exception is not thrown
9361  * until after the wrapper function returns.
9362  */
9363 static void
9364 throw_exception (JNIEnv *env, const char *msg)
9365 {
9366   jclass cl;
9367   cl = (*env)->FindClass (env,
9368                           \"com/redhat/et/libguestfs/LibGuestFSException\");
9369   (*env)->ThrowNew (env, cl, msg);
9370 }
9371
9372 JNIEXPORT jlong JNICALL
9373 Java_com_redhat_et_libguestfs_GuestFS__1create
9374   (JNIEnv *env, jobject obj)
9375 {
9376   guestfs_h *g;
9377
9378   g = guestfs_create ();
9379   if (g == NULL) {
9380     throw_exception (env, \"GuestFS.create: failed to allocate handle\");
9381     return 0;
9382   }
9383   guestfs_set_error_handler (g, NULL, NULL);
9384   return (jlong) (long) g;
9385 }
9386
9387 JNIEXPORT void JNICALL
9388 Java_com_redhat_et_libguestfs_GuestFS__1close
9389   (JNIEnv *env, jobject obj, jlong jg)
9390 {
9391   guestfs_h *g = (guestfs_h *) (long) jg;
9392   guestfs_close (g);
9393 }
9394
9395 ";
9396
9397   List.iter (
9398     fun (name, style, _, _, _, _, _) ->
9399       pr "JNIEXPORT ";
9400       (match fst style with
9401        | RErr -> pr "void ";
9402        | RInt _ -> pr "jint ";
9403        | RInt64 _ -> pr "jlong ";
9404        | RBool _ -> pr "jboolean ";
9405        | RConstString _ | RConstOptString _ | RString _
9406        | RBufferOut _ -> pr "jstring ";
9407        | RStruct _ | RHashtable _ ->
9408            pr "jobject ";
9409        | RStringList _ | RStructList _ ->
9410            pr "jobjectArray ";
9411       );
9412       pr "JNICALL\n";
9413       pr "Java_com_redhat_et_libguestfs_GuestFS_";
9414       pr "%s" (replace_str ("_" ^ name) "_" "_1");
9415       pr "\n";
9416       pr "  (JNIEnv *env, jobject obj, jlong jg";
9417       List.iter (
9418         function
9419         | Pathname n
9420         | Device n | Dev_or_Path n
9421         | String n
9422         | OptString n
9423         | FileIn n
9424         | FileOut n ->
9425             pr ", jstring j%s" n
9426         | StringList n | DeviceList n ->
9427             pr ", jobjectArray j%s" n
9428         | Bool n ->
9429             pr ", jboolean j%s" n
9430         | Int n ->
9431             pr ", jint j%s" n
9432         | Int64 n ->
9433             pr ", jlong j%s" n
9434       ) (snd style);
9435       pr ")\n";
9436       pr "{\n";
9437       pr "  guestfs_h *g = (guestfs_h *) (long) jg;\n";
9438       let error_code, no_ret =
9439         match fst style with
9440         | RErr -> pr "  int r;\n"; "-1", ""
9441         | RBool _
9442         | RInt _ -> pr "  int r;\n"; "-1", "0"
9443         | RInt64 _ -> pr "  int64_t r;\n"; "-1", "0"
9444         | RConstString _ -> pr "  const char *r;\n"; "NULL", "NULL"
9445         | RConstOptString _ -> pr "  const char *r;\n"; "NULL", "NULL"
9446         | RString _ ->
9447             pr "  jstring jr;\n";
9448             pr "  char *r;\n"; "NULL", "NULL"
9449         | RStringList _ ->
9450             pr "  jobjectArray jr;\n";
9451             pr "  int r_len;\n";
9452             pr "  jclass cl;\n";
9453             pr "  jstring jstr;\n";
9454             pr "  char **r;\n"; "NULL", "NULL"
9455         | RStruct (_, typ) ->
9456             pr "  jobject jr;\n";
9457             pr "  jclass cl;\n";
9458             pr "  jfieldID fl;\n";
9459             pr "  struct guestfs_%s *r;\n" typ; "NULL", "NULL"
9460         | RStructList (_, typ) ->
9461             pr "  jobjectArray jr;\n";
9462             pr "  jclass cl;\n";
9463             pr "  jfieldID fl;\n";
9464             pr "  jobject jfl;\n";
9465             pr "  struct guestfs_%s_list *r;\n" typ; "NULL", "NULL"
9466         | RHashtable _ -> pr "  char **r;\n"; "NULL", "NULL"
9467         | RBufferOut _ ->
9468             pr "  jstring jr;\n";
9469             pr "  char *r;\n";
9470             pr "  size_t size;\n";
9471             "NULL", "NULL" in
9472       List.iter (
9473         function
9474         | Pathname n
9475         | Device n | Dev_or_Path n
9476         | String n
9477         | OptString n
9478         | FileIn n
9479         | FileOut n ->
9480             pr "  const char *%s;\n" n
9481         | StringList n | DeviceList n ->
9482             pr "  int %s_len;\n" n;
9483             pr "  const char **%s;\n" n
9484         | Bool n
9485         | Int n ->
9486             pr "  int %s;\n" n
9487         | Int64 n ->
9488             pr "  int64_t %s;\n" n
9489       ) (snd style);
9490
9491       let needs_i =
9492         (match fst style with
9493          | RStringList _ | RStructList _ -> true
9494          | RErr | RBool _ | RInt _ | RInt64 _ | RConstString _
9495          | RConstOptString _
9496          | RString _ | RBufferOut _ | RStruct _ | RHashtable _ -> false) ||
9497           List.exists (function
9498                        | StringList _ -> true
9499                        | DeviceList _ -> true
9500                        | _ -> false) (snd style) in
9501       if needs_i then
9502         pr "  int i;\n";
9503
9504       pr "\n";
9505
9506       (* Get the parameters. *)
9507       List.iter (
9508         function
9509         | Pathname n
9510         | Device n | Dev_or_Path n
9511         | String n
9512         | FileIn n
9513         | FileOut n ->
9514             pr "  %s = (*env)->GetStringUTFChars (env, j%s, NULL);\n" n n
9515         | OptString n ->
9516             (* This is completely undocumented, but Java null becomes
9517              * a NULL parameter.
9518              *)
9519             pr "  %s = j%s ? (*env)->GetStringUTFChars (env, j%s, NULL) : NULL;\n" n n n
9520         | StringList n | DeviceList n ->
9521             pr "  %s_len = (*env)->GetArrayLength (env, j%s);\n" n n;
9522             pr "  %s = guestfs_safe_malloc (g, sizeof (char *) * (%s_len+1));\n" n n;
9523             pr "  for (i = 0; i < %s_len; ++i) {\n" n;
9524             pr "    jobject o = (*env)->GetObjectArrayElement (env, j%s, i);\n"
9525               n;
9526             pr "    %s[i] = (*env)->GetStringUTFChars (env, o, NULL);\n" n;
9527             pr "  }\n";
9528             pr "  %s[%s_len] = NULL;\n" n n;
9529         | Bool n
9530         | Int n
9531         | Int64 n ->
9532             pr "  %s = j%s;\n" n n
9533       ) (snd style);
9534
9535       (* Make the call. *)
9536       pr "  r = guestfs_%s " name;
9537       generate_c_call_args ~handle:"g" style;
9538       pr ";\n";
9539
9540       (* Release the parameters. *)
9541       List.iter (
9542         function
9543         | Pathname n
9544         | Device n | Dev_or_Path n
9545         | String n
9546         | FileIn n
9547         | FileOut n ->
9548             pr "  (*env)->ReleaseStringUTFChars (env, j%s, %s);\n" n n
9549         | OptString n ->
9550             pr "  if (j%s)\n" n;
9551             pr "    (*env)->ReleaseStringUTFChars (env, j%s, %s);\n" n n
9552         | StringList n | DeviceList n ->
9553             pr "  for (i = 0; i < %s_len; ++i) {\n" n;
9554             pr "    jobject o = (*env)->GetObjectArrayElement (env, j%s, i);\n"
9555               n;
9556             pr "    (*env)->ReleaseStringUTFChars (env, o, %s[i]);\n" n;
9557             pr "  }\n";
9558             pr "  free (%s);\n" n
9559         | Bool n
9560         | Int n
9561         | Int64 n -> ()
9562       ) (snd style);
9563
9564       (* Check for errors. *)
9565       pr "  if (r == %s) {\n" error_code;
9566       pr "    throw_exception (env, guestfs_last_error (g));\n";
9567       pr "    return %s;\n" no_ret;
9568       pr "  }\n";
9569
9570       (* Return value. *)
9571       (match fst style with
9572        | RErr -> ()
9573        | RInt _ -> pr "  return (jint) r;\n"
9574        | RBool _ -> pr "  return (jboolean) r;\n"
9575        | RInt64 _ -> pr "  return (jlong) r;\n"
9576        | RConstString _ -> pr "  return (*env)->NewStringUTF (env, r);\n"
9577        | RConstOptString _ ->
9578            pr "  return (*env)->NewStringUTF (env, r); /* XXX r NULL? */\n"
9579        | RString _ ->
9580            pr "  jr = (*env)->NewStringUTF (env, r);\n";
9581            pr "  free (r);\n";
9582            pr "  return jr;\n"
9583        | RStringList _ ->
9584            pr "  for (r_len = 0; r[r_len] != NULL; ++r_len) ;\n";
9585            pr "  cl = (*env)->FindClass (env, \"java/lang/String\");\n";
9586            pr "  jstr = (*env)->NewStringUTF (env, \"\");\n";
9587            pr "  jr = (*env)->NewObjectArray (env, r_len, cl, jstr);\n";
9588            pr "  for (i = 0; i < r_len; ++i) {\n";
9589            pr "    jstr = (*env)->NewStringUTF (env, r[i]);\n";
9590            pr "    (*env)->SetObjectArrayElement (env, jr, i, jstr);\n";
9591            pr "    free (r[i]);\n";
9592            pr "  }\n";
9593            pr "  free (r);\n";
9594            pr "  return jr;\n"
9595        | RStruct (_, typ) ->
9596            let jtyp = java_name_of_struct typ in
9597            let cols = cols_of_struct typ in
9598            generate_java_struct_return typ jtyp cols
9599        | RStructList (_, typ) ->
9600            let jtyp = java_name_of_struct typ in
9601            let cols = cols_of_struct typ in
9602            generate_java_struct_list_return typ jtyp cols
9603        | RHashtable _ ->
9604            (* XXX *)
9605            pr "  throw_exception (env, \"%s: internal error: please let us know how to make a Java HashMap from JNI bindings!\");\n" name;
9606            pr "  return NULL;\n"
9607        | RBufferOut _ ->
9608            pr "  jr = (*env)->NewStringUTF (env, r); /* XXX size */\n";
9609            pr "  free (r);\n";
9610            pr "  return jr;\n"
9611       );
9612
9613       pr "}\n";
9614       pr "\n"
9615   ) all_functions
9616
9617 and generate_java_struct_return typ jtyp cols =
9618   pr "  cl = (*env)->FindClass (env, \"com/redhat/et/libguestfs/%s\");\n" jtyp;
9619   pr "  jr = (*env)->AllocObject (env, cl);\n";
9620   List.iter (
9621     function
9622     | name, FString ->
9623         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
9624         pr "  (*env)->SetObjectField (env, jr, fl, (*env)->NewStringUTF (env, r->%s));\n" name;
9625     | name, FUUID ->
9626         pr "  {\n";
9627         pr "    char s[33];\n";
9628         pr "    memcpy (s, r->%s, 32);\n" name;
9629         pr "    s[32] = 0;\n";
9630         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
9631         pr "    (*env)->SetObjectField (env, jr, fl, (*env)->NewStringUTF (env, s));\n";
9632         pr "  }\n";
9633     | name, FBuffer ->
9634         pr "  {\n";
9635         pr "    int len = r->%s_len;\n" name;
9636         pr "    char s[len+1];\n";
9637         pr "    memcpy (s, r->%s, len);\n" name;
9638         pr "    s[len] = 0;\n";
9639         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
9640         pr "    (*env)->SetObjectField (env, jr, fl, (*env)->NewStringUTF (env, s));\n";
9641         pr "  }\n";
9642     | name, (FBytes|FUInt64|FInt64) ->
9643         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"J\");\n" name;
9644         pr "  (*env)->SetLongField (env, jr, fl, r->%s);\n" name;
9645     | name, (FUInt32|FInt32) ->
9646         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"I\");\n" name;
9647         pr "  (*env)->SetLongField (env, jr, fl, r->%s);\n" name;
9648     | name, FOptPercent ->
9649         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"F\");\n" name;
9650         pr "  (*env)->SetFloatField (env, jr, fl, r->%s);\n" name;
9651     | name, FChar ->
9652         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"C\");\n" name;
9653         pr "  (*env)->SetLongField (env, jr, fl, r->%s);\n" name;
9654   ) cols;
9655   pr "  free (r);\n";
9656   pr "  return jr;\n"
9657
9658 and generate_java_struct_list_return typ jtyp cols =
9659   pr "  cl = (*env)->FindClass (env, \"com/redhat/et/libguestfs/%s\");\n" jtyp;
9660   pr "  jr = (*env)->NewObjectArray (env, r->len, cl, NULL);\n";
9661   pr "  for (i = 0; i < r->len; ++i) {\n";
9662   pr "    jfl = (*env)->AllocObject (env, cl);\n";
9663   List.iter (
9664     function
9665     | name, FString ->
9666         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
9667         pr "    (*env)->SetObjectField (env, jfl, fl, (*env)->NewStringUTF (env, r->val[i].%s));\n" name;
9668     | name, FUUID ->
9669         pr "    {\n";
9670         pr "      char s[33];\n";
9671         pr "      memcpy (s, r->val[i].%s, 32);\n" name;
9672         pr "      s[32] = 0;\n";
9673         pr "      fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
9674         pr "      (*env)->SetObjectField (env, jfl, fl, (*env)->NewStringUTF (env, s));\n";
9675         pr "    }\n";
9676     | name, FBuffer ->
9677         pr "    {\n";
9678         pr "      int len = r->val[i].%s_len;\n" name;
9679         pr "      char s[len+1];\n";
9680         pr "      memcpy (s, r->val[i].%s, len);\n" name;
9681         pr "      s[len] = 0;\n";
9682         pr "      fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
9683         pr "      (*env)->SetObjectField (env, jfl, fl, (*env)->NewStringUTF (env, s));\n";
9684         pr "    }\n";
9685     | name, (FBytes|FUInt64|FInt64) ->
9686         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"J\");\n" name;
9687         pr "    (*env)->SetLongField (env, jfl, fl, r->val[i].%s);\n" name;
9688     | name, (FUInt32|FInt32) ->
9689         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"I\");\n" name;
9690         pr "    (*env)->SetLongField (env, jfl, fl, r->val[i].%s);\n" name;
9691     | name, FOptPercent ->
9692         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"F\");\n" name;
9693         pr "    (*env)->SetFloatField (env, jfl, fl, r->val[i].%s);\n" name;
9694     | name, FChar ->
9695         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"C\");\n" name;
9696         pr "    (*env)->SetLongField (env, jfl, fl, r->val[i].%s);\n" name;
9697   ) cols;
9698   pr "    (*env)->SetObjectArrayElement (env, jfl, i, jfl);\n";
9699   pr "  }\n";
9700   pr "  guestfs_free_%s_list (r);\n" typ;
9701   pr "  return jr;\n"
9702
9703 and generate_java_makefile_inc () =
9704   generate_header HashStyle GPLv2;
9705
9706   pr "java_built_sources = \\\n";
9707   List.iter (
9708     fun (typ, jtyp) ->
9709         pr "\tcom/redhat/et/libguestfs/%s.java \\\n" jtyp;
9710   ) java_structs;
9711   pr "\tcom/redhat/et/libguestfs/GuestFS.java\n"
9712
9713 and generate_haskell_hs () =
9714   generate_header HaskellStyle LGPLv2;
9715
9716   (* XXX We only know how to generate partial FFI for Haskell
9717    * at the moment.  Please help out!
9718    *)
9719   let can_generate style =
9720     match style with
9721     | RErr, _
9722     | RInt _, _
9723     | RInt64 _, _ -> true
9724     | RBool _, _
9725     | RConstString _, _
9726     | RConstOptString _, _
9727     | RString _, _
9728     | RStringList _, _
9729     | RStruct _, _
9730     | RStructList _, _
9731     | RHashtable _, _
9732     | RBufferOut _, _ -> false in
9733
9734   pr "\
9735 {-# INCLUDE <guestfs.h> #-}
9736 {-# LANGUAGE ForeignFunctionInterface #-}
9737
9738 module Guestfs (
9739   create";
9740
9741   (* List out the names of the actions we want to export. *)
9742   List.iter (
9743     fun (name, style, _, _, _, _, _) ->
9744       if can_generate style then pr ",\n  %s" name
9745   ) all_functions;
9746
9747   pr "
9748   ) where
9749
9750 -- Unfortunately some symbols duplicate ones already present
9751 -- in Prelude.  We don't know which, so we hard-code a list
9752 -- here.
9753 import Prelude hiding (truncate)
9754
9755 import Foreign
9756 import Foreign.C
9757 import Foreign.C.Types
9758 import IO
9759 import Control.Exception
9760 import Data.Typeable
9761
9762 data GuestfsS = GuestfsS            -- represents the opaque C struct
9763 type GuestfsP = Ptr GuestfsS        -- guestfs_h *
9764 type GuestfsH = ForeignPtr GuestfsS -- guestfs_h * with attached finalizer
9765
9766 -- XXX define properly later XXX
9767 data PV = PV
9768 data VG = VG
9769 data LV = LV
9770 data IntBool = IntBool
9771 data Stat = Stat
9772 data StatVFS = StatVFS
9773 data Hashtable = Hashtable
9774
9775 foreign import ccall unsafe \"guestfs_create\" c_create
9776   :: IO GuestfsP
9777 foreign import ccall unsafe \"&guestfs_close\" c_close
9778   :: FunPtr (GuestfsP -> IO ())
9779 foreign import ccall unsafe \"guestfs_set_error_handler\" c_set_error_handler
9780   :: GuestfsP -> Ptr CInt -> Ptr CInt -> IO ()
9781
9782 create :: IO GuestfsH
9783 create = do
9784   p <- c_create
9785   c_set_error_handler p nullPtr nullPtr
9786   h <- newForeignPtr c_close p
9787   return h
9788
9789 foreign import ccall unsafe \"guestfs_last_error\" c_last_error
9790   :: GuestfsP -> IO CString
9791
9792 -- last_error :: GuestfsH -> IO (Maybe String)
9793 -- last_error h = do
9794 --   str <- withForeignPtr h (\\p -> c_last_error p)
9795 --   maybePeek peekCString str
9796
9797 last_error :: GuestfsH -> IO (String)
9798 last_error h = do
9799   str <- withForeignPtr h (\\p -> c_last_error p)
9800   if (str == nullPtr)
9801     then return \"no error\"
9802     else peekCString str
9803
9804 ";
9805
9806   (* Generate wrappers for each foreign function. *)
9807   List.iter (
9808     fun (name, style, _, _, _, _, _) ->
9809       if can_generate style then (
9810         pr "foreign import ccall unsafe \"guestfs_%s\" c_%s\n" name name;
9811         pr "  :: ";
9812         generate_haskell_prototype ~handle:"GuestfsP" style;
9813         pr "\n";
9814         pr "\n";
9815         pr "%s :: " name;
9816         generate_haskell_prototype ~handle:"GuestfsH" ~hs:true style;
9817         pr "\n";
9818         pr "%s %s = do\n" name
9819           (String.concat " " ("h" :: List.map name_of_argt (snd style)));
9820         pr "  r <- ";
9821         (* Convert pointer arguments using with* functions. *)
9822         List.iter (
9823           function
9824           | FileIn n
9825           | FileOut n
9826           | Pathname n | Device n | Dev_or_Path n | String n -> pr "withCString %s $ \\%s -> " n n
9827           | OptString n -> pr "maybeWith withCString %s $ \\%s -> " n n
9828           | StringList n | DeviceList n -> pr "withMany withCString %s $ \\%s -> withArray0 nullPtr %s $ \\%s -> " n n n n
9829           | Bool _ | Int _ | Int64 _ -> ()
9830         ) (snd style);
9831         (* Convert integer arguments. *)
9832         let args =
9833           List.map (
9834             function
9835             | Bool n -> sprintf "(fromBool %s)" n
9836             | Int n -> sprintf "(fromIntegral %s)" n
9837             | Int64 n -> sprintf "(fromIntegral %s)" n
9838             | FileIn n | FileOut n
9839             | Pathname n | Device n | Dev_or_Path n | String n | OptString n | StringList n | DeviceList n -> n
9840           ) (snd style) in
9841         pr "withForeignPtr h (\\p -> c_%s %s)\n" name
9842           (String.concat " " ("p" :: args));
9843         (match fst style with
9844          | RErr | RInt _ | RInt64 _ | RBool _ ->
9845              pr "  if (r == -1)\n";
9846              pr "    then do\n";
9847              pr "      err <- last_error h\n";
9848              pr "      fail err\n";
9849          | RConstString _ | RConstOptString _ | RString _
9850          | RStringList _ | RStruct _
9851          | RStructList _ | RHashtable _ | RBufferOut _ ->
9852              pr "  if (r == nullPtr)\n";
9853              pr "    then do\n";
9854              pr "      err <- last_error h\n";
9855              pr "      fail err\n";
9856         );
9857         (match fst style with
9858          | RErr ->
9859              pr "    else return ()\n"
9860          | RInt _ ->
9861              pr "    else return (fromIntegral r)\n"
9862          | RInt64 _ ->
9863              pr "    else return (fromIntegral r)\n"
9864          | RBool _ ->
9865              pr "    else return (toBool r)\n"
9866          | RConstString _
9867          | RConstOptString _
9868          | RString _
9869          | RStringList _
9870          | RStruct _
9871          | RStructList _
9872          | RHashtable _
9873          | RBufferOut _ ->
9874              pr "    else return ()\n" (* XXXXXXXXXXXXXXXXXXXX *)
9875         );
9876         pr "\n";
9877       )
9878   ) all_functions
9879
9880 and generate_haskell_prototype ~handle ?(hs = false) style =
9881   pr "%s -> " handle;
9882   let string = if hs then "String" else "CString" in
9883   let int = if hs then "Int" else "CInt" in
9884   let bool = if hs then "Bool" else "CInt" in
9885   let int64 = if hs then "Integer" else "Int64" in
9886   List.iter (
9887     fun arg ->
9888       (match arg with
9889        | Pathname _ | Device _ | Dev_or_Path _ | String _ -> pr "%s" string
9890        | OptString _ -> if hs then pr "Maybe String" else pr "CString"
9891        | StringList _ | DeviceList _ -> if hs then pr "[String]" else pr "Ptr CString"
9892        | Bool _ -> pr "%s" bool
9893        | Int _ -> pr "%s" int
9894        | Int64 _ -> pr "%s" int
9895        | FileIn _ -> pr "%s" string
9896        | FileOut _ -> pr "%s" string
9897       );
9898       pr " -> ";
9899   ) (snd style);
9900   pr "IO (";
9901   (match fst style with
9902    | RErr -> if not hs then pr "CInt"
9903    | RInt _ -> pr "%s" int
9904    | RInt64 _ -> pr "%s" int64
9905    | RBool _ -> pr "%s" bool
9906    | RConstString _ -> pr "%s" string
9907    | RConstOptString _ -> pr "Maybe %s" string
9908    | RString _ -> pr "%s" string
9909    | RStringList _ -> pr "[%s]" string
9910    | RStruct (_, typ) ->
9911        let name = java_name_of_struct typ in
9912        pr "%s" name
9913    | RStructList (_, typ) ->
9914        let name = java_name_of_struct typ in
9915        pr "[%s]" name
9916    | RHashtable _ -> pr "Hashtable"
9917    | RBufferOut _ -> pr "%s" string
9918   );
9919   pr ")"
9920
9921 and generate_bindtests () =
9922   generate_header CStyle LGPLv2;
9923
9924   pr "\
9925 #include <stdio.h>
9926 #include <stdlib.h>
9927 #include <inttypes.h>
9928 #include <string.h>
9929
9930 #include \"guestfs.h\"
9931 #include \"guestfs-internal.h\"
9932 #include \"guestfs-internal-actions.h\"
9933 #include \"guestfs_protocol.h\"
9934
9935 #define error guestfs_error
9936 #define safe_calloc guestfs_safe_calloc
9937 #define safe_malloc guestfs_safe_malloc
9938
9939 static void
9940 print_strings (char *const *argv)
9941 {
9942   int argc;
9943
9944   printf (\"[\");
9945   for (argc = 0; argv[argc] != NULL; ++argc) {
9946     if (argc > 0) printf (\", \");
9947     printf (\"\\\"%%s\\\"\", argv[argc]);
9948   }
9949   printf (\"]\\n\");
9950 }
9951
9952 /* The test0 function prints its parameters to stdout. */
9953 ";
9954
9955   let test0, tests =
9956     match test_functions with
9957     | [] -> assert false
9958     | test0 :: tests -> test0, tests in
9959
9960   let () =
9961     let (name, style, _, _, _, _, _) = test0 in
9962     generate_prototype ~extern:false ~semicolon:false ~newline:true
9963       ~handle:"g" ~prefix:"guestfs__" name style;
9964     pr "{\n";
9965     List.iter (
9966       function
9967       | Pathname n
9968       | Device n | Dev_or_Path n
9969       | String n
9970       | FileIn n
9971       | FileOut n -> pr "  printf (\"%%s\\n\", %s);\n" n
9972       | OptString n -> pr "  printf (\"%%s\\n\", %s ? %s : \"null\");\n" n n
9973       | StringList n | DeviceList n -> pr "  print_strings (%s);\n" n
9974       | Bool n -> pr "  printf (\"%%s\\n\", %s ? \"true\" : \"false\");\n" n
9975       | Int n -> pr "  printf (\"%%d\\n\", %s);\n" n
9976       | Int64 n -> pr "  printf (\"%%\" PRIi64 \"\\n\", %s);\n" n
9977     ) (snd style);
9978     pr "  /* Java changes stdout line buffering so we need this: */\n";
9979     pr "  fflush (stdout);\n";
9980     pr "  return 0;\n";
9981     pr "}\n";
9982     pr "\n" in
9983
9984   List.iter (
9985     fun (name, style, _, _, _, _, _) ->
9986       if String.sub name (String.length name - 3) 3 <> "err" then (
9987         pr "/* Test normal return. */\n";
9988         generate_prototype ~extern:false ~semicolon:false ~newline:true
9989           ~handle:"g" ~prefix:"guestfs__" name style;
9990         pr "{\n";
9991         (match fst style with
9992          | RErr ->
9993              pr "  return 0;\n"
9994          | RInt _ ->
9995              pr "  int r;\n";
9996              pr "  sscanf (val, \"%%d\", &r);\n";
9997              pr "  return r;\n"
9998          | RInt64 _ ->
9999              pr "  int64_t r;\n";
10000              pr "  sscanf (val, \"%%\" SCNi64, &r);\n";
10001              pr "  return r;\n"
10002          | RBool _ ->
10003              pr "  return STREQ (val, \"true\");\n"
10004          | RConstString _
10005          | RConstOptString _ ->
10006              (* Can't return the input string here.  Return a static
10007               * string so we ensure we get a segfault if the caller
10008               * tries to free it.
10009               *)
10010              pr "  return \"static string\";\n"
10011          | RString _ ->
10012              pr "  return strdup (val);\n"
10013          | RStringList _ ->
10014              pr "  char **strs;\n";
10015              pr "  int n, i;\n";
10016              pr "  sscanf (val, \"%%d\", &n);\n";
10017              pr "  strs = safe_malloc (g, (n+1) * sizeof (char *));\n";
10018              pr "  for (i = 0; i < n; ++i) {\n";
10019              pr "    strs[i] = safe_malloc (g, 16);\n";
10020              pr "    snprintf (strs[i], 16, \"%%d\", i);\n";
10021              pr "  }\n";
10022              pr "  strs[n] = NULL;\n";
10023              pr "  return strs;\n"
10024          | RStruct (_, typ) ->
10025              pr "  struct guestfs_%s *r;\n" typ;
10026              pr "  r = safe_calloc (g, sizeof *r, 1);\n";
10027              pr "  return r;\n"
10028          | RStructList (_, typ) ->
10029              pr "  struct guestfs_%s_list *r;\n" typ;
10030              pr "  r = safe_calloc (g, sizeof *r, 1);\n";
10031              pr "  sscanf (val, \"%%d\", &r->len);\n";
10032              pr "  r->val = safe_calloc (g, r->len, sizeof *r->val);\n";
10033              pr "  return r;\n"
10034          | RHashtable _ ->
10035              pr "  char **strs;\n";
10036              pr "  int n, i;\n";
10037              pr "  sscanf (val, \"%%d\", &n);\n";
10038              pr "  strs = safe_malloc (g, (n*2+1) * sizeof (*strs));\n";
10039              pr "  for (i = 0; i < n; ++i) {\n";
10040              pr "    strs[i*2] = safe_malloc (g, 16);\n";
10041              pr "    strs[i*2+1] = safe_malloc (g, 16);\n";
10042              pr "    snprintf (strs[i*2], 16, \"%%d\", i);\n";
10043              pr "    snprintf (strs[i*2+1], 16, \"%%d\", i);\n";
10044              pr "  }\n";
10045              pr "  strs[n*2] = NULL;\n";
10046              pr "  return strs;\n"
10047          | RBufferOut _ ->
10048              pr "  return strdup (val);\n"
10049         );
10050         pr "}\n";
10051         pr "\n"
10052       ) else (
10053         pr "/* Test error return. */\n";
10054         generate_prototype ~extern:false ~semicolon:false ~newline:true
10055           ~handle:"g" ~prefix:"guestfs__" name style;
10056         pr "{\n";
10057         pr "  error (g, \"error\");\n";
10058         (match fst style with
10059          | RErr | RInt _ | RInt64 _ | RBool _ ->
10060              pr "  return -1;\n"
10061          | RConstString _ | RConstOptString _
10062          | RString _ | RStringList _ | RStruct _
10063          | RStructList _
10064          | RHashtable _
10065          | RBufferOut _ ->
10066              pr "  return NULL;\n"
10067         );
10068         pr "}\n";
10069         pr "\n"
10070       )
10071   ) tests
10072
10073 and generate_ocaml_bindtests () =
10074   generate_header OCamlStyle GPLv2;
10075
10076   pr "\
10077 let () =
10078   let g = Guestfs.create () in
10079 ";
10080
10081   let mkargs args =
10082     String.concat " " (
10083       List.map (
10084         function
10085         | CallString s -> "\"" ^ s ^ "\""
10086         | CallOptString None -> "None"
10087         | CallOptString (Some s) -> sprintf "(Some \"%s\")" s
10088         | CallStringList xs ->
10089             "[|" ^ String.concat ";" (List.map (sprintf "\"%s\"") xs) ^ "|]"
10090         | CallInt i when i >= 0 -> string_of_int i
10091         | CallInt i (* when i < 0 *) -> "(" ^ string_of_int i ^ ")"
10092         | CallInt64 i when i >= 0L -> Int64.to_string i ^ "L"
10093         | CallInt64 i (* when i < 0L *) -> "(" ^ Int64.to_string i ^ "L)"
10094         | CallBool b -> string_of_bool b
10095       ) args
10096     )
10097   in
10098
10099   generate_lang_bindtests (
10100     fun f args -> pr "  Guestfs.%s g %s;\n" f (mkargs args)
10101   );
10102
10103   pr "print_endline \"EOF\"\n"
10104
10105 and generate_perl_bindtests () =
10106   pr "#!/usr/bin/perl -w\n";
10107   generate_header HashStyle GPLv2;
10108
10109   pr "\
10110 use strict;
10111
10112 use Sys::Guestfs;
10113
10114 my $g = Sys::Guestfs->new ();
10115 ";
10116
10117   let mkargs args =
10118     String.concat ", " (
10119       List.map (
10120         function
10121         | CallString s -> "\"" ^ s ^ "\""
10122         | CallOptString None -> "undef"
10123         | CallOptString (Some s) -> sprintf "\"%s\"" s
10124         | CallStringList xs ->
10125             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
10126         | CallInt i -> string_of_int i
10127         | CallInt64 i -> Int64.to_string i
10128         | CallBool b -> if b then "1" else "0"
10129       ) args
10130     )
10131   in
10132
10133   generate_lang_bindtests (
10134     fun f args -> pr "$g->%s (%s);\n" f (mkargs args)
10135   );
10136
10137   pr "print \"EOF\\n\"\n"
10138
10139 and generate_python_bindtests () =
10140   generate_header HashStyle GPLv2;
10141
10142   pr "\
10143 import guestfs
10144
10145 g = guestfs.GuestFS ()
10146 ";
10147
10148   let mkargs args =
10149     String.concat ", " (
10150       List.map (
10151         function
10152         | CallString s -> "\"" ^ s ^ "\""
10153         | CallOptString None -> "None"
10154         | CallOptString (Some s) -> sprintf "\"%s\"" s
10155         | CallStringList xs ->
10156             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
10157         | CallInt i -> string_of_int i
10158         | CallInt64 i -> Int64.to_string i
10159         | CallBool b -> if b then "1" else "0"
10160       ) args
10161     )
10162   in
10163
10164   generate_lang_bindtests (
10165     fun f args -> pr "g.%s (%s)\n" f (mkargs args)
10166   );
10167
10168   pr "print \"EOF\"\n"
10169
10170 and generate_ruby_bindtests () =
10171   generate_header HashStyle GPLv2;
10172
10173   pr "\
10174 require 'guestfs'
10175
10176 g = Guestfs::create()
10177 ";
10178
10179   let mkargs args =
10180     String.concat ", " (
10181       List.map (
10182         function
10183         | CallString s -> "\"" ^ s ^ "\""
10184         | CallOptString None -> "nil"
10185         | CallOptString (Some s) -> sprintf "\"%s\"" s
10186         | CallStringList xs ->
10187             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
10188         | CallInt i -> string_of_int i
10189         | CallInt64 i -> Int64.to_string i
10190         | CallBool b -> string_of_bool b
10191       ) args
10192     )
10193   in
10194
10195   generate_lang_bindtests (
10196     fun f args -> pr "g.%s(%s)\n" f (mkargs args)
10197   );
10198
10199   pr "print \"EOF\\n\"\n"
10200
10201 and generate_java_bindtests () =
10202   generate_header CStyle GPLv2;
10203
10204   pr "\
10205 import com.redhat.et.libguestfs.*;
10206
10207 public class Bindtests {
10208     public static void main (String[] argv)
10209     {
10210         try {
10211             GuestFS g = new GuestFS ();
10212 ";
10213
10214   let mkargs args =
10215     String.concat ", " (
10216       List.map (
10217         function
10218         | CallString s -> "\"" ^ s ^ "\""
10219         | CallOptString None -> "null"
10220         | CallOptString (Some s) -> sprintf "\"%s\"" s
10221         | CallStringList xs ->
10222             "new String[]{" ^
10223               String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "}"
10224         | CallInt i -> string_of_int i
10225         | CallInt64 i -> Int64.to_string i
10226         | CallBool b -> string_of_bool b
10227       ) args
10228     )
10229   in
10230
10231   generate_lang_bindtests (
10232     fun f args -> pr "            g.%s (%s);\n" f (mkargs args)
10233   );
10234
10235   pr "
10236             System.out.println (\"EOF\");
10237         }
10238         catch (Exception exn) {
10239             System.err.println (exn);
10240             System.exit (1);
10241         }
10242     }
10243 }
10244 "
10245
10246 and generate_haskell_bindtests () =
10247   generate_header HaskellStyle GPLv2;
10248
10249   pr "\
10250 module Bindtests where
10251 import qualified Guestfs
10252
10253 main = do
10254   g <- Guestfs.create
10255 ";
10256
10257   let mkargs args =
10258     String.concat " " (
10259       List.map (
10260         function
10261         | CallString s -> "\"" ^ s ^ "\""
10262         | CallOptString None -> "Nothing"
10263         | CallOptString (Some s) -> sprintf "(Just \"%s\")" s
10264         | CallStringList xs ->
10265             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
10266         | CallInt i when i < 0 -> "(" ^ string_of_int i ^ ")"
10267         | CallInt i -> string_of_int i
10268         | CallInt64 i when i < 0L -> "(" ^ Int64.to_string i ^ ")"
10269         | CallInt64 i -> Int64.to_string i
10270         | CallBool true -> "True"
10271         | CallBool false -> "False"
10272       ) args
10273     )
10274   in
10275
10276   generate_lang_bindtests (
10277     fun f args -> pr "  Guestfs.%s g %s\n" f (mkargs args)
10278   );
10279
10280   pr "  putStrLn \"EOF\"\n"
10281
10282 (* Language-independent bindings tests - we do it this way to
10283  * ensure there is parity in testing bindings across all languages.
10284  *)
10285 and generate_lang_bindtests call =
10286   call "test0" [CallString "abc"; CallOptString (Some "def");
10287                 CallStringList []; CallBool false;
10288                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456"];
10289   call "test0" [CallString "abc"; CallOptString None;
10290                 CallStringList []; CallBool false;
10291                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456"];
10292   call "test0" [CallString ""; CallOptString (Some "def");
10293                 CallStringList []; CallBool false;
10294                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456"];
10295   call "test0" [CallString ""; CallOptString (Some "");
10296                 CallStringList []; CallBool false;
10297                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456"];
10298   call "test0" [CallString "abc"; CallOptString (Some "def");
10299                 CallStringList ["1"]; CallBool false;
10300                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456"];
10301   call "test0" [CallString "abc"; CallOptString (Some "def");
10302                 CallStringList ["1"; "2"]; CallBool false;
10303                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456"];
10304   call "test0" [CallString "abc"; CallOptString (Some "def");
10305                 CallStringList ["1"]; CallBool true;
10306                 CallInt 0; CallInt64 0L; CallString "123"; CallString "456"];
10307   call "test0" [CallString "abc"; CallOptString (Some "def");
10308                 CallStringList ["1"]; CallBool false;
10309                 CallInt (-1); CallInt64 (-1L); CallString "123"; CallString "456"];
10310   call "test0" [CallString "abc"; CallOptString (Some "def");
10311                 CallStringList ["1"]; CallBool false;
10312                 CallInt (-2); CallInt64 (-2L); CallString "123"; CallString "456"];
10313   call "test0" [CallString "abc"; CallOptString (Some "def");
10314                 CallStringList ["1"]; CallBool false;
10315                 CallInt 1; CallInt64 1L; CallString "123"; CallString "456"];
10316   call "test0" [CallString "abc"; CallOptString (Some "def");
10317                 CallStringList ["1"]; CallBool false;
10318                 CallInt 2; CallInt64 2L; CallString "123"; CallString "456"];
10319   call "test0" [CallString "abc"; CallOptString (Some "def");
10320                 CallStringList ["1"]; CallBool false;
10321                 CallInt 4095; CallInt64 4095L; CallString "123"; CallString "456"];
10322   call "test0" [CallString "abc"; CallOptString (Some "def");
10323                 CallStringList ["1"]; CallBool false;
10324                 CallInt 0; CallInt64 0L; CallString ""; CallString ""]
10325
10326 (* XXX Add here tests of the return and error functions. *)
10327
10328 (* Code to generator bindings for virt-inspector.  Currently only
10329  * implemented for OCaml code (for virt-p2v 2.0).
10330  *)
10331 let rng_input = "inspector/virt-inspector.rng"
10332
10333 (* Read the input file and parse it into internal structures.  This is
10334  * by no means a complete RELAX NG parser, but is just enough to be
10335  * able to parse the specific input file.
10336  *)
10337 type rng =
10338   | Element of string * rng list        (* <element name=name/> *)
10339   | Attribute of string * rng list        (* <attribute name=name/> *)
10340   | Interleave of rng list                (* <interleave/> *)
10341   | ZeroOrMore of rng                        (* <zeroOrMore/> *)
10342   | OneOrMore of rng                        (* <oneOrMore/> *)
10343   | Optional of rng                        (* <optional/> *)
10344   | Choice of string list                (* <choice><value/>*</choice> *)
10345   | Value of string                        (* <value>str</value> *)
10346   | Text                                (* <text/> *)
10347
10348 let rec string_of_rng = function
10349   | Element (name, xs) ->
10350       "Element (\"" ^ name ^ "\", (" ^ string_of_rng_list xs ^ "))"
10351   | Attribute (name, xs) ->
10352       "Attribute (\"" ^ name ^ "\", (" ^ string_of_rng_list xs ^ "))"
10353   | Interleave xs -> "Interleave (" ^ string_of_rng_list xs ^ ")"
10354   | ZeroOrMore rng -> "ZeroOrMore (" ^ string_of_rng rng ^ ")"
10355   | OneOrMore rng -> "OneOrMore (" ^ string_of_rng rng ^ ")"
10356   | Optional rng -> "Optional (" ^ string_of_rng rng ^ ")"
10357   | Choice values -> "Choice [" ^ String.concat ", " values ^ "]"
10358   | Value value -> "Value \"" ^ value ^ "\""
10359   | Text -> "Text"
10360
10361 and string_of_rng_list xs =
10362   String.concat ", " (List.map string_of_rng xs)
10363
10364 let rec parse_rng ?defines context = function
10365   | [] -> []
10366   | Xml.Element ("element", ["name", name], children) :: rest ->
10367       Element (name, parse_rng ?defines context children)
10368       :: parse_rng ?defines context rest
10369   | Xml.Element ("attribute", ["name", name], children) :: rest ->
10370       Attribute (name, parse_rng ?defines context children)
10371       :: parse_rng ?defines context rest
10372   | Xml.Element ("interleave", [], children) :: rest ->
10373       Interleave (parse_rng ?defines context children)
10374       :: parse_rng ?defines context rest
10375   | Xml.Element ("zeroOrMore", [], [child]) :: rest ->
10376       let rng = parse_rng ?defines context [child] in
10377       (match rng with
10378        | [child] -> ZeroOrMore child :: parse_rng ?defines context rest
10379        | _ ->
10380            failwithf "%s: <zeroOrMore> contains more than one child element"
10381              context
10382       )
10383   | Xml.Element ("oneOrMore", [], [child]) :: rest ->
10384       let rng = parse_rng ?defines context [child] in
10385       (match rng with
10386        | [child] -> OneOrMore child :: parse_rng ?defines context rest
10387        | _ ->
10388            failwithf "%s: <oneOrMore> contains more than one child element"
10389              context
10390       )
10391   | Xml.Element ("optional", [], [child]) :: rest ->
10392       let rng = parse_rng ?defines context [child] in
10393       (match rng with
10394        | [child] -> Optional child :: parse_rng ?defines context rest
10395        | _ ->
10396            failwithf "%s: <optional> contains more than one child element"
10397              context
10398       )
10399   | Xml.Element ("choice", [], children) :: rest ->
10400       let values = List.map (
10401         function Xml.Element ("value", [], [Xml.PCData value]) -> value
10402         | _ ->
10403             failwithf "%s: can't handle anything except <value> in <choice>"
10404               context
10405       ) children in
10406       Choice values
10407       :: parse_rng ?defines context rest
10408   | Xml.Element ("value", [], [Xml.PCData value]) :: rest ->
10409       Value value :: parse_rng ?defines context rest
10410   | Xml.Element ("text", [], []) :: rest ->
10411       Text :: parse_rng ?defines context rest
10412   | Xml.Element ("ref", ["name", name], []) :: rest ->
10413       (* Look up the reference.  Because of limitations in this parser,
10414        * we can't handle arbitrarily nested <ref> yet.  You can only
10415        * use <ref> from inside <start>.
10416        *)
10417       (match defines with
10418        | None ->
10419            failwithf "%s: contains <ref>, but no refs are defined yet" context
10420        | Some map ->
10421            let rng = StringMap.find name map in
10422            rng @ parse_rng ?defines context rest
10423       )
10424   | x :: _ ->
10425       failwithf "%s: can't handle '%s' in schema" context (Xml.to_string x)
10426
10427 let grammar =
10428   let xml = Xml.parse_file rng_input in
10429   match xml with
10430   | Xml.Element ("grammar", _,
10431                  Xml.Element ("start", _, gram) :: defines) ->
10432       (* The <define/> elements are referenced in the <start> section,
10433        * so build a map of those first.
10434        *)
10435       let defines = List.fold_left (
10436         fun map ->
10437           function Xml.Element ("define", ["name", name], defn) ->
10438             StringMap.add name defn map
10439           | _ ->
10440               failwithf "%s: expected <define name=name/>" rng_input
10441       ) StringMap.empty defines in
10442       let defines = StringMap.mapi parse_rng defines in
10443
10444       (* Parse the <start> clause, passing the defines. *)
10445       parse_rng ~defines "<start>" gram
10446   | _ ->
10447       failwithf "%s: input is not <grammar><start/><define>*</grammar>"
10448         rng_input
10449
10450 let name_of_field = function
10451   | Element (name, _) | Attribute (name, _)
10452   | ZeroOrMore (Element (name, _))
10453   | OneOrMore (Element (name, _))
10454   | Optional (Element (name, _)) -> name
10455   | Optional (Attribute (name, _)) -> name
10456   | Text -> (* an unnamed field in an element *)
10457       "data"
10458   | rng ->
10459       failwithf "name_of_field failed at: %s" (string_of_rng rng)
10460
10461 (* At the moment this function only generates OCaml types.  However we
10462  * should parameterize it later so it can generate types/structs in a
10463  * variety of languages.
10464  *)
10465 let generate_types xs =
10466   (* A simple type is one that can be printed out directly, eg.
10467    * "string option".  A complex type is one which has a name and has
10468    * to be defined via another toplevel definition, eg. a struct.
10469    *
10470    * generate_type generates code for either simple or complex types.
10471    * In the simple case, it returns the string ("string option").  In
10472    * the complex case, it returns the name ("mountpoint").  In the
10473    * complex case it has to print out the definition before returning,
10474    * so it should only be called when we are at the beginning of a
10475    * new line (BOL context).
10476    *)
10477   let rec generate_type = function
10478     | Text ->                                (* string *)
10479         "string", true
10480     | Choice values ->                        (* [`val1|`val2|...] *)
10481         "[" ^ String.concat "|" (List.map ((^)"`") values) ^ "]", true
10482     | ZeroOrMore rng ->                        (* <rng> list *)
10483         let t, is_simple = generate_type rng in
10484         t ^ " list (* 0 or more *)", is_simple
10485     | OneOrMore rng ->                        (* <rng> list *)
10486         let t, is_simple = generate_type rng in
10487         t ^ " list (* 1 or more *)", is_simple
10488                                         (* virt-inspector hack: bool *)
10489     | Optional (Attribute (name, [Value "1"])) ->
10490         "bool", true
10491     | Optional rng ->                        (* <rng> list *)
10492         let t, is_simple = generate_type rng in
10493         t ^ " option", is_simple
10494                                         (* type name = { fields ... } *)
10495     | Element (name, fields) when is_attrs_interleave fields ->
10496         generate_type_struct name (get_attrs_interleave fields)
10497     | Element (name, [field])                (* type name = field *)
10498     | Attribute (name, [field]) ->
10499         let t, is_simple = generate_type field in
10500         if is_simple then (t, true)
10501         else (
10502           pr "type %s = %s\n" name t;
10503           name, false
10504         )
10505     | Element (name, fields) ->              (* type name = { fields ... } *)
10506         generate_type_struct name fields
10507     | rng ->
10508         failwithf "generate_type failed at: %s" (string_of_rng rng)
10509
10510   and is_attrs_interleave = function
10511     | [Interleave _] -> true
10512     | Attribute _ :: fields -> is_attrs_interleave fields
10513     | Optional (Attribute _) :: fields -> is_attrs_interleave fields
10514     | _ -> false
10515
10516   and get_attrs_interleave = function
10517     | [Interleave fields] -> fields
10518     | ((Attribute _) as field) :: fields
10519     | ((Optional (Attribute _)) as field) :: fields ->
10520         field :: get_attrs_interleave fields
10521     | _ -> assert false
10522
10523   and generate_types xs =
10524     List.iter (fun x -> ignore (generate_type x)) xs
10525
10526   and generate_type_struct name fields =
10527     (* Calculate the types of the fields first.  We have to do this
10528      * before printing anything so we are still in BOL context.
10529      *)
10530     let types = List.map fst (List.map generate_type fields) in
10531
10532     (* Special case of a struct containing just a string and another
10533      * field.  Turn it into an assoc list.
10534      *)
10535     match types with
10536     | ["string"; other] ->
10537         let fname1, fname2 =
10538           match fields with
10539           | [f1; f2] -> name_of_field f1, name_of_field f2
10540           | _ -> assert false in
10541         pr "type %s = string * %s (* %s -> %s *)\n" name other fname1 fname2;
10542         name, false
10543
10544     | types ->
10545         pr "type %s = {\n" name;
10546         List.iter (
10547           fun (field, ftype) ->
10548             let fname = name_of_field field in
10549             pr "  %s_%s : %s;\n" name fname ftype
10550         ) (List.combine fields types);
10551         pr "}\n";
10552         (* Return the name of this type, and
10553          * false because it's not a simple type.
10554          *)
10555         name, false
10556   in
10557
10558   generate_types xs
10559
10560 let generate_parsers xs =
10561   (* As for generate_type above, generate_parser makes a parser for
10562    * some type, and returns the name of the parser it has generated.
10563    * Because it (may) need to print something, it should always be
10564    * called in BOL context.
10565    *)
10566   let rec generate_parser = function
10567     | Text ->                                (* string *)
10568         "string_child_or_empty"
10569     | Choice values ->                        (* [`val1|`val2|...] *)
10570         sprintf "(fun x -> match Xml.pcdata (first_child x) with %s | str -> failwith (\"unexpected field value: \" ^ str))"
10571           (String.concat "|"
10572              (List.map (fun v -> sprintf "%S -> `%s" v v) values))
10573     | ZeroOrMore rng ->                        (* <rng> list *)
10574         let pa = generate_parser rng in
10575         sprintf "(fun x -> List.map %s (Xml.children x))" pa
10576     | OneOrMore rng ->                        (* <rng> list *)
10577         let pa = generate_parser rng in
10578         sprintf "(fun x -> List.map %s (Xml.children x))" pa
10579                                         (* virt-inspector hack: bool *)
10580     | Optional (Attribute (name, [Value "1"])) ->
10581         sprintf "(fun x -> try ignore (Xml.attrib x %S); true with Xml.No_attribute _ -> false)" name
10582     | Optional rng ->                        (* <rng> list *)
10583         let pa = generate_parser rng in
10584         sprintf "(function None -> None | Some x -> Some (%s x))" pa
10585                                         (* type name = { fields ... } *)
10586     | Element (name, fields) when is_attrs_interleave fields ->
10587         generate_parser_struct name (get_attrs_interleave fields)
10588     | Element (name, [field]) ->        (* type name = field *)
10589         let pa = generate_parser field in
10590         let parser_name = sprintf "parse_%s_%d" name (unique ()) in
10591         pr "let %s =\n" parser_name;
10592         pr "  %s\n" pa;
10593         pr "let parse_%s = %s\n" name parser_name;
10594         parser_name
10595     | Attribute (name, [field]) ->
10596         let pa = generate_parser field in
10597         let parser_name = sprintf "parse_%s_%d" name (unique ()) in
10598         pr "let %s =\n" parser_name;
10599         pr "  %s\n" pa;
10600         pr "let parse_%s = %s\n" name parser_name;
10601         parser_name
10602     | Element (name, fields) ->              (* type name = { fields ... } *)
10603         generate_parser_struct name ([], fields)
10604     | rng ->
10605         failwithf "generate_parser failed at: %s" (string_of_rng rng)
10606
10607   and is_attrs_interleave = function
10608     | [Interleave _] -> true
10609     | Attribute _ :: fields -> is_attrs_interleave fields
10610     | Optional (Attribute _) :: fields -> is_attrs_interleave fields
10611     | _ -> false
10612
10613   and get_attrs_interleave = function
10614     | [Interleave fields] -> [], fields
10615     | ((Attribute _) as field) :: fields
10616     | ((Optional (Attribute _)) as field) :: fields ->
10617         let attrs, interleaves = get_attrs_interleave fields in
10618         (field :: attrs), interleaves
10619     | _ -> assert false
10620
10621   and generate_parsers xs =
10622     List.iter (fun x -> ignore (generate_parser x)) xs
10623
10624   and generate_parser_struct name (attrs, interleaves) =
10625     (* Generate parsers for the fields first.  We have to do this
10626      * before printing anything so we are still in BOL context.
10627      *)
10628     let fields = attrs @ interleaves in
10629     let pas = List.map generate_parser fields in
10630
10631     (* Generate an intermediate tuple from all the fields first.
10632      * If the type is just a string + another field, then we will
10633      * return this directly, otherwise it is turned into a record.
10634      *
10635      * RELAX NG note: This code treats <interleave> and plain lists of
10636      * fields the same.  In other words, it doesn't bother enforcing
10637      * any ordering of fields in the XML.
10638      *)
10639     pr "let parse_%s x =\n" name;
10640     pr "  let t = (\n    ";
10641     let comma = ref false in
10642     List.iter (
10643       fun x ->
10644         if !comma then pr ",\n    ";
10645         comma := true;
10646         match x with
10647         | Optional (Attribute (fname, [field])), pa ->
10648             pr "%s x" pa
10649         | Optional (Element (fname, [field])), pa ->
10650             pr "%s (optional_child %S x)" pa fname
10651         | Attribute (fname, [Text]), _ ->
10652             pr "attribute %S x" fname
10653         | (ZeroOrMore _ | OneOrMore _), pa ->
10654             pr "%s x" pa
10655         | Text, pa ->
10656             pr "%s x" pa
10657         | (field, pa) ->
10658             let fname = name_of_field field in
10659             pr "%s (child %S x)" pa fname
10660     ) (List.combine fields pas);
10661     pr "\n  ) in\n";
10662
10663     (match fields with
10664      | [Element (_, [Text]) | Attribute (_, [Text]); _] ->
10665          pr "  t\n"
10666
10667      | _ ->
10668          pr "  (Obj.magic t : %s)\n" name
10669 (*
10670          List.iter (
10671            function
10672            | (Optional (Attribute (fname, [field])), pa) ->
10673                pr "  %s_%s =\n" name fname;
10674                pr "    %s x;\n" pa
10675            | (Optional (Element (fname, [field])), pa) ->
10676                pr "  %s_%s =\n" name fname;
10677                pr "    (let x = optional_child %S x in\n" fname;
10678                pr "     %s x);\n" pa
10679            | (field, pa) ->
10680                let fname = name_of_field field in
10681                pr "  %s_%s =\n" name fname;
10682                pr "    (let x = child %S x in\n" fname;
10683                pr "     %s x);\n" pa
10684          ) (List.combine fields pas);
10685          pr "}\n"
10686 *)
10687     );
10688     sprintf "parse_%s" name
10689   in
10690
10691   generate_parsers xs
10692
10693 (* Generate ocaml/guestfs_inspector.mli. *)
10694 let generate_ocaml_inspector_mli () =
10695   generate_header ~extra_inputs:[rng_input] OCamlStyle LGPLv2;
10696
10697   pr "\
10698 (** This is an OCaml language binding to the external [virt-inspector]
10699     program.
10700
10701     For more information, please read the man page [virt-inspector(1)].
10702 *)
10703
10704 ";
10705
10706   generate_types grammar;
10707   pr "(** The nested information returned from the {!inspect} function. *)\n";
10708   pr "\n";
10709
10710   pr "\
10711 val inspect : ?connect:string -> ?xml:string -> string list -> operatingsystems
10712 (** To inspect a libvirt domain called [name], pass a singleton
10713     list: [inspect [name]].  When using libvirt only, you may
10714     optionally pass a libvirt URI using [inspect ~connect:uri ...].
10715
10716     To inspect a disk image or images, pass a list of the filenames
10717     of the disk images: [inspect filenames]
10718
10719     This function inspects the given guest or disk images and
10720     returns a list of operating system(s) found and a large amount
10721     of information about them.  In the vast majority of cases,
10722     a virtual machine only contains a single operating system.
10723
10724     If the optional [~xml] parameter is given, then this function
10725     skips running the external virt-inspector program and just
10726     parses the given XML directly (which is expected to be XML
10727     produced from a previous run of virt-inspector).  The list of
10728     names and connect URI are ignored in this case.
10729
10730     This function can throw a wide variety of exceptions, for example
10731     if the external virt-inspector program cannot be found, or if
10732     it doesn't generate valid XML.
10733 *)
10734 "
10735
10736 (* Generate ocaml/guestfs_inspector.ml. *)
10737 let generate_ocaml_inspector_ml () =
10738   generate_header ~extra_inputs:[rng_input] OCamlStyle LGPLv2;
10739
10740   pr "open Unix\n";
10741   pr "\n";
10742
10743   generate_types grammar;
10744   pr "\n";
10745
10746   pr "\
10747 (* Misc functions which are used by the parser code below. *)
10748 let first_child = function
10749   | Xml.Element (_, _, c::_) -> c
10750   | Xml.Element (name, _, []) ->
10751       failwith (\"expected <\" ^ name ^ \"/> to have a child node\")
10752   | Xml.PCData str ->
10753       failwith (\"expected XML tag, but read PCDATA '\" ^ str ^ \"' instead\")
10754
10755 let string_child_or_empty = function
10756   | Xml.Element (_, _, [Xml.PCData s]) -> s
10757   | Xml.Element (_, _, []) -> \"\"
10758   | Xml.Element (x, _, _) ->
10759       failwith (\"expected XML tag with a single PCDATA child, but got \" ^
10760                 x ^ \" instead\")
10761   | Xml.PCData str ->
10762       failwith (\"expected XML tag, but read PCDATA '\" ^ str ^ \"' instead\")
10763
10764 let optional_child name xml =
10765   let children = Xml.children xml in
10766   try
10767     Some (List.find (function
10768                      | Xml.Element (n, _, _) when n = name -> true
10769                      | _ -> false) children)
10770   with
10771     Not_found -> None
10772
10773 let child name xml =
10774   match optional_child name xml with
10775   | Some c -> c
10776   | None ->
10777       failwith (\"mandatory field <\" ^ name ^ \"/> missing in XML output\")
10778
10779 let attribute name xml =
10780   try Xml.attrib xml name
10781   with Xml.No_attribute _ ->
10782     failwith (\"mandatory attribute \" ^ name ^ \" missing in XML output\")
10783
10784 ";
10785
10786   generate_parsers grammar;
10787   pr "\n";
10788
10789   pr "\
10790 (* Run external virt-inspector, then use parser to parse the XML. *)
10791 let inspect ?connect ?xml names =
10792   let xml =
10793     match xml with
10794     | None ->
10795         if names = [] then invalid_arg \"inspect: no names given\";
10796         let cmd = [ \"virt-inspector\"; \"--xml\" ] @
10797           (match connect with None -> [] | Some uri -> [ \"--connect\"; uri ]) @
10798           names in
10799         let cmd = List.map Filename.quote cmd in
10800         let cmd = String.concat \" \" cmd in
10801         let chan = open_process_in cmd in
10802         let xml = Xml.parse_in chan in
10803         (match close_process_in chan with
10804          | WEXITED 0 -> ()
10805          | WEXITED _ -> failwith \"external virt-inspector command failed\"
10806          | WSIGNALED i | WSTOPPED i ->
10807              failwith (\"external virt-inspector command died or stopped on sig \" ^
10808                        string_of_int i)
10809         );
10810         xml
10811     | Some doc ->
10812         Xml.parse_string doc in
10813   parse_operatingsystems xml
10814 "
10815
10816 (* This is used to generate the src/MAX_PROC_NR file which
10817  * contains the maximum procedure number, a surrogate for the
10818  * ABI version number.  See src/Makefile.am for the details.
10819  *)
10820 and generate_max_proc_nr () =
10821   let proc_nrs = List.map (
10822     fun (_, _, proc_nr, _, _, _, _) -> proc_nr
10823   ) daemon_functions in
10824
10825   let max_proc_nr = List.fold_left max 0 proc_nrs in
10826
10827   pr "%d\n" max_proc_nr
10828
10829 let output_to filename =
10830   let filename_new = filename ^ ".new" in
10831   chan := open_out filename_new;
10832   let close () =
10833     close_out !chan;
10834     chan := Pervasives.stdout;
10835
10836     (* Is the new file different from the current file? *)
10837     if Sys.file_exists filename && files_equal filename filename_new then
10838       unlink filename_new               (* same, so skip it *)
10839     else (
10840       (* different, overwrite old one *)
10841       (try chmod filename 0o644 with Unix_error _ -> ());
10842       rename filename_new filename;
10843       chmod filename 0o444;
10844       printf "written %s\n%!" filename;
10845     )
10846   in
10847   close
10848
10849 let perror msg = function
10850   | Unix_error (err, _, _) ->
10851       eprintf "%s: %s\n" msg (error_message err)
10852   | exn ->
10853       eprintf "%s: %s\n" msg (Printexc.to_string exn)
10854
10855 (* Main program. *)
10856 let () =
10857   let lock_fd =
10858     try openfile "HACKING" [O_RDWR] 0
10859     with
10860     | Unix_error (ENOENT, _, _) ->
10861         eprintf "\
10862 You are probably running this from the wrong directory.
10863 Run it from the top source directory using the command
10864   src/generator.ml
10865 ";
10866         exit 1
10867     | exn ->
10868         perror "open: HACKING" exn;
10869         exit 1 in
10870
10871   (* Acquire a lock so parallel builds won't try to run the generator
10872    * twice at the same time.  Subsequent builds will wait for the first
10873    * one to finish.  Note the lock is released implicitly when the
10874    * program exits.
10875    *)
10876   (try lockf lock_fd F_LOCK 1
10877    with exn ->
10878      perror "lock: HACKING" exn;
10879      exit 1);
10880
10881   check_functions ();
10882
10883   let close = output_to "src/guestfs_protocol.x" in
10884   generate_xdr ();
10885   close ();
10886
10887   let close = output_to "src/guestfs-structs.h" in
10888   generate_structs_h ();
10889   close ();
10890
10891   let close = output_to "src/guestfs-actions.h" in
10892   generate_actions_h ();
10893   close ();
10894
10895   let close = output_to "src/guestfs-internal-actions.h" in
10896   generate_internal_actions_h ();
10897   close ();
10898
10899   let close = output_to "src/guestfs-actions.c" in
10900   generate_client_actions ();
10901   close ();
10902
10903   let close = output_to "daemon/actions.h" in
10904   generate_daemon_actions_h ();
10905   close ();
10906
10907   let close = output_to "daemon/stubs.c" in
10908   generate_daemon_actions ();
10909   close ();
10910
10911   let close = output_to "daemon/names.c" in
10912   generate_daemon_names ();
10913   close ();
10914
10915   let close = output_to "daemon/optgroups.c" in
10916   generate_daemon_optgroups_c ();
10917   close ();
10918
10919   let close = output_to "daemon/optgroups.h" in
10920   generate_daemon_optgroups_h ();
10921   close ();
10922
10923   let close = output_to "capitests/tests.c" in
10924   generate_tests ();
10925   close ();
10926
10927   let close = output_to "src/guestfs-bindtests.c" in
10928   generate_bindtests ();
10929   close ();
10930
10931   let close = output_to "fish/cmds.c" in
10932   generate_fish_cmds ();
10933   close ();
10934
10935   let close = output_to "fish/completion.c" in
10936   generate_fish_completion ();
10937   close ();
10938
10939   let close = output_to "guestfs-structs.pod" in
10940   generate_structs_pod ();
10941   close ();
10942
10943   let close = output_to "guestfs-actions.pod" in
10944   generate_actions_pod ();
10945   close ();
10946
10947   let close = output_to "guestfs-availability.pod" in
10948   generate_availability_pod ();
10949   close ();
10950
10951   let close = output_to "guestfish-actions.pod" in
10952   generate_fish_actions_pod ();
10953   close ();
10954
10955   let close = output_to "ocaml/guestfs.mli" in
10956   generate_ocaml_mli ();
10957   close ();
10958
10959   let close = output_to "ocaml/guestfs.ml" in
10960   generate_ocaml_ml ();
10961   close ();
10962
10963   let close = output_to "ocaml/guestfs_c_actions.c" in
10964   generate_ocaml_c ();
10965   close ();
10966
10967   let close = output_to "ocaml/bindtests.ml" in
10968   generate_ocaml_bindtests ();
10969   close ();
10970
10971   let close = output_to "ocaml/guestfs_inspector.mli" in
10972   generate_ocaml_inspector_mli ();
10973   close ();
10974
10975   let close = output_to "ocaml/guestfs_inspector.ml" in
10976   generate_ocaml_inspector_ml ();
10977   close ();
10978
10979   let close = output_to "perl/Guestfs.xs" in
10980   generate_perl_xs ();
10981   close ();
10982
10983   let close = output_to "perl/lib/Sys/Guestfs.pm" in
10984   generate_perl_pm ();
10985   close ();
10986
10987   let close = output_to "perl/bindtests.pl" in
10988   generate_perl_bindtests ();
10989   close ();
10990
10991   let close = output_to "python/guestfs-py.c" in
10992   generate_python_c ();
10993   close ();
10994
10995   let close = output_to "python/guestfs.py" in
10996   generate_python_py ();
10997   close ();
10998
10999   let close = output_to "python/bindtests.py" in
11000   generate_python_bindtests ();
11001   close ();
11002
11003   let close = output_to "ruby/ext/guestfs/_guestfs.c" in
11004   generate_ruby_c ();
11005   close ();
11006
11007   let close = output_to "ruby/bindtests.rb" in
11008   generate_ruby_bindtests ();
11009   close ();
11010
11011   let close = output_to "java/com/redhat/et/libguestfs/GuestFS.java" in
11012   generate_java_java ();
11013   close ();
11014
11015   List.iter (
11016     fun (typ, jtyp) ->
11017       let cols = cols_of_struct typ in
11018       let filename = sprintf "java/com/redhat/et/libguestfs/%s.java" jtyp in
11019       let close = output_to filename in
11020       generate_java_struct jtyp cols;
11021       close ();
11022   ) java_structs;
11023
11024   let close = output_to "java/Makefile.inc" in
11025   generate_java_makefile_inc ();
11026   close ();
11027
11028   let close = output_to "java/com_redhat_et_libguestfs_GuestFS.c" in
11029   generate_java_c ();
11030   close ();
11031
11032   let close = output_to "java/Bindtests.java" in
11033   generate_java_bindtests ();
11034   close ();
11035
11036   let close = output_to "haskell/Guestfs.hs" in
11037   generate_haskell_hs ();
11038   close ();
11039
11040   let close = output_to "haskell/Bindtests.hs" in
11041   generate_haskell_bindtests ();
11042   close ();
11043
11044   let close = output_to "src/MAX_PROC_NR" in
11045   generate_max_proc_nr ();
11046   close ();
11047
11048   (* Always generate this file last, and unconditionally.  It's used
11049    * by the Makefile to know when we must re-run the generator.
11050    *)
11051   let chan = open_out "src/stamp-generator" in
11052   fprintf chan "1\n";
11053   close_out chan