ubuntu: Ignore packages in packagelist.in which are missing.

For distros using 'yum', packages which cannot be found are just
ignored.  This allows us to include for example 'e4fsprogs' on the
list even though that only exists on RHEL 5.

However for Debian-derived distros, missing packages would cause
apt to fail.  This was particularly a problem when building Ubuntu
since it doesn't have as complete a list of packages, and the list
changed a lot between releases.

This commit adds a check first for missing packages, ignoring those
and thus acting more like 'yum'.

Ubuntu: Use apt-get instead of aptitude when installing guestfsd.

Ubuntu: Revert install-kernel to debirf default script.

generator: Make 'xz' into an optional group.

On Ubuntu <= Karmic, xz-utils was not packaged, and therefore
any xz-related tests would fail.  Thus make this an optional
group so that we can test for this and avoid running the tests
if xz utils are not present.

generator: Check parameters are not NULL (RHBZ#501893).

This adds additional tests to check that several types of parameter
including String are not NULL when passed to the C functions.
Previously this would cause a segfault inside libguestfs.  With
this change, you get an error message / exception.

Of the possible pointer parameters, only OptString is now permitted
to be NULL.

This change does not affect the Perl bindings.  This is because Perl
XS code was already adding similar checks if you passed undef into
a parameter expecting a string.

generator: Some String parameters should be OptString (RHBZ#501894).

I haven't checked the list of functions exhaustively, but
these are the obvious ones.

fuse: Implement write syscall (RHBZ#592883).

New API: Implement pwrite system call (partial fix for RHBZ#592883).

New API: write for creating files with fixed content (RHBZ#501889).

The guestfs_write call can be used to create small files with
arbitrary 8 bit content, including \0 bytes.

This replaces and deprecates write-file, which cannot be modified
to use BufferIn because of an unfortunate choice in the ABI: the
size parameter to write-file, if zero, means that the daemon tries
to calculate the length of the buffer using strlen.  However this
fails if we pass a zero-length buffer using BufferIn because then
the daemon tries to do strlen on a (really) zero length buffer, not
even containing a terminating \0 character, thus segfaulting.

generator: Implement BufferIn parameter type (RHBZ#501889).

The BufferIn argument turns into various things:

 in C      const char *, size_t parameter pair

 in XDR    an opaque<> type (instead of string) which allows \0 chars

 in other bindings
           mostly just a string, since most languages except for C
           permit strings to contain any 8 bit data

fish: Fix build error if built without readline.

fish.c:1447: error: 'add_history_line' defined but not used [-Wunused-function]

(Reported by Matt Booth)

appliance: Fix /etc/resolv.conf

Since changing to use link local address
(commit fbf29976b33a69c64dc7847c54454bf2cfa5fde6)
we have included an incorrect resolv.conf file in the appliance
which points to the old (qemu) DNS server.  This commit changes
to use the new DNS server.

Update BUGS.

Update Spanish translations (RHBZ#593292).

appliance: Ignore utempter unreadable binaries (for RHEL 6).

appliance: Change comment about unreadable binaries.

Version 1.3.13.

Update BUGS

Update PO files.

Generate BUGS file from Red Hat Bugzilla database.

Add a script which generates the 'BUGS' file from Red Hat Bugzilla.
This is run whenever we do 'make dist' and deliberately stored in git.

virt-df: Display domains in sorted order.

Updated Spanish translations (RHBZ#592360).

Ensure ordinary appliance is updated before trying to build supermin appliance.

Version 1.3.12, update PO files.

Unify supermin appliance building using febootstrap 2.7

Improve errors from tar-in/tgz-in commands (RHBZ#591155 RHBZ#591250).

This commit improves the error messages from the tar-in, tgz-in (etc)
commands by capturing the stderr from the tar command in a file and
sending that back in the error message.

The method used for the error file is primitive, and there is a case
for a more generic error file mechanism, but this will do for now.

Sample error messages after this change:

$ virt-tar -u /tmp/test1.img /tmp/not.tar /
tar_in: tar subcommand failed on directory: /: tar: This does not look like a tar archive
tar: Skipping to next header
tar: Exiting with failure status due to previous errors at /home/rjones/d/libguestfs/tools/virt-tar line 247.

$ virt-tar -u /tmp/test1.img /tmp/test.tar /
tar_in: tar subcommand failed on directory: /: tar: access.log: Cannot open: Read-only file system
tar: Exiting with failure status due to previous errors at /home/rjones/d/libguestfs/tools/virt-tar line 247.

Combine common code in daemon/tar.c.

This commit shouldn't result in any change in the semantics
of the code.

Fix FileIn cmds losing synch if both ends send cancel messages (RHBZ#576879).

During a FileIn command (eg. upload, tar-in) if both sides
experience errors, then both sides could send cancel messages,
the result being lost synchronization.

The reason for the lost synch was because the daemon was ignoring
this case and sending an error message back which the library side
(which had cancelled) was not expecting.

Fix this by checking in the daemon for the case where the library
also cancels during daemon cancellation, and not sending an error
messages.

This also includes an enhanced regression test which checks for this
case.

This extends the original fix in
commit 5922d7084d6b43f0a1a15b664c7082dfeaf584d0.

More details can be found here:
https://bugzilla.redhat.com/show_bug.cgi?id=576879#c5

guestfish: Fix build error in 'print_shell_quote' function.

Amend commit 1c6ed48bd3cd471dc so the prototype of
'print_shell_quote' function is correct.

fish: Fix guestfish -N option when called with unknown image type.

Previously it was falling off the end of the loop if you
called it with an unknown image type.

Improved error if virt-inspector cannot find OSes in image (RHBZ#591142).

Fix error message in string-e command (RHBZ#588651).

guestfish -i and virt-inspector work on filenames containing spaces (RHBZ#507810).

This commit fixes a long-standing bug which prevented guestfish -i
and virt-inspector from working on disk images which had a space
in the filename (or other unsafe characters).  It works by ensuring
that the strings passed between guestfish -i and virt-inspector are
quoted correctly in both directions.

Note that this commit adds a dependency from virt-inspector to
the perl module String::ShellQuote.  We have previously used this
module in virt-make-fs.

Add version numbers to Perl modules (RHBZ#521674).

Sys::Guestfs now contains a version number which reflects the
ABI that we are compiled against, ie. '0.<MAX_PROC_NR>'.  This has
the beneficial side effect of causing an error if the user tries
to mix versions of the Perl module and the XS code.

Sys::Guestfs::Lib now contains a synthetic version number which
will reflect future changes in that module.

Update PO files, including extra strings from Perl files.

po: Include strings from Perl programs in the PO files (RHBZ#559963).

xgettext will only recognize '*.pl' as being a Perl file (otherwise
it treats it as a C file and does not correctly find any strings
in it).

This commit also fixes two actual bugs that xgettext found in the
strings in our Perl programs.

po: Don't generate po/Makevars file and include Perl keywords (RHBZ#559963).

I don't see a reason to autogenerate po/Makevars, and in the
earlier commit which changed this file to being autogenerated
we accidentally lost the special Perl keywords, copyright notice
and bug reporting address.  Fix all of that.

This partially reverts commit febff9d2a35c4f40abbaf8943146476bdeac671e.

Reduce imported functions in virt-df to ones which are actually used.

New API: fill-pattern for creating files with predefined patterns.

Run udev_settle() after swapon/swapoff (RHBZ#516096).

fish: With both '-x' and '-i', pass through '-x' to inferior process.

Version 1.3.11.

virt-rescue: Add extra options.

This commit adds the extra options '--append', '--memsize' and '--selinux'.

virt-rescue: Refresh documentation.

Revert "fish: Add 'please wait' message when launching (and interactive)."

This reverts commit 01fedcde05c930c1413e9fe0909fa1da1f360cdf.

fish: Add 'please wait' message when launching (and interactive).

launch: Rearrange the code so config check is first.

Move the config state check first in the guestfs_launch function,
so that we don't reset g->launch_t or calculate the temporary
directory in the case where the launch function will immediately
return with an error.

generator: FishAction is no longer used, remove this feature.

fish: Make 'launch' function static.

This commit makes the launch function static and private to
'fish.c', and changes the generator so the function is no longer
called for the 'run/launch' command.

fish: In 'reopen' copy trace setting to new handle.

Ignore test1.img file in directory.

fish -N option unconditionally overwrites test*.img files.

This is more convenient and makes it consistent with the
'alloc' and 'sparse' commands.

fish: Make '-x' option enable traces instead of using separate echo path.

Previously we had separate code paths for echoing commands (-x)
and tracing (guestfs_set_trace).  This just unifies that so that
the guestfish -x option enables tracing.

inspector: Support filesystem-on-image VMs (RHBZ#590167).

$ virt-df /tmp/dbroot.img
Filesystem                           1K-blocks       Used  Available  Use%
/tmp/dbroot.img:/dev/vda               3096336     593628    2345424   20%

daemon: Use 'error' instead of 'perror' before calling 'abort'.

daemon: gnulib module 'error' is used directly by the daemon.

daemon: Use parens around code section for safety.

If qemu dies during launch, set an error message (RHBZ#588851).

Version 1.3.10.

daemon: Fix read-file so it fails gracefully for large files (RHBZ#589039).

Pengzhen Cao noticed that read-file would fail for files
larger than the protocol size; this is *not* the bug.  However
it would also lose protocol synchronization after this.

The reason was that functions which return RBufferOut in the
generator must not 'touch' the *size_r parameter along error
return paths.

I fixed read-file and initrd-cat, and I checked that pread was
doing the right thing.

This also adds regression tests for read-file with various categories
of large file.

daemon: Fix wc* commands to work on absolute symbolic links (RHBZ#579608).

daemon: Fix strings to work on absolute symbolic links (RHBZ#579608).

daemon: Fix head and tail commands to work on absolute symbolic links (RHBZ#579608).

daemon: Fix grep and related to work on absolute symbolic links (RHBZ#579608).

daemon: Fix checksum to work on absolute symbolic links (RHBZ#579608).

daemon: Fix hexdump to work on absolute symbolic links (RHBZ#579608).

daemon: Fix for commands working on absolute symbolic links (RHBZ#579608).

The original idea (suggested by Al Viro) was to fork and chroot
into the sysroot and read the file from there.  Because of the
separate process being chrooted, absolute links would be resolved
correctly.  The slightly modified idea is to open the file in the
daemon process (but temporarily chrooted, so symlinks resolve
correctly), fork, and have the subprocess just be responsible for
copying the file.  (Strictly speaking we don't need to fork, but
this implementation is simpler).

This commit just includes the changes needed to the command*()
functions in daemon/guestfsd.c and adds an absolute symlink to
the test ISO for testing it.  Later commits will fix the broken
daemon commands themselves.

daemon: Change command to abort() on resource problems.

The comment in the code describes it thus:

  /* Note: abort is used in a few places along the error paths early
   * in this function.  This is because (a) cleaning up correctly is
   * very complex at these places and (b) abort is used when a
   * resource problem is indicated which would be due to much more
   * serious issues - eg. memory or file descriptor leaks.  We
   * wouldn't expect fork(2) or pipe(2) to fail in normal
   * circumstances.
   */

Warn instead of dying if grub refers to non-existent kernel

Update to latest gnulib.

Use link-local addresses between appliance and host (RHBZ#588763).

Change network configuration to use macros.

Change the network configuration so everything is set using
some macros at the top of src/guestfs.c.

Also, rename the macros used in the daemon so they are not the
same.  It was a very long time since these sets of macros had to
match the ones defined in src/guestfs.c, despite what the comment
said.

Note that this commit should not change the semantics of the
program at all.

Update Spanish translations (RHBZ#588733).

tests: In verbose mode, print dashes between each test.

Only affects tests when run with LIBGUESTFS_DEBUG=1.  Lets you easily
see when each test starts and ends.

Version 1.3.9.

Document that guestfs_mount implies -o sync and performance problem (RHBZ#587582).

contrib: Add dependency diagram of libguestfs ecosystem.

contrib: Add header to README file.

lvresize: Use --force so it can make LVs smaller (RHBZ#587484).

This also adds a regression test for this bug.

tools: Fix documentation for CurrentControlSet (thanks Yuval Kashtan).

guestfs(3): Documentation on protocol gotchas.

Version 1.3.8.

Update Spanish translation (RHBZ#585961).

fish: Add 'man' command which opens the manual.

docs: Routine refresh of the documentation for guestfs(3) and guestfish(1).

Version 1.3.7 - note: fixes a segfault in guestfish 1.3.6.

todo docs: Discuss shrinking filesystems and specifying sizes in guestfish.

New API: checksums-out for checksumming many files.

Useful API for verifying the integrity of virtual machines.

generator: Update docs for checksum to point to checksum-device.

daemon: Split out checksum type to program name mapping into function.

This shouldn't change the semantics of the program.

fish: Fix segfault in '-a' option.

This fixes a segfault in the guestfish -a option which you would
get when using guestfish 1.3.6.

todo docs: Integrate with host intrusion detection systems.

todo docs: Mapping filesystems to and from disk blocks.

Version 1.3.6.

fish: Add -N option for making prepared disk images.

Previously you might have typed:

$ guestfish
><fs> alloc test1.img 100M
><fs> run
><fs> part-disk /dev/sda mbr
><fs> mkfs ext4 /dev/sda1

now you can do the same with:

$ guestfish -N fs:ext4

Some tests have also been updated to use this new
functionality.

fish docs: Be consistent about using I<-..> for options.

fish docs: Use L</...> for internal links in the man page.

Whitelist the loop kernel module

loop is sometimes a module, for example on RHEL 5.

Don't die during inspection if rpm -qa or dpkg-query fails

If a problem in the package database prevented package enumeration from working,
inspection would die. This change makes it emit a warning and continue.

Don't die during inspection if initrd doesn't exist

This fixes a problem where inspection would die if grub.conf referenced a
non-existent initrd. Just return an empty initrd instead.