helper: Improve error message when run on random files (thanks Alexey Torkhov).

Use ext2fs_close2 API if available to avoid unnecessary fsync.

This saves over 5 seconds during the slow path construction of the
appliance.

The ext2fs_close2 API is present in the e2fsprogs 'next' branch and
will be in a later e2fsprogs release (thanks Ted Ts'o).

febootstrap: Use contents of installed Debian packages instead of downloading and unpacking them.

This also adds --use-installed switch (which for now only works for
Debian).

Verbose message when adding kernel modules.

This step takes a considerable amount of time (about half of the total
construction time), so separately display a timestamped message for it.

yum-rpm: Add more debugging to the Python code.

Stable OCaml dependencies.

This technique copied from libguestfs/resize/Makefile.am and modified
so that it works with old ocamldep that used to add spaces at the end
of lines.

docs: Use multiple =item's instead of =item foo|bar

Version 3.10.

Move febootstrap into src/ subdirectory.

Now we have src/ for febootstrap and helper/ for
febootstrap-supermin-helper.

Fix previous commit for non-Debian case.

This updates commit 3ac623701e5fe5ce94b22b4f40f72ee0161d5184.

debian: Include workaround for broken apt-cache depends --recurse.

Ubuntu 10.04 LTS has a broken apt-cache depends --recurse command
which does not in fact recurse deeply enough to find all dependencies
(this is fixed in Ubuntu 11.04).

Include a workaround for this so we can use febootstrap on old Ubuntu
versions.

debian: Use configured aptitude program instead of just "aptitude".

debian: Detect apt-cache in configure.

Version 3.9.

Remove obsolete ELF_DEFAULT_ARCH, DEFAULT_ARCH rules from Makefile.

This updates commit df569d49aa10af5995f771362ddc1400f16486e8.

febootstrap: Fix build on platforms where there is no native OCaml compiler.

febootstrap-supermin-helper: Replace objcopy call for embedding init binary

objcopy needs "output-target" and "binary-architecture" parameters
which makes it necessary to keep a list of known architectures.

The bin2s.pl script generates input for the GNU assembler which should
produce an object file that is equivalent to that produced by objcopy.

I have successfully tested the change on an amd64 Debian/unstable system.

RWMJ: Added bin2s.pl to EXTRA_DIST and updated .gitignore.

febootstrap: Add --save-temps option to save temporary files on exit.

Update copyright notices in manual pages.

Include ext4 module in the initrd.

Modern kernels allow you to use the ext4.ko module to support ext2 and
ext3 access.

On Fedora, this is the default (albeit not as a module, so this code
path would not be tested yet).

Download archives with permissive umask (thanks David Konerding).

https://www.redhat.com/archives/libguestfs/2011-August/msg00025.html

Version 3.8.

helper: Allow kernel and modpath to be selected from envvars (RHBZ#671082).

helper: create_kernel_archlinux should return const char *

helper: Move all_files down function.

This is just code tidy-up.

debian: Check for gawk.

Version 3.7.

De-duplicate directories with the same name, like "/etc" and "/etc/"

In Rawhide there are two patches which create /etc/pam.d and /etc/pam.d/

febootstrap was trying to treat these as two separate directories.
Add a de-duplication step so that these names are considered the same.

We could go further than this patch (eg. removing multiple //
characters), but this patch is sufficient to fix Fedora builds.

debian: Add missing build dependency on gawk.

helper: Fix error message when modules.dep is not found.

Remove trailing whitespace from one line.

febootstrap/helper: Major change to kernel module handling code

The previous implementation had two problems: (I) Not all needed
kernel modules were copied to the initrd. (II) If a kernel module
depended on more than one other module, only the first dependency was
considered for the load order. Using 2.6.39-1-amd64 (Debian/unstable)
ext2.ko was not loaded and therefore the root FS could not be mounted.

The use of tsort(1) has been replaced with a set of functions that
build a DAG in memory and use that to calculate the list of modules to
be copied into the initrd and the order in which to load them.

febootstrap/helper/init: Add translations for errno

Version 3.6.

Fix some printf format warnings when -Wall is enabled.

febootstrap/helper/init: Mount /proc if not already present.

Don't require external insmod.static.

Add module loading functionality into init.c, thus making
insmod.static unnecessary.

febootstrap: Look for insmod.static, mke2fs in /sbin

Force creation of /lib/modules directory.

After adding a line containing "/lib/modules" to hostfiles solved the
immediate problem for me -- febootstrap-supermin-helper finished its
run.

The attached patch makes sure that febootstrap-supermin-helper always
creates this directory.

Version 3.5.

Check lseek return type against (off_t) -1.

Increase appliance container to 4 GB.

The overhead is now 66 MB which is unfortunate.  However 4 GB should
be enough for people who accidentally add kernel modules that are
hand-compiled with all the debuginfo information in them.

helper: Add better error messages if files too big for appliance root.

The appliance root was 1GB.  However the error message you got
if you overran this space was very obscure:

  febootstrap-supermin-helper: ext2fs_file_write:
  Could not allocate block in ext2 filesystem

This adds the name of the file that is failing, and replaces the error
message with something more meaningful.

helper: When /init fails, print some debugging information.

Force mode +x on insmod.static binary (RHBZ#666880).

helper: Change to root directory before running find command.

helper: Don't fail if objects are created in a symlinked dir (RHBZ#698089).

Version 3.4.

Allow config files from different packages if both files have zero size.

Fairly recurrent bug in Fedora.  It need not cause us to fail,
provided that both config files are empty.

Collect the size (ft_size) of files from package handlers.

Link init with '-static' instead of '-all-static'.

Latest gcc (4.6.0) does not recognize the -all-static
option; see http://gcc.gnu.org/bugzilla/show_bug.cgi?id=46410

Using -static still results in a static init binary:
$ file helper/init
helper/init: ELF 64-bit LSB executable, x86-64, version 1 (GNU/Linux), statically linked, for GNU/Linux 2.6.32, stripped
$ ldd helper/init
           not a dynamic executable
(cherry picked from commit 42a6e60307b8116dd888e9dae4960f12d895f73f)

helper: Add support for ArchLinux kernels.

ArchLinux doesn't use the ordinary Linux kernel naming scheme.
(Thanks Thomas S Hatch for helping to diagnose the issue)

pacman: Update ArchLinux module.

If package is not in the main repos, check AUR.

Download and unpack the package.

Version 3.3.

helper: Ignore times of special files when calculating checksum.

Variation in the times of /dev/ptmx was causing the
appliance to be rebuilt too frequently.

Add debian/ subdirectory (temporary).

This adds the debian/ subdirectory to make it easier for us
to build Debian packages.

When we get this into Debian, this directory can be removed.

debian, pacman: incorrect detection of config files.

Config files were being incorrectly detected, with the
effect that all /etc/ files were being added to hostfiles.

docs: Missing backslash.

Add pod.css to EXTRA_DIST.

Version 3.2

docs: Refresh documentation with explanation of supermin appliances.

helper: Remove refs in docs to old manual pages.

Add HTML documentation to the public website.

autobuild: Factor out HOSTNAME variable.

Add autobuild script.

This script is run on the builder(s) regularly.

Real fix for .*.hmac files (accidental reopening of RHBZ#654638).

Previous commit was broken.

Properly ignore .*.hmac files (accidental reopening of RHBZ#654638).

Version 3.1.

Add --yum-config option to set a yum configuration file.

Clean up some warnings and debug messages.

yum: Don't pass tmpdir as an explicit parameter.

Encode it directly in the script instead.

yum: Call setCacheDir so this works for non-root users.

Allow --verbose to control whether yum messages are verbose.

Without --verbose, yum will be quiet for once.

Add support for Arch Linux (pacman package manager).

docs: Arrange required/optional packages more logically.

docs: Note that gawk (GNU awk) is required.

configure: Check for insmod.static and fail if not present.

This is not packaged on Debian/Ubuntu, but we require it.  Fail
with a useful error message if it is not available.

docs: Note that libcom_err is required.

Rewrite febootstrap as a general supermin appliance building tool.

This complete rewrite of the building tools turns febootstrap
into a general purpose, cross-distro, supermin appliance only
build tool.

There is now only one program 'febootstrap' which is used to
build a supermin appliance from a list of packages.

Normal appliances are not supported.

The tools are incompatible with febootstrap 2.x (use the
febootstrap-2.x branch from git to get the old package).

Version 2.11.

ext2: Fix "ext2fs_mkdir .. No free space in directory".

We weren't expanding ext2 directories and as a result we could
hit a limit when the directory grows larger than one block.

Note that this fix only applies for creating subdirectories.
For creating files (ie. ext2fs_link) we were already doing the
right thing.

elf-default-arch should exit with an error if it fails.

Fix elf-default-arch for ppc and ppc64.

gnulib: Ignore another gnulib generated file.

main should return int

RHEL 5: Don't pass BLOCK_FLAG_READ_ONLY to ext2_block_iterate if not defined.

Version 2.10.

Ignore cscope.out

Add -u and -g options to febootstrap-supermin-helper

Bash automatically resets euid to uid when it executes. This means that the
effective user id of a program at the point it calls febootstrap-supermin-helper
will be lost if any part of execution chain involved bash. This in turn can
result in:

* the generation of an incorrect checksum, which contains the uid.
* the generation of supermin files with a mixture of owners

The -u and -g options allow the caller to pass in an explicit user and group to
run as. febootstrap-supermin-helper will set(u|g)id as appropriate.

Send usage output to stdout or stderr depending on context.

If usage information is displayed because of an error, it should go to stderr.
If it is displayed because the -h option was given it should go to stdout.

Add gnulib as a submodule.

(Thanks also to Jim Meyering for resolving the git submodule problems).

Update gnulib.

Fix elf-default-arch detection to work on secondary archs (RHBZ#634951)

Recent state of the elf-default-arch script and the hardcoded i386 arch doesn't
allow building on other arches than ix86 or x86_64. See attachment for a fix.
Can be easily extended to support additional secondary arches by adding new
patterns to the elf-default-arch script

Version 2.9

helper: Ignore editor backup (*~) files.

helper: Visit directory entries in order.

Previously in febootstrap-supermin-helper we would visit the
files in supermin.d in arbitrary (ie. readdir) order.  This has
caused a series of heisenbugs where some implicit dependency
between these files has not been honoured.  The latest one is
that '/etc/localtime' can be added to the appliance before '/etc'
has been created (and this operation fails).

Instead of continuing to chase these, this commit forces us to
visit the files in filename order by sorting them before visiting
them.

Note that in libguestfs, the current order is sufficient, because
the files are called:

base.img
daemon.img
hostfiles

Version 2.8.

Update gnulib.

Add -f checksum mode to allow caching of appliances.

Implement ext2 output module.

Remove bogus 'whitelist' parameter from usage.

Use the -k whitelist option to get a kernel whitelist.

This is a bug in current febootstrap-supermin-helper.