stdlib/fedora: Check result from koji latest-build to avoid infinite loop

If 'koji latest-build' command fails then we could end up in an
infinite loop because 'koji wait-repo ... --build=' gives an error.

stdlib/fedora.gl: Add new %fedora-retry-failed flag

stdlib: Fix detection of already build package when rpmautospec

Fixes: commit dc1c16833922b20e6949058a3813a595bb89194b

Support rpmautospec / %autochangelog

stdlib/fedora.gl: Quote parameters of 'test' command

deps: Try to print the dependency cycle in error message

Instead of:

*** error: function:wrap:6:0: adding fedora-rebuild ("ocaml-odoc") creates a dependency cycle

it now prints:

*** error: function:wrap:4:0: dependency cycle: fedora-rebuild ("ocaml-odoc") -> fedora-rebuild ("ocaml-mdx") -> fedora-rebuild ("ocaml-odoc-parser") -> fedora-rebuild ("ocaml-ppx-expect") -> fedora-rebuild ("ocaml-ppx-inline-test") -> fedora-rebuild ("ocaml-time-now") -> fedora-rebuild ("ocaml-ppx-base") -> fedora-rebuild ("ocaml-ppx-js-style") -> fedora-rebuild ("ocaml-octavius") -> fedora-rebuild ("ocaml-odoc")

Use old code-generator for menhir

The new code generator breaks include statements.

stdlib/fedora.gl: Try to cache dependencies

For the large number of OCaml packages (~ 200) it takes a very long
time to recompute the list of dependencies.  The real reason for this
is that we calculate the bin2src hash table over and over again for
each dependency.  Each time it takes about 6 seconds.

Try one approach to caching this.

This does improve performance quite a lot, at the minor annoyance of
leaving ".depcache" files in the Fedora directory.

A future approach might consider allowing bin2src to be created once
when goals starts up and then making it available to all shell script
snippets.  I'm not sure how to implement that.

Another possible approach in future would be to internalize the
(key, value) cache implied here.  This would let us cache the result
of earlier runs so no recomputation would be needed.

configure: Fix checking of missing programs

configure: Use longer, non-deprecated form for OCaml warnings flags

In OCaml 4.13:

Alert ocaml_deprecated_cli: Setting a warning with a sequence of lowercase or uppercase letters,
like 'CDEFLMPSUVYZX', is deprecated.
Use the equivalent signed form: +C+D+E+F+L+M+P+S+U+V+Y+Z+X+52-3.

Try a simpler algorithm for detecting cycles.

Fixes: commit 5f25b73757c74fde044315e9b82aa70da8fcfbc0

stdlib/fedora.gl: master -> rawhide

stdlib/fedora.gl: Simpler quicker way to work out dependencies.

This removes the O(n^3) loop.

Detect dependency cycles earlier and print a better error.

This has a noticable negative effect on performance so we should
revisit the algorithm when we have the time.

fedora: Increase timeout for koji wait-repo commands.

And if it fails because of a transient problem, retry.

Thanks: Miro Hrončok

stdlib/fedora: Use rpmdev-bumpspec -r flag for < Rawhide builds.

We want to preserve the upgrade path to Rawhide.

run: Improve error message if a predicate script fails.

In particular always print the fully resolved parameters of the
predicate.

More suggestions for TODO.

stdlib: Get rid of %koji and %fedpkg.

These were used to do riscv builds, but they complicated the rules and
could also have been done using a $PATH override.  Remove this
completely.

Fix whitespace.

Version 0.3.

Update TODO.

dist: Add extra files to tarball.

We need files like ‘Makefile.am’ and ‘compile’ in order for the
tarball to be built without autotools.

Fixes commit bed4036653ce47a91b96dd0ead65341aa80d6b97.

docs: Document some shell functions.

tests: Add basic test of predicates.

Update TODO.

docs: Document %stdlib dir.

Implement %tmpdir.

Rename tactic -> predicate.

Predicates always have the form ‘is-foo’ (like ‘*foo’ for tactics).

Implement keep-going (-k) option.

jobs: If multiple jobs fail, save and print all the exceptions.

Don't "forget" earlier exceptions.

jobs: Remove unnecessary 'a retire and 'a to_string types.

Use automake.

This simplifies rebuilding of files like config.status and run when
the configuration changes.  We still don't actually use make/automake
for anything substantial - all rules are passed through to goals.

stdlib: Improve performance of fedora.gl.

run: Set OCAMLRUNPARAM to display stack traces by default.

stdlib: Fix %branch -> %fedora-branch.

Fixes commit 69f0ac6d4b9a1fd1b2985cefe95d4f06d55004f3

Version 0.2.

install: Fix install path for stdlib, and install man pages.

dist: Replace install-sh symlink with a copy of the file.

build: Reorder .gitignore

maintainer: Add maintainer-commit, maintainer-tag goals.

build: %version instead of using autoconf @PACKAGE_VERSION@.

And don't bother with @PACKAGE_NAME@.

maintainer: Build Fedora package in copr.

build: dist should have %tarfile as target.

stdlib: Add fedora.gl.

build: Add distcheck, maintainer-check-extra-dist and maintainer-release.

docs: Build plain text version of documentation.

Would build HTML version, but pod2html looks terrible.

build: Distribute src/.depend with tarball.

build: Implement make dist rule.

build: Implement install rule.

Update TODO.

stdlib: Change print colour functions so they are atomic.

stdlib: Disable echo on split command.

Fixes commit 17dc1d6e0ec8f194df3dd74a7033303ad9ff739c.

Ignore local* files.

Allows you to have ./localconfigure and/or ./localmake files to add
local parameters to configure or make.

stdlib: Implement split() function.

Update TODO.

We have now implemented most relevant make functions.

stdlib: Implement last() and nth() functions.

stdlib: Implement filter() and filter-out() functions.

stdlib: Protect some functions using "--".

If a parameter begins with a "-" character then it can be
misinterpreted as a shell command parameter.  Protect against this
using "--" in various places.

Update TOOD.

tests: Don't suppress stderr in some tests.

Not necessary since we implemented PASS/FAIL in
commit 490d147a899cb682af67bc5bc3eb64a9ad00985e.

stdlib: Implement error() function.

Currently not very useful because we lack conditionals, but
it could be useful if those were implemented.

stdlib: Implement read() and readlines() functions.

stdlib: Implement head() and tail() functions.

stdlib: Implement realpath() function.

stdlib: Implement join() function.

stdlib: Implement dirname(), basename() and extension() functions.

docs: Document functions sort, wildcard and wrap.

stdlib: Implement subst function.

docs: Remove separate goals-reference manual.

Goalfile(5) will contain both a tutorial and reference.

eval: Remove a single trailing \n from "returning string" functions.

tests: Add test of the wildcard function.

cmdline: Implement -s (--silent or --quiet) option.

tests: Add test of the sort function.

build: Run make clean in parallel.

utils: Implement -j properly.

It now picks the default value from the number of cores.

tests: Add a basic test of dependencies.

tests: Consistency.

Put the comment in the goalfile, and make sure the shell script
is using set -e if appropriate.

build: Hide make passthrough command.

parser: Fix longstanding bug where "()" was required after CLI targets.

tests: More basic tests.

tests: Print PASS/FAIL for each test.

Simple test harness.

run: Improve consistency of error messages.

Make sure we always print the line number and the full name + params
of any goal or tactic which fails.

jobs: Wait for completion even in the error case.

Previously if we hit an error (last_exn being set) then we exited the
loop immediately and re-raised the exception.  However this means jobs
which are still running would continue to run after goals exited.
Move the wait code outside the loop to ensure we always wait for jobs
to complete even in the error case.

tests: Add basic tests.

Use 'make check' to run them.

parser: Allow an empty goal statement with no targets, deps or code.

This allows you to write "do nothing" goals like:

  goal all ;

build: Add 'make maintainer-clean' passthrough rule.

stdlib: Add wrap function.

stdlib: Don't add \n after quoted_string.

run: Add %goals_final_check variable when evaluating tactics.

This is true ("1") if this is the final check that the goal evaluation
was successful.  It allows tactics to behave differently when
evaluating if we need a rebuild vs checking that the rebuild was
successful.

Split implementation into dependency analysis and traversal.

utils: Add unique () function.

jobs: Don't let Failure exception escape from worker.

Also stop the wait () function if the stop flag is set so we don't
wait forever for jobs which are never going to be run.

cmdline: Make sure all errors go through main () function.

jobs: Introduce stop_all function to stop job submission on error.

Update TODO.

build: Create man/ subdirectory before building man pages.

Implement parallel jobs (-j option).

build: Remove man/*.? man pages when running 'make clean'.

Fixes commit abfde4ea239de6b9458243a862d5da0302a241a4.

docs: Add empty Goalfile(5) and goals-reference(5).