Update master with mainline rebar (v2)

This PR uses the latest software provided by the upstream Rebar (v2) repo.

The most significant change allows this version of Rebar to work with
compilers which do not support the -m64 flag, as reported in #892
amongst others.

The latest code base also contains @davisp's Properly skip apps with a
.app.src.script file patch which CouchDB has been carrying for a while
now.

Merge pull request #620 from tuncer/travis-dialyze

Travis dialyze

travis-ci: allow Dialyzer job to fail

travis-ci: update otp versions

travis-ci: enable 20.1

rebar_xref: ignore opaque type match Dialyzer warning

rebar_cover: ignore opaque type match Dialyzer warning

rebar_utils: fix Dialyzer warning

Run Dialyzer on Travis-CI

Merge pull request #645 from Juliusan/log_fix

Log out success message with newlines

Log out success message with newlines

The raw log file is split into lines to check for errors.
However the logged message should contain newlines for easier reading.

Merge pull request #644 from tuncer/travis-otp-20.0.4

travis-ci: otp 20.0.2 -> 20.0.4

travis-ci: otp 20.0.2 -> 20.0.4

Merge pull request #643 from tuncer/revert-637-drop-crypto-dep

Revert "Drop crypto app reliance"

Revert "Drop crypto app reliance"

Merge pull request #639 from tuncer/retest-https

rebar.config: access retest repo via https

Merge pull request #640 from tuncer/fix-ctsuite-template

Fix ctsuite template

Merge pull request #641 from tuncer/fix-inttest-export_all

inttest/*: do not export_all

Merge pull request #642 from tuncer/profile-log

Remove profiler note

Merge pull request #637 from tuncer/drop-crypto-dep

Drop crypto app reliance

Remove profiler note

If and when getopt gains the required feature, this can be revisited,
but let's remove the message, since it's been a long time.

inttest/*: do not export_all

Fix ctsuite template

- Fix and test the Erlang code.
- Do not export_all.

Improve pseudo-unique ct_run node name

Replacing crypto:rand_uniform(0, 10000) with rebar_rnd:uniform(10000) (which is
either rand:uniform or random:uniform dependent on what otp version it runs on)
fails in rebar_ct. One might assume it's because the old call requests a number
>= 0 while the new call has no way to ask for anything but >= 1. However, the
way the value is used doesn't rely on it to include 0, so the bug lies
elsewhere. Actually, generating a random number to choose a pseudo-unique
ct_run node name isn't a reliable method to avoid naming clashes.

I cannot reproduce it locally and also cannot see the actual error in the CI
logs. Mirroring what rebar_eunit does and using a bigger rng range seems to be
enough to avoid node name clashes on Travis-CI.

Drop crypto app reliance

By doing this, we fix two issues at once. First, there's no need to have
crypto available anymore. While not having crypto in your Erlang
installation is a questionable packaging decision, it tends to happen in
the wild with users installing Erlang and missing crypto. Sometimes this
is not due to a distro's package but users building Erlang without the
needed OpenSSL dependencies. Second, this resolves the Erlang 20 rng
deprecation warnings.

Merge pull request #638 from tuncer/fix-otp-20-export_all

Fix Erlang 20 export_all warnings

Merge pull request #636 from tuncer/fix-634

Fix #634

Merge pull request #635 from tuncer/travis-otp-20

travis-ci: test with Erlang 20.0.2

Merge pull request #633 from davisp/properly-skip-apps-with-app-src-script

Properly skip apps with a .app.src.script file

rebar.config: access retest repo via https

Fix Erlang 20 export_all warnings

Fix other warnings and whitespace errors as well.

Fix #634

travis-ci: test with Erlang 20.0.2

Properly skip apps with a .app.src.script file

Any application using a .app.src.script file will now be properly
skipped if requested. This check was missing the newer third case for
the file extension.

Merge pull request #632 from phiggins/tiny-documentation-fix

Fix typo in eunit help.

Fix typo in eunit help.

Merge pull request #625 from lrascao/feature/travis_otp_19.1

Continuous integration on OTP 19.1

Continuous integration on OTP 19.1

Merge pull request #624 from tuncer/superfluous-space

Remove superfluous space in unabbrev error msg

Remove superfluous space in unabbrev error msg

Merge pull request #623 from lrascao/release/2.6.4

Prepare release 2.6.4

Prepare release 2.6.4

Merge pull request #619 from tuncer/fix-cdb

Fix cdb processing when a file is skipped

port_compiler: fix handling of multiple specs

rebar_utils: restore blank line

Fix cdb processing when a file is skipped

Merge pull request #618 from lrascao/release/2.6.3

Prepare release 2.6.3

Prepare release 2.6.3

Merge pull request #617 from tuncer/linkcpp

port_compiler: auto-select C++ specific link template

Merge pull request #616 from tuncer/clang-compilation-db

port_compiler: clean up compile_each()

port_compiler: auto-select C++ specific link template

Even though "$CC foo.o -lstdc++ -o foo.so" works if foo.o was built with
$CXX, depending on the platform and toolchain and C++ standard used, it
may not. In order to ensure this works reliably, we introduce
EXE_LINK_CXX_TEMPLATE and DRV_LINK_CXX_TEMPLATE and auto-select if the
port spec being built consists of at least one C++ source.

port_compiler: clean up compile_each()

Extract clang db entry generation into a separate function.

Merge pull request #615 from tuncer/clang-compilation-db

port_compiler: generate clang compilation db

port_compiler: generate clang compilation db

In order for newer clang tools to work, they require the presence of a
compilation database in the form of compile_commands.json.  Therefore,
we adapt port_compiler to write such a file.

Merge pull request #614 from firephreek/bug/bootstrap-file-check

Add an additional check for the existence of a 'rebar.beam' file

Add an additional check for the existence of a 'rebar.beam' file during bootstrap run. Bootstrap fails on first run without any .beam files in the ebin folder.

Merge pull request #612 from tuncer/rand19

Introduce and use compat random number module

Introduce and use compat random number module

In order for rebar to work with previous and current OTP releases, we
generate the rebar_rnd module on startup. rebar_rnd is generated
dynamically to make sure that we use the right random module (either
rand if available or else random). It only wraps the common subset of
the API, but that's sufficient for rebar's use.

Merge pull request #611 from tuncer/port_compiler-wspace-fix

port_compiler: consistently format default_env/0

port_compiler: consistently format default_env/0

Merge pull request #610 from tuncer/lift-qc-experimental

qc: lift experimental notice

qc: lift experimental notice

Merge pull request #609 from lrascao/release/2.6.2

Prepare release 2.6.2

Prepare release 2.6.2

Merge pull request #606 from lrascao/fix/revert_590

Revert 'Treat port env vars as expandable only if they self reference'

Merge pull request #605 from lrascao/fix/port_driver_mac_build

Add necessary OSX flags for port driver linking

Add necessary missing OSX flags for port driver linking

Revert 'Treat port env vars as expandable only if they self reference'

Regression introduced in b816c69e343c8fd757c59fe8703eeda597f4da0a.

Merge pull request #603 from tsloughter/master

add deprecated message

add deprecated message

Merge pull request #602 from choptastic/rebar3-deps

Support full-source rebar3-style deps (deps without Version Regexes)

Add raw to VsnRegex-Free dep

Support rebar3-style deps

Example: {git, {appname, "git://something/something", {branch, master}}}

              ^
              |
              |---- Notice the lack of a version Regex

Merge pull request #588 from lrascao/fix/look_for_ct_spec_files_only_in_test_dir

Look for ct .spec files in the ct_dir that was specified

Merge pull request #594 from matwey/cache_load_save

Introduce REBAR_VSN_CACHE_FILE env variable to load/save vsn cache

Introduce REBAR_VSN_CACHE_FILE env variable to load/save vsn cache

When REBAR_VSN_CACHE_FILE is set, then vsn cache is loaded from
this file on rebar start and updated when new data.

Under specific circumstances (i.e. in build environments),
full git tree may not be available, but only its snapshot.
We need a way to use preheat vsn cache instead of invocing
git command.

Signed-off-by: Matwey V. Kornilov <matwey.kornilov@gmail.com>

Merge pull request #589 from matwey/rebar_deps_force_lib

Introduce REBAR_DEPS_PREFER_LIBS env variable to alter search behaviour

Introduce REBAR_DEPS_PREFER_LIBS env variable to alter search behaviour

When REBAR_DEPS_PREFER_LIBS is set, dependencies with defined sources
are allowed to be searched for in system lib directory.

Under specific circumstances (i.e. in build environments without networking)
it is impossible to fetch deps locally. So, user needs a way to ask rebar to
search in system lib directory as well.

Signed-off-by: Matwey V. Kornilov <matwey.kornilov@gmail.com>

Optionally look for ct .spec files in the ct_dir that was specified

Allow to change existing behaviour which is to find all .spec
files recursively in the current working directory through a new
rebar.config option: {ct_search_specs_from_test_dir, true}
This is confusing since the user explicitly stated the
location for his spec files and negates the possibility
to have different spec'ed suites for different environment.

Also fix the node name generation on the ct test run, append
a random number that will reduce chances of name collisions
on epmd.

Merge pull request #599 from lrascao/feature/regression_test_for_595

Fix bug when running gcc in cross_sizeof

Fix bug when running gcc in cross_sizeof

The test program used to determine the word size of a crosscompiler is
crafted to return an error, so this changes the logic to expect an
error exit. If the crosscompiler actually compiles the test program
successfully, that would be remarkable and worthy of investigation.

Merge pull request #590 from lrascao/feature/allow_port_env_flags_redefinition

Treat port env vars as expandable only if they self reference

Merge pull request #591 from lrascao/fix/eunit-tests-surefire-crash-and-test

Fix/eunit tests surefire crash

Provide additional test coverage for surefire enabled eunit testing

Fix eunit_surefire crash with rebar eunit tests=...

This fixes the following crash:

> =ERROR REPORT==== 20-Jun-2014::16:35:38 ===
> Error in process <0.40.0> with exit value: {function_clause,[{eunit_surefire,escape_suitename,[undefined,[]],[{file,"eunit_surefire.erl"},{line,416}]},{eunit_surefire,write_report,2,[{file,"eunit_surefire.erl"},{line,258}]},{lists,foreach,2,[{file,"lists.erl"},{line,1336}]},{...

Merge pull request #580 from lrascao/feature/check_common_test_result

Additional Common Test regression tests

Additional Common Test regression tests

One test that checks for a failed make, another
that detects a failed test run when only one of several
suites fails. The ct test fails is only applicable to OTP
versions older than R16 (inclusive), this is related to the way
older versions handle the test .spec files.

Treat port env vars as expandable only if they self reference

Provide additional port test case.
Also, update newest OS X versions build flags.

Merge pull request #587 from lrascao/fix/require_vsn

rebar_require_vsn: Update regexp to account for newer OTP versions

Update regexp to account for newer OTP versions

Add support for patch numbers, also expose
version_tuple/1 for easier internal access.
Normalize version_tuple/1 return value, now
always {Major, Minor, Patch}.
Update regression tests accordingly.

Merge pull request #586 from surik/dia_ensure_ebin

Ensure ebin created for dia compiler

Add tests for dia compiler

Test will be runed only on OTP >= 15

Ensure ebin created for dia compiler

also add myself to THANKS

Merge pull request #532 from lrascao/feature/neotoma_regression_tests

Automatically clean neotoma-generated erl files, regression test

Automatically clean neotoma-generated erl files
Add myself to THANKS

Add neotoma regression test

Integration regression test that checks for correct generation of .erl files from .peg ones and that they are cleaned up.

Merge pull request #581 from lrascao/fix/change_retest_dep_url

Update retest dependency url

Update retest dependency url

Should point to rebar org fork, upstream
no longer being actively maintained by owner.

Merge pull request #562 from lrascao/fix/windows_retests

Add support for Windows integration testing

Merge pull request #578 from lrascao/feature/add_latest_otp_travis

Add the latest OTP 18 version to the Travis build