HBASE-27042. Remove S3Guard awareness from HBoss

* Cut HBoss test code which would explicitly disable S3Guard
  -obsolete and breaks the build on forthcoming hadoop releases.
* Also cut all references in docs and XML.
* EmbeddedS3 to implement deleteObject() and so support
  AWS SDKs 1.11.1026+, which expects this (hadoop 3.3.2+).
* Maven test runs to provide full stack traces on failures,
  so runtime failures can be debugged and fixed.

Change-Id: Iab10cfc6780cea064ea116efc1c177332d780514
Signed-off-by: Josh Elser <elserj@apache.org>

HBASE-26786 [hboss] Limit synchronization from hot path of HBoss APIs (#32)

HBASE-26236 Simple travis build for hbase-filesystem (#28)

Co-authored-by: Josh Elser <elserj@apache.org>

HBASE-26513 [HBOSS] Update readme to reflect dependencies change introduced by HBASE-25900 (#31)

Signed-off-by: Josh Elser <elserj@apache.org>

HBASE-26437 Clean up the znodes for the src after a rename.

HBOSS was orphaning znodes from the src of a path which is renamed. Over
time, this will result in a very large usage of ZK due to HBOSS.

Add some logging to dump the contents of ZK

Signed-off-by: Wellington Chevreuil <wchevreuil@apache.org>
Closes #29

HBASE-26453 Correct the behavior of isBeneath to not consider paths which share a name prefix as beneath one another.

The current implementation of isBeneath fails when given paths of the
form '/foo' and '/foobar' (returning that '/foobar' is beneath '/foo').

Because this method returns incorrect values, it causes Curator mutexes
to be removed and znodes to be removed while they were potentially held.

Signed-off-by: Wellington Chevreuil <wchevreuil@apache.org>

HBASE-26315 Upgrade commons-io to 2.11.0 in hbase-filesystem (#27)

Signed-off-by: Wellington Chevreuil <wchevreuil@apache.org>

HBASE-25900 Hadoop 3.2 and 3.3 support (#25)

Build on top of SteveL's original changes. Added indirection so
that the correct S3ClientFactory can be included at test-time. Provides
s3a.xml contracts for each version to reflect what actually works. Skips
the new tests which we know would fail on the older <Hadoop3.3 releases.

Co-authored-by: Steve Loughran <stevel@apache.org>
Co-authored-by: Peter Somogyi <psomogyi@cloudera.com>
Signed-off-by: Peter Somogyi <psomogyi@cloudera.com>

HBASE-26164 Update dependencies and remove duplicative aws-java-sdk definition (#24)

Signed-off-by: Peter Somogyi <psomogyi@apache.org>
Signed-off-by: Wellington Chevreuil <wchevreuil@apache.org>

 HBASE-25964 Introducing hbase metrics to Hboss

Signed-off-by: Wellington Chevreuil <wchevreuil@apache.org>

HBASE-25572 add a 'release' profile to do common project release tasks.

Closes #20

Signed-off-by: Peter Somogyi <psomogyi@apache.org>

HBASE-25578 HBase filesystem pom should include nexus staging repo management (#21)

Signed-off-by: Peter Somogyi <psomogyi@apache.org>
Signed-off-by: Wellington Chevreuil <wchevreuil@apache.org>

HBASE-25477 Purge use of VisibleForTesting (#19)

Signed-off-by: Wellington Chevreuil <wchevreuil@apache.org>

HBASE-25331 [HBOSS] TreeLockManager should log warnings about lock contention periodically (#18)

Signed-off-by: Peter Somogyi <psomogyi@apache.org>

HBASE-25060 [HBOSS] TreeLockManager should not define itself as the default implementation for fs.hboss.sync.impl (#17)

Signed-off-by: Andrew Purtell <apurtell@apache.org>
Signed-off-by: Sean Busbey <busbey@apache.org>
Signed-off-by: Peter Somogyi <psomogyi@apache.org>

HBASE-24989 [HBOSS] Some code cleanup (#16)

Signed-off-by: Josh Elser <elserj@apache.org>
Signed-off-by: Jan Hentschel <jan.hentschel@ultratendency.com>

HBASE-24963 [HBOSS] UTs failing when running against hadoop 3.3. (#15)

Signed-off-by: Josh Elser <elserj@apache.org>
Singed-off-by: Andrew Purtell <apurtell@apache.org>

HBASE-24961 [HBOSS] HBaseObjectStoreSemantics.close should call super.close to make sure its own instance always get removed from FileSystem.CACHE (#14)

Signed-off-by: Josh Elser <elserj@apache.org>

HBASE-24261: Initial version of ASF infra integration configuration

This is an initial version of the yaml config for ASF infra
integration. We might have some hiccups in the beginning but we
can iteratively improve until the old (desired) setup is back
in place.

HBASE-24124 hbase-filesystem to use guava from hbase-thirdparty

closes #12

Signed-off-by: Tamas Penzes <tamaas@cloudera.com>
Signed-off-by: Sean Busbey <busbey@apache.org>

HBASE-23314 Make HBaseObjectStoreSemantics FilterFileSystem (#11)

Signed-off-by: Andrew Putell <apurtell@apache.org>
Signed-off-by: Wellington Chevreuil <wchevreuil@apache.org>

HBASE-23142 Include zookeeper-jute into hboss-thirdparty deps

ZooKeeper 3.5 has a transitive dependency on zookeeper-jute.
This is a no-op for ZK 3.4.

Closes #10

Signed-off-by: Peter Somogyi <psomogyi@apache.org>

HBASE-23099 - [HBOSS] Raise hadoop dependency version to 3.2.1 (#9)

HBASE-23099 - [HBOSS] Raise hadoop dependency version to 3.2.1

There's been some changes on S3Guard that comes with hadoop 3.2.1 and upcoming versions, such as HADOOP-16085, HADOOP-16233 and HADOOP-16380, among other recent commits. Some of these required additional properties or modified S3A expected behaviour for a few FS contract tests.

Signed-off-by: Josh Elser <elserj@apache.org>

HBASE-23076 [HBOSS] ZKTreeLockManager shouldn't try to acquire a lock from the InterProcessMutex instance when checking if other processes hold it. #8

Signed-off-by: Josh Elser <elserj@apache.org>

HBASE-23032 Upgrade to Curator 4.2.0

Signed-off-by: Wellington Chevreuil <wchevreuil@apache.org>

HBASE-22694 Fallback to hbase.zookeeper.quorum if fs.hboss.sync.zk.connectionString is undefined

Simple code change, but some refactoring to add testing for the change.

EmbeddedZK was made to be an object which we instantiate, rather than
static state and static methods. This lets us re-use the same code for
the contract tests without stomping on one-another.

Also adds in .gitignore entries for Eclipse metadata.

Closes #6

Signed-off-by: Sean Busbey <busbey@apache.org>

HBASE-22583 [hbase-filesystem] Update readme to describe compatible hbase versions

Signed-off-by: Andrew Putell <apurtell@apache.org>

HBASE-22574 hbase-filesystem does not build against HBase 1 (#5)

Signed-off-by: Wellington Chevreuil <wellington.chevreuil@gmail.com>

HBASE-22516 Update version for next dev cycle (#4)

HBASE-22516 - prepare for 1.0.0-alpha1 RCs (#3)

* changing versions values on related pom files
* yetus generated CHANGELOG.md and RELEASENOTES.md

HBASE-22515 HBOSS: Document test cases known to fail under Null lock implementation

Signed-off-by: Sean Busbey <busbey@apache.org>

Revert "Document HBOSS test cases known to fail under Null lock implementation"

This reverts commit 522ddafa13ec8936b72a45f102ca4a21e1a6b9a2.

Document HBOSS test cases known to fail under Null lock implementation

Signed-off-by: Sean Busbey <busbey@apache.org>

HBASE-22415 HBOSS: changed log verbosity to debug on some lock colision cases

Signed-off-by: Biju Nair <gs.biju@gmail.com>
Signed-off-by: Sean Mackrory <mackrorysd@gmail.com>
Signed-off-by: Sean Busbey <busbey@apache.org>

HBASE-22427 HBOSS: TestTreeLockManager fails on non-ZK implementations.

Signed-off-by: Sean Busbey <busbey@apache.org>

HBASE-22393 HBOSS: Shaded external dependencies to avoid conflicts with Hadoop and HBase.

Closes #2

Signed-off-by: Josh Elser <elserj@apache.org>
Co-authored-by: Wellington Chevreuil <wellington.chevreuil@gmail.com>
Co-authored-by: Sean Busbey <busbey@apache.org>

HBASE-22493 Documenting supported hadoop versions.

Signed-off-by: Sean Busbey <busbey@apache.org>

HBASE-22437 HBOSS: Add Hadoop 2 / 3 profiles.

Signed-off-by: wellington <wchevreuil@cloudera.com>
Amending-Author: Josh Elser <elserj@apache.org>

HBASE-22416 HBOSS: Wait for curator to connect to ZK before returning.

We'll wait up to 30s. If we're still not connected, throw an exception.

Signed-off-by: Sean Mackrory <mackrorysd@gmail.com>

HBASE-22386 HBOSS: Limit depth that listing locks check for other locks

Signed-off-by: Josh Elser <elserj@apache.org>

HBASE-22149 HBOSS: A FileSystem implementation to provide HBase's required semantics on object stores.

* Adds top level project structure
* Adds module for hbase-oss with initial implementation of wrapper FileSystem to enforce semantics needed by hbase

Closes #1

Initial empty commit.