Remove CircleCI folder from dtest

CircleCI configuration in this repo is never used and, thus, is not
up-to-date, which is confusing. This commit removes it. Configuration
from the main Cassandra repo is used for running dtest in CircleCI.

 patch by Ruslan Fomkin; reviewed by Brandon Williams, Michael Semb Wever for CASSANDRA-16853

ninja: fix version checks in TestNetworkAuth

Follow up to CASSANDRA-16404

wait for node to be available in upgrade tests for Thrift for dense and sparse supercolumn tests

patch by Stefan Miklosovic; reviewed by Benjamin Lerer for CASSANDRA-16892

Add JMX auth test

Patch by Aleksei Zotov; reviewed by Sam Tunnicliffe for
CASSANDRA-16404

Extend network auth test to check deprecated mbean name

Patch by Sam Tunnicliffe; reviewed by Aleksei Zotov for
CASSANDRA-16404

Add test for CASSANDRA-16104

patch by Andrés de la Peña; reviewed by Benjamin Lerer for CASSANDRA-16104

Fix flaky test consistent_bootstrap_test.py::TestBootstrapConsistency::test_consistent_reads_after_move

patch by David Capwell; reviewed by Abe Ratnofsky, Ekaterina Dimitrova for CASSANDRA-16826

Fix TestCqlsh for Cassandra 2.2, except test_client_warnings
patch by Aleksandr Sorokoumov; review by Ekaterina Dimitrova and Brandon Williams for CASSANDRA-15985

Pass enable_scripted_user_defined_functions to clusters with version >= 3.0
patch by Ekaterina Dimitrova, review by Brandon Williams for CASSANDRA-16736

Update timer metrics assertion for Cassandra-16760 (#149)

Add 4_0 to Python DTest's upgrade_manifest for cassandra-4.0.0

 patch by Mick Semb Wever; reviewed by Berenguer Blasi, Brandon Williams for CASSANDRA-16781

BinLog does not close chronicle queue leaving this to GC to cleanup

patch by David Capwell; reviewed by Caleb Rackliffe, Marcus Eriksson for CASSANDRA-16774

Mark counter_leader_with_partial_view_test since 3.0

Patch by Joel Knighton, reviewed by brandonwilliams for CASSANDRA-14028

Ninja remove mention of cassandra_dir in pytest.ini that doesn't work

(CASSANDRA-14651)

Ninja fix all occurences of non-existent self.fail to pytest.fail

Enable DROP COMPACT for thrift upgrade tests

Remove unecessary DROP COMPACT STORAGE

Tests changes for CASSANDRA-16733

Verify that the server can start after changing sstable levels

patch by Andrés de la Peña; reviewed by Berenguer Blasi and Stefania Alborghetti for CASSANDRA-12519

Add TLS test for cqlsh
patch by Brandon Williams, reviewed by Ekaterina Dimitrova, Adam Holmberg and David Capwell for CASSANDRA-16695

CASSANDRA-16729 - user_types_test.py::TestUserTypes::test_type_keyspace_permission_isolation uses retries to avoid flakyness

patch by David Capwell; reviewed by Brandon Williams for CASSANDRA-16729

CASSANDRA-16728 - test_tombstone_failure_threshold_message assert checking if array == string, should check for array truthiness
patch by David Capwell; reviewed by Yifan Cai for CASSANDRA-16728

Move flaky in-jvm fql dtest to python

Patch by brandonwilliams; reviewed by edimitrova for CASSANDRA-16720

dtest for setting hostId upon node startup

patch by Abi Palagashvili; reviewed by Stefan Miklosovic and Paulo Motta for CASSANDRA-14582

Flaky TestConsistency.test_13880

patch by Berenguer Blasi; reviewed by Andres de la Peña for CASSANDRA-16716

Add 4.0.0 branch

Failure to execute queries should emit a KPI other than read timeout/unavailable so it can be alerted/tracked

patch by David Capwell; reviewed by Sam Tunnicliffe for CASSANDRA-16581

ninja fix six >=1.12.0

Flaky TestPaxos.test_replica_availability

patch by Berenguer Blasi; reviewed by Ekaterina Dimitrova for CASSANDRA-16693

Don't pip install ccm in editable mode. Because of the "movable" cassandra-test tag, pip needs to re-install ccm each time.

 patch by Mick Semb Wever; reviewed by David Capwell, Berenguer Blasi, Ekaterina Dimitrova for CASSANDRA-16688

StandaloneVerifier does not fail when unable to verify SSTables, it only fails if Corruption is thrown

patch by David Capwell; reviewed by Marcus Eriksson for CASSANDRA-16683

Fix paxos_test::test_cluster_availability
authored by Ekaterina Dimitrova; reviewed by Berenguer Blasi for CASSANDRA-16657

Fix jmx_test

add bloom filter false ratio tests

Patch by Jaroslaw Grabowski, reviewed by brandonwilliams and paulo for
CASSANDRA-15834

Verifies if BloomFilterFalseRatio takes into account true negatives.
Without this fix, the following scenario (many reads for non-existing
rows) would yield BloomFilterFalseRatio=1.0. With the fix we assume
it should be less then the default bloom_filter_fp_chance.

Flaky TestTransientReplicationRing.test_move_backwards_and_cleanup

patch by Berenguer Blasi; reviewed by Ekaterina Dimitrova for CASSANDRA-16644

Move CASSANDRA-14559s bootstrap_test.py::TestBootstrap::test_node_cannot_join_as_hibernating_node_without_replace_address into a jvm-dtest

patch by David Capwell; reviewed by Stefan Miklosovic for CASSANDRA-16662

Fix test_counters upgrade test for 4.0

patch by Andrés de la Peña; reviewed by Ekaterina Dimitrova for CASSANDRA-16653

python test failures caused by error checks not filtering JAVA_TOOL_OPTIONS

patch by David Capwell; reviewed by Benjamin Lerer for CASSANDRA-16660

Add 4_0_x to Python DTest's upgrade_manifest

patch by Berenguer Blasi; reviewed by Mick Semb Wever for CASSANDRA-16648

Co-authored-by: Mick Semb Wever <mck@apache.org>
Co-authored-by: Bereng <berenguerblasi@gmail.com>

Add gossip tests that were useful while validating CASSANDRA-16588

Patch by Matt Fleming; reviewed by brandonwilliams for CASSANDRA-16632

Fix flaky test_pending_range

patch by Andrés de la Peña; reviewed by Berenguer Blasi for CASSANDRA-16614

Co-authored-by: Andrés de la Peña <a.penya.garcia@gmail.com>
Co-authored-by: Bereng <berenguerblasi@gmail.com>

Remove references to run_dtests.py in the README
Authored by Matt Fleming; reviewed by Michael Semb Wever and Ekaterina Dimitrova for CASSANDRA-16623

Add test for bootstrap when schema changes with removed nodes

Patch by brandonwilliams, reviewed by Adam Holmberg, adelpena and
bdeggleston for CASSANDRA-16577

Relax timeouts and less concurrency for test_contention_many_threads
authored by Adam Holmberg; reviewed by Ekaterina Dimitrova and Benjamin Lerer for CASSANDRA-13517

simplify/harden GPFS test

Patch by brandonwilliams, reviewed by edimitrova for CASSANDRA-13196

Remove flaky annotation from `test_resumable_rebuild` and add ignore-log pattern.

 patch by Gianluca Righetto; reviewed by Ekaterina Dimitrova, Mick Semb Wever, Zhao Yang for CASSANDRA-15892

Fix flaky test_ttl_deletions
patch authored by Berenguer Blasi; reviewed by Ekaterina Dimitrova and Andres de la Pena for CASSANDRA-16530

Reduce data amount and allow one read for reset interval

Patch by brandonwilliams; reviewed by Berenguer Blasi for
CASSANDRA-16472

Tests fixed and new ones added for CASSANDRA-15897

patch by Ekaterina Dimitrova; reviewed by Benjamin Lerer and Brandon Williams

Include column selections in TestCQLSlowQuery

patch by Andrés de la Peña; reviewed by Benjamin Lerer for CASSANDRA-16483

Add annotations to stop running batch write and hinted handoff tests that have been ported to the in-JVM framework in 4.0

patch by Caleb Rackliffe; reviewed by Andrés de la Peña and Ekaterina Dimitrova for CASSANDRA-16181#

incremental_repair_test's test_manual_session_fail, test_manual_session_cancel_non_coordinator_failure and test_manual_session_force_cancel,  migrated to in-jvm dtests

 patch by Marcus Eriksson; reviewed by Adam Holmberg, Mick Semb Wever for CASSANDRA-16425

Add checks to test the RepairMetrics.previewFailures counter

patch by Yasar Arafath Baigh; reviewed by Adam Holmberg, Andrés de la Peña and Benjamin
Lerer for CASSANDRA-16191

fix snitch_test.py::TestGossipingPropertyFileSnitch::test_prefer_local_reconnect_on_listen_address

Patch by mck; reviewed by brandonwilliams for CASSANDRA-16381

add simple removenode test

Patch by brandonwilliams; reviwed by mck for CASSANDRA-16381

Fix selections of JDKs in debian docker images on arm64

 patch by Mick Semb Wever; reviewed by Zhao Renhai,Brandon Williams for CASSANDRA-16428

Fix reg exp in replication_test.TestReplication.test_network_topology to include 4.0 verbs

 patch by Berenguer Blasi; reviewed by Mick Semb Wever for CASSANDRA-16469

Update dtests following CASSANDRA-14973 (#127)

* Specify v5 for pushed notification test if available
* Add v5 to cqlsh protocol negotiation test
* Default to v5 for 4.0

Patch by Sam Tunnicliffe; reviewed by Brandon Williams for CASSANDRA-14973

Disable autocompaction during snapshot test

Patch by brandonwilliams; reviewed by mck for CASSANDRA-16441

Add tests for parent repair session cleanup

patch by Jaroslaw Grabowski and Berenguer Blasi; reviewed by Ekaterina Dimitrova and Andrés de la Peña for CASSANDRA-16446

Co-authored-by: jtgrabowski <jaroslaw.grabowski@datastax.com>
Co-authored-by: Bereng <berenguerblasi@gmail.com>

Fix Cassandra version families, and more…

 - Remove OVERRIDE_MANIFEST, as it is unused.
 - Upgrade manifest, remove upgrades from unsupported indev versions, and remove upgrades to current if indev is still supported.
 - Correct the enforced protocol version to use v3 for 2.2/3.0 upgrades. (ref: CASSANDRA-15193)
 - Fix broken thrift_upgrade_test.py
 - Fix upgrade_udtfix_test.py (not applicable before 3.11.6, ref: CASSANDRA-15035)
 - Remove hardcoded references to gitbox.a.o
 - Remove unnecessary implicit upgrade scenarios. `--upgrade-target-version-only` only tests upgrades from the target version and to the target version, i.e. those upgrade paths where the target (indev) version was the origin or destination version. Previously the filter was applied only for the version family but not on the variant, pulling in completely unrelated upgrade scenarios.

 patch by Jacek Lewandowski; reviewed by Tomek Łasica, Mick Semb Wever for CASSANDRA-16433

Add explicit DC to tests where we have multidc setup

 patch by Berenguer Blasi; reviewed by Ekaterina Dimitrova, Tomek Łasica, Andres de la Peña for CASSANDRA-16411

Add test to verify that a node can join when RF > N in multi-DC

patch by Berenguer Blasi; reviewed by Andrés de la Peña, Ekaterina Dimitrova and Tomasz Lasica for CASSANDRA-16296

Mark tests for short read protection and put-get tests as ported to in-JVM

patch by Andrés de la Peña; reviewed by Caleb Rackliffe, Alex Petrov and Blake Eggleston for CASSANDRA-16180

Update requirements.txt with the new ccm update strategy
Patch by Ekaterina Dimitrova, reviewed by Michael Semb Wever for CASSANDRA-16438

Add explicit DC to tests where we have multidc setup
patch by Berenguer Blasi, reviewed by Tomasz Lasica, Andres de la Peña and Ekaterina Dimitrova for CASSANDRA-16411

Update tests for CASSANDRA-14793

patch by Benjamin Lerer; reviewed by Andrés de la Peña and  Marcus
Eriksson for CASSANDRA-14793

Improve flake8

patch by Tomek Łasica; reviewed by Mick Semb Wever

Handle NodeError as it may be raised from ccm

patch by Tomek Łasica; reviewed by Mick Semb Wever for CASSANDRA-16405

Listing tests (--collect-only and --dtest-print-tests-only) only lists tests that will run according to other arguments specified

This patch fixes behaviour for both `run_dtests.py` and `pytest`.
- Error handling for invalid parameter values / combinations is in a single place (`dtest_config.py`) and is executed before we actually traverse through the tests
- We exit with just a clean error message instead of tons of spam
- `run_dtests.sh` will not loose the exit code of `pytest` any more so we can clearly detect when test cases collection fails
- removed a bit of boilerplate code from `run_dtests.py`, e.g. what it did with xml processing is simply provided with `-q` argument of `pytest`
- tests filtering has been refactored to be cleaner
- fixed filtering of resource intensive tests and other tests (note that except for upgrade tests, we took care only about test method annotations - module level annotations were ignored for vnodes, no_vnodes, no_offheap_memtables and resource_intensive, ...)
- added meta_tests for the filtering and parsing exception handling
- added special parameter --metatests which is enough to run all the meta tests
- fixed Travis configuration so that it runs meta tests

Note that now `run_dtests.py` seems to be redundant. If we need it only for listing dtests, we can simply achieve exactly the same effect using `--collect-only -q --ignore=meta_tests` arguments for `pytest` instead of `--dtest-print-tests-only`, plus  we need to filter output with `grep '.py::'` (in order to not include the summary line) and pipe stdout to the target file. It is now simplified so `run_dtests.sh` just uses `pytest` with those arguments.

patch by Jacek Lewandowski; reviewed by Tomek Łasica and Mick Semb Wever for CASSANDRA-16399

Protocol v5 is only supported in 4.0+ (#116)

Follow up to CASSANDRA-15299

Patch by Sam Tunnicliffe; reviewed by Marcus Eriksson

Fix `--keep-failed-test-dir` on skipped dtests

 patch by Mick Semb Wever; reviewed by Tomek Lasica for CASSANDRA-16397

Explicit node start timeouts

Some tests require longer start timeout than default 90s:
* bootstrap with reset state
* node replacement
* cdc tests (due to checks for other seeds connectivity)

Before: use default timeout, 90s or rather 600s (due to bug in ccm)
After: use explicit timeout per test case: 120s or 180s

 patch by Tomek Lasica; reviewed by Mick Semb Wever for CASSANDRA-16395

Add empty text values to cqlsh copy test

Patch by Aleksandr Sorokoumov, reviewed by brandonwilliams for
CASSANDRA-16372

fix version checking for 4.0+ conditionals

patch by Adam Holmberg; reviewed by Benjamin Lerer, David Capwell for CASSANDRA-16330

start rolling clusters with protocol capping overridden

patch by Adam Holmberg; reviewed by David Capwell for CASSANDRA-16347

override overly strict max protocol in 3.0 upgrade test

patch by Adam Holmberg; reviewed by David Capwell, Sam Tunnicliffe for CASSANDRA-16354

pytest is not meant to run internal parameterized test method

patch by Adam Holmberg; reviewed by David Capwell for CASSANDRA-16331

Fix upgrade python dtest test_static_columns_with_2i - upgrade_tests.cql_tests.TestCQLNodes

patch by Adam Holmberg; reviewed by Caleb Rackliffe, David Capwell for CASSANDRA-16332

Fix upgrade python dtest test_static_columns_with_2i - upgrade_tests.cql_tests.TestCQLNodes

patch by Adam Holmberg; reviewed by Caleb Rackliffe, David Capwell for CASSANDRA-16332

Use the token allocation strategy generator tool for 4.0 vnode clusters, from CASSANDRA-16205

 patch by Mick Semb Wever; reviewed by Adam Holmberg, Paulo Motta for CASSANDRA-16079

Fix upgrade python dtest test_crc_check_chance_upgrade - upgrade_crc_check_chance_test.TestCrcCheckChanceUpgrade

patch by Aleksandr Sorokoumov; reviewed by David Capwell for CASSANDRA-16346

python upgrade tests include tests which are not impacted by the version under test (#106)

patch by David Capwell, Michael Semb Wever; reviewed by Marcus Eriksson, Michael Semb Wever  for CASSANDRA-16328

Merge pull request #104 from ifesdjeen/CASSANDRA-16217-followup

Follow-up: remove tests deprecated by CASSANDRA-16217

Change expected response when role data is corrupt

Patch by Sam Tunnicliffe; reviewed by Adam Holmberg for CASSANDRA-16275

ninja-fix: in boot_strap.py TestBootstrap::_monitor_datadir, variable sstables needs to be defined first (CASSANDRA-15997)

Follow-up: remove tests deprecated by CASSANDRA-16217

Patch by Alex Petrov; reviewed by Ekaterina Dimitrova for CASSANDRA-16217

Explicitly define num_tokens=1 when not using vnodes

Add tests to cover ClientRequest metrics

patch by Adam Holmberg; reviewed by Andrés de la Peña for CASSANDRA-16183

CASSANDRA-15158 give node a bit more time to come up

Fix test_pending_range

Patch by Ekaterina Dimitrova, reviewed by Berenguer Blasi and
brandonwilliams for CASSANDRA-16220

Rename master branch to trunk in cassandra-dtest

 patch by Mick Semb Wever; reviewed by Brandon Williams for CASSANDRA-16166

Set max window correctly.

Patch by Berenguer Blasi, reviwewed by brandonwilliams for
ASSANDRA-15865

When running python dtest and using JAVA_TOOL_OPTIONS to inject cassandra configurations, tests fail as they don't expect this flag in stderr

patch by David Capwell; reviewed by Jordan West for CASSANDRA-16219

Revert "Revert "Add test_truncate_failure""

This restores test_truncate_failure.
This reverts commit 016a0eb38db25ab36e1adabbc0bfe9575212b2ec.

Skip read repair tests ported to in-JMV

patch by Andrés de la Peña; reviewed by Caleb Rackliffe and Benjamin Lerer for CASSANDRA-15977

Revert "Add test_truncate_failure"

This reverts commit 8cb6bd23e62c4d3b4e208d3909361d6812182bc6.

Add test_truncate_failure

Patch by Ekaterina Dimitrova, reviewed by brandonwilliams for
CASSANDRA-16208

Fix file size calculations racing with async file deletions

Patch by Adam Holmberg, reviewed by brandonwilliams for CASSANDRA-16196

Update compact storage related tests

patch by Ekaterina Dimitrova; reviewed by Andrés de la Peña and Sylvain Lebresne for CASSANDRA-16063