HIVE-26349: TestOperatorCmp/TestReOptimization fail silently due to incompatible configuration (Stamatis Zampetakis, reviewed by Peter Vary, Ayush Saxena)

Closes #3398

HIVE-26057: Clean useless methods in QueryWrapper (Zhihua Deng, reviewed by Peter Vary)

Closes #3124

HIVE-26182: Some improvements to make DPP more debuggable (#3257) (Laszlo Bodor reviewed by Rajesh Balamohan)

HIVE-26355: Column compare should be case insensitive for name (Wechar Yu reviewed by Peter Vary) (#3406)

HIVE-26365: Remove column statistics collection task from merge statement plan (Krisztian Kasa, reviewed by Peter Vary, Alessandro Solimando, Aman Sinha)

HIVE-26242: Compaction heartbeater improvements (Laszlo Vegh, reviewed by Karen Coppage, Denys Kuzmenko)

Closes #3303

HIVE-25976: Cleaner may remove files being accessed from a fetch-task-converted reader (Laszlo Vegh, reviewed by Peter Vary, Krisztian Kasa)

Disable flaky test

HIVE-26358: Querying metadata tables does not work for Iceberg tables using HADOOP_TABLE (Peter Vary reviewed by Laszlo Pinter) (#3408)

HIVE-26361: Merge statement compile fails if split update is off (Krisztian Kasa, reviewed by Peter Vary)

HIVE-26319: Iceberg integration: Perform update split early (Krisztian Kasa, reviewed by Peter Vary)

HIVE-26354: Support expiring snapshots on iceberg table (Peter Vary reviewed by Laszlo Pinter) (#3401)

HIVE-26352: Tez queue access check fails with GSS Exception on Compaction (Laszlo Vegh, reviewed by Denys Kuzmenko)

Closes #3402

HIVE-26265: Option to filter out Txn events during replication. (Francis Pang reviewed by Peter Vary) (#3365)

Purpose: Currently, all Txn events OpenTxn, CommitTxn, and RollbackTxn are included in the REPL DUMP, even when the transcation does not involve the database being dumped
(replicated). These events are unnecessary and result is excessive space required for the dump, as well as increasing work that results from these events being replayed
during REPL LOAD.

Solution proposed: To reduce this unnecessary space and work, added the hive.repl.filter.transactions configuration property. When set to "true", extra Txn events
will be filtered out as follows: CommitTxn and RollbackTxn are included in the REPL DUMP only if the transaction referenced had a corresponding ALLOCATE_WRITE_ID event
that was dumped. OpenTxn is never dumped, and the OpenTxn event will be implcitly Opened when REPL LOAD processes the ALLOC_WRITE_ID event, since the ALLOC_WRITE_ID
contains the open transaction ids. The default setting is "false".

Co-authored-by: Francis Pang <fpang@cloudera.com>

HIVE-26128: Enabling dynamic runtime filtering in Iceberg tables throws exception at runtime (#3404) (Adam Szita, reviewed by Peter Vary)

HIVE-25980: Reduce fs calls in HiveMetaStoreChecker.checkTable (Chiran Ravani reviewed by Syed Shameerur Rahman and Peter Vary)(#3053)

HIVE-26021: Change integration tests under DBInstallBase to Checkin tests (Stamatis Zampetakis, reviewed by Peter Vary)

Drop failsafe plugin since it is no longer needed.

Rename tests to better reflect their purpose (not integration tests
anymore) but more importantly to allow Jenkins splitTests step (
https://plugins.jenkins.io/parallel-test-executor/) to pick them up
automatically.

Extend test coverage to include mysql and mssql install/upgrade tests.

Closes #3399

HIVE-26244: Implement locking for the concurrent CTAS (Simhadri Govindappa, reviewed by Denys Kuzmenko)

Closes #3307

HIVE-26334: Remove misleading bucketing info from DESCRIBE FORMATTED output for Iceberg tables (Peter Vary reviewed by Laszlo Pinter) (#3378)

HIVE-26149: Addendum: Fix materialized views removal when non-default MetaStoreFilterHook is configured (Denys Kuzmenko, reviewed by Karen Coppage)

Closes #3395

HIVE-25827: Parquet file footer is read multiple times, when multiple splits are created in same file (#3368) (Adam Szita, reviewed by Peter Vary)

HIVE-26343: Disable TestWebHCatE2e test cause it fails

Closes #3390

HIVE-26240: Add tests for Esri UDFs for Geospatial. (#3385). (Ayush Saxena, reviewed by Mahesh Kumar Behera)

HIVE-26341: Replication logs & metrics shows last repl id as 0 when number of events is zero (Haymant Mangla, reviewed by  Rajesh Balamohan and Mahesh Kumar Behera)

HIVE-26208: Exception in Vectorization with Decimal64 to Decimal casting (#3344)

The exception was happening because the code that casts the Decimal64 to
Decimal was not being added in filtered expressions.

Once this code was added, it caused a regression in check_constraint.q. The
reason for this was because we do not want to convert Decimal64 to Decimal
if the expression explicitly handles decimal64 types. A method was added
to these classes that will prevent the conversion in these cases.

HIVE-26298: Selecting complex types on migrated iceberg table does not work. (addendum) (#3383) (Laszlo Pinter)

HIVE-26310: Remove unused junit runners from test-utils module (Stamatis Zampetakis, reviewed by Ayush Saxena)

Closes #3358

HIVE-26338: Repl Dump should fail if source database does not exist (Haymant Mangla, reviewed by Denys Kuzmenko)

Closes #3380

HIVE-26326: Support enabling background threads when failover is in progress (Haymant Mangla, reviewed by Peter Vary)

Closes #3376

HIVE-26340: Vectorized PTF operator fails if query has upper case window function (Krisztian Kasa, reviewed by Laszlo Bodor)

HIVE-26324: Add one-row-table constraints on NOTIFICATION_SEQUENCE table (Sourabh Badhya, reviewed by Denys Kuzmenko)

Closes #3369

HIVE-26177: Amendment: Initialize datanucleus compaction pool only on HMS Leader & pool sizing (Denys Kuzmenko, reviewed by Peter Vary)

Closes #3372

HIVE-26331: Use maven-surefire-plugin version consistently in standalone-metastore modules (Stamatis Zampetakis, reviewed by Zoltan Haindrich, Ayush Saxena)

Closes #3374

HIVE-26316: Handle dangling open txns on both src & tgt in unplanned failover. (Haymant Mangla reviewed by Peter Vary) (#3367)

HIVE-26298: Selecting complex types on migrated iceberg table does not work. (#3361) (Laszlo Pinter, reviewed by Peter Vary)

HIVE-26321: Upgrade commons-io to 2.11.0 (Naveen Gangam) (#3370)

HIVE-26269 Class cast exception when vectorization is enabled for certain case when cases (#3329)

HIVE-26309: Remove Log4jConfig junit extension in favor of LoggerContextSource (Stamatis Zampetakis, reviewed by Alessandro Solimando, Laszlo Bodor)

Closes #3356

HIVE-25733: Add check-spelling/check-spelling (#2809) (Josh Soref reviewed by Zoltan Haindrich) (Addendum)

HIVE-26299: Drop data connector ifNotExists should not throw NoSuchObjectException (Reviewed by Saihemanth) (#3350)

HIVE-25879: MetaStoreDirectSql test query should not query the whole DBS table (#3348) (Miklos Szurap reviewed by Zoltan Haindrich)

HIVE-25503: Amendment: Null-safe equality comparison (Denys Kuzmenko, reviewed by Karen Coppage, Laszlo Vegh)

Closes #3357

HIVE-26280: Copy more data into COMPLETED_COMPACTIONS for better supportability (Karen Coppage, reviewed by Denys Kuzmenko)

Closes #3340.

HIVE-26142: Extend the hidden conf list with webui keystore pwd (Janos Kovacs, reviewed by Krisztian Kasa)

Co-authored-by: Janos Kovacs <jkovacs@cloudera.com>

HIVE-26184: COLLECT_SET with GROUP BY is very slow when some keys are highly skewed (#3253) (okumin reviewed by Zoltan Haindrich)

HIVE-26307: Avoid FS init in FileIO::newInputFile in vectorized Iceberg reads (Peter Vary reviewed by Adam Szita) (#3354)

HIVE-25733: Add check-spelling/check-spelling (#2809) (Josh Soref reviewed by Zoltan Haindrich)

HIVE-26165: Remove READ locks for ACID tables (Denys Kuzmenko, reviewed by Karen Coppage)

Closes #3235

HIVE-26238: Decouple sort filter predicates optimization from digest normalization in CBO (Stamatis Zampetakis, reviewed by Zoltan Haindrich)

1. Decouple sort filter optimization from digest normalization by
refactoring HiveSortFilterPredicates into a (DFS) visitor. We cannot
use planner or rules cause they make use of digest. Performing this
optimization using a visitor slightly simplifies the code since there
is no need to have a registry since we are not going to visit the same
node twice.

2. Move the optimization after all post-join transformations to avoid
having other optimizations cancel the benefit of the sort filter
predicates.

Closes #3299

HIVE-26301: Fix ACID tables bootstrap during reverse replication in unplanned failover (Haymant Mangla reviewed by Peter Vary) (#3352)

Disable flaky test

HIVE-26300: Upgraded Jackson bom version to 2.12.6.1+ to avoid CVE-2020-36518 (#3351) (Sai Hemanth Gantasala reviewed by Zoltan Haindrich and Ayush Saxena)

HIVE-26296: RuntimeException when executing EXPLAIN CBO JOINCOST on query with JDBC tables (Stamatis Zampetakis, reviewed by Alessandro Solimando, Krisztian Kasa)

Compute selectivity for all types of joins in the same way. There is no
particular reason to throw an exception when the Join operator is not
an instance of HiveJoin.

Closes #3349

HIVE-26290: Remove useless calls to DateTimeFormatter#withZone without assignment (Stamatis Zampetakis, reviewed by Ayush Saxena)

Closes #3342

HIVE-26278: Add unit tests for Hive#getPartitionsByNames using batching (Stamatis Zampetakis, reviewed by Zoltan Haindrich, Krisztian Kasa, Ayush Saxena)

Ensure that ValidWriteIdList is set when batching is involved in
getPartitionByNames.

Closes #3335

HIVE-26293: Migrate remaining exclusive DDL operations to EXCL_WRITE lock & bug fixes (Denys Kuzmenko, reviewed by Peter Vary)

Closes #3103

HIVE-26285: Overwrite database metadata on original source in optimised failover. (Haymant Mangla reviewed by Denys Kuzmenko and Peter Vary) (#3346)

HIVE-26268: Upgrade Snappy to 1.1.8.4 (#3326) (Sylwester Lachiewicz reviewed by Zoltan Haindrich)

HIVE-25635: Upgrade libthrift from 0.14.1 to 0.16.0 (#3327) (Sylwester Lachiewicz reviewed by Zoltan Haindrich)

HIVE-21160: Rewrite Update statement as Multi-insert and do Update split early (Krisztian Kasa, reviewed by Peter Vary, Zoltan Haindrich)

HIVE-26266: Column information is missing from lineage for CTAS when custom/translated location is used (Sourabh Badhya, reviewed by  Zoltan Haindrich)

Closes #3331

HIVE-26289: Remove useless try catch in DataWritableReadSupport#getWriterDateProleptic (Stamatis Zampetakis, reviewed by Ayush Saxena)

Closes #3341

HIVE-26217: Make CTAS use Direct Insert Semantics (Sourabh Badhya, reviewed by Denys Kuzmenko, Peter Vary, Sai Hemanth Gantasala)

Closes #3281

HIVE-26267: Addendum to HIVE-26107: Issue with the PreparedStatement in TxnHandler#compact (Laszlo Vegh, reviewed by Denys Kuzmenko)

Closes #3325

HIVE-26282: Improve iceberg CTAS error message for unsupported types (#3337) (Laszlo Pinter, reviewed by Peter Vary)

HIVE-26270: Wrong timestamps when reading Hive 3.1.x Parquet files with vectorized reader (Stamatis Zampetakis, reviewed by Peter Vary)

Closes #3338

HIVE-26279: Drop unused requests from TestHiveMetaStoreClientApiArgumentsChecker (Stamatis Zampetakis, reviewed by Ayush Saxena)

Closes #3336

HIVE-26228: Implement Iceberg table rollback feature (#3287) (Laszlo Pinter, reviewed by Adam Szita and Peter Vary)

HIVE-26264: Iceberg integration: Fetch virtual columns on demand (Krisztian Kasa, reviewed by Peter Vary)

HIVE-25421: Fallback from vectorization when reading Iceberg's time columns from ORC files (#3334) (Adam Szita, reviewed by Laszlo Pinter)

HIVE-26274: No vectorization if query has upper case window function (Krisztian Kasa, reviewed by Laszlo Bodor)

HIVE-26230: Option to URL encode special chars in hbase.column.mapping that are valid HBase column family chars (#3314) (Adam Szita, reviewed by Peter Vary)

HIVE-26272: Inline util code that is used from log4j jar (#3330). (PJ Fanning, reviewed by Ayush Saxena)

HIVE-25907: IOW Directory queries fails to write data to final path when query result cache is enabled (#2978) (Syed Shameerur Rahman reviewed by Peter Vary)

HIVE-26224: Add support for ESRI GeoSpatial SERDE formats. (#3300). (Ayush Saxena, reviewed by Mahesh Kumar Behera)

HIVE-22670: ArrayIndexOutOfBoundsException when vectorized reader is (#3328) (Ganesha Shreedhara and Abhay Chennagiri reviewed by Peter Vary)

HIVE-26239 Shutdown Hash table load executor service threads when they are interrupted (#3302)

HIVE-26260: Use `Reader.getSchema` instead of deprecated `Reader.getTypes` (#3318)

### What changes were proposed in this pull request?

This PR aims to use `org.apache.orc.Reader.getSchema` instead of the deprecated `org.apache.orc.Reader.getTypes` API.

### Why are the changes needed?

`getTypes` was deprecated.

- https://github.com/apache/orc/blob/main/java/core/src/java/org/apache/orc/Reader.java#L144
```java
  /**
   * Get the list of types contained in the file. The root type is the first
   * type in the list.
   * @return the list of flattened types
   * @deprecated use getSchema instead
   * @since 1.1.0
   */
  List<OrcProto.Type> getTypes();
```

In addition, AS-IS implementation is only a slow-wrapper.
- https://github.com/apache/orc/blob/1e2962064b209f1b00188877f08d4226da85c640/java/core/src/java/org/apache/orc/impl/ReaderImpl.java#L259-L262
```java
  @Override
  public List<OrcProto.Type> getTypes() {
    return OrcUtils.getOrcTypes(schema);
  }
```

- https://github.com/apache/orc/blob/1e2962064b209f1b00188877f08d4226da85c640/java/core/src/java/org/apache/orc/OrcUtils.java#L108-L112
```java
  public static List<OrcProto.Type> getOrcTypes(TypeDescription typeDescr) {
    List<OrcProto.Type> result = new ArrayList<>();
    appendOrcTypes(result, typeDescr);
    return result;
  }
```

### Does this PR introduce _any_ user-facing change?

No.

### How was this patch tested?

Pass the CIs

HIVE-26233: Problems reading back PARQUET timestamps above 10000 years (#3295) (Peter Vary reviewed by  Stamatis Zampetakis) (Addendum)

HIVE-26233: Problems reading back PARQUET timestamps above 10000 years (#3295) (Peter Vary reviewed by  Stamatis Zampetakis)

HIVE-24598: handle null in trim function (Shoubhik Chakraborty, reviewed by Krisztian Kasa)

Co-authored-by: Soubhik Chakraborty <shoubhik.chakraborty@cloudera.com>

HIVE-25589: SQL: Implement HAVING/QUALIFY predicates for ROW_NUMBER()=1 (Krisztian Kasa, reviewed by Zoltan Haindrich)

HIVE-26210: Fix tests for Cleaner failed attempt threshold (Laszlo Vegh, reviewed by Denys Kuzmenko)

Closes #3274

HIVE-26261: Fix some issues with Spark engine removal (#3320) (Peter Vary reviewed by Zoltan Haindrich)

HIVE-26235: OR Condition on binary column is returning empty result (#3305) (Peter Vary, reviewed by Laszlo Bodor)

disable flaky mysql metastore test

Disable flaky tests

HIVE-26258: Provide an option for enable locking of external tables (#3313) (Peter Vary reviewed by Denys Kuzmenko)

HIVE-26252: Missing locks in case of MERGE with multiple branches (Denys Kuzmenko, reviewed by Peter Vary)

Closes #3308

HIVE-26251: Disable vectorization when querying iceberg metadata tables (#3306) (Laszlo Pinter, reviewed by Adam Szita)

HIVE-26237: Check if replication cause metastore connection leakage (Haymant Mangla, reviewed by Denys Kuzmenko, Peter Vary)

Closes #3298

HIVE-26223: Integrate ESRI GeoSpatial UDFs. (#3283). (Ayush Saxena, reviewed by Mahesh Kumar Behera)

HIVE-26231: Generate insert notification events when dynamic partition insert is done on existing partitions ( Sourabh Badhya, reviewed by Denys Kuzmenko)

Closes #3294

HIVE-26225: Delete operations in ObjectStore.cleanWriteNotificationEvents should be performed in different transactions (Haymant Mangla, reviewed by Mahesh Kumar Behera)

HIVE-25444: Make tables based on storage handlers authorization (HIVE-24705) configurable (#3290) (originally contributed by Sai Hemanth Gantasala, committed by Adam Szita, reviewed by Peter Vary)

HIVE-26226: Exclude jdk.tools dep from hive-metastore in upgrade-acid (Sylwester Lachiewicz, reviewed by Stamatis Zampetakis)

The jdk.tools jars are not present in java versions > 8 thus there are
build problems when compiling with newer JDKs.

Exclude the dependency from hive-metastore (2.3.3) to avoid compilation
problems in recent JDKs.

It is safe to so because the dependency will still be fetched
transitively by hadoop-common (2.7.2) when the appropriate maven (JDK)
profile is in use.

Closes #3284

HIVE-26173: Upgrade derby to 10.14.2.0 (Hemanth Boyina, reviewed by Stamatis Zampetakis)

Closes #3243

HIVE-25872: Skip tracking of alterDatabase events for replication specific properties (#2950).  (Haymant Mangla, reviewed by Ayush Saxena andRajesh Balamohan)

HIVE-26205: Incorrect scope for slf4j-api dependency in kafka-handler (Wechar Yu, reviewed by Stamatis Zampetakis)

The classes in the kafka-handler module are using the slf4j-api thus
this dependency must be set at compile scope. Currently it is set at
test scope which makes the build fail in some recent maven versions (
e.g., 3.8.5).

The parent pom declares explicitly slf4j-api at compile scope so
removing all the references from kafka-handler/pom.xml is the way to
go.

Closes #3272

HIVE-26157: Change Iceberg storage handler authz URI to metadata location. (#3226) (Laszlo Pinter, reviewed by Peter Vary)