HIVE-25400: Move the offset updating in BytesColumnVector to setValPreallocated

This change moves the update to the sharedBufferOffset to setValPreallocated. It
also means the internal code also needs to call setValPreallocated rather than
use the direct access to the values.

Fixes #2543

Signed-off-by: Owen O'Malley <oomalley@linkedin.com>

HIVE-25386: hive-storage-api should not have guava compile dependency

Fixes #2531

Signed-off-by: Owen O'Malley <omalley@apache.org>

Update storage api to version 2.8.1

HIVE-25190: Fix many small allocations in BytesColumnVector

Fixes #2408

Signed-off-by: Owen O'Malley <oomalley@linkedin.com>

Update storage-api to 2.8.0

Preparing for storage-api 2.7.3 release

Change-Id: I62e79331e02d94418999344f786c2dc916d3c241

HIVE-25179: Support all partition transforms for Iceberg in create table (#2333) (Laszlo Pinter, reviewed by Adam Szita, Marton Bod and Peter Vary)

HIVE-24663 : Reduce overhead of partition column stat updation during batch loading of partitions. (Mahesh Kumar Behera, reviewed by Denys Kuzmenko)

HIVE-25117: Vector PTF ClassCastException with Decimal64 (#2286)

HIVE-25203: HiveQueryResultSet and client operation are not expected to be closed twice (#2353) (Laszlo Bodor reviewed by Prasanth Jayachandran, Panagiotis Garefalakis)

HIVE-25180: Update netty to 4.1.60.Final (#2345)

HIVE-25165. Generate & track statistics per event type for incremental load in replication metrics. (#2321)(Ayush Saxena, reviewed by Aasha Medhi)

* HIVE-25165. Generate & track statistics per event type for incremental load in replication metrics.

* Add Fallback Value.

* Add NoOpReplStat tracker and thread safety.

HIVE-25133. Allow custom configs for database level paths in external table replication. (#2296)(Ayush Saxena, reviewed by Aasha Medhi)

* HIVE-25133. Allow custom configs for database level paths in external table replication.

* Fix Test.

* Add in description.

HIVE-24987: Introduce a exception list to skip incompatible column change check (Vihang Karajgaonkar, reviewed by Yongzhi Chen)

Closes (#2336 )

HIVE-25183: Inner Join condition parsing error in subquery (Soumyakanti Das, reviewed by Jesus Camacho Rodriguez)

Closes apache/hive#2302

HIVE-25104: Backward incompatible timestamp serialization in Parquet for certain timezones (Stamatis Zampetakis, reviewed by Jesus Camacho Rodriguez)

Closes apache/hive#2282

HIVE-23756: Added more constraints to the package.jdo file (Stephen Carlin, reviewed by Jesus Camacho Rodriguez)

Closes apache/hive#2340

HIVE-25163 UnsupportedTemporalTypeException when starting llap (#2322)

### What changes were proposed in this pull request?
Use LocalDateTime instead of Instant to generate an llap version string when HIVE_VERSION is not set.

### Why are the changes needed?
The current code throws a  java.time.temporal.UnsupportedTemporalTypeException,
making it impossible to start the llap jobs when HIVE_VERSION  is not set.

### Does this PR introduce _any_ user-facing change?
No.

### How was this patch tested?
Built Hive and started llap successfully

HIVE-25178 : Reduce number of getPartition calls during loadDynamicPartitions for External Tables (#2338)(Narayanan Venkateswaran, reviewed by  Rajesh Balamohan)

HIVE-25159:Remove support for ordered results in llap external client library (Shubham Chaurasia, reviewed by Harish JP, Anishek Agarwal)

HIVE-25166: Query with multiple count(distinct constant) fails (Krisztian Kasa, reviewed by Jesus Camacho Rodriguez)

HIVE-25161: Implement partitioned CTAS for iceberg tables (#2316) (Marton Bod, reviewed by Peter Vary and Laszlo Pinter)

HIVE-24920: TRANSLATED_TO_EXTERNAL tables may write to the same location (#2191) (Zoltan Haindrich reviewed by Naveen Gangam)

HIVE-25162: Add support for CREATE TABLE ... STORED BY ICEBERG statements (#2317) (Laszlo Pinter, reviewed by Marton Bod and Peter Vary)

HIVE-25177: Add Additional Debugging Help for HBase Reader (David Mollitor reviewed by Miklos Gergely)

HIVE-25057: Implement rollback for hive to iceberg migration (#2219) (Laszlo Pinter, reviewed by Marton Bod and Peter Vary)

HIVE-25176: Print DAG ID to Console (David Mollitor reviewed by Miklos Gergely)

HIVE-25102: Cache Iceberg table objects within same query (#2261) (Laszlo Pinter, reviewed by Marton Bod and Peter Vary)

HIVE-25155: Bump ORC to 1.6.8 (#2313)

HIVE-25062 Iceberg: Fix date partition transform insert issue (Peter Vary reviewed by Marton Bod and Laszlo Pinter)

Closes #2228

HIVE-24537: Optimise locking in LlapTaskSchedulerService (#2224)

### What changes were proposed in this pull request?
Optimise locking in LlapTaskSchedulerService

### Why are the changes needed?
Perf optimization

### Does this PR introduce _any_ user-facing change?
No

### How was this patch tested?
TestLlapTaskSchedulerService

HIVE-25160: Automatically pass on iceberg-handler jar as job dependency (Adam Szita, reviewed by Laszlo Pinter and Peter Vary)

HIVE-24956: Add debug logs for time taken in the incremental event processing (Arko Sharma, reviewed by Pravin Kumar Sinha)

HIVE-25112: Simplify TXN Compactor Heartbeat Thread (David Mollitor reviewed by Karen Coppage)

HIVE-24761: Support vectorization for bounded windows in PTF (#2099) (Laszlo Bodor reviewed by Ramesh Kumar Thangarajan)

HIVE-25132: HiveOperationType should be ReadDatabases for default policy in ranger (#2294) (Sai Hemanth Gantasala, reviewed by Yongzhi Chen)

HIVE-25113: Connection starvation in TxnHandler.getValidWriteIds (#2272) (Yu-Wen Lai, reviewed by Denys Kuzmenko  and Kishen Das )

* Pass dbConn to the function getOpenTxns so that it doesn't request another connection from pool
* Add a test that set connection pool size to 1

HIVE-25080: Create metric about oldest entry in "ready for cleaning" state (Antal Sinkovits, reviewed by Karen Coppage)

Closes #2297.

HIVE-24810: Use JDK 8 String Switch in TruncDateFromTimestamp (David Mollitor reviewed by Panagiotis Garefalakis)

HIVE-25151: Remove Unused Interner from HiveMetastoreChecker (David Mollitor reviewed by Miklos Gergely)

HIVE-25152: Remove Superfluous Logging Code (David Mollitor reviewed by Miklos Gergely and Panagiotis Garefalakis)

HIVE-25142 : Rehashing in map join fast hash table causing corruption for large keys (#2300)

(Mahesh Kumar Behera, reviewed by Pravin Kumar Sinha and Panagiotis Garefalakis)

HIVE-25054: Upgrade `jodd-core` dependency to get rid of CVE-2018-21234 (Abhay Chennagiri, reviewed by Jesus Camacho Rodriguez)

Closes apache/hive#2217

HIVE-25034: Implement unpartitioned CTAS for Iceberg (#2243) (Marton Bod, reviewed by Laszlo Pinter and Peter Vary)

HIVE-25139: Filter out null table properties in HiveIcebergMetaHook (#2298) (Laszlo Pinter, reviewed by Marton Bod and Peter Vary)

HIVE-25079: Create new metric about number of writes to tables with manually disabled compaction (Antal Sinkovits, reviewed by Karen Coppage)

Closes #2281.

HIVE-24499: Throw error when connector driver jar is not in classpath(Saihemanth Gantasala via Naveen Gangam)

HIVE-24911: Metastore: Create index on SDS.CD_ID for Postgres (#2090) (Laszlo Bodor reviewed by Panagiotis Garefalakis and Attila Magyar)

HIVE-25046: Log CBO plans right after major transformations (Stamatis Zampetakis, reviewed by Jesus Camacho Rodriguez)

Change to avoid the following shortcomings:
1. If there is a failure (exception) in some transformation step
intermediate plans are lost, thus losing track of which plan led to the
problem.
2. Intermediate logs are useful for identifying plan problems while
working on a patch; unfortunately the logs are explicitly disabled in
test mode which means that in order to appear the respective code needs
to change every time we need to see those logs.
3. Logging at the end necessitates keeping additional local variables
which makes the code slightly harder to read.

It also adds some additional logging which was not present at all
before.

Closes apache/hive#2205

HIVE-25126: Remove Thrift Exceptions From RawStore getCatalogs (David Mollitor reviewed by Miklos Gergely)

HIVE-25109: CBO fails when updating table has constraints defined (Krisztian Kasa, reviewed by Zoltan Haindrich)

HIVE-25037: Create metric: Number of tables with > x aborts (Antal Sinkovits, reviewed by Karen Coppage)

Closes #2199.

HIVE-24909: Skip the repl events from getting logged in notification log (Haymant Mangla, reviewed by Pravin Kumar Sinha)

HIVE-24924. Optimize checkpointing flow in incremental load. (#2105)(Ayush Saxena, reviewed by Aasha Medhi)

HIVE-24852. Add support for Snapshots during external table replication. (#2043)(Ayush Saxena, reviewed by Aasha Medhi)

* HIVE-24852. Add support for Snapshots during external table replication.

* Address Review Comments.

* Review Comm 2

* Add Filter Check.

* Address Review Comments.

HIVE-24974: Create new metrics about the number of delta files in the ACID table (Denys Kuzmenko, reviewed by Karen Coppage)

Closes (#2148)

HIVE-25088: Create qtest-iceberg module inside itests (#2239) (Laszlo Pinter, reviewed by Adam Szita)

HIVE-24840: Materialized View incremental rebuild produces wrong result set after compaction ADDENDUM (Krisztian Kasa, reviewed by Jesus Camacho Rodriguez, Peter Vary, Zoltan Haindrich)

HIVE-25075: Hive::loadPartitionInternal establishes HMS connection fo… (#2234)

HIVE-25072: Optimise ObjectStore::alterPartitions (#2235)

HIVE-21935: Hive Vectorization : degraded performance with vectorize UDF (Mustafa Iman, reviewed by Laszlo Bodor, Panagiotis Garefalakis and Rajesh Balamohan)

Change-Id: I45e89412a1f50f1ab6a2494bb692ef7f4fc58a7e

HIVE-25121: Fix qfile results due to disabling discovery.partitions (#2279) (Yu-Wen Lai, reviewed by Yongzhi Chen)

HIVE-25107: Classpath logging should be on DEBUG level (#2271) (Laszlo Bodor reviewed by Panagiotis Garefalakis)

HIVE-25092. Add a shell script to fetch the statistics of replication data copy tasks. (#2249)(Ayush Saxena, reviewed by Aasha Medhi)

* HIVE-25092. Add a shell script to fetch the statistics of replication data copy tasks.

* Make Path Optional.

* Added to packaging.

HIVE-24816: Jackson version changed to 2.11.0 in the pom files (#2075) (Sai Hemanth Gantasala, reviewed by Yongzhi Chen)

HIVE-25039: Disabling discovery.partitions config for external tables (#2201) (Sai Hemanth Gantasala, reviewed by Yongzhi Chen)

* HIVE-25039: Disabling discovery.partitions config for external tables

* Generated the output with the patch which removes discover.partitions for tables

* Space missing in the output file

HIVE-25105: Support Parquet as MV storage format (Jesus Camacho Rodriguez, reviewed by Krisztian Kasa)

Closes apache/hive#2263

HIVE-25116: Exclude slf4j from hive-exec uber Jar included by avatica (Andras Katona, reviewed by Denys Kuzmenko)

Closes (#2275)

HIVE-24596: Explain DDL For Debugging (#2033)

HIVE-25108: Do Not Log and Throw MetaExceptions (David Mollitor reviewed by Miklos Gergely)

Do not exclude avatica and protobuf for Iceberg (#2260) (Marton Bod, reviewed by Laszlo Pinter)

Co-authored-by: Marton Bod <mbod@cloudera.com>

HIVE-25044: Parallel edge fixer may not be able to process semijoin edges (#2207) (Zoltan Haindrich reviewed by Krisztian Kasa)

HIVE-25100: Use default values of Iceberg client pool configuration. (#2258) (Laszlo Pinter, reviewed by Adam Szita and Marton Bod)

HIVE-25066: Show whether a materialized view supports incremental review or not (Krisztian Kasa, reviewed by Jesus Camacho Rodriguez)

HIVE-25071: Number of reducers limited to fixed 1 when updating/deleting (Krisztian Kasa, reviewed by Jesus Camacho Rodriguez)

HIVE-24451: Added schema changes for MSSQL in External datasource feature (Saihemanth Gantasal via Naveen Gangam)

HIVE-25083: Extra reviewer pattern (#2237)

HIVE-24883 : Support ARRAY/STRUCT  types in equality SMB and Common merge join (Mahesh Kumar Behera, reviewed by Stamatis Zampetakis)

HIVE-24730: Shims classes override values from hive-site.xml and tez-site.xml silently (#1941) (Laszlo Bodor reviewed by Peter Vary and Mustafa Iman)

HIVE-25021: Divide oldest_open_txn into oldest replication and non-replication transactions (Antal Sinkovits, reviewed by Karen Coppage)

Closes #2195.

HIVE-25089: Move Materialized View rebuild code to AlterMaterializedViewRebuildAnalyzer (Krisztian Kasa, reviewed by Jesus Camacho Rodriguez)

Improve Table#getEmptyTable performance by disabling registerAllFunctionsOnce (#2251)

HIVE-24900: Failed compaction does not cleanup the directories (Ramesh Kumar Thangarajan, reviewed by Gopal V, Karen Coppage, Peter Varga, Denys Kuzmenko)

Closes (#2086)

HIVE-25076: Get number of write tasks from jobConf for Iceberg commits (#2233) (Marton Bod, reviewed by Peter Vary)

HIVE-25033. HPL/SQL thrift call fails when returning null (amagyar) (Attila Magyar, reviewed by Mustafa Iman)

HIVE-24806: Compactor: Initiator should lazy evaluate findUserToRunAs() (#2229)

HIVE-24201: WorkloadManager can support delayed move if destination pool does not have enough sessions (Pritha Dawn, reviewed by Nikhil Gupta, Sankar Hariappan)

Signed-off-by: Sankar Hariappan <sankarh@apache.org>
Closes (#2065)

HIVE-25065: Implement ALTER TABLE for setting iceberg table properties (#2230) (Laszlo Pinter, reviewed by Marton Bod and Peter Vary)

HIVE-25064: Create separate shader maven module for Iceberg libraries (Adam Szita, reviewed by Marton Bod, Peter Vary and Laszlo Pinter)

HIVE-25059. Alter event is converted to rename during replication. (#2223)(Ayush Saxena, reviewed by Aasha Medhi)

HIVE-24998: IS [NOT] DISTINCT FROM failing with SemanticException (Soumyakanti Das, reviewed by Jesus Camacho Rodriguez)

Closes apache/hive#2163

HIVE-24992: Incremental rebuild of MV having aggregate in presence of delete operation (Krisztian Kasa, reviewed by Jesus Camacho Rodriguez)

HIVE-25049: LlapDaemon preemption should not be triggered for same Vertex tasks (#2215)

HIVE-24472: Optimize LlapTaskSchedulerService::preemptTasksFromMap (#2123)

Moving the (compute intensive) selection of preemption candidates to a separate thread

HIVE-24962: Implement partition pruning for Iceberg tables (Peter Vary reviewed by Laszlo Pinter and Marton Bod)

HIVE-25007: Implement insert overwrite for Iceberg tables (#2178) (Marton Bod, reviewed by Peter Vary and Laszlo Pinter)

HIVE-24914: Improve LLAP scheduling by only traversing hosts with capacity (#2108)

HIVE-25047: Remove unused fields/methods and deprecated calls in HiveProject (#2206)

HiveCalciteUtil#getVirtualCols is no longer used so it is removed as
well.

HIVE-25050: Disable 'hive.metastore.acid.truncate.usebase' config as it's introducing backward incompatible change (Denys Kuzmenko, reviewed by Peter Vary)

Closes (#2212)

HIVE-25052: Fix issue when inserting empty result set (#2213) (Marton Bod, reviewed by Peter Vary)