Roll to 0.5.0-incubating release version

DRILL-1372: Separate category B licenses into their own directory in the binary distribution.

Adding a statement about the category B licensed software in the NOTICE files and adding the appropriate reference to MIT licensed source in the LICENSE file for the source distribution.

DRILL-1369: Constrain code compilation cache.

Freeze hive fmpp > freemarker plugin dependency.

Updating fmpp so that is uses a specific version of the free marker plugin, avoiding build failures in situations where freemarker has a failed snapshot release.

Update READMEs

Fix partition bug in hive storage

Decrease slice target to 100,000 records.

Fix allocation errors and bug in external sort

DRILL-1171: Create Drill's implementation of ReduceAggregatesRule, including a new CastHigh function.
DRILL-1342: Fix nullability handling of aggregate functions.

Maven cleanup & pom fixes

DRILL-1366: HBaseRecordReader does not set rowcount correctly if vectors run out of memory in the middle of the row.

Fix for Parquet reader in larger files brought about by more aggressive memory management.

DRILL-1365: output unified coordinates at profile view

DRILL-1307: add support for fixed binary columns in parquet reader.

DRILL-1314: Fix issue reading impala produced files

DRILL-1304: Regression selecting a single column from a parquet file.

Fixed issue with var length dictionary reading.

Reduced memory usage by freeing buffers after we finish reading a page (except for dictionary pages which need to be kept in memory until the entire row group has been read)

Rebased onto merge branch.

Successfully backed out the changes that had changed the structure of the nullable column readers. This re-introduced some redundancy but avoided a bug that was holding up the release. Ended up falling back on the higher level reader API, only in the case where we are reading a dictionary column and then the next page is not dictionary encoded. This can be fixed to use the optimized read instead, but it doesn't conform to the overall structure of the current reader and is a bit difficult to fix.

DRILL-1274: NOTICE and LICENSE for binary distribution (includes DRILL-1267).

DRILL-1334: Make sure to copy operator id while cloning ParquetGroupScan

DRILL-1329: External sort memory fixes

DRILL-1299: Enable short circuit evaluation for case expressions in the run-time generated code.

DRILL-1346: Use HBase table size information to improve scan parallelization

DRILL-1364: Remove extraneous old jersey-* jars from distribution.

DRILL-1315: Allow complex zookeeper string for JDBC connections, same as ODBC.

DRILL-1340: Add support for JDBC metadata.

DRILL-1359 Fix reading and writing of repeated scalar types in Parquet

DRILL-1265: Drill may incorrectly return null when evaluates an expression of repeated list. The fix is to correctly set offsets vectors for repeated list vector.

DRILL-1258 : Fix compile error in generated code when Drill evaluates an expression returning a repeated list

DRILL-1355: Ensure Drill optimizer will use storage plugin specific rules, when a new storage plugin is added.

DRILL-1309: Implement ProjectPastFilterPushdown and update DrillScanRel cost model so that exclusive column so that star query is more expensive than exclusive column projection. Various fixes affecting record reaaders to handle `*` column as well as fixes to some test cases.

exclude parquet files from rat check

Update to latest parquet zero copy version.

DRILL-1354: Fix date truncate functions to use toString helper functions.
Minor cleanup: move the truncate logic in a separate template

DRILL-1353: Fix decimal regressions

DRILL-1313: All text mode for json reader

Current implementation handles nulls that appear while in text mode differently depending if they appear in lists or maps. This allows for a null where a list or map is expected to act the same way it does without text mode enabled. For an expected map it just assumes that the field didn't exist, in which case the leaves below become null filled, and for a list it will default to showing an empty list.

If we are actually inside of a list, a null in JSON will be treated the same as the string "null", which improves over the previous behavior of just dropping the null value all together, as we do not support null values within any of the repeated primitive vectors currently.

Patch has been rebased on top of merge branch.

DRILL-1283: JSON project pushdown.

Allows for users to avoid reading columns of a JSON file, including those that include elements of JSON that drill does not currently support. This can be used to query a subset of an existing file while avoiding elements like schema changes in some columns or nulls in lists that are currently not compatible with Drill.

Patch was revised based on Hanifi's review comments, and then rebased off of the merge branch.

DRILL-1352: C++ Client. Update the decoding of nullable value vectors to read a byte for every nullable bit.

enable mapr profile hbase

Update RPC version number to correspond to changes in nullable buffer from bitmap to bytes.

DRILL-1021: Windows build

DRILL-998: Limit amount of memory used by drill C++ client API

DRILL-1335: Fix merge join operator when compare null against null value.

DRILL-1337 : Fix incorrect query result for TPCH Q13. Stop pulling up local filter from an outer join condition.

DRILL-595, DRILL-811, DRILL-1029: Support select * in view, subquery, table expression in with clause. Most fixes in Optiq.

Bundle the HBase 0.94 jar compiled with Hadoop 2 profile

+ Removed the HBase shaded jar module.

Support for @inject in aggregation functions

Fix initCap function to set outbound position correctly.

Fix issues with Hive function generation to support DrillBuf

Fix test case failures in TestParquetWriter

* Use different table names for different test cases.

Set the BitVector memory to zero on allocation.

Fixed the index check in DrillBuf.

Switch to DrillBuf
Add @Inject DrillBuf
Move comparison functions to memory sensitive ones
Add scalar replacement functionality for value holders
Simplify date parsing function
Add local compiled code caching

DRILL-982: Return nulls for non-existent columns in parquet reader.

DRILL-1312: Use correct index to get partition vectors in ScanBatch

DRILL-1132: WriterPrel should not care about collation trait of the child.

DRILL-1310: Fix assertion in ProjectRecordBatch for certain types of star queries.

DRILL-1322: Fix memory leak when all records in a batch are filtered

Update TestViewSupport so that it doesn't have a null column.

Turn off proguard verbose output.

Fix issue introduced by DRILL-1202 where allocators are being closed after reporting success.
Update ScreenRoot to cleanup before returning success.
Update ScanBatch to cleanup reader in case of limit query to avoid memory leak in ParquetReader.
Update allocators so that we don't have memory leak when using debug options.
Update project record batch so that it doesn't try to return a released remainder.

Pass correct uncompressed data size to BytesInput ctor in ComplexParquetReader

Skip static fields in PojoDataType.

Use Direct Memory in Parquet Writer

DRILL-1281: Shaded hbase jar

DRILL-1281: Use ByteBuffer read codepath in complex parquet reader

DRILL-1281: Read into Direct Memory in Parquet Reader. Requires Hadoop 2.4 or above

DRILL-1295: Select returns null for non pivot fields with a nested select

* Fix DrillTextRecordReader to handle the case when requested columns includes the entire group and a subset.

DRILL-1293: Fix assertion when selecting star column from view that also has star column.

DRILL-1292: Standalone JDBC jar is in distribution.

* The code was already there, it just needed to be uncommented.

DRILL-1278: Fix selecting scalar field from a map with join clause.

DRILL-1277: Rewrite compound identifiers in 'ON' clause as item operator

DRILL-1275: Added disclaimer file.

DRILL-1241: Ensure that Limit produces at least 1 batch with the output schema.

DRILL-1240: Updated NOTICE to 2013-2014.

DRILL-1205: group by causes access to DeadBuf

* Fix an issue that causes calls to splitAndTransferTo malfunction on repeated vector types

DRILL-1178: Double copy in setSafe for VariableLengthVectors

DRILL-1163: Estimate memory and re-planning query + system options UI.

DRILL-1039: Preserve schema even when no rows are copied in RemovingRecordBatch

DRILL-1226: C++ Client Decimal ignores leading zeros for decimal 9 and 18

DRILL-1222: C++ Client. Fix DRILL-1144 compilation on Mac OS

DRILL-1137: C++ Client. Support setting default schema in the connection phase.

DRILL-1245: throw more descriptive error messages if i) json file is invalid ii) also display max record size allowed

DRILL-1249: ensure ResultBatchLoader to check group count to determine if incoming batch has empty values for repeated fields

Reenable producer/consumer.

DRILL-1250 : Fix compilation error in generated code when Drill evaluates an expression that returns a repeated scalar value.

DRILL-1252: Implement Complex parquet and json writers

DRILL-1270: Resize buffers used in workspace vectors for aggregate functions dynamically

DRILL-1239: stop writing to vector if the vector runs out of memory

DRILL-632: JDBC single jar build failing, too many classes

DRILL-1235: Fix null handling in REST interface

DRILL-1236: Create script to verify release artifacts

DRILL-1202: fixes memory leak issues: i) ProducerConsumerBatch should clean up resources ii) FragmentExecutor should clean up gracefully at faulty & non-faulty runs regardless

DRILL-1253: Allocate new container for workspace vectors before exhausting the current container.

DRILL-1214: Disable SV4 handling in FilterRecordBatch

DRILL-1207: Use similar initial allocation size in ObjectVector as used by other vectors

DRILL-1232: Fix unsupported exception while using 'where' clause with partition names

DRILL-1247: Override toString() method in Time (java.sql.Time) class to print millis

DRILL-1246: Fix rounding when scale is zero while casting from varchar ->decimal28/decimal38

DRILL-1216: Fix decimal multiplication when precision can exceed 38

DRILL-1233: Use ObjectHolder interface for Max, Min decimal aggregate functions

DRILL-1063: Fix bug in merge join when value is repeating across batch boundary

DRILL-1234: Building Drill from source distribution fails [addendum]

DRILL-1234: Building Drill from source distribution fails