verifying the number of pages created

corrected javadoc

o added a flag(for internal testing use only) to disable free page reclaimer
o added a test for verifying the internal state of the RM (work in progress)

o changed the reclaimer threshold to 70
o updated space reclaimer to clean the BTree of BTrees
o added a multi threaded test

o run reclaimer in a transaction
o added a test which demonstrates a failed page reclaiming operation when not run inside a transaction
o removed useless imports
o added a flag to skip running reclaimer when a reclaiming operation is in progress

debug statements

fixed tests to pass on windows by closing the recordmanager first before deleting the files

remmoved reference to non-existing variable

o reinstated the copiedPage BTree (reverted the changes made in revision 1613792)
o updated SpaceReclaimer

call next() on cursor to avoid infinite loop

o added a setter for reclaimer threshold
o added a test for reclaimer (in progress)

do not swallo exception

[maven-release-plugin] prepare for next development iteration

[maven-release-plugin] prepare release 1.0.0-M7

Updated the dataStructure image

Added a logger definition for TXNs

Added an (ignored) test for transactions

Speedup: we don't write the recordManager everytime a btree is modified, we do that when a full transaction is committed. Otherwise, we had this page written twice, once when the B-tree was updated, and another one when the BoB B-tree was updated.

o Added a dedicated logger for the transaction : TXN_LOG
o Removed the lock from the AbstractTransactionManager
o Added a map to keep a track of the number of times a page is written
o Fixes in the way we handle transactions in the RM
o Added some explicit generics

Added  a boundary check in the RecordManager.readBytes() method. That will log an error message too.

o Set the caseSize to DEFAULT_CACHE_SIZE if it's 0
o Suppressed some useless code in the browsefrom method

The browse test with 500 random btrees now test the backward browse too.

Refactored the PersistedLeaf browse(K) method. That should fix DIRSERVER-2047

o Fixed the EmptyTupleCursor class

Removed useless code, thanks to Lin Zhao !

o A few optimization in the browse(K) method
o Fixed a NPE (DIRSERVER-20147) applying Lin's suggested patch
o Removed some spurious Sysout.println

o Huge refactoring of the BulkLoad feature. We now are capable to bulk load elements with multiple values
o Removed useless sysout
o Added a setValues() method in Page
o The BtreHeaderOffset and BTreeInfoOffset default value is now NO_PAGE
o The subtrees are now created in one step, then written in a second step, to avoid creating pages that will be immediately reused
o raw keys are marked with the deserialied value as :<K> in the KeyHolder.toString() method
o Fixed a NPE in PersistedLeaf.toString() method

Updated the Javadoc

o Made the BulkLoader a class with static methods
o Externalized the LevelInfo class

o Fixed the browse(K) method
o Partial fix for the sub-btree creation : it's not enough, we need to rewrite the PersistedValue.build() method, but at least, for values with less than 16 values, it works (we weren't writing the created pages to disk, and we still don't for nodes)
o Added some bulkLoader test, @Ignoring the one which failes
o

Fixed the way we count elements in the bulk loader : when two tuples have the same key, they count for one single element.

Use the parameter instead of calling a method

o Fixed the hasNext() method which was returning false when teh cursor was on the end of a page

o Fixed the browse(K,...) method, which was incorrectly positioning the cursor when the key was not found in the BTree, and when the closest higher key was on a next page.
o Added a test to check that the browse method works

Fixed the test which was failing

Fixed the test, which was not injecting all the values

Adding a test that checks we can browse a btree with random keys. Currently, this test is failing, we have some issue in teh way we build the browser.

Bumped up dependency versions

Remove versions managed by parent. Remove slf4j-log4j and commons-io runtime dependency, only required for tests.

Generate manifest by maven-bundle-plugin, switch back to packaging=bundle

[maven-release-plugin] prepare for next development iteration

[maven-release-plugin] prepare release 1.0.0-M6

Added support for multiple-value bulkload.

Added a logger to avoid writing info on the console

Minor cleanup

Using a TreeMap instead of a Set for the bulkloading of elements with multiple-values

Delete the temporary file after the end of the test

o Added a test for multi-values element (@Ignored)

Updated the reference to the latest 'project' version (33)

Removed the log4j dependency (MAVIBOT-36)

o Bulkloader code cleanup
o Deleting the temprorary files when quiting the tests

o Added some tests for the bulkLoader
o Ignored the InMemoryBtreeBuilder atm.

o Fixed the getPage and getReference methods so that they don't throw NPE
o Huge refactoring of the InMemoryBtreeBuilder, which now takes a configuration instance
o Added a toString method to the KeyHolder class
o Added the BulkLoader class which can bulkload a complete BTree (persistent btree only atm)

o Added a getValueComparator() method in Btree
o Renamed the getComparator() method to getKeyComparator()
o Fixed a failing test in PersistedBTreeBuilderTest

Renamed a variable for clarity

Added the setter for the envdir Filepath

Added a TupleComparator which is used when we sort tuples.

o The class now implements Comparable
o Added a Comparator for the keys
o Added the missing hasCode() and equals() methods

Fixed for MAVIBOT-42 : we now create a new instance for each resulting tuple instead of using a class instance

Added some missing Javadoc

fixed the free() method, this was not freeing the associated PageIOs

made the classes serializable

o added support for replacing value of an existing key
o fixed an issue in InMemoryBTree when a key already exists
o fixed an NPE in findLeftMost() findRightMost() of PersistedLeaf of a persisted sub-BTree
o made RevisionName serializable
o added and updated tests

o added a class for reclaiming space by freeing up the copied pages
o the copied pages are now stored in a concurrent hashmap instead of a BTree
o the copied page map is processed after reaching a certain write commit count
o updated a test and removed another unused test

a new data structure to hold revision number and offsets of the copied pages of that revision

Fixed the bad CPB offset (due to a wrong LongArray deserialization)

o made CPB field and checkOffset() method package protected
o added a test that demonstrates bad offset values present in CPB after reloading RM

set nbUsers to zero in the clone

[maven-release-plugin] prepare for next development iteration

[maven-release-plugin] prepare release 1.0.0-M5

Replave the tags/1.0.0-M5 in the scm part by trunk

[maven-release-plugin] rollback the release of 1.0.0-M5

[maven-release-plugin] prepare release 1.0.0-M5

[maven-release-plugin] rollback the release of 1.0.0-M5

[maven-release-plugin] prepare release 1.0.0-M5

Pointed to project 32, moved the properties to the parent pom

Fixed some compilation errors

Rollbacked again... WTF vi mavibot/pom.xml! I still cannot create a tag using the mvn release:prepare command...

[maven-release-plugin] prepare release 1.0.0-M5

Reverted again... Cannot create the tag on SVN :/

[maven-release-plugin] prepare release 1.0.0-M5

Reverted again... Cannot create the tag on SVN :/

[maven-release-plugin] prepare release 1.0.0-M5

rollbacked the release prepare, as we have had a error 500

[maven-release-plugin] prepare release 1.0.0-M5

Added some commented test for free page management

o Added a constant for ROLLBACKs
o Added a check after the RM initialization
o Removed a check that is done too early
o Fixed a BufferUnderflow error : we were trying to read too much data in a pageIO while logging the content of a page

Don't check the firstfree page if it's -1.

removed dependency on ehCache

o replaced ehcache's Cache with LRUMap
o updated PersistedPageHolder constructor to NOT to hold a reference to the Page (this will be reloaded or will be fetched from cache
  this fix helps in avoiding OOM issues during bulkload)

bumped up the slf4j version

added a method to set the value array to null (this is mainly used by the bulk loader to avoid OOM error)

o removed the 'static' qualifier of the header buffer variables
o renamed loggers

added support to create sub-btree manually rather than using a series of insert operations

o avoid copying pages and incrementing revision when the key and value already exist (MAVIBOT-39)
o do not create value holders in sub-btrees (MAVIBOT-38)
o updated serialization code in RecordManager to handle the changes made to sub-btrees
o added a new cursor to browse keys of sub-btree
o added test for KeyCursor

o Use the newBtreHeaders Map only when processing an update, instead of using the current's one. This allow all the modifications to be waiting for the encapsulating transaction to be committed.
o Fixed the TxnLevel counter manipulation : we weren't correctly decrementing it when we got some exception
o Close the recordManager in tests

Merged the with-txns branch into teh trunk

merged trunk changes into the branch

Set the BOB and CPB btrees' cache default size to 1000. That solves the OOM error we get when we inject a lot of elements, as the Cache was unlimited.

Added some check to forbid operations on a BTree without a transactionManager