La optimización de una base de datos BerkeleyDB JE
-
10-10-2019 - |
Pregunta
planeo para insertar un gran número de claves únicas (~ 3E9) en un BerkeleyDB JE base de datos.
Las teclas tendrá una longitud fija (~ 10 bytes), pero los valores tendrá una longitud variable. La base de datos no será transaccional.
¿Qué parámetros sugeriría usted para la EnvironmentConfig y la DatabaseConfig para optimizar el tamaño y la velocidad de mi base de datos?
Muchas gracias,
Pierre
Solución
OK, he encontrado la solución mediante la utilidad com.sleepycat.je.util.DbCacheSize empaquetado en BerkeleyDB-JE
java -cp je-4.0.103.jar com.sleepycat.je.util.DbCacheSize -records 3000000000 -key 8
Inputs: records=3000000000 keySize=8 dataSize=-1 nodeMax=128 binMax=128 density=80% overhead=10%
=== Cache Sizing Summary ===
Cache Size Btree Size Description
--------------- --------------- -----------
206,574,616,257 185,917,154,632 Minimum, internal nodes only
231,821,163,884 208,639,047,496 Maximum, internal nodes only
To get leaf node sizing specify -data
=== Memory Usage by Btree Level ===
Minimum Bytes Maximum Bytes Nodes Level
--------------- --------------- ---------- -----
184,101,562,500 206,601,562,500 29,296,875 1
1,797,864,968 2,017,591,304 286,102 2
17,551,212 19,696,236 2,793 3
169,668 190,404 27 4
6,284 7,052 1 5
Licenciado bajo: CC-BY-SA con atribución
No afiliado a StackOverflow