Магазин колонн на вершине Hadoop?

Question

Есть ли магазин столбцов, похожий на Vertica, который построен на вершине Hadoop. Я не говорю о HBASE, так как это Sparse Matrix Store и не могу получить уровень сжатия, который может быть достигнут чем -то вроде Vertica?

Спасибо

Answer 1

Вы ищете что -то вроде Rcfile? Это тип файла, который использует столочный магазин внутри.

Answer 2

RCFILE - хорошее начало. RCFILE хранит данные в макете PAX - столбцы в блоках, которые могут быть такими же большими, как размер блока HDFS. На VLDB 2011 есть статья, описывающая еще один столбетический формат хранения здесь и сообщение в блоге с коротким сравнением с RCFile здесь.

Answer 3

Я не работал с Hadoop, но я знаю, что Vertica пытается интегрироваться с Hadoop.

http://www.vertica.com/the-analytics-platform/native-bi-etl-and-hadoop-mapreduce-integration/

Answer 4

Посмотри на хадапт http://hadapt.com/

Это коммерческая версия hadoopdb http://db.cs.yale.edu/hadoopdb/hadoopdb.html Разработано в Йельском университете. Он может работать с основанным на столбце DB (который устанавливается на каждом узле компьютерного кластера), в то время как использует Hadoop для выполнения, устойчивого к неисправности.