negozio Colonna in cima Hadoop?
-
10-10-2019 - |
Domanda
C'è un negozio di colonna simile a Vertica che è costruito in cima ad Hadoop .. Io non sto parlando di HBase come è negozio di matrice sparsa e non può ottenere il livello di compressione che può essere raggiunto da qualcosa come Vertica?
Grazie
Soluzione
Siete alla ricerca di qualcosa di simile a rcfile ? Si tratta di un tipo di file che utilizza un negozio colonnare internamente.
Altri suggerimenti
rcfile è un buon inizio. Rcfile memorizza i dati in un layout PAX - colonnari all'interno dei blocchi che potrebbe essere grande come la dimensione dei blocchi di HDFS. V'è una carta alla VLDB 2011 che descrive un altro formato di archiviazione a colonne qui e un post con una breve confronto con rcfile qui .
Non ho lavorato con Hadoop, ma so Vertica ha cercato di integrarsi con Hadoop.
http: // www .vertica.com / the-analisi-platform / native-bi-ETL-e-Hadoop MapReduce-integrazione /
Guarda sul Hadapt http://hadapt.com/
Questa è una versione commerciale di HadoopDB http://db.cs.yale.edu /hadoopdb/hadoopdb.html sviluppato alla Yale University. Può funzionare con un DB colonna orientato (che viene installato su ogni nodo di un cluster di computer) mentre leverismi Hadoop per l'esecuzione FTA.