将庞大的批量数据文件自动导入apache cassandra

时间:2017-05-30 15:32:23

标签: cassandra insert

我有1198个CSV文件,每个超过一千兆字节。我想将它们全部导入Apache Cassandra表。有没有办法自动完成?

1 个答案:

答案 0 :(得分:1)

如果要将所有csv导入单个表,请将所有csv移动到目录中。即data现在您可以将完整目录导入表中,让我们说data_table

COPY data_table FROM 'data/*';

顺便说一下,你要导入大量数据,你应该

  • 使用CQLSSTableWriter生成SSTable
  • 使用sstableloader加载现有SSTable