将数据从Squoop导出到Couchbase 5.0

时间:2018-08-18 05:38:06

标签: hive couchbase sqoop

我有一个用例,我需要使用sqoop从蜂巢表中上载2000万行的沙发床。 在ouchbase文档中,我找到了用于Couchbase 2的Couchbase Hadoop连接器1.2,而我正在使用Couchbase5.0。 谁能建议一个升级的连接器现在可用吗? 或任何其他实现此功能的方式。

1 个答案:

答案 0 :(得分:0)

根据latest documentation

  

Couchbase Hadoop连接器已达到寿命终止(EOL)支持。   我们建议将现有的Hadoop集成迁移到支持的   Couchbase Kafka Connector的版本。此外,Couchbase   Hadoop连接器与Couchbase Server 5.x不兼容;因为   它依赖于Couchbase中已删除的TAP feed API   服务器5.x支持DCP提要。

如果由于某种原因不能使用Kafka,那么一个可能的解决方案是将连接器与较旧版本的Couchbase一起使用,然后使用{{将该Couchbase群集连接到运行Couchbase Server 5.x的其他群集。 3}}。

另一种解决方案可能是使用XDCR(它可以连接几乎所有东西,包括Couchbase)。

这些解决方案不受Couchbase的正式支持(Apache Nifi除外),因此您是一个人。