请问该如何将文本文件数据导入hbase中？

Question

如何将文本文件数据导入hbase中

Answer 1

将Mysql迁移到Hbase主要有三种方法：1、Put APIPut API可能是将数据快速导入HBase表的最直接的方法。但是在导入【大量数据】时不建议使用！但是可以作为简单数据迁移的选择，直接写个代码批量处理，开发简单、方便、可控强。2、MapReduce Job推荐使用sqoop，它的底层实现是mapreduce，数据并行导入的，这样无须自己开发代码，过滤条件通过query参数可以实现。Sqoop是一款开源的工具，主要用于在Hadoop(Hive)与传统的数据库(mysql、postgresql...)间进行数据的传递，可以将MySQL中的数据导进到Hadoop的HDFS中，也可以将HDFS的数据导进到Mysql中。参考Index of /docs。采用如下命令：sqoop import--connect jdbc:mysql://localhost/db--username root -P--table mysql_order--columns "id,name"--hbase-table hbase_order--column-family f--hbase-row-key id--query "select id,name from mysql_order where..."-m 13、采用Bulk load装载数据bulk-load的作用是用mapreduce的方式将hdfs上的文件装载到hbase中，对于海量数据装载入hbase非常有用。需要将MySQL的表数据导出为TSV格式（因为后面使用Import TSV工具），还需要确保有一个字段可以表示HBase表行的row key。