sqoop 相关问题

自2012年3月以来,Sqoop是一个开源的顶级Apache项目.Sqoop是一个开源连接框架,有助于在多个关系数据库管理系统(RDBMS)和HDFS之间进行传输。 Sqoop使用MapReduce程序导入和导出数据;进口和出口是并行进行的。

Sqoop不会将NULL值导入HBase

我有以下命令从Oracle导入到Hbase:sqoop-import -Dsqoop.hbase.add.row.key = true -Dhbase.zookeeper.quorum = zk.localdomain --verbose --connect jdbc:oracle:thin:@ 127.0.0.1:...

回答 1 投票 0

SQOOP - 导入失败:无法从空字符串创建路径

我正在使用SQOOP增量更新将表从SQL服务器加载到HBase表。但SQL表中的空值不会导入HBase。我知道Hbase不支持空值...

回答 2 投票 0

与sqoop-import相关的查询?

场景:我已将数据从SQl Server导入HDFS。存储在HDFS目录中的多个文件中的数据如下:part-m-00000 part-m-00001 part-m-00002 part-m-00003问题:我的......

回答 3 投票 1

如何使用sqoop验证?

能否请你帮我解决以下几点。我今天有一个带有大量no.of记录的oracle数据库 - 假设5TB数据,所以我们可以使用vaildator sqoop框架 - 它将验证并导入...

回答 1 投票 0

Sqoop增量导入新记录

我有一个包含emp_id从1到10的表,其中emp_Id = 6不存在,我通过创建Sqoop作业在追加模式上做了增量Sqoop。之后,我想添加两个新的emp_id ...

回答 1 投票 0

使用Sqoop创建HDFS到RDBMS - 表创建

我最初有HBase数据,我导出到HDFS,生成一个名为'part-00000'的文件。现在,我想使用Sqoop将HDFS导出到MYSQL中。我试着运行这个Sqoop命令,** $ bin / ...

回答 1 投票 0

java.lang.NoSuchMethodError:org.apache.commons.io.FileUtils.isSymLink(Ljava / io / File;)Z

我在使用来自不同机器(即从机)的oracle db的sqoop(主机)导入数据时收到此错误。我也替换了commons.io.jar文件。

回答 4 投票 2

在sqoop命令中设置Hadoop用户

我想以另一个用户身份运行sqoop命令。我可以在运行sqoop作业之前设置HADOOP_USER_NAME命令,如下所示:export HADOOP_USER_NAME = desiredUser sqoop import \ -D mapreduce.map.memory ....

回答 2 投票 1

CCA175的Sqoop / Hive:获取表AlreadyExistsException

我正在准备我的CCA175考试。我试图将mysql数据库retail_db导入到配置单元但是收到此错误。我尝试了几次,也从这些文件夹中删除了目录/文件; /用户/...

回答 2 投票 0

Sqoop:Avro与Gzip Codec失败

当尝试使用带有--as-avrodatafile和GzipCodec的Sqoop将表导入HDFS时,它失败了以下异常,我正在运行这个CDH7 Cloudera快速入门泊坞窗图像我们有...

回答 1 投票 1

Sqoop导入所有不与Hive数据库同步的表

我使用sqoop工具通过使用下面的脚本将MySQL数据库表导入Hive。 sqoop import-all-tables --connect“jdbc:mysql://quickstart.cloudera:3306 / retail_db”--username = retail_dba --password = ...

回答 3 投票 -1

在Linux上使用窗口身份验证的Sqoop和MSSQL失败

我使用apache sqoop使用窗口身份验证连接mSSQL服务器,但我运行时无法登录:sqoop list-databases --connect jdbc:sqlserver://192.168.xx.xx:1433; username = xxxxx; .. 。

回答 6 投票 1

sqoop:import-all-tables不导入所有表

我用过:sqoop import-all-tables --m 1 --connect jdbc:mysql://quickstart.cloudera:3306 / retail_db --username retail_dba --password cloudera --hive-import --create-hive-table - -hive-overwrite --hive -...

回答 1 投票 0

来自oracle的sqoop导入行为

我想使用Sqoop从oracle数据库导入大表到HDFS。由于表大小很大并且它具有主键,因此sqoop可以并行运行多个映射器。我有一些问题1)由于......

回答 1 投票 0

由于java.io.IOException:nextKeyValue中的SQLException,Sqoop导入失败

我正在使用Sqoop import命令连接三个表数据并将数据从Oracle导入Hive。查找下面的表数据计数。从table1中选择count(*); - 40446561从...中选择计数(*)

回答 1 投票 0

sqoop进口实木复合地板尺寸

我的问题是,我有一个500k行的Oracle表。我设置sqoop将其作为镶木地板文件导入HDFS。我将--num-partition参数设置为32,然后我得到32个镶木地板文件,但是,一个......

回答 2 投票 0

如何将oracle表导入hive表

我试图使用sqoop将oracle表导出到hive表:sqoop import --connect jdbc:oracle:thin:@ :1521: - 用户名 - 密码 - 表

回答 2 投票 0

Sqoop命令 - 缺少选项的参数:merge-key

使用cloudera中sqoop命令中的lastmodified和--merget-key选项进行表导入。它在执行命令时抛出缺少的参数异常。这是我的命令[cloudera @ quickstart~] ...

回答 1 投票 0

Sqoop导入具有带有where子句和并行处理的SQL查询

我在mysql中有一个如下表:Order_Details:+ --------- + ------------ + --------------- ---- + -------------- + ...

回答 1 投票 0

sqoop导入的数据但是有空的part-m-00000文件?

使用Apache sqoop将数据从oracle数据库导入HDFS时。它是导入但空文件。 sqoop import --connect jdbc:oracle:thin:@ 192.168.0.15:1521:XE --username system --password ...

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.