mysql问题的Sqoop访问控制

文章/答案/技术大牛

发布

1回答

mysql、hadoop、sqoop

在我们的网络中，我们对mysql数据库有非常清晰的访问控制。在编写sqoop命令后，我们发现sqoop正在尝试从hadoop集群中的一台服务器连接mysql。hadoop集群中的服务器将无法连接到mysql数据库。有没有办法告诉sqoop从我们执行sqoop命令的本地机器上连接到我们的mysql？

浏览 24提问于2021-03-10得票数 0

1回答

sqoop- CentOS上的导出

mysql、sqoop

我想从Hive => MySQL中使用sqoop-export，我执行了以下有效的命令：服务器:带MySQL 5.0.95的CentOS 5.6 -日志 Hadoop/Hive&#

浏览 1提问于2013-01-29得票数 0

3回答

在sqoop中面临以下命令的问题

mysql、hadoop、sqoop

我在sqoop/lib文件夹中复制了jar文件，我在sqoop中使用的命令是： 14/06/21 08:44:44 ERROR sqoop.Sqoop: Got异常运行Sqoop: java.lang.RuntimeExceptio

浏览 3提问于2014-06-21得票数 0

5回答

从mysql到配置单元的sqoop导入，用户名正在更改(拒绝用户访问)

mysql、hadoop、hive、sqoop

我正在尝试通过sqoop将一些数据从mysql导入到hive中。当sqoop和mysql数据库都在同一台主机上时，它可以工作，否则它会失败。这是我正在执行的查询。[user@xyz ~]$ sqoop import --connect "jdbc:mysql://abc.something.com/test" --username user --passwordxyz上，并且我正在尝试连接到主机abc上的</em

浏览 4提问于2015-08-19得票数 2

2回答

从MySql导入Sqoop失败，在线程"main“java.lang.NoClassDefFoundError中出现异常

mysql、import、hdfs、sqoop

从表employee将数据从MySQL sqoopdb导入到HDFSsqoop import --connect jdbc:mysql://localhost:3306/sqoopdb --usernamesqoop -P --table employee sqoop import --connect jdbc:mysql://localhost:3306/sqoopdb --username sqoop</em

浏览 282提问于2019-03-24得票数 1

2回答

通过oozie执行Sqoop作业

hadoop、sqoop、oozie、hortonworks-data-platform

我已经创建了一个名为TeamMemsImportJob的sqoop作业，它基本上是将数据从sql server拉到hive中。我可以通过unix命令行运行以下命令来执行sqoop作业：如果我创建了一个oozie作业，并在其中包含了实际的独家输入命令，它运行得很好Sqoop command line now >>> 4273 [main] WARN org.apache.sqoop.

浏览 0提问于2014-06-25得票数 1

1回答

java.lang.IncompatibleClassChangeError:找到接口org.apache.hadoop.mapreduce.JobContext，但类是预期的

sqoop、hadoop2

(ToolRunner.java:70) at org.apache.sqoop.Sqoop.runTool(Sqoop.java:218) at org.apache.sqoop.<e

浏览 1提问于2015-10-12得票数 0

2回答

通过Dataproc群集连接到CloudSQL实例的“拒绝访问”错误，即使凭据是正确的

mysql、authentication、google-cloud-platform、google-cloud-sql、google-cloud-dataproc

我试图通过我的MySQL实例上的dataproc集群运行一个简单的查询。一切都在谷歌云上。\ --driver com.mysql.jdbc.Driver \

浏览 3提问于2021-03-15得票数 1

5回答

无法使用Sqoop从Mysql导入表

java、mysql、hive、sqoop

中的demo_poc数据库中的employee表中有5条记录我想将数据导入到sqoop import --connect jdbc:mysql://192.168.1.126:3306/demo_poc --username root --password root--table employee

浏览 6提问于2016-04-11得票数 1

回答已采纳

1回答

将数据从MySQL导入到HDFS: ClassNotFoundException

java、mysql、mapreduce、sqoop、hadoop2

我试图使用Hadoop中的Sqoop从MySQL的"employee“数据库导入"Employee”表。我使用Hadoop版本"2.7.1"，Sqoop版本"1.4.6"，JDK版本"1.8.0_111"，MySQL版本是"5.7.17“。我已经启动了所有Hadoop服务。但是，当我试图从mysql数据库导入表时，我得到了异常。我已经尝试过用中提到的方法来解决我

浏览 7提问于2017-02-06得票数 1

回答已采纳

9回答

mysql的sqoop导入问题

hadoop、hive、hbase、sqoop

我有一个基于cdh5的hadoop ha设置。我尝试使用sqoop从mysql导入表，但失败了，错误如下。ERROR manager.SqlManager: Error reading from database: java.sql.SQLException: Streaming result set com.mysql.jdbc.RowDataDynamic我使用了下面的命令.. sqoop import --connect jdbc:mysql://<<em

浏览 0提问于2015-03-20得票数 5

3回答

Sqoop: ERROR manager.SqlManager:从数据库读取错误: java.sql.SQLException：

java、mysql、sql、hadoop、sqoop

当我试图使用Sqoop将数据从mysql导入到HDFS并运行以下命令时我得到了以下错误错误manager.SqlManager:从数据库读取错误: java.sql.SQLException:流式结果集com.mysql.jdbc.RowDataDynamic@555b6c34仍然处于活动状态我无法理解它是什么，并浏览了许多网站的解决方案，但甚至没

浏览 5提问于2014-10-15得票数 3

回答已采纳

4回答

sqoop与mysql连接中的错误

mysql、sqoop

我已经下载了连接器并将jar文件保存在sqoop/lib文件夹下，即使这样，我也面临着这个问题。@ubuntu：~$ sqoop列表-数据库-连接"jdbc:mysql://localhost“-用户名根-密码根警告: /usr/lib/hcatalog不存在！HCatalog的工作将失败。请将$HCAT_HOME设置为HCatalog安装的根目录。14/01/08 16:20:45警告tool.B

浏览 10提问于2014-01-09得票数 0

1回答

sqoop到mysql导入问题

mysql、hive、sqoop

我使用以下命令将mysql表中的数据提取到一个hive表中：--connect jdbc:mysql://xx.xx.xx.xx/orderdbms \ --username(Sqoop.java:227) at org.apache.sqoop.Sqoop.main(Sqoop.java:236) 15/08/24 11:54:46错误tool.ImportTool:遇

浏览 2提问于2015-08-24得票数 0

1回答

使用Sqoop将来自MySQL的数据加载到Sqoop中

mysql、apache-pig、sqoop、bigdata

我正在尝试使用Sqoop和PIG，所以我看到的几乎所有文档都说，Sqoop用于从MySQL获取数据，并将其放入HDFS存储库中，这样就可以使用PIG来获取这些数据。相反，我想知道我是否可以直接从MySQL表中读取。如果你的回答是肯定的，请你分享一个例子脚本。谢谢我很感激。

浏览 5提问于2017-05-09得票数 2

回答已采纳

1回答

Cloudera Sqoop导入SQL查询出现问题"where“子句

mysql、cloudera、sqoop

使用其中两个表，我尝试查找在accountdevice表中只记录了1个设备的account记录。为此，我生成了以下查询：> --connect jdbc:mysql://localhost/loudacre \(Sqoop.java:236)mysql> describe accountdevice; +-----

浏览 0提问于2018-02-02得票数 0

1回答

无法使用具有不同分隔符的Sqoop从MySql导入数据

hadoop、sqoop

作为Hadoop领域的初学者，我尝试使用Sqoop工具(Version：Sqoop1.4.6-cdh5.8.0)。虽然我提到了各种站点和论坛，但我无法找到可行的解决方案，在其中，我可以使用,以外的任何其他分隔符导入数据。--连接到MySql，用,创建表和记录。mysql> create database GRHadoop; mysql</e

浏览 3提问于2017-04-26得票数 0

回答已采纳

3回答

Sqoop --尽管表中有主键，但导入时发生了拆分错误。

hadoop、hdfs、sqoop、hadoop2、cloudera-quickstart-vm

以MySQL表dept_id为主键| 2 | Fitness | 4 | Apparel | 7 | Fan Shop sqoop import \ --connect "jdbc:mysql://quickstart.cloudera'select * from departments wh

浏览 3提问于2016-08-11得票数 1

回答已采纳

2回答

sqoop将hdfs中的特定列导出到mysql

mysql、sqoop

SQOOP是否支持将hdfs中的特定列导出到mysql？mysql表结构类似于：imei:varchar(100), platform:char(1), packagename:varchar(100), softversion:varchar(20)。如何使用sqoop直接将hdfs文件导出到mysql？

浏览 5提问于2013-10-10得票数 2

2回答

如何使用Sqoop将数据从关系数据库导入沙箱Hive？

sql-server、hadoop、hive、sandbox、sqoop

如何使用Sqoop将数据从关系数据库导入到沙箱中的配置单元。我已经在我的电脑上安装了Horton Works沙箱。Nw我想知道这个迁移。我已经参考了这个链接，但我有一些疑问1，它需要任何Sqoop软件来运行吗? 2，在上面提到的链接中有一些代码，我将把这些代码放在哪里？在Hive query window?

浏览 0提问于2013-06-12得票数 3

回答已采纳

点击加载更多