2回答
如何使用python将数据从hadoop保存到数据库
python、xml、database、hadoop
现在，我所要做的就是，在运行上述命令时，我不希望将输出数据存储在由haddop默认创建的文本文件中，而是希望将数据保存到MYSQL数据库中。因此，我在reducer.py文件中编写了一些python代码，直接将数据写入MYSQL数据库，并试图通过删除如下的输出路径来运行上述命令
哪个命令用于运行hadoop将数据保存到数据库中，
浏览 0提问于2012-11-08得票数 4
回答已采纳
1回答
hadoop架构查询示例
hadoop、hdfs、sqoop
我的问题是，因为这是我第一次使用hadoop，我的计划是将数据从sql数据库传输到hadoop，所以这是否意味着我必须在datanode上安装mysql，而我将使用sqoop和其他东西?
浏览 0提问于2015-12-02得票数 0
3回答
如何使用sqoop import将RDBMS数据导入到特定的配置单元数据库
mysql、database、import、hive、sqoop
我需要使用sqoop将外部数据库从mysql导入配置单元。我的需求是使用sqoop import将包含所有表的完整数据库导入到指定的配置单元数据库。例如，我想导入mysql数据库'hadoop_practice‘以及它的所有表到hadoop_practice数据库中。但是，当我执行以下命令时
$ sqoop import-all-tables --connect jdbc:mysql://
浏览 1提问于2015-01-15得票数 0
1回答
hadoop集群上的存储数据库
hadoop
我正在学习Hadoop和Hive服务器，我对一些事情感到困惑。假设我用三台机器构建了hadoop集群，然后开始用PHP/MySQL脚本存储图像。现在，对于一个MySQL数据库，我可以在同一个Hadoop服务器上安装Hive，还是必须构建另一个Hadoop服务器来使用Hive存储MySQL数据库。是否需要分离Hadoop文件服务器和Hadoop数据库服务器？或者您可以将所有
浏览 0提问于2015-06-03得票数 0
1回答
如何将Hbase与Mysql连接起来
hadoop、hbase
我正在将我的MySQL数据库传输到hdfs。我正在使用Hadoop和HBase。我已经安装了Hadoop和HBase，它们都工作得很好。现在，我想将HBase与MySQL连接起来，不断地将数据从我的MySQL数据库发送到Hadoop/HBase。
浏览 1提问于2015-10-31得票数 1
1回答
是否有一个可以推送大量数据的框架？
hadoop
我们的MySQL和Hadoop平台部署在不同的网络中，Hadoop不能访问MySQL，但是MySQL可以连接到Hadoop。顺便说一句，Hadoop集群在我们的网络中使用了一个Kafka主题，通过在两边部署水槽并连接在一起。但是对于海量的RDS数据，如何实现这一点呢？
浏览 1提问于2019-02-20得票数 0
1回答
Server2 ACID事务不能工作
hadoop、hive、kerberos、hiveql
我使用的是用kerberos保护的Hadoop-2.6.0。已安装server2 1.1.0版本，以derby数据库作为连接and，启用安全性和启用授权。10280]: Error communicating with the metastore (state=42000,code=10280)
错误10280:与亚稳态org.apache.hadoop.hive.ql.lockmgr.LockException:通信错误与org.apache.hadoop.hive.ql.lockmgr.DbTxnManager
浏览 9提问于2015-06-19得票数 1
2回答
在IDEA中在Hive项目上运行Spark时创建事务性连接工厂时出错
apache-spark、hive、apache-spark-sql、metastore
在星火外壳中，一切看起来都很好，我可以使用DataFrame.write.insertInto(“测试表”)通过Spark1.5将数据存储到Hive中的默认数据库中。但是，在IDEA中创建scala项目并使用相同设置的集群运行它时，在mysql中假设为"metastore_db“的亚稳态数据库中创建事务连接工厂时会引发错误。warehouse</value><property>
<name>javax.jdo.option.Conne
浏览 5提问于2015-09-23得票数 6
回答已采纳
2回答
更换HDFS Hadoop
hadoop、hdfs
将hadoop中的HDFS替换为其他NoSQL数据库需要做哪些工作。这其中涉及了多少工作？有没有人有好的wiki或者描述它的链接？它是否与为该数据库实现FileSystem接口一样简单？我找到了几篇关于其他人如何修改hadoop以生成自定义发行版的文章，但还没有找到替换HDFS的指南。
谢谢你，帕特
浏览 0提问于2013-01-26得票数 1
回答已采纳
1回答
Hadoop 2.7.2 HA集群无法启动备用namenode
java、windows、hadoop
我已经在windows中配置了Hadoop-2.7.2HA集群。在org.apache.hadoop.ipc.ProtobufRpcEngine$Server$ProtoBufRpcInvoker.call(ProtobufRpcEngine.java:604) atorg.apache.hadoop.ipc.RPC$Server.call(RPC.java:969) at org.apache.hadoop.ipc.Server$Handler$1.run(Server.javaorg.apache.hadoop
浏览 4提问于2016-02-03得票数 0
1回答
如何将HDFS输出存储到MySQL表中？
mysql、mapreduce、hdfs
现在，我希望将该输出传输到MySQL表中。
如何将输出传输到MySQL？
浏览 0提问于2018-04-28得票数 0
回答已采纳
1回答
如果您使用DAO作为应用程序和数据库之间的接口，则可以将数据库从RDB更改为Hadoop (具有完全不同的表模式)，而无需对应用程序端进行任何修改。(您需要做的就是更改DAO。)如果您使用JPA，那么更改数据库也很容易吗？您可以在不对应用程序进行任何修改的情况下更改数据库吗？如果是，你能告诉我怎么做吗？
浏览 0提问于2019-06-12得票数 0
6回答
Apache :无法实例化org.apache.hadoop.hive.metastore.HiveMetaStoreClient
java、apache、hadoop、hive
我试图安装Apache，我将HIVE_HOME和HADOOP_HOME插入到hive_config.sh中，并将一些Hive复制到$HADOOP_HOME/lib中，但是当我试图使用hive命令启动它时at org.apache.hadoop.hive.ql.session.SessionState.start(SessionState.java:346)
at org.apache.hadoop.hive.cli.CliDriver.runat org.apache.hadoop.hive.m
浏览 4提问于2015-02-24得票数 5
回答已采纳
3回答
是否可以读取MongoDB数据，用Hadoop处理数据，并将其输出到RDBS (MySQL)中？
mysql、mongodb、hadoop、sqoop
摘要：
在单个事务中使用Sqoop导出它。虽然MongoDB在大部分工作中运行良好，但在某些部分，我需要更强的事务性保证，为此我使用了一个MySQL数据库。我了解到，可以使用MongoDB将数据从读取到Hadoop，后者从MongoDB读取数据，在Hadoop中使用MapReduce处理数据，最后将结果输出到MongoDB数据
浏览 8提问于2012-04-01得票数 7
回答已采纳
2回答
Rest与sqoop
rest、hadoop、hdfs、sqoop
我试图将数据从mysql导入到hdfs。我能够使用sqoop完成这一任务，但这也可以通过从api获取数据来完成。
我的问题是何时使用rest 来加载hdfs中的数据，而不是sqoop。
浏览 1提问于2018-09-04得票数 1
2回答
com.mysql.jdbc.exceptions.MySQLSyntaxErrorException:未知数据库
mysql、database、hadoop、sqoop
次级NAMENODE
kings_ba
浏览 4提问于2016-08-11得票数 1
2回答
使用Sqoop将数据加载到HDFS
hdfs、sqoop、webhdfs、sqoop2
我正在寻找将数据移动到HDFS系统的方法，想知道Apache Sqoop是否可以用于从外部REST服务中提取数据？
浏览 2提问于2014-10-01得票数 1
2回答
Sqoop -将所有表从mysql导入到配置单元
mysql、hadoop、hive、sqoop、hiveql
我的mysql数据库中有三个表：
具有两个连接表的parent_table：foo，bar，其中parent_table有许多foo和bar，foo和bar属于parent_table。
浏览 2提问于2014-03-15得票数 0
1回答
mysql问题的Sqoop访问控制
mysql、hadoop、sqoop
在我们的网络中，我们对mysql数据库有非常清晰的访问控制。在编写sqoop命令后，我们发现sqoop正在尝试从hadoop集群中的一台服务器连接mysql。hadoop集群中的服务器将无法连接到mysql数据库。
有没有办法告诉sqoop从我们执行sqoop命令的本地机器上连接到我们的mysql？
浏览 24提问于2021-03-10得票数 0
1回答
sqoop导入显示错误。
hadoop、sqoop
我使用Hadoop2.5.1和sqoop 1.4.6。Sqoop命令异常
Exception in threa
浏览 3提问于2015-05-27得票数 0
云服务器
ICP备案
对象存储
云点播
即时通信 IM
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号