腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
如何利用
Hadoop
实时处理Postgres
数据
库?
、
、
我有一个Postgres
数据
库,用于生产服务器,需要定期使用
Hadoop
进行
分析
。在
Hadoop
中进行
的
每一个查询都应该
基于
Postges
数据
库中可能
的
最新版本。不同步是可以接受
的
,但只能延迟几分钟。 如何在
Hadoop
中进行近乎实时
的
数据
分析
?
浏览 4
提问于2015-05-19
得票数 2
回答已采纳
1
回答
我们如何处理
Hadoop
DB中处理过
的
数据
(输出)?
、
、
我是
Hadoop
的
新手,如果我
的
问题太不成熟,我深表歉意。但是,在
基于
Hadoop
的
<e
浏览 2
提问于2015-12-23
得票数 0
1
回答
寻找规模较小
的
类似
Hadoop
的
解决方案
、
、
、
我们有一个大约1000 GB (千兆字节)
的
数据
库,我们正在考虑使用
Hadoop
来执行时间序列
分析
。问题是
Hadoop
需要一些时间才能进入,而且对于我们
的
数据
库大小来说,
Hadoop
实际上是一个超大
的
解决方案。我
的
问题是,是否有人知道更小规模
的
Hadoop
类似的解决方案。它还需要一些类似SQL
的
查询语言。我脑海中唯一浮现
的
就是JBoss Infi
浏览 1
提问于2013-11-20
得票数 2
2
回答
BigData
分析
选择技术栈
、
、
、
我想编写一个应用程序,该应用程序能够从大型生产系统
的
监视
数据
中生成报表并启用交互式
数据
分析
(OLAP)。(我知道,前面有一些有问题
的
权衡决定,但让我们暂时搁置它们。)我确定了基本技术栈
的
下列可能性: 根据我
的</e
浏览 6
提问于2013-06-24
得票数 1
回答已采纳
3
回答
使用java创建带有连接
的
单元表,并使用jdbc程序检查单元表
的
列约束。
、
、
嗨,我正在尝试使用jdbc创建一个带有一些约束
的
单元表表,这给了我一个错误字符串sql1="CREATE sample_hive_table_2 (key1 int主键,value1 string)";System.out.println(sql1);res = stmt.executeQuery(sql1);java.sql.SQLException中
的
异常:查询返回
的
非零代码: 40000,原因:失败: ParseException第1行:在create语句中接近'int‘附近
的
43个不匹
浏览 0
提问于2014-01-16
得票数 1
回答已采纳
3
回答
国内
Hadoop
大
数据
解决方案与传统
的
有何优势?
、
、
浏览 573
提问于2019-03-27
2
回答
是否有
Hadoop
/Mapreduce无法处理
的
业务逻辑?
、
、
我目前有五个表,它们经常接收复制
的
数据
。PL/SQL用于
基于
复杂
的
业务逻辑来转换、清理和聚合这些
数据
。然后将结果放在三个报告表中。 为此,我对使用MongoDB而不是关系
数据
库感兴趣。然而,我认为
Hadoop
将是一个比MongoDB更好
的
选择。我现在正在学习
Hadoop
和Mapreduce,但我感觉
Hadoop
用于
分析
数据
(从
数据
中获得统计值,即客户行为
浏览 5
提问于2013-10-18
得票数 1
1
回答
直接解析json文件并存储到
hadoop
中,直接向
hadoop
查询,根据需要获取
数据
、
、
在我
的
项目中,大量
数据
来自服务器,格式为json。为了获得这个
数据
,一个cron任务被安排每小时运行一次,它返回我们保存到一个文件中
的
那个小时
的
数据
。这组
数据
将用于
分析
目的,并将具有许多测量点,
分析
报告和图表将
基于
这些测量点呈现。现在,由于
数据
量很大,因此决定使用
HADOOP
进行
数据
存储。我读了很多文章,发现有一个用于输入处理
的
映射器文件和一个用
浏览 0
提问于2014-05-26
得票数 0
2
回答
hadoop
与mongodb和
hadoop
对mongodb
、
、
我试图理解mongoDB和
Hadoop
之间
的
关键区别。我理解mongoDB是一个
数据
库,而
Hadoop
是一个包含HDFS
的
生态系统。使用这两种技术处理
数据
的
方式有一些相似之处,但也有很大
的
不同。我不明白为什么有人会在
Hadoop
集群上使用mongoDB,主要是mongoDB比
Hadoop
具有什么优势。两者都执行并行处理,两者都可以与Spark一起用于进一步
的
数据
分析</em
浏览 1
提问于2019-05-07
得票数 0
回答已采纳
5
回答
在scala上有哪些
hadoop
选项
、
、
、
我们正在启动一个
基于
大
数据
的
分析
项目,我们正在考虑采用scala (类型安全堆栈)。我想知道各种scala API/项目,可以用来做
hadoop
,map reduce程序。
浏览 5
提问于2013-01-30
得票数 24
回答已采纳
1
回答
类似于SQL表
的
循环调度,用于跟踪最近
的
活动
我们需要跟踪不同时间段
的
用户活动,如24小时,7天等。我们预计不会有很大数量
的
不同时期,但用户数量将非常大,可能在数百万。每晚cronjob汇总每个用户
的
统计
数据
听起来并不合理。我知道过去我曾用RRD表这样跟踪网络使用情况,但这些只是BerkeleyDB
的
,而且每个统计
数据
必须有一个文件,这是行不通
的
,但这个想法似乎是我想要
的
。有没有我忽略
的
模式/最佳实践?
浏览 1
提问于2011-12-31
得票数 2
回答已采纳
1
回答
Hive能在任何存储系统上工作吗?或者它需要HDFS本身?
、
我
的
问题是,除了HDFS之外,Hive还能在任何其他地方运行吗?就像星星之火,它支持任何
数据
存储吗?
浏览 1
提问于2022-04-15
得票数 0
3
回答
Hadoop
和
分析
?
、
我正在构建一个完整
的
“横向扩展”解决方案,为我们
的
客户提供深入
的
实时
分析
。我希望每个会话长达4分钟,并在4分钟内触发大约20个事件。我会记录开始日期、结束日期,以及会话期间
的
一些计数器(例如点击数)。这大约是每秒8000次插入。我考虑过
Hadoop</em
浏览 3
提问于2011-11-21
得票数 2
2
回答
分布式、错误处理、TB级
数据
拷贝
、
、
、
我们有一个盒子,每天有to
的
数据
(10-20TB),驱动器上
的
每个文件都在to到to
的
任何地方。 我们希望将所有这些文件发送到一组“披萨盒”,在那里他们将消费和处理这些文件。除了distcp (
hadoop
)之外,我似乎找不到任何构建来处理如此大量
的
数据
的
东西。Robocopy/etc不能这样做。有谁知道一个解决方案,可以处理这种类型
的
委托(在披萨盒之间分担工作),并具有可靠
的
文件传输?
浏览 1
提问于2010-10-06
得票数 1
1
回答
对于
Hadoop
:哪个
数据
存储?
、
、
目前,我正在为我
的
实习解决方案,处理多达100.000.000条记录,每天约10栏。我必须保存每一个记录,15天后我们有大约1.500.000.000个记录。
的
情况:所以,每天我收到大约100.000.000条(也许还有几百万条)记录,用这些记录,我必须做一些计算/
分析
。为此,我正在考虑将
Hadoop
用于MapReduce和分布式计算。使用MapReduce模式,我可以创建每组100.000条记录,并将它们分布在集群上,以便进行一些分布式
分析
/计算。 我不知道这是否是一个好
的<
浏览 3
提问于2015-02-11
得票数 0
3
回答
用于处理大
数据
的
MySQL集群与
Hadoop
、
、
、
、
我想知道使用MySQL集群和使用
Hadoop
框架
的
优缺点。什么是更好
的
解决方案。我想听听你
的
意见。我认为使用MySQL集群
的
优点是: 您也可以使用商品硬件。在异构环境中运行
的</
浏览 7
提问于2014-01-29
得票数 2
9
回答
为什么像Vertica/InfoBright/GreenPlum这样
的
面向列
的
数据
库会对
Hadoop
大惊小怪?
、
、
、
馈送
Hadoop
集群并使用该集群将
数据
馈送到Vertica/InfoBright
数据
仓库有什么意义?谢谢!
浏览 6
提问于2011-11-25
得票数 5
1
回答
是否适合生成
数据
仓库事实和维度表?
、
、
、
、
下面是我考虑通过实现
的
场景。 产出将包括: 蓝流
分析
是否适用于这类工作?然而,使维度表保持最新
的
额外工作
浏览 0
提问于2016-02-10
得票数 1
回答已采纳
1
回答
异步Java
、
、
我想知道如果我想要实现一个
基于
java
的
web服务来进行web
分析
,我应该使用什么样
的
体系结构。大
数据
的
实际处理将由
Hadoop
完成。但是,我不确定我需要做什么才能使它异步,或者
Hadoop
本质上已经是异步
的
了吗?我能用JMS做点什么吗?如果是这样的话,那又如何融入整件事情呢?在接收到web服务请求时,我会使用JMS向
Hadoop
发送消息以处理特定
的
数据
,然后等待它返回给我吗?我不
浏览 0
提问于2012-02-23
得票数 4
1
回答
IBM BigInsights (IBM
Hadoop
) vs IBM Watson
、
、
IBM Watson和IBM Inforsphere BigInsights (IBM
Hadoop
)/Streams之间
的
区别是什么?沃森带来了什么BigInsights不会带来
的
东西?
浏览 4
提问于2015-06-17
得票数 4
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
大数据平台搭建:基于Hadoop的数据分析平台
基于hadoop的免费大数据平台有哪些?
基于Hadoop的大数据平台实施——整体架构设计
基于Hadoop架构的可视化大数据挖掘建模平台
后 Hadoop 时代,大数据分析路在何方?
热门
标签
更多标签
云服务器
ICP备案
实时音视频
对象存储
云直播
活动推荐
运营活动
广告
关闭
领券