3回答
我的问题是这个系统的“大图”架构:我看到所有的部分都已经存在(cloudera+mahout)，但是我缺少一个简单的集成解决方案来满足我的所有需求，我不相信最新的技术是在做一些定制的软件.那么，有人能对这样的生产系统(用预测分析显示数据)有所了解吗？这个参考架构？教程/文档？
我研究了一些相关的技术: cloudera/hadoo
浏览 6提问于2012-12-06得票数 11
回答已采纳
我有一个appengine数据存储，我想迁移到google cloud bigtable。做到这一点的最好方法是什么？
谢谢你的回答，亚尼斯
浏览 1提问于2015-05-06得票数 3
3回答
网络规模分析应用的数据库选择
、、、、
我想构建一个类似Google的web应用程序，在该应用程序中，我收集客户最终用户的统计数据，并根据这些数据显示我的客户分析。
由于分析需要，我正在考虑使用OLAP/BI套件，但我不确定它是否适合这种规模。NoSQL数据库？简单的RDBM
浏览 1提问于2010-12-16得票数 7
回答已采纳
1回答
如何对非基于Windows的数据集进行恶意软件分析？在物联网中，很大一部分设备既不基于windows，也不基于Linux、Mac和Android。它们是传感器和执行器，可能是用于非x86/x64平台的防暴和其他操作系统。驻留设备的CPU结构是否影响测试环境中的恶意软件分析？更重要的是嵌入了这样的</e
浏览 0提问于2017-09-26得票数 3
关于大查询，我有几个问题: 1.我们能在google云平台上上传文本文件并检索所需的数据吗？如果是的话怎么可能。2.我的主要目标是将大量数据上传到云平台，分析数据，并在需要时检索所需的信息。数据可以是结构化的，也可以是非结构化的。
浏览 8提问于2016-07-21得票数 0
需要从oracle数据库中提取数据并存储在Google云平台中。数据大小约为10 TB。有没有可能通过Spark？数据必须每月传输一次。在GCP中存储和处理的数据如下：
Oracle数据库到云存储(不必做CSV导出)，然后它将是干净的，并准备在Dataprep中，这将通过数据流进一步处理，最后它将被存储在Big Query下(从大查询数据科学家将使用数据<
浏览 2提问于2019-11-17得票数 0
我正在开发一个用于传感器数据和预测分析的大数据解决方案。我是大数据的新手，读过关于lambda-架构的文章。我考虑过将Cassandra数据库与Hadoop一起使用。如果我从物联网设备接收数据，是否应该先将数据保存在Hadoop中，然后保存到Cassandra？lambda架构在批处理层具有Hadoop，接收数据并将其发送到nosql数据库<em
浏览 2提问于2016-11-22得票数 4
我的红移数据库中有3个表，每隔几秒钟，数据就会来自S3中的3个不同的csv文件。一个表有大约30亿条记录，另外两个表有大约1亿条记录。为了接近实时报告的目的，我必须将这个表合并到一个表中。
浏览 2提问于2016-08-23得票数 0
我在为我的公司编写最简单的分析系统。我有大约100个不同的事件类型，应该收集每几十个项目。我们不感兴趣的跨项目的分析请求，但事件有相似的类型通过所有的项目。我使用PostgreSQL作为这个系统的主存储器。现在我应该决定哪种架构更可取。
First architecture是一个非常大的表(按行数计算)，它包含所有类型事件的数据。它大约有20列或更多列，其中许多列是可空的<
浏览 0提问于2014-11-25得票数 0
我的公司正在创建一个多租户数据架构，以支持对多个不同客户端上传的数据进行分析。数据库是。有人建议，按客户端ID对数据库进行分区可能是管理数据卷的一种好方法(随着时间的推移，这可能是相当大的，当然是数十亿行)。
这是个好主意吗为什么或者为什么不？
浏览 0提问于2011-03-11得票数 5
2回答
哪个谷歌云存储最适合我的数据
、、、、
我正计划将我的整个系统迁移到google云平台。目前，我正在运行mysql、apache、nodejs和角js的组合。随着数据呈指数增长，Mysql的速度越来越慢。系统处理大数据分析。我需要具有最短查询时间的IO密集型数据库。目前，我已经构建了mysql数据库，并且根据应用程序的要求，我需要非常频繁地查询数据以获取分析数据和原始数据</e
浏览 4提问于2017-08-11得票数 1
回答已采纳
1回答
数据保存到S3中的文件中，每个会话都记录在带有一些元数据的数据库中。到目前为止，我们正在使用RDS来实现这个目标。访问数据文件执行接受数据文件并产生结果(另一个文件或JSON)的代码(版本托管)
在某个数据库中注册分析步骤(哪个？)这样做的目的
浏览 0提问于2021-12-20得票数 0
在我们的大数据时代，您的IT基础架构可能会受到各种来源数据涌入的影响。最重要的是，客户要求“实时”查看他们的数据，没有任何延迟时间，因此您的服务器需要快速处理和显示数据。Kafka是一个分布式流媒体平台，使公司能够创建实时数据源。Uber，Twitter，Airbnb，Yelp以及今天财富500强公司中超过30％的公司都在使用它。例如，通过集成各
浏览 7159提问于2018-09-14
2回答
如何构建一个分析性BI平台？
、、、、
我正在为一家中型公司做一个新的BI项目。目前还没有分析基础设施，报告是在Excel中手工完成的。有几个不同的数据源(来自不同的系统，如计费)需要集成来执行报告和分析。其中一些是数据转储，需要一些自定义转换才能进入数据库就绪表单。它们有大量的列。这些需要处理，所需的列过滤和聚合等。通常有大约50 GB的数据每天产生，并将被插入到现有的表每天。我们已经确定像Verti
浏览 0提问于2014-08-31得票数 1
当我来自一家规模小得多的公司时，我正努力准备在一家FAANG公司接受一些面试。面试过程的一部分包括数据建模和ETL设计。我听说过像我这样的公司使用OBT或"One Big“方法，通过消除对JOIN的需求，使分析师的生活更加轻松，并提高查询性能。此外，如今存储成本如此之低，而且大多数现代DWs (Redshift、BiqQuery等)都采用了基于柱状结构的体系结构，我认为我们可以安全地抛开对额外冗余的担忧(在两个表中出现两次相
浏览 0提问于2022-03-29得票数 1
1回答
我正在寻找一些关于为一个简单的ETL工作构建一个架构的指导。我已经构建了一个解决方案，但我正在寻找方法来改进或尝试另一个体系结构。这里是我的用例：
为此，我构建了一个解决方案，用户可以将csv格式的源数据上传到云存储。我使用云函数来监视云存储
浏览 2提问于2018-08-03得票数 0
双方一致同意建立长期合作伙伴关系，充分发挥各自优势，共同推动互联网、大数据、云计算、物联网、人工智能等在轨道交通产业领域的应用。
浏览 1447提问于2018-07-24
1回答
最近，我一直在比较火花和Flink的一个全新的项目。在这个项目中，流功能不是那么重要。对~(90) is数据进行批量分析是最重要的。稍后，我将在数据分析中应用ML和数据挖掘。在搜索时，我发现很多文章，演示和视频声称Flink是下一代的分析解决方案。没有多少文章能为火花辩护。另一方面，星火是(或曾经？)非常流行，并广泛部署在非常大的生产系统。我的问题是：对于我<em
浏览 5提问于2017-05-19得票数 3
回答已采纳
2回答
例如,
潜在的用例-基于摄入的数据执行功能/更改/更新的用例。在架构上，给出一个创建防未来
浏览 2提问于2021-07-20得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
腾讯会议
云直播
对象存储活动推荐
腾讯云开发者
