执行探索性数据分析是任何机器学习项目的第一步，我主要是用熊猫来使用内存中的数据集进行数据探索。熊猫很容易用Python进行数据分析。但是，由于系统内存有限，我发现在Pandas中处理多个更大的数据文件很困难。对于大于RAM大小的数据集.千兆字节
我看过一些教程，其中他们使用星星之火过滤出基于规则的数据，并生成一个适合于内存的数据格式.最终，总有完全驻留在内存中的数据，但我想知道如何使用大数据集并执行探索性数据分析另一个挑战是可视化大数据进行探索性数据分析.如果它适合内存
浏览 0提问于2018-08-03得票数 0
回答已采纳
1回答
深层神经网络与大数据分析
、、、
现在，我有两个主要的和最近出现的领域可供选择，即深度神经网络和大数据分析。然而，我必须选择一个作为我未来的工作领域。
深层神经网络与大数据分析相比，未来还有更大的发展空间吗？
浏览 4提问于2017-06-06得票数 0
回答已采纳
对于像我这样的用户来说，这似乎是一种困惑，因为azure blob存储和蔚蓝数据湖存储有什么主要区别，在哪个用户情况下，azure blob存储比蔚蓝数据湖存储更适合，反之亦然？
浏览 9提问于2020-04-05得票数 4
回答已采纳
我正在使用Hadoop为一个大学项目做一些数据分析。我的大学好心给了我一台机器，系统正在运行Ubuntu。在我把任何东西放到这个系统上之前，我先在我自己的笔记本电脑上测试一下。由于我的“主要工作”是在我的虚拟机上完成的，到目前为止，我在单个集群上使用Hadoop (无视我项目中“大数据分析”部分的全部要点)。
浏览 1提问于2014-04-14得票数 1
1回答
数据分析中的数据量是否重要？
、、、、
因此，我想知道数据分析是否可以通过使用少量的数据来完成，比如存储在database.If中的100到1000个记录--我这样做了--那么它是数据分析吗？有人说，如果你分析的是少量的数据，那根本就不是数据分析。我要提前感谢你
浏览 0提问于2019-02-01得票数 0
回答已采纳
9回答
R有许多针对数据分析(如JAGS、BUGS、ARULES等)的库，并在流行的教科书中被提到，如: J.Krusche，进行贝叶斯数据分析；B.Lantz，“机器学习与R”。我已经看到了5TB的指南，将数据集视为大数据。
我的问题是:R是否适合在大数据问题中通常看到的数据量？在这样的数据集中使用R时是否使用策略？
浏览 0提问于2014-05-14得票数 55
回答已采纳
我已经创建了一个以Azure存储作为HDFS的HDInisght。我想知道是否可以使用webHDFS apis将二进制文件上传到HDFS。同时，我检查了hdfs-site.xml，发现 <name>dfs.webhdfs.enabled</name> <final>true</
浏览 0提问于2020-07-14得票数 0
回答已采纳
2回答
# 1.0#=GF AC CD7.8awk '{print $0 > $2 NR}' RS='//' assignment.txt
浏览 0提问于2018-11-20得票数 0
回答已采纳
2回答
我目前正在做(开始)我的大数据和数据可视化项目。所以请让我知道有没有最好的软件来处理大数据和数据可视化，即数据分析。
浏览 3提问于2013-01-17得票数 0
回答已采纳
3回答
我在大数据分析的图形工具方面是新手。尽管以下内容不是来自大数据，但我想知道是使用什么工具来创建这种复杂的图形：
与论文相关
浏览 5提问于2013-01-11得票数 0
回答已采纳
2回答
让我们想象一下在服务器上完成的非常简单的任务。有许多用户在我们的网站上聊天，我们想知道他们中的每一个人是否在线。但是为什么memcached应该执行得更快呢？如果我理解正确，MySQL还将从内存中读取数据，而不是从磁盘中读取数据(如果设置和调整正确)。用于持久化的资源很少，但也不是太多--只需在磁盘上刷新几个内存页面即可。
浏览 0提问于2013-05-23得票数 3
2回答
大数据分析
、、、、
我正试图分析大量的GitHub存档数据，并被许多限制所困扰。我想绘制每个存储库自创建以来拥有的星星数。(仅适用于目前超过1000的回购)我的另一个选择是搜索我的本地副本，但是在每个文件中搜索一个特定的字符串(存储库名)太长了。在一个SSD驱动器上花了一个
浏览 6提问于2014-08-02得票数 1
回答已采纳
7回答
2月1 号阿斯利康与腾讯达成战略合作，共同为“健康中国”保驾护航，其中腾讯将以大数据为驱动的互联网技术，精准打击药品网络制假售假，那么这是如何实现的呢？
浏览 546提问于2018-03-30
1回答
我对数据科学相当陌生，现在刚刚开始开发一个系统，要求我分析大量数据(例如，每个DB中有500万到600万条记录)。总的来说，我想知道当前处理大数据的技术/趋势是什么(即使用java框架)。
浏览 2提问于2016-11-29得票数 0
回答已采纳
2回答
我想编写一个应用程序，该应用程序能够从大型生产系统的监视数据中生成报表并启用交互式数据分析(OLAP)。(我知道，前面有一些有问题的权衡决定，但让我们暂时搁置它们。)我确定了基本技术栈的下列可能性：
使用数据库值得吗
浏览 6提问于2013-06-24得票数 1
回答已采纳
1回答
度量收集和分析体系结构
、、、、
因此，该系统每天将收到17.28亿条记录。这里有很多问题。
首先，不需要存储所有数据，因为用户只需要指定时间段的图表，因此需要一些聚合。什么样的数据库解决方案适合它？
浏览 0提问于2018-11-26得票数 1
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
