1回答
目前，在我的公司中，每个需要从HDFS向用户提供数据的团队都会创建自己的工具来完成这项任务。 我们想要创建一个通用工具，用于通过HTTP从HDFS向我的服务提供快速/实时的数据服务。所谓通用，我的意思是该工具应该只为我选择的添加到配置中的服务提供数据，这应该是用户使用这个通用工具必须执行的唯一操作。这个新工具应该被告知出现在HDFS中的新数据，然后调用某种将数据从HDFS移动到我们的快速存储的作业。 应用程序可以每天或每小时更新它们的数据，但每个服务都可以在不同的时间更新(服务A可以在每天早上7点更新，服务B可以每小时更新一次)。我认为我们不希望使用任何模式，而是希望使用唯一的键和分区日期来
浏览 15提问于2019-10-04得票数 0
3回答
加速Apache和PHP
、、、
在运行PHP的EC2服务器上，有哪些好的模块或系统可以用于缓存，以减少Apache上的负载，您为什么要选择它们？
浏览 0提问于2011-01-29得票数 5
回答已采纳
1回答
我需要开发一个关于“网络设计和评估- HADOOP加速的悬浮合并”的项目，但我是HADOOP新手，我对HADOOP项目或如何将HADOOP功能与GUI结合一无所知。任何具有HADOOP和GUI功能的简单上传和下载项目都可以完成我的任务。。。
浏览 0提问于2015-09-11得票数 0
2回答
1.网站www.xxx.com 开启了CDN加速。并配置一些图片css样式等缓存问题：这样是否 图片被重复缓存了呢？www.xxx.com 的CDN加速 有必要缓存图片吗？
浏览 1305提问于2018-11-06
我计划提高Hadoop MapReduce版本的雅可比方法算法的速度，以处理非常大的数据(20.000 ++方程)。据我所知，加速比指的是并行算法比相应的顺序算法快多少。我已经在hadoop mapreduce和顺序版本中实现了Jacobi方法。
我目前的加速技术是比较mapreduce和顺序版本，包括重复执行mapreduce和顺序版本30次，执行1次迭代。
浏览 3提问于2013-10-26得票数 0
2回答
hazelcast和hadoop之间除了hazelcast之外还有什么不同之处在于内存和hadoop在磁盘上存储数据。
hadoop和hazelcast的不同用例是什么？Hazelcast也支持mapreduce，所以hazelcast是hadoop的最佳替代品？
浏览 1提问于2014-04-08得票数 5
在使用GridGain加速器运行mapreduce作业时，可以获得Hadoop计数器吗？我可以使用我制作的自定义计数器，但似乎内置Hadoop的计数器并不存在。
浏览 0提问于2015-04-09得票数 0
回答已采纳
我一直在尝试使用自定义构建的Hadoop构建自定义Spark (我需要向Hadoop2.9.1应用一个补丁，它允许我在从S3Guard开始的路径上使用s3://)。/dev/make-distribution.sh \ --tgz \ -s3://路径的Spark路径时，我仍然会在Hadoop代码上出现一个错误，我确信在
浏览 0提问于2018-12-17得票数 2
回答已采纳
2回答
我想使用hadoop-2.3中的集中式缓存。1.我要缓存的文件(45M)Found 1 items
-rw-r--r-- 1 hadoop supergroup 47185920 2014-03-09 19:10 /input/pics/bundle/bun
浏览 5提问于2014-03-10得票数 0
我想删除Hadoop集群中的所有缓存文件夹。我已经写下了一些步骤，但我不确定该如何继续编写一个Ansible脚本。总的来说，我理解Ansible，但我有点困惑，我应该为我的需求使用哪些模块。$ sudo服务hadoop-mapreduce-历史性服务器停止$ sudo服务hadoop-纱线-资源管理器停止$ sudo服务hadoop-纱线-nodemanager停止
为我在猫list_of_nodes_in_cluster；做ssh $i
浏览 3提问于2017-08-17得票数 0
我正在使用memcache来缓存对象，但是我想另外添加一个像APC这样的操作码加速器。由于它们都涉及缓存，我不确定它们是否会“互相踩脚趾”，也就是说，我不确定memcache是否已经是一个操作码加速器。
有人能澄清一下吗？我想把它们都用在不同的东西上。memcache用于缓存我的对象，APC用于代码加速
浏览 1提问于2009-12-20得票数 7
回答已采纳
我已经设置并测试了一个伪分布式Hadoop集群( namenode、作业跟踪器和任务跟踪器/数据节点都在同一台机器上)。
浏览 1提问于2011-01-20得票数 0
1回答
我在SLES 10 (SUSE)下运行Hadoop0.20.1。现在，我正在使用temp文件夹和任务id创建一个唯一的文件夹，然后在该文件夹的子文件夹中工作。
浏览 4提问于2010-07-30得票数 4
我在Hadoop v1.1.2上使用Hadoop Accelerator，我完成了hadoop自述文件中给出的配置。致命异常: java.lang.NoClassDefFoundError: org/apache/hadoop/fs/InvalidPathException
浏览 0提问于2014-10-23得票数 0
3回答
用于堆内存访问的高速缓存
、、、、
一般来说，台式机有两种CPU缓存，以加快内存访问速度。2)数据缓存->，用于加速数据的获取和存储。从堆分配的内存没有缓存优势吗？堆内存访问是否包含在数据缓存中？
浏览 1提问于2017-02-13得票数 0
2回答
我的问题是专门针对Hadoop的分布式缓存的概念，以及它是否应该被称为分布式缓存。分布式缓存的一个传统定义是“--分布式缓存跨越多个服务器，以便它可以在大小和事务容量方面增加”。在hadoop中不是这样，因为分布式缓存被分发到所有运行任务的节点，即驱动程序代码中提到的相同文件。
这不应该被称为复制缓存。如果按照传统的分布式缓存定义，那么所有节点上的缓存交集应该为空(或接近它)。但是对于hadoop，
浏览 4提问于2015-12-08得票数 1
回答已采纳
这个错误一直在我的hadoop爬虫中被抛出。在所有节点上都有足够的空闲空间。我不知道如何继续下去。完全错误是：
Error: org.apache.hadoop.ipc.RemoteException(java.io.IOException): File /crawl/segments/20170211181653at org.apache.hadoop.hdfs.server.blockmanagement.BlockManager.chooseTarget4NewBlock(BlockManager.jav
浏览 2提问于2017-02-21得票数 0
我正在为apache使用apache点燃hadoop加速器。当我在~/..bashrc文件中使用此配置时，ignite.sh工作正常，但hadoop不工作，并显示错误。=$HADOOP_PREFIXexport HADOOP_CONF_DIR=$HADOOP_PREFIX&#x
浏览 4提问于2017-03-27得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
即时通信 IM
云直播活动推荐
腾讯云开发者
