1回答
为此，我正在考虑将Hadoop用于MapReduce和分布式计算。使用MapReduce模式，我可以创建每组100.000条记录，并将它们分布在集群上，以便进行一些分布式分析/计算。我不知道这是否是一个好的解决办法，但如果你有什么其他我必须考虑的，请告诉我。
除此之外，我还必须存储所有这些记录，并每个月使用它们来改进我每天计算的算法。哪家商店最适合这种情况？
浏览 3提问于2015-02-11得票数 0
我试图在使用Java NIO的分布式系统中发送不同的数据(安全密钥，加密消息)。我的问题是，发送数据的最佳方式是什么？我目前正在使用base64编码发送数据，并将不同的数据添加到单个字符串中。这是好的，还是使用java序列化对象发送数据是好的。
请帮帮忙谢谢
浏览 1提问于2011-05-19得票数 0
2回答
我正在实现一个运行协商一致协议的分布式系统。对于我的问题，我使用的算法并不重要。我关心的是系统中节点之间的通信。我需要一种允许节点间异步消息传递的方法。在侦听节点中，有某些类型的消息应该触发事件。基本上，我有一个可能从给定的node_i调用的函数，它应该向系统中的其他节点发送一条消息，并在其他节点中触发适当的函数。在这个分布式系统中，这些消息需要是异步的。有哪些好的框架或工具可以帮助实现这种类型的通
浏览 7提问于2014-12-09得票数 0
1回答
在分布式系统环境下，我有一个关于数据共享的问题。通常我用的是情景A .我正在将消息从system推送到远程队列，如Amazon /SQS，并且我期望系统B在系统B启动和运行时接收消息。基本上，系统A现在将消息推送到本地队列，本地队列将消息推送给系统A。这方面的先决条件是系统A和B都已启动和运行，并且该队列仅针对系统A，即。没有系统C，D，E.它将
浏览 1提问于2019-02-25得票数 0
回答已采纳
在分布式消息事务处理世界中，我试图了解开发分布式系统所涉及的不同部分。据我所知，您可以使用带有消息队列系统的企业总线来设计消息传递系统。为什么两者兼用是个好主意？通过仅仅针对消息队列系统进行编程可以实现同样的目标吗？将两者结合使用有什么好处？
浏览 7提问于2014-09-20得票数 7
回答已采纳
根据的说法Amazon SQS旨在为其队列中的所有消息提供“至少一次”的。尽管在大多数情况下，每条消息都会恰好传递给应用程序一次，但在设计系统时，应确保多次处理一条消息不会产生任何错误或不一致。
对此主题的一些参考：
浏览 89提问于2012-11-21得票数 25
回答已采纳
OpenStack使用消息传递(我想是默认的RabbitMQ ?)用于节点之间的通信。另一方面，Kubernetes (继承了Google内部的Borg)使用RPC。我知道像Kafka这样的消息平台被广泛用于流数据和日志聚合。但是像OpenStack，Kubernetes，Docker Swarm等系统需要在节点之间进行特定的交互，而远程过程调用似乎是一个自然而然的选择，因为它允许为特定的操作定义API。OpenStack是在评估消息传递与远程过程调用的优缺点后选择消息传递的吗？有没有好
浏览 72提问于2017-12-02得票数 23
1回答
我的工作是分布式系统(Java/EE，netty，protobuf).Wondering如何将文档从客户端发送到服务器，并将其存储在服务器数据库中。任何好的教程，关于如何处理文档。
浏览 1提问于2013-10-07得票数 2
1回答
我需要在两个或更多服务器的分布式系统中设计一个消息转发系统。我对分布式系统非常陌生，也没有从事过服务器间通信的工作。
浏览 3提问于2018-05-06得票数 1
当我在听一个关于分布式系统的有趣的谈话时，我听到人们谈论开销和“间隔”是分布式系统的两个重要特征，以及带宽如何不是衡量速度的好方法。有人能解释一下为什么这是真的吗？首先，我想我们可以从远程文件系统上的远程过程调用开始。什么都行。
浏览 0提问于2011-11-01得票数 -1
1回答
我正在尝试解决在amazon云上为我的应用程序生成分布式计时事件的问题：
服务器收到一条消息。因此，系统必须在X分钟内完成某些操作。我的问题是，在高峰期，系统可能需要每秒处理数百万条消息。此外，在此时间间隔内，收到消息的服务器可能会崩溃。因此，我正在寻找一种分布式解决方案，它可以接收一条消息，然后在几分钟后触发另一条具有保证的消息。我可以自己设计一个分片系统，但我希望一些分布式流媒体框架可以很容易地
浏览 1提问于2014-04-09得票数 1
3回答
共享内存系统性能上的消息传递接口
、、、、
据我所知，并行处理、消息传递、接口和多线程有两种方式。没有消息传递接口，多线程不能用于分布式存储系统；而消息传递接口可以用于“共享内存”和“分布式内存”两种系统。我的问题是与MPI并行并在共享内存系统上运行的代码的性能。此代码的性能是否与多线程并行化的代码范围相同？我的工作是为了进程之间需要在重复通信和通信数组可以是200*200矩阵。
浏览 7提问于2012-05-26得票数 3
回答已采纳
1回答
但是，我经常听到一种观点，认为Go主要关注的是单机，与Erlang不同，它对构建分布式系统没有很好的支持。
那么，有哪些框架和方法可用于构建可靠的分布式系统？
浏览 2提问于2014-07-25得票数 2
回答已采纳
1回答
在具有以下数据流的分布式系统中：
client -> nodeX -> nodeY -> nodeZ谢谢!
浏览 4提问于2010-09-21得票数 0
回答已采纳
6回答
不久前，我阅读了描述分布式关系数据库的，并就如何将论文中的思想应用于我的项目提出了一些想法，这样我就可以使用在集群上运行它的高可用性版本。我的问题是，我没有设计分布式系统及其协议的经验--我在大学里没有参加过关于分布式系统的高级CS课程。因此，我担心能够设计一个协议，它不会导致死锁、饥饿、和其他问题。问题：在哪里可以找到关于设计分布式系统的好材料？有哪些方法可以验证分布式协议是否正常工作？欢迎推荐书籍、学术文章等。
浏览 9提问于2009-02-07得票数 16
2回答
我正在寻找一个好的书籍/博客/资源工程最佳实践(开发，测试，自动化，工具和部署)的分布式系统。我所看到的大多是面向原理、体系结构和算法的书。是否有一本以工程为中心的分布式计算书籍？
浏览 0提问于2011-08-03得票数 0
我正在阅读云供应商针对分布式存储系统的解决方案，如Amazon和Google。什么是不信任的文件系统，云供应商使用不同类型的DFS？谢谢
浏览 0提问于2010-04-17得票数 4
回答已采纳
1回答
RMI与ActiveMQ的区别
、、、、
我目前正在尝试适应多层应用程序(服务器/客户端架构)。为此，我创建了服务接口和相关的服务实现。应用程序的目的是客户端可以从服务器接收数据，也可以将数据发送到服务器，在服务器上将数据存储到数据库中。我看不出这两种方法之间的主要区别？RMI是唯一同步和JMS异步的吗?还有别的吗？
浏览 0提问于2011-11-13得票数 2
回答已采纳
1回答
我的工作是实现一个由节点组成的分布式系统(比如p2p节点)，每个节点(比如A、B、C和D)执行某些功能，并且需要为各种操作进行交互，例如同步操作和其他操作，比如15A节点与一组由5B节点组成的节点进行交互另外，这是使用确认机制来完成的，这样我就可以确定对方收到了消息。如何处理分布式互斥方面，因为我没有中央服务器。我猜每个节点都复制数据，但这听起来有点太昂贵了(更别提愚蠢了)。在实现p2p系统时遵循的基本设计方法是什么，即如何实现程序，使其在接收时被阻塞，同时还可以发送进一步的更新等，同时从其他人那里获得有
浏览 5提问于2009-11-14得票数 2
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
腾讯会议
云直播
对象存储活动推荐
腾讯云开发者
