流水线时Redis中的MemoryError

文章/答案/技术大牛

发布

1回答

python、redis、amazon-elasticache、redis-py

我正在使用这个python脚本将数据从一个ElastiCache redis实例迁移到另一个实例。它使用redis流水线来分块迁移数据。但是我得到了一个奇怪的错误： output.append(SYM_EMPTY.join(pieces))RAM没有问题，因为节点有6 GB<e

浏览 19提问于2017-08-31得票数 1

1回答

redis中的流水线vs事务

transactions、redis、pipelining

当我们在Redis中使用事务时，它基本上将事务中的所有命令流水线。当EXEC被触发时，所有命令一起执行，从而始终保持多个命令的原子性。流水线和事务有什么不同？另外，为什么Redis的单线程特性还不够呢？为什么我们明确地需要流水线/事务？

浏览 0提问于2015-03-29得票数 60

回答已采纳

1回答

使用go-redis包实现对redis集群的流水线和事务处理

go、transactions、redis、pipelining

我的需求是使用go实现连接到redis集群的流水线事务。我使用的是go-redis包，它支持redis集群，管道和transactions.How。我不使用go-redis包中的监视键来实现流水线事务。我还研究了实现事务时所需的package.Is监视关键字中的Tx.Pipeline()

浏览 5提问于2016-12-09得票数 1

2回答

spring data redis集群流水线支持

spring、redis、cluster-computing

当连接到redis集群版本时，是否有计划支持spring data redis库的“流水线”操作？流水线操作和非流水线操作之间存在着相当大的性能差异。如果没有这样的计划，还有其他可行的选择吗？

浏览 12提问于2017-02-28得票数 2

2回答

目前，我们的Redis设置包括Jedis +分片。扩容和缩容涉及手动添加/删除分片，这是大量的操作工作。我们也严重依赖流水线，因为我们每秒要做大量的写操作。因此，我们正在研究Redis集群，以自动执行分片过程。然而，对于我们来说，一个破坏交易的因素是Jedis不支持使用Redis集群的流水线：我们知道Codis支持流水线+自动分片，但由于它依赖于Zookeeper，因此需要大量的

浏览 3提问于2018-05-03得票数 2

2回答

redis管道和管道

redis、pipeline

redis流水线的本质是改变流水线中指令的读写顺序。我们通常说流水线是进程间通信的一种手段，而redis流水线是基于套接字的通信，两者不具有可比性，这种理解有问题吗？

浏览 0提问于2020-01-22得票数 0

1回答

使用redis多个数据库的应用程序可以提高性能吗？

database、redis

我的应用程序现在将所有密钥存储在一个redis数据库中。现在，我想对关键字进行分段，以便使用多个DB可以获得性能改进。这个是可能的吗？虽然Redis只是一个线程，但数据在多个数据库中，我希望一个数据库中的数据量会减少，搜索会更快。

浏览 4提问于2016-07-01得票数 0

3回答

过滤Redis* Hash条目*

hash、filter、redis、facet

我使用redis来存储散列，每个散列有大约100 k的记录。我想在给定的散列中实现过滤(面)记录。注意，散列项可以属于n个过滤器。一旦我从集合中获得了哈希键，就可以从哈希中获取相应的条目。这应该会给出属于过滤器的所有条目。假设方法是好<

浏览 3提问于2011-04-15得票数 13

回答已采纳

2回答

红色哨兵和ShardedJedis for ShardedJedisPipeline

java、redis、jedis、redis-sentinel

我最初是在生产中使用集群模式下的Redis。但后来我意识到，如果我使用Redis independent servers使用ShardedJedis java API，我可以使用ShardedJedisPipeline，由于明显的原因，它具有更好的性能但是，在使用Redis Server维护自动故障转移和高可用性时，我必须使用Redis Sentinel。所以，我开始调查Sentinel。但是，在进行初始POC时，我知道不能同时使用S

浏览 12提问于2015-07-14得票数 0

回答已采纳

1回答

是否可以对Redis* bloom filter命令进行流水线处理？*

redis、pipeline、bloom-filter

Redis有一个使用bloom filters的模块： https://oss.redislabs.com/redisbloom/Bloom_Commands/ Redis还允许命令的流水线： https://redis.io/topics/pipelining 具体地说，我希望检查bloom过滤器中是否存在长长的项目列表。在当前的实现中

浏览 13提问于2021-04-15得票数 1

回答已采纳

1回答

如何在c#中使用redis* pipiline(StackExchange.Redis)？*

c#、redis、stackexchange.redis

我目前已经在我的linux系统上测试了redis-benchmark，结果给我留下了深刻的印象。但在基准测试中，我使用了16个命令的流水线。现在我正试着在c#上执行它。我的主要问题是，我想要将数千个随机数据记录到redis中，而我不知道如何使用流水线。提前谢谢。

浏览 0提问于2020-04-09得票数 2

2回答

改进Apache Spark到Redis写入性能

java、apache-spark、redis

我有一个应用程序，使用Apache Spark将键、值数据写入Redis。应用程序工作正常，没有任何问题。但是，应用程序要慢得多。我在这里寻找一些建议，以提高写入吞吐量，并在将数据写入Redis时增加并行性。3]); logger.info("writing key value pairs to Rediscache (Key) :: " + key); jedis.set(key, v

浏览 6提问于2018-12-06得票数 0

1回答

因为redis是单线程的，所以当访问redis时，我们的并发请求会变成序列化的请求。使用redis的意义是什么？

redis

在Spring的项目中，我们通常使用redis进行缓存。我的问题是，因为redis是单线程的，所以在访问redis时，我们的并发请求会变成序列化的请求。那么，使用redis的意义是什么呢？仅仅是因为“CPU成为Redis的瓶颈并不是很常见，因为通常Redis要么是内存受限的，要么是网络受限的。……使用运行在普通

浏览 3提问于2019-05-31得票数 1

3回答

Redis客户端是如何实现流水线的？

redis

在Redis 中，它声明：客户端可以使用相同的连接来发出多个命令。支持流水线，因此客户端可以使用单个写操作发送多个命令，不需要通过读取服务器应答来发出下一个命令。但是，我找不到任何例子说明这是如何实际实现的。Redis客户端是如何实现流水线的？

浏览 6提问于2011-10-28得票数 10

回答已采纳

2回答

规模战略下的NewsFeed与Redis

php、mysql、redis

虽然这一点现在很好，但随着我们用户基础的增长，它将停止运行。进入Redis。目前，我们通过post ID在JSON编码的字符串中存储注释、喜欢之类的内容，并在有更新、添加或删除时更新它们。然后，在代码中，我们循环遍历posts的DB结果，并从Redis存储中提取数据。这导致对Redis的多次调用来构造每个帖子，这比每次访问DB要好得多。Redis只会带我们走这么远，因为我们将达到

浏览 1提问于2016-01-22得票数 0

回答已采纳

1回答

redis-py管道有多少命令？

python、redis、redis-py

我想使用管道来减少我的程序和redis服务器之间的交互次数。有什么建议吗？提前谢谢。

浏览 2提问于2014-11-19得票数 5

回答已采纳

2回答

使用BookSleeve保存对象集合

booksleeve

我对Redis和BookSleeve都是新手。我正在评估我应该使用BookSleeve还是ServiceStack.Redis。ServiceStack似乎要简单得多，但我喜欢BookSleeve提供的流水线的想法。我正在运行Redis和BookSleeve，获取和设置字符串非常容易，但我正在努力寻找设置和获取对象集合的示例，比如我的pocos。

浏览 1提问于2013-01-27得票数 5

回答已采纳

1回答

Redis读/写

redis

Redis是一个单线程进程。这是否意味着所有操作(例如hset、hget等)都是以串行性质执行的-这意味着例如使用以下操作：hget foo:bar name hget只会在hset

浏览 2提问于2012-04-24得票数 1

回答已采纳

1回答

redis分片、流水线和往返

redis、sharding、pipelining

假设在你的web应用程序中，你需要做一些redis调用来渲染一个页面，比如，获取一堆用户散列。为了加快速度，您可以将redis命令包装在一个多/EXEC部分中，从而使用流水线，这样您就可以避免进行多次往返。但是你也想要分片你的数据，因为你有大量的数据和/或你想要分配写。那么流水线将无法工作，因为不同的键可能位于不同的节点上，除非您清楚地了解基于角色的应用程序和分

浏览 0提问于2012-05-09得票数 6

回答已采纳

2回答

从Redis获取多个键值

ruby-on-rails-3、redis

我现在正在使用Redis，我有几个问题。可以从键数组中获取值吗？users:1:age "24" users:2:age "24" 当我执行redis.getevents:1:attendees时，它返回"users:1", "users:2"。但这感觉不对

浏览 1提问于2012-04-15得票数 22

回答已采纳

点击加载更多