Redis-python在一次操作中设置多个键/值

Question

目前我使用基本mset功能来存储键/值;

from common.redis_client import get_redis_client
cache = get_redis_client()
for k,v in some_dict.items():
   kw = {'key': value}
   cache.mset(kw) 

#later:
   cache.get('key')

我分别存储每个键/值(例如,不是在一个json中)因为存储整个dict会把它变成一个字符串,并且需要我在存储和检索时序列化/反序列化,我真的需要访问单独的键/值.

我的问题::有没有办法可以同时使用mset多个键/值？而不是多次写入redis数据库？反之亦然,我可以在一次访问中有多个读取(get)吗？(是的 - 我有很多redis活动正在进行并且负载很重.我确实关心这个)

Answer 1

在Agis评论后更新

如果你使用Redis-py,它是目前推荐的python的Redis客户端,你可以使用流水线操作,它完全符合你的要求.这是一个简单的例子:

>>> r = redis.Redis(...)
>>> r.set('bing', 'baz')
>>> # Use the pipeline() method to create a pipeline instance
>>> pipe = r.pipeline()
>>> # The following SET commands are buffered
>>> pipe.set('foo', 'bar')
>>> pipe.get('bing')
>>> # the EXECUTE call sends all buffered commands to the server, returning
>>> # a list of responses, one for each command.
>>> pipe.execute()
[True, 'baz']

我不知道您使用的是哪个redis客户端,但它支持流水线操作,或者您应该考虑切换到redis-py.

看看关于流水线的redis文档 ; 它解释了你可以期待x5的性能提升 - 但你也不能执行太重要的批量操作(每次执行时10 000次操作都可以).

Answer 2

由于您似乎正在寻找存储字典，因此我看到了另外两种可能的解决方案：

1. 使用HMGET/HMSET命令。这确实允许从字典中获取和设置多个单独的键。缺点是这一切都在一个键上，所以如果您计划单个 dict 条目的密钥到期 - 这在缓存中很常见 - 这对您不起作用。

2. 我决定使用MGET和MSET命令。这允许一次设置多个键并一次检索它们。您已经MSET在示例中使用了(multi set) 命令，但只设置了一个值...

您的示例可能会以这种方式工作：

cache.mset(some_dict)

您需要为字典条目添加一个公共前缀：

cache.mset({'prefix:' + k:v for k,v in some_dict.items()})

通过这种方式，您将能够MGET通过键检索您的 dict 条目。如果您事先不知道这些键，您可以运行KEYS带有“前缀：*”通配符的命令。