当前位置: 首页 > news >正文

【python】python进阶——Redis模块

目录

引言      

一、Redis与Python的初次邂逅

1.1 为什么选择Redis?

1.2 安装redis-py

二、连接Redis:基础与高级配置

2.1 基础连接

2.2 带参数连接

2.3 使用连接池提升性能

三、Redis数据类型操作详解

3.1 字符串(Strings)

3.2 哈希(Hashes)

3.3 列表(Lists)

3.4 集合(Sets)

3.5 有序集合(Sorted Sets)

四、高级功能与实战技巧

4.1 数据过期与自动清理

4.2 管道(Pipeline)批量操作

4.3 事务(Transactions)保证原子性

4.4 发布/订阅模式

五、实战应用场景

5.1 缓存实现

5.2 会话存储

5.3 限流器

六、性能优化


引言

        Redis作为一种高性能的键值存储系统,在缓存、会话存储、消息队列等场景中发挥着重要作用。结合Python使Redis的强大功能更易利用,本文将详细介绍如何使用Python操作Redis。

一、Redis与Python的初次邂逅

1.1 为什么选择Redis?

Redis是一款开源的内存数据结构存储,可用作数据库、缓存和消息代理。它支持多种数据结构(字符串、哈希、列表、集合等),并提供持久化功能。

1.2 安装redis-py

redis-py是Python与Redis交互的官方推荐库,安装简单:

pip install redis

二、连接Redis:基础与高级配置

2.1 基础连接

建立与Redis的基本连接:

import redis
​
# 最简单连接(默认localhost:6379,数据库0)
r = redis.Redis()
print("成功连接到Redis!" if r.ping() else "连接失败")

2.2 带参数连接

实际生产环境中通常需要更多参数:

import redis
​
try:r = redis.Redis(host='your_redis_host',  # Redis服务器地址port=6379,               # 端口,默认6379password='your_password', # 认证密码db=0,                    # 数据库索引(0-15)decode_responses=True,   # 自动将字节数据解码为字符串socket_connect_timeout=5, # 连接超时时间(秒)socket_timeout=5         # 操作超时时间(秒))# 测试连接r.ping()print("成功连接到Redis!")
except redis.exceptions.ConnectionError as e:print(f"连接失败: {e}")

关键参数解析

  • decode_responses=True:让redis-py自动将返回的字节数据解码为字符串,省去手动解码步骤

  • socket_connect_timeout:控制连接建立的超时时间,避免程序长时间阻塞

  • socket_timeout:控制命令执行超时时间,提升应用稳定性

2.3 使用连接池提升性能

在高并发场景下,使用连接池可以显著提升性能:

import redis
​
# 创建连接池
pool = redis.ConnectionPool(host='localhost',port=6379,password='your_password',db=0,decode_responses=True,max_connections=10  # 连接池最大连接数
)
​
# 从连接池获取连接
r = redis.Redis(connection_pool=pool)
​
# 使用连接
r.set('pool_test', '连接池工作正常')
value = r.get('pool_test')
print(value)  # 输出:连接池工作正常

连接池的优势在于复用连接,避免频繁创建和销毁连接的开销,特别适合Web应用等高并发场景。

三、Redis数据类型操作详解

3.1 字符串(Strings)

字符串是Redis最基本的数据类型:

# 基本设置和获取
r.set('username', 'john_doe')
r.setex('temp_session', 3600, 'session_data')  # 带过期时间(秒)
​
# 批量操作
r.mset({'key1': 'value1', 'key2': 'value2', 'key3': 'value3'})
values = r.mget('key1', 'key2', 'key3')
​
# 数字操作
r.set('counter', 10)
r.incr('counter')  # 增加1
r.incrby('counter', 5)  # 增加5
r.decr('counter')  # 减少1
​
print(r.get('counter'))  # 输出:15

3.2 哈希(Hashes)

哈希适合存储对象:

# 设置哈希值
r.hset('user:100', 'name', 'Alice')
r.hset('user:100', 'age', 30)
# 或使用mapping参数批量设置
r.hset('user:101', mapping={'name': 'Bob', 'age': 25, 'city': 'New York'})
​
# 获取数据
name = r.hget('user:100', 'name')
all_data = r.hgetall('user:101')  # 获取所有字段
​
print(f"用户100姓名: {name}")
print(f"用户101全部数据: {all_data}")

3.3 列表(Lists)

Redis列表是基于链表实现的,适合做队列、栈等结构:

# 列表操作
r.lpush('tasks', 'task1', 'task2', 'task3')  # 左侧插入
r.rpush('tasks', 'task4')  # 右侧插入
​
# 获取元素
first_task = r.lpop('tasks')  # 左侧弹出
last_task = r.rpop('tasks')  # 右侧弹出
​
# 获取范围元素
all_tasks = r.lrange('tasks', 0, -1)  # 获取所有元素
​
print(f"第一个任务: {first_task}")
print(f"所有任务: {all_tasks}")

3.4 集合(Sets)

# 集合 - 无序且唯一
r.sadd('tags', 'python', 'redis', 'database', 'python')  # 重复元素自动去重
​
tags = r.smembers('tags')
print(f"标签集合: {tags}")  # 输出: {'python', 'redis', 'database'}
​

3.5 有序集合(Sorted Sets)

# 有序集合 - 带分数排序
r.zadd('leaderboard', {'Alice': 100, 'Bob': 90, 'Charlie': 120})
top_players = r.zrevrange('leaderboard', 0, 1, withscores=True)  # 降序排列
​
print(f"排行榜前两名: {top_players}")

四、高级功能与实战技巧

4.1 数据过期与自动清理

Redis可以设置键的生存时间,实现数据自动过期:

# 设置键的过期时间
r.setex('session_token', 3600, 'encrypted_token_data')  # 1小时后过期
r.expire('existing_key', 600)  # 设置已有键的过期时间(10分钟)# 检查剩余时间
ttl = r.ttl('session_token')  # 获取剩余生存时间(秒)
print(f"会话令牌剩余生存时间: {ttl}秒")# 监控数据生命周期
import time
r.set('temp_data', '重要但会消失的数据', ex=60)  # 60秒后自动删除while True:remaining = r.ttl('temp_data')if remaining > 0:print(f"数据剩余寿命:{remaining}秒")time.sleep(10)else:print("数据已自然消亡")break

4.2 管道(Pipeline)批量操作

使用管道可以显著提升批量操作的性能:

import redisr = redis.Redis(decode_responses=True)# 创建管道
pipe = r.pipeline()# 添加多个命令到管道
for i in range(1000):pipe.set(f'key:{i}', f'value:{i}')# 一次性执行所有命令
results = pipe.execute()print(f"批量插入了{len(results)}条数据")

管道通过减少网络往返次数来提升性能,特别适合批量数据插入场景。

4.3 事务(Transactions)保证原子性

Redis事务可以确保一系列命令的原子性执行:

# 基本事务
pipe = r.pipeline(transaction=True)  # 开启事务模式try:pipe.multi()  # 开始事务pipe.set('account:A', 100)pipe.set('account:B', 100)pipe.execute()  # 执行事务print("事务执行成功")
except redis.exceptions.RedisError as e:print(f"事务执行失败: {e}")# 使用WATCH实现乐观锁
def transfer_funds(source, destination, amount):with r.pipeline() as pipe:try:# 监视源账户键pipe.watch(source)# 检查余额是否足够current_balance = int(r.get(source) or 0)if current_balance < amount:pipe.unwatch()print("余额不足")return False# 开始事务pipe.multi()pipe.decrby(source, amount)pipe.incrby(destination, amount)pipe.execute()print("转账成功")return Trueexcept redis.WatchError:print("账户余额已被其他操作修改,转账失败")return False# 测试转账
r.set('account:A', 500)
r.set('account:B', 500)
transfer_funds('account:A', 'account:B', 100)

4.4 发布/订阅模式

Redis支持发布/订阅消息模式:

# 订阅者
import threadingdef subscriber(channel_name):pubsub = r.pubsub()pubsub.subscribe(channel_name)for message in pubsub.listen():if message['type'] == 'message':print(f"收到消息: {message['data']}")# 启动订阅线程
thread = threading.Thread(target=subscriber, args=('news',))
thread.daemon = True
thread.start()# 发布者
r.publish('news', 'Hello, subscribers!')
r.publish('news', '这是第二条消息')

五、实战应用场景

5.1 缓存实现

def get_user_profile(user_id, cache_timeout=3600):# 尝试从缓存获取cache_key = f"user_profile:{user_id}"cached_data = r.get(cache_key)if cached_data:print("从缓存获取数据")return cached_data# 缓存不存在,从数据库获取print("从数据库获取数据")user_data = f"用户{user_id的详细信息}"  # 模拟数据库查询# 存入缓存r.setex(cache_key, cache_timeout, user_data)return user_data

5.2 会话存储

def create_user_session(user_id):session_id = f"session:{user_id}"session_data = {'user_id': user_id,'username': 'john_doe','last_login': '2023-10-01 12:00:00'}# 会话保存2小时r.hset(session_id, mapping=session_data)r.expire(session_id, 7200)return session_id
​
def get_session(session_id):return r.hgetall(session_id)

5.3 限流器

def rate_limiter(user_id, action, limit=10, window=60):key = f"rate_limit:{user_id}:{action}"current = r.get(key)if current and int(current) >= limit:return False  # 超过限制pipe = r.pipeline()pipe.incr(key)pipe.expire(key, window)  # 设置过期时间pipe.execute()return True  # 在限制内

六、性能优化

  • 连接管理:始终使用连接池,避免频繁创建和销毁连接

  • 管道批量操作:批量数据操作使用管道提升性能

  • 合理设置超时:避免因Redis服务不可用导致应用阻塞

  • 键命名规范:使用冒号分隔的命名空间(如user:100:profile

  • 避免大键:单个键的值不宜过大,会影响性能

  • 监控与日志:记录Redis操作日志,监控性能指标

http://www.dtcms.com/a/411564.html

相关文章:

  • 免费网站建设专业服务平台广州企业网站开发
  • STM32项目分享:基于STM32的渔场水质监测系统设计与实现
  • 百度怎样发布作品百度seo排名优化软件
  • 2025-2031年全球工业高温电热元件市场全景分析报告
  • 手机常用网站两学一做专栏网站
  • CentOS 7上离线部署MySQL 8.0.X操作指南(二进制压缩包部署+独立目录部署,不在自动默认路径配置下安装)
  • 花卉网站建设策划方案百度推广的定义
  • 一万并发量的视频网站建设女生学网站建设好学吗
  • 涪陵网站设计wordpress插表格
  • 大凤号 网站建设Wordpress热门评论插件
  • 手机免费建设网站社交网站建设需求分析
  • 文献阅读笔记:机载火控雷达工作模式
  • 【MySQL_SpringBoot】mysql删除表中所有数据但不删除表结构以及表中id自增跳跃较大数字问题解决
  • 网站的建设与规划wordpress无辜跳出广告
  • 个人做论坛网站有哪些常用的网站推广
  • 【读书笔记】架构整洁之道 P6 实现细节
  • 古籍版面分析新SOTA:HisDoc-DETR如何助力AI赋能古籍数字化难题
  • 浙江省网站icp备案多久oa协同办公系统
  • 伊朗声称以色列核计划数据遭重大泄露
  • 自适应平台(Adaptive Platform)标准 ——Specification of Sensor Interfaces
  • LeetCode热题--200. 岛屿数量--中等
  • 营销型网站试运营调忧北京海淀房管局网站
  • 网站建设与制作与维护ppt网站百度排名怎么做快
  • SSM飞机售票管理系统63z52(程序+源码+数据库+调试部署+开发环境)带论文文档1万字以上,文末可获取,系统界面在最后面
  • [论文阅读] 人工智能 + 软件工程 | 当传统调试遇上LLM:CodeHinter为新手程序员打造专属辅助工具
  • 亚马逊网站做外贸网站是可以做的吗
  • Kimi推出全新Agent模式OK Computer,基于K2模型的端到端任务执行,已开启灰度测试
  • 用vs2010做网站视频教程高端网站制作报价
  • react-native集成PDF预览组件react-native-pdf
  • Dify笔记 知识库