Redis是一个强大的内存数据存储。从快速速度是生命,但是因为"内存"的特性,如果服务器重新启动,所有的数据都可能消失。为此,Redis提供了两种持久化选项。

  1. RDB(快照):在特定时刻拍摄整个数据的快照并存储到磁盘上。

  2. AOF(仅追加文件):将所有写入命令依次记录到日志文件中。

AOF相比于RDB几乎没有数据丢失的风险(通常在1秒内),保证了强大的耐久性。但是将所有写入操作记录到文件中显然会带来性能成本

"所有Redis使用案例都需要AOF吗?"

简单来说,"不,不一定需要。"

今天我们将明确区分不需要使用AOF的情况和相反,AOF是必需的情况。


不必使用AOF的情况



AOF的核心价值在于数据的耐久性。如果这个耐久性对数据来说并不重要,AOF可能只会成为不必要的性能瓶颈。

1. 仅用作缓存时

这是最典型的案例。

  • 原因:缓存中的数据不是“原始”数据。数据库(DB)或其他API等“真实来源”是其他存在的。

  • 数据丢失时:即使Redis重启后缓存被清空,应用程序只会稍微变慢(缓存未命中),可以重新读取原始数据来填充缓存(缓存预热)。数据并不会永久丢失。

  • 结论:如果是用于缓存,很多时候会关闭AOF甚至RDB。完全消除磁盘I/O以最大限度地利用Redis的纯内存速度是有利的。

2. Celery代理/结果后端(重要性较低的任务)

Redis常与Celery一起使用。作为Celery的代理和结果后端,Redis的AOF设置需要有“任务的重要性”这一前提。

  • 原因:如果通过Celery处理的任务是“失败了也没关系”或者“可以轻松重试”的情况,那么AOF并没有必要。

  • 示例:

    • 用户日志分析(几秒钟的日志丢失也没什么大问题)

    • 周期性数据整理(在下一个周期重新执行即可)

    • 缩略图生成(因为有原始图像可以重新生成)

  • 结论:在这种场景中,如果Redis服务器崩溃,那队列中的任务或结果可能会丢失。但是如果这种损失在商业上是可以“接受”的,关闭AOF以确保代理性能是明智的选择。

3. 简单统计和实时数据(易失性)

处理短期趋势或快速更新的数据时。

  • 原因:数据在非常短的周期内更新,或者在特定时刻的快照没有太大意义。

  • 示例:

    • 最近1分钟的访问者人数

    • 实时游戏排名(以秒为单位变化)

    • 临时会话数据(数分钟内过期)

  • 结论:数据反正很快会消失或更新。在丢失几秒钟的数据与快速处理大量写入请求的性能之间,后者显然更加重要。AOF在这种环境下并不适用。


显示Redis AOF的性能与耐久性权衡的天平图示

强烈建议使用AOF的情况

相反,当Redis的数据丢失会造成严重问题时,AOF是必选而非可选。

1. “可靠的”消息队列(关键Celery工作)

与上述Celery示例完全相反的情况。

  • 原因:任务本身与金钱或核心业务逻辑相关。

  • 示例:

    • 支付处理请求

    • 注册完成与认证邮件发送

    • 订单处理

  • 结论:如果用户点击了“支付”按钮,但Redis重启使得该请求丢失,将会造成严重故障。在这种情况下,必须启用AOF,持续选择fsync everysec(默认值)选项,以确保任务在进入队列的瞬间被记录到磁盘。

2. 将Redis用作主要数据库时

当Redis不仅是简单的缓存,而是真正的数据的原始来源时。

  • 原因:没有其他数据库,Redis本身保存原始数据,因此数据的丢失意味着永久丢失。

  • 示例:

    • 用户个人资料信息

    • 需要永久保存的用户会话

    • 游戏的货币(金币、物品)信息

  • 结论:在这种情况下,AOF是必需的,必须与RDB快照一起使用,以建立备份和恢复策略。

3. 事务和汇总数据

当数据的一致性和准确性非常重要时。

  • 原因:RDB保存的是"特定时刻",因此在最后一次快照之后的数据都会丢失。AOF保存"所有变更历史",因此可以最小化数据丢失(最多1秒)。

  • 示例:

    • 关注/取消关注关系

    • 准确的投票数统计

    • 金融相关数据(简单的进出账记录)

  • 结论:在数据的最终一致性重要的情况下,AOF的"仅追加"特性比RDB更加适合。


结论:耐久性与性能的权衡



AOF是给Redis带来耐久性的强大功能。但是,这个功能是以性能为代价的。

如果您在考虑是否开启AOF,请开发人员回答以下问题。

"如果现在Redis服务器毫无预警地崩溃,最近几分钟(RDB)或1秒(AOF)间的数据丢失会对我们的服务造成严重问题吗?"

  • "不,可以再计算(缓存)" -> 请关闭AOF。

  • "是的,支付记录会丢失。" -> 请务必开启AOF。

就像所有的技术决策一样,没有唯一的答案。准确了解自己服务的数据特性和需求并进行适当的权衡是至关重要的。