<![CDATA[曲文庆's Blog]]> http://www.quwenqing.com/ zh-tw F2blog .cont 1.1 Build 090810 曲文庆's Blog http://www.quwenqing.com/attachments/8278598901.jpg http://www.quwenqing.com/ 曲文庆's Blog http://www.quwenqing.com/read-187.html <![CDATA[memcache还是redis]]> Wed, 31 Oct 2012 16:49:52 +0800 http://www.quwenqing.com/read-187.html 转载： 

经常在项目里会遇见作为缓存是选择memcache还是redis，虽然redis在近几年比较火，但也不能完全就认为redis可以取代memcache，他两也有各自的优点。下面来看看两者之间的不同。

下面内容来自Redis作者在stackoverflow上的一个回答，对应的问题是《Is memcached a dinosaur in comparison to Redis?》

You should not care too much about performances. Redis is faster per core with small values, but memcached is able to use multiple cores with a single executable and TCP port without help from the client. Also memcached is faster with big values in the order of 100k. Redis recently improved a lot about b

]]> http://www.quwenqing.com/read-177.html <![CDATA[redis使用过程中的几点经验教训]]> Thu, 25 Oct 2012 15:08:11 +0800 http://www.quwenqing.com/read-177.html
1、Redis在启动时会把数据加载到内存中，达到最大内存后，Redis会先尝试清除已到期或即将到期的Key，当此方法处理后，仍然到达最大内存设置，将无法再进行写入操作，但仍然可以进行读取操作。

2、到底是否需要redis的持久化能力？
　　redis持久化的是数据集的当前快照，于是当你用它来做存储，而不是缓存时，就会很纠结。
　　当数据集很大的时候，比如64G内存，数据集30G，你愿意dump快照或者aof收缩吗？如果这样做，问题就来了，redis的dump是fork一个进程，利用操作系统内存管理的copy-on-write来得到当前内存快照，但如果数据的更新比较频繁，30G内存dump到磁盘的速度又不快，就会导致在dump的时候需要大量的内存来做写时copy，需要的新内存加上原有的30G内存，可能导致操作系统swap，同时因为copy-on-write，主线程在处理请求时也会变慢，redis的整体性能急速下降。
　　所以大数据集把redis当做cache，只有当数据集很小的时候，才用它来做持久存储。

3、因为redis的malloc方式，导致一个潜在问题，就是当有很多small object放
]]> http://www.quwenqing.com/read-152.html <![CDATA[Redis 2.2 性能问题]]> Mon, 26 Mar 2012 18:55:18 +0800 http://www.quwenqing.com/read-152.html 系统环境：
CPU：E5620 X 2
Memory：96G
Disk：300G SAS
OS：CentOS 5
Redis：2.2.12

服务器创建了两个redis 实例：A和B
实例A内存占用200M多，有频繁的读写操作
实例B内存占用1G多，主要是读操作

系统每小时对实例A和B做一次bgrewriteaof
后端有针对实例A和B业务的可用性监控

问题：
当B实例做bgrewriteaof时候，A实例的业务访问异常，用cli模式登陆A实例，发现无论是读还是写，都异常慢。
观察系统资源，很淡定，观察disk io，发现B实例做bgrewriteaof时，disk的使用率100%
分析是硬盘资源阻塞了A实例
通过分析，redis配置的是  appendfsync everysec （默认配置），由于redis每秒做fsync，而fsync是在主进程完成的，此时disk的io使用率是100%，导致了redis的阻塞。
对2.2版本的临时解决方案
appendfsync no
no-appendfsync-on-rewrite yes

终极解决，升级到redis 2.4
在re]]> http://www.quwenqing.com/read-148.html <![CDATA[redis将slave转换为master]]> Fri, 16 Dec 2011 17:30:14 +0800 http://www.quwenqing.com/read-148.html 在slave server上执行”SLAVEOF NO ONE”,将slave server转换为master server.

Once you are sure that the master is no longer receiving any query (you can check this with the MONITOR command), elect the slave to master using the SLAVEOF NO ONE command, and shut down your master.

]]> http://www.quwenqing.com/read-144.html <![CDATA[redis海量数据测试（续三）]]> Thu, 17 Nov 2011 11:04:52 +0800 http://www.quwenqing.com/read-144.html redis海量数据测试（续三）

提纲:

  • redis海量数据测试（ 续三）
    • 环境
    • 运行脚本
    • redis配置
    • 运行时间
    • 系统状态
    • 运行结果

100000000 keys in Redis 2.2.12

用1到100000000数字做key，用固定uuid做value，写入redis
key:value格式：


100000000:0810d16b-056d-47f4-9895-48399b50b169

环境

CPU：Intel(R) Xeon(R) CPU E5620 @ 2.40GHz X 2
MEM：32G
DISK：300G SAS

运行脚本

run.sh

#!/bin/sh
for i in `seq 1 100`
do
~/redis_test2.sh $i &
done


redis_test2.sh


#!/bin/sh
log=~/redis_run.log
slog=~/redis_status.log
redis=/usr/local/redis/bin/redis-cli
#cat /dev/null > $log
#cat /dev/null > $slog
echo "$
]]> http://www.quwenqing.com/read-143.html <![CDATA[redis海量数据测试（续二）]]> Thu, 17 Nov 2011 11:02:20 +0800 http://www.quwenqing.com/read-143.html redis海量数据测试（续二）

提纲:

  • redis海量数据测试（ 续二）
    • 环境
    • 运行脚本
    • redis配置
    • 运行时间
    • 运行结果

100000000 keys in Redis 2.2.12

用1到100000000数字做key，用固定uuid做value，写入redis
key:value格式：

100000000:0810d16b-056d-47f4-9895-48399b50b169

环境

CPU：Intel(R) Xeon(R) CPU E5620 @ 2.40GHz X 2
MEM：32G
DISK：300G SAS

运行脚本

#!/bin/sh
log=~/redis_run.log
slog=~/redis_status.log
redis=/usr/local/redis/bin/redis-cli
cat /dev/null > $log
cat /dev/null > $slog
echo `date` >> $log
k=1
while [ $k -le 100000000 ]
do
v="0810d16b-056d-47f4-9895-48399b50b169&q
]]> http://www.quwenqing.com/read-142.html <![CDATA[redis海量数据测试（续一）]]> Sun, 09 Oct 2011 16:02:18 +0800 http://www.quwenqing.com/read-142.html redis海量数据测试（续一）

提纲:

  • redis海量数据测试（ 续一）
    • 环境
    • 运行脚本
    • redis配置
    • 运行时间
    • 运行结果
    • aof导出
    • 重启redis

100000000 keys in Redis 2.2.12

用1到100000000数字做key，用随机uuid做value，写入redis
key:value格式：

100000000:a47d8af2-09d3-4195-afd3-c2d8a094a614

环境

CPU：Intel(R) Xeon(R) CPU E5620 @ 2.40GHz X 2
MEM：32G
DISK：300G SAS

运行脚本

#!/bin/sh
log=~/redis_run.log
slog=~/redis_status.log
redis=/usr/local/redis/bin/redis-cli
cat /dev/null > $log
cat /dev/null > $slog
echo `date` >> $log
k=1
while [ $k -le 100000000 ]
do
       
]]> http://www.quwenqing.com/read-141.html <![CDATA[redis海量数据测试]]> Sun, 09 Oct 2011 16:00:59 +0800 http://www.quwenqing.com/read-141.html

redis海量数据测试

提纲:

  • redis海量数据测试
    • 环境
    • 运行脚本
    • redis配置
    • 运行时间
    • 运行结果
    • aof导出
    • 重启redis

100000000 keys in Redis 2.2.12

用1到100000000数字做key，用随机uuid做value，写入redis
key:value格式：

100000000:a47d8af2-09d3-4195-afd3-c2d8a094a614

环境

CPU：Intel(R) Xeon(R) CPU E5620 @ 2.40GHz X 2
MEM：32G
DISK：300G SAS

运行脚本

#!/bin/sh
log=~/redis_run.log
slog=~/redis_status.log
redis=/usr/local/redis/bin/redis-cli
cat /dev/null > $log
cat /dev/null > $slog
echo `date` >> $log
k=1
while [ $k -le 100000000 ]
do
        v=`
]]> http://www.quwenqing.com/read-140.html <![CDATA[CentOS 下 Redis 2.2.12 安装配置详解]]> Sun, 09 Oct 2011 15:56:08 +0800 http://www.quwenqing.com/read-140.html

CentOS下Redis 2.2.12安装配置详解

提纲：

  • CentOS 下 Redis 2.2.12 安装配置详解
    • 一. 关于 Redis
    • 二. 安装 Redis
      • 1. 下载redis最新版本2.2.12
      • 2. 编译安装redis
      • 3. 建立Redis目录（建议，非必需）
    • 三. 配置 Redis
      • 1. redis.conf 配置参数：
      • 2. 调整系统内核参数
    • 四. 运行 Redis
      • 1. 运行服务
      • 2. 关闭服务
      • 3. 保存/备份
      • 4. 同步机制

一. 关于 Redis

Redis是一种高级 key-value 数据库。它跟 memcached 类似，不过数据可以持久化，而且支持的数据类型很丰富。它在保持键值数据库简单快捷特点的同时，又吸收了部分关系数据库的优点。从而使它的位置处于关系数据库和键值数据库之间。Redis不仅能保存Strings类型的数据，还能保存Lists类型（有序）和Sets类型（无序）的数据，而且还能完成排序（SORT）等高级功能，在实现INCR，SETNX等功能的时候，保证了其操作的原子性，除此以外，还支持主从复制等功能。Redis可以被看成是一个数据结构服务器。
Redis的所有数据都是保存在

]]>