定制Dockerfile实现redis cluster的docker化部署及集群管理

rfyiamcool 2 Comments

   我们知道redis cluster的部署是很麻烦的,如果在一台服务器启动多个redis实例的话，需要一个个的cp配置文件到指定的目录，然后一个个的修改端口及相关的信息。。。以前经常这么干。 如果采用docker后，我们可以更加方便的启动redis， 我们只需要传递端口参数，在dockerfile里定制一个entrypoint脚本，脚本可以接收docker run的参数…. 但是也可以采用 dockerfile的env参数来定制改变端口。。。 


docker批量生成redis cluster的配置，文章原文是地址，http://xiaorui.cc/?p=1464   http://xiaorui.cc



这个是centos的dockerfile配置，版本是6.6，我这边主要是懒，所以就打了一个dockerfile。 正规来说，应该是需要打成两个dockerfile.   一个是系统的base，一个是通过这个base再来安装redis…  这样最大的好处就是分离基础环境和业务关联的环境…   基础环境就是安装一些gcc、wget、curl、lsof、iostat这种常用的基础工具…  业务环境就是，比如lnmp( nginx mysql php)或者 Mongodb…. 


FROM centos:6.6
MAINTAINER xiaorui.cc <rfyiamcool@163.com>

# at /
RUN touch ceshi.qian
WORKDIR /app/
COPY manage.sh /app/

RUN rpm –import https://fedoraproject.org/static/0608B895.txt
RUN rpm -ivh http://mirrors.zju.edu.cn/epel/6/i386/epel-release-6-8.noarch.rpm

RUN yum update -y && \
    yum install -y –enablerepo=epel  \
      tar \
      gcc \
      wget \
      jemalloc.x86_64 \
      jemalloc-devel.x86_64

RUN yum clean all

RUN touch ceshi.file
RUN cd /app \
        && wget http://xiaorui.cc/redis-3.0.1.tar.gz \
        && tar zxvf redis-3.0.1.tar.gz \
        && mv redis-3.0.1 redis \
        && cd redis \
        && cd deps \
        && make hiredis lua\
        && cd jemalloc;./configure;make;cd ../..\
        && make \
        && make install

ENV PORT 6379
# xiaorui.cc
ENTRYPOINT [“/app/manage.sh”]
#CMD [“/app/manage.sh”]
CMD [“bash”]

manage.sh 这脚本是用来控制redis的端口的，脚本也简单，就是接收命令行的参数，然后针对redis进行sed修改…. 

#!/bin/bash
cd /app/redis
redis_port=1
echoredis_port
cd /app/redis
sed -i "s/6379/redis_port/g" redis.conf
sed -i 's/# cluster-enabled yes/cluster-enabled yes/g' redis.conf
sed -i 's/# cluster-node-timeout 15000/cluster-node-timeout 15000/g' redis.conf
sed -i "s/# cluster-config-file nodes.*/cluster-config-file nodes-redis_port.conf/g" redis.conf
redis-server redis.conf
while 1;do
        sleep 30;
done

我已经把上面的配置推入到github了，大家可以直接用github里面的配置，库里面是含有epel和redis-3.0.1.tar.gz安装包的….   官方的下载速度实在是太慢了…    大家还是直接把redis.tar.gz导入到容器里面… 

https://github.com/rfyiamcool/redis-cluster-dockerfile

这个是ubuntu的dockerfile ，还是推荐大家用centos的那个dockerfile..


FROM ubuntu:14.04
MAINTAINER xiaorui.cc <rfyiamcool@163.com>

WORKDIR /app/
COPY manager.sh /app/

# Install wget and install/updates certificates
RUN apt-get update \
 && apt-get install -y wget curl gcc tcl \
 && apt-get install -y libc6-dev \
 && apt-get install -y libjemalloc-dev build-essential

RUN cd /app \
&& wget http://download.redis.io/releases/redis-3.0.1.tar.gz \
&& tar zxvf redis-3.0.1.tar.gz \
&& mv redis-3.0.1 redis \ 
&& cd redis \
&& cd deps \
&&  make hiredis lua jemalloc linenoise\
&&cd.. \
&&make \
#make MALLOC=libc
&&make install

ENV PORT 6379

CMD [“manage.sh”]

我们启动的时候，只是需要 docker run -d –name=”redis-cluster” –net=host redis_cluster 8000 就可以了…..   下面是我构建docker image镜像的过程及启动容器…

root@ubuntu:~/docker# docker build -t redis_cluster –rm .
Sending build context to Docker daemon 1.378 MB
Sending build context to Docker daemon
Step 0 : FROM centos:6.6
 —> 8b44529354f3
Step 1 : MAINTAINER xiaorui.cc <rfyiamcool@163.com>
 —> Using cache
 —> bc16a84197db
Step 2 : RUN touch ceshi.qian
 —> Using cache
 —> 26bbf789f380
Step 3 : WORKDIR /app/
 —> Using cache
 —> f40a15c5fd45
Step 4 : COPY manage.sh /app/
 —> Using cache
 —> bb50d6871e55
Step 5 : RUN rpm –import https://fedoraproject.org/static/0608B895.txt
 —> Using cache
 —> f0138e68b8a7
Step 6 : RUN rpm -ivh http://mirrors.zju.edu.cn/epel/6/i386/epel-release-6-8.noarch.rpm
 —> Using cache
 —> 5fd28d0d92e3
Step 7 : RUN yum update -y &&    yum install -y –enablerepo=epel      tar      gcc      wget      jemalloc.x86_64      jemalloc-devel.x86_64
 —> Using cache
 —> f770592c8e52
Step 8 : RUN yum clean all
 —> Using cache
 —> 658aab830aad
Step 9 : RUN touch ceshi.file
 —> Using cache
 —> 8e540adc4183
Step 10 : RUN cd /app && wget http://xiaorui.cc/redis-3.0.1.tar.gz && tar zxvf redis-3.0.1.tar.gz && mv redis-3.0.1 redis && cd redis && cd deps && make hiredis lua && cd jemalloc;./configure;make;cd ../.. && make && make install
 —> Using cache
 —> 64cc7093db38
Step 11 : ENV PORT 6379
 —> Using cache
 —> 173e901ddde4
Step 12 : ENTRYPOINT [“/app/manage.sh”]
 —> Using cache
 —> 70c84af570c3
Step 13 : CMD [“bash”]
 —> Using cache
 —> 268d1e370b3c
Successfully built 268d1e370b3c
root@ubuntu:~/docker#
root@ubuntu:~/docker#
root@ubuntu:~/docker#
root@ubuntu:~/docker#
root@ubuntu:~/docker# docker run -it –net=host redis_cluster 9000
9000
10:M 16 May 17:50:53.919 * No cluster configuration found, I’m 6139a8eff38e3dfef397fa4a4def7ee21425f117
                _._
           _.-“__ ”-._
      _.-“    `.  `_.  ”-._           Redis 3.0.1 (00000000/0) 64 bit
  .-“ .-“`.  “`\/    _.,_ ”-._
 (    ‘      ,       .-`  | `,    )     Running in cluster mode
 |`-._`-…-` __…-.“-._|’` _.-‘|     Port: 9000
 |    `-._   `._    /     _.-‘    |     PID: 10
  `-._    `-._  `-./  _.-‘    _.-‘
 |`-._`-._    `-.__.-‘    _.-‘_.-‘|
 |    `-._`-._        _.-‘_.-‘    |           http://redis.io
  `-._    `-._`-.__.-‘_.-‘    _.-‘
 |`-._`-._    `-.__.-‘    _.-‘_.-‘|
 |    `-._`-._        _.-‘_.-‘    |
  `-._    `-._`-.__.-‘_.-‘    _.-‘
      `-._    `-.__.-‘    _.-‘
          `-._        _.-‘


3.0的版本默认是用jemalloc内存管理器，所以记得要安装他关联的开发包。

LINK redis-server

cc: error: ../deps/hiredis/libhiredis.a: No such file or directory

cc: error: ../deps/lua/src/liblua.a: No such file or directory

cc: error: ../deps/jemalloc/lib/libjemalloc.a: No such file or directory

make: *** [redis-server] Error 1

分别进入redis 解压目录下的deps 目录下的hiredis 、jemalloc及lua 目录 ，运行make.    

make hiredis lua

注意 jemalloc 目录先要执行 ./configure ,然后在make 。完成了后，再跳到上一层的src目录，继续make；make install。

如果在安装完成后，还是遇到 Segmentation fault core dumped 的问题，基本上可以确定你的问题是 jemalloc没有配置好引起的。


大家觉得文章对你有些作用！ 如果想赏钱，可以用微信扫描下面的二维码，感谢!
另外再次标注博客原地址  xiaorui.cc

2 Responses

  1. 涩谷车站 2016年2月17日 / 下午3:16

    速度会受影响么? 案例来说应该不会吧 毕竟docker这么轻量

    回复
  2. soer 2015年5月17日 / 下午3:07

    碉堡了，刚才我测试了下，是行得通的…… 就是速度有些慢

    回复

发表评论

邮箱地址不会被公开。 必填项已用*标注